赞
踩
[wgb@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh
[wgb@hadoop103 hadoop-3.1.3]$ sbin/start-yarn.sh
[wgb@hadoop102 hadoop-3.1.3]$ systemctl stop firewalld
注:在启动HDFS或YARN时,必须先关闭防火墙
简述:HDFS是Hadoop Distribute File System 的简称,意为:Hadoop分布式文件系统。是由很多服务器联合起来实现其功能,且集群中的服务器各有各自的角色;是Hadoop核心组件之一,作为最底层的分布式存储服务而存在。
HDFS使用场景:一次写入,多次读出的场景,且不支持对文件的修改。
正因为如此,HDFS适合用来做大数据分析的底层存储服务,并不适合用来做.网盘等应用,因为,修改不方便,延迟大,网络开销大,成本太高。
特性:他是一个文件系统,并且是分布式的。
HDFS只是分布式文件管理系统中的一种。
YARN全名为: Yet Another Resource Negotiator
YARN:下一代的MapReduce系统框架,也称为MRv2(MapReduce version 2), 它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度。
YARN的基本思想是将JobTracker的两个主要功能(资源管理和作业调度/监控)分离,主要方法是创建一个全局的ResourceManager(RM)和若干个针对应用程序的ApplicationMaster(AM)。这里的应用程序是指传统的MapReduce作业或作业的DAG。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。