欧美成人午夜免费全部完,亚洲午夜福利精品久久,а√最新版在线天堂,另类亚洲综合区图片小说区,亚洲欧美日韩精品色xxx

扣丁學堂大數(shù)據(jù)培訓淺談如何搭建部署一個Hadoop偽分布式（MapReduce+Yarn）

2018-09-13 10:58:13 1316瀏覽

今天扣丁學堂大數(shù)據(jù)培訓老師給大家詳細介紹一下關于如何搭建部署一個Hadoop偽分布式（MapReduce+Yarn）詳解，下面我們一起來看一下吧。

首先分布式計算必然涉及到資源的調度和分配，所以我們選擇MapReduce（分布式計算框架）+Yarn（資源調度和作業(yè)平臺），資源則涉及到網(wǎng)絡、內存、IO等。

1、修改mapred-site.xml

[root@master ~]# cd /usr/module/hadoop-2.7.3/etc/hadoop
[root@master hadoop]# cp mapred-site.xml.template  mapred-site.xml
[root@master hadoop]# vim mapred-site.xml
<configuration>
				<property>
				<name>mapreduce.framework.name</name>
				<value>yarn</value>
				</property>
</configuration>

2、修改yarn-site.xml

[root@master hadoop]# vim yarn-site.xml
<configuration>
				<property>
				<name>yarn.nodemanager.aux-services</name>
      			<value>mapreduce_shuffle</value>
  		</property>
</configuration>

3、啟動

[root@master hadoop]# cd ../../
[root@master hadoop]# sbin/start-dfs.sh
[root@master hadoop]# sbin/start-yarn.sh

4、關閉

[root@master hadoop]# sbin/stop-yarn.sh

以上就是扣丁學堂大數(shù)據(jù)培訓老師關于部署一個Hadoop偽分布式MapReduce+Yarn的詳細介紹，希望對學習大數(shù)據(jù)開發(fā)的同學有所幫助，扣丁學習提供在線從零到一的大數(shù)據(jù)視頻教程共學員免費在線觀看，其內容包含Linux&&Hadoop生態(tài)體系、大數(shù)據(jù)計算框架體系、云計算體系、機器學習&&深度學習，扣丁學堂大數(shù)據(jù)學習群：769591751。

【關注微信公眾號獲取更多學習資料】

查看更多關于“大數(shù)據(jù)培訓資訊”的相關文章>>