这篇文章将为大家详细讲解有关hadoop2.6配置文件的示例分析,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
瑞金网站建设公司创新互联,瑞金网站设计制作,有大型网站制作公司丰富经验。已为瑞金近千家提供企业网站建设服务。企业网站搭建\成都外贸网站建设公司要多少钱,请找那个售后服务好的瑞金做网站的公司定做!
hdfs-site.xml
dfs.nameservices
mycluster
dfs.ha.namenodes.mycluster
nn1,nn2
dfs.namenode.rpc-address.mycluster.nn1
machine1.example.com:8020
dfs.namenode.rpc-address.mycluster.nn2
machine2.example.com:8020
dfs.namenode.http-address.mycluster.nn1
machine1.example.com:50070
dfs.namenode.http-address.mycluster.nn2
machine2.example.com:50070
dfs.namenode.shared.edits.dir
qjournal://node1.example.com:8485;node2.example.com:8485;node3.example.com:8485/mycluster
dfs.client.failover.proxy.provider.mycluster
org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider
dfs.ha.fencing.methods
sshfence
//私钥地址
dfs.ha.fencing.ssh.private-key-files
/home/exampleuser/.ssh/id_rsa
dfs.journalnode.edits.dir
/path/to/journal/node/local/data
自动切换
dfs.ha.automatic-failover.enabled
true
core-site.xml
fs.defaultFS
hdfs://mycluster
//在core-site中加入zookeeper集群
ha.zookeeper.quorum
zk1.example.com:2181,zk2.example.com:2181,zk3.example.com:2181
配置 hadoop.tmp.dir
yarn-site.xml
yarn.resourcemanager.hostname
master
yarn.nodemanager.aux-services.mapreduce_shuffle.class
org.apache.hadoop.mapred.ShuffleHandler
yarn.nodemanager.aux-services
mapreduce_shuffle
zookeeper配置
tickTime=2000
dataDir=/var/lib/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.1=zoo1:2888:3888
server.2=zoo2:2888:3888
server.3=zoo3:2888:3888
关于“hadoop2.6配置文件的示例分析”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
本文标题:hadoop2.6配置文件的示例分析
网页地址:
http://mswzjz.cn/article/pejceo.html