Universe V300R001C10版本Hadoop的Datanode扩容后,BDI需要配置的内容

[复制链接]
jsl
jsl   高级会员    发表于 2016-10-17 15:03:37   最新回复:2016-10-17 15:03:37

下面是Hadoop的datanote扩容后,需要在新的datanode上执行的操作:

1)登陆bdi server主机,到$HOME/conf目录
2
)查看hdi.hadoop.properties 文件,找到mapreduce.application.classpath配置项,假如值如下:
/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/bdi_Mustang/bdi/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/common/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/common/lib/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/hdfs/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/hdfs/lib/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/mapreduce/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/mapreduce/lib/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/yarn/*\,/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/yarn/lib/*
3
)以omm用户登陆扩容主机
4
)新建/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/bdi_Mustang/bdi/目录,这个目录是根据步骤2获取
5
)将扩容前的datanode主机的/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/bdi_Mustang/bdi/下的jar包放到/opt/huawei/Bigdata/hadoop/hadoop/share/hadoop/bdi_Mustang/bdi/目录。
6
)新建$HOME/conf目录
7
)将扩容前的datanode主机的$HOME/conf下的文件及子目录放到$HOME/conf目录下
8
)新建$HOME/tools目录
9
)将扩容前的datanode主机的$HOME/tools下的文件及子目录放到$HOME/tools目录下
10)
检查环境变量配置文件,将扩容后的datanode的环境变量和扩容前datanode的环境变量保持一致,特别是数据库,比如oracledb2

跳转到指定楼层
快速回复 返回顶部