banbanbai 发表于 2018-10-29 09:38:18

CentOS上 hadoop2.7.3完全分布式集群安装

  1、解压jdk压缩文件,在/etc/profile文件中配置jdk环境变量
  2、解压hadoop压缩文件,在/etc/profile文件中配置hadoop环境变量
  3、执行命令【source /etc/profile】
  4、在/etc/hosts文件中配置集群主机名和IP对应关系
  5、配置ssh免密码登录,在集群所有机器上执行ssh-keygen -t rsa命令,执行完后直接回车键,会在家目录下新建.ssh文件夹,在文件夹下生成公钥id_rsa.pub和私钥文件id_rsa
  6、将公钥id_rsa.pub文件在.ssh文件夹下复制一份命名为authorized_keys授权文件,把每一份授权文件合并成一个文件拷贝到每台机器的.ssh目录下
  7、配置hadoop-env.sh中JAVA_HOME路径
  8、修改hadoop配置文件core-site.xml, hdfs-site.xml, mapred.site.xml, yarn.site.xml,将四个配置文件拷贝到集群其他机器对应hadoop配置文件目录etc/hadoop下
  9、执行hdfs namenode -format
  10、执行start-all.sh命令启动hadoop

页: [1]
查看完整版本: CentOS上 hadoop2.7.3完全分布式集群安装