【Hadoop集群搭建第二期】节点克隆及SSH无密码验证配置

野性酷女 2023-06-27 06:29 21阅读 0赞

【Hadoop集群搭建第一期】Ubuntu中的Hadoop及Java环境的安装和配置：[https://blog.csdn.net/DXH924/article/details/103832306][https_blog.csdn.net_DXH924_article_details_103832306]

上一期完成了master节点的基本配置，本期任务是克隆节点以及完成SSH无密码验证配置

【第一步】打开VMware Workstation，【右键单击master】->【 管理 】->【克隆】->【 创建完整克隆】，建议先克隆一个master副本，以免出现重大错误时从头再来。一共克隆2个slave节点，分别命名slave1，slave2，如图所示

![2020010511490883.png][]

【第二步】修改主机名，master节点无需修改。分别在两个slave节点上修改主机名为slave1，slave2，命令如下

sudo nano /etc/hostname

![2020010511512973.png][]

【第三步】查看ip，配置hosts

运行ifconfig
    若提示没有这条命令，则先执行
    sudo apt install net-tools
    再运行ifconfig
    在ens33中查看ip地址，记录下来，ip要与主机名一一对应
    三台主机都要记录下来

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70][]

sudo nano /etc/hosts
    三台主机进行同样的配置
    内容如图所示，根据实际情况填写

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 1][]

【第四步】主机互ping，确保配置正确。若这一步出错，则回头检查是否之前操作是否有误

ping主机的ip或主机名均可，要求三台主机可以两两互ping

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 2][]

【第五步】这一步三台主机进行同样的操作

生成公钥私钥，提示输入密钥保存的路径，直接按enter键使用默认值即可。

ssh-keygen -t rsa -P ''

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 3][]

把id_rsa.pub追加到授权的key里面去
    cd .ssh
    cat id_rsa.pub >> authorized_keys
    chmod 600 authorized_keys

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 4][]

【第六步】这一步在两个slave节点上操作

分别在两个子节点的命令终端执行下列命令
    scp hadoop@master:~/.ssh/id_rsa.pub ./master_rsa.pub
    cat master_rsa.pub >> authorized_keys

![20200105120215558.png][]

【第七步】执行完上述命令后，回到主节点master，输入如下命令测试能否无密码登录。slave2节点同理

ssh slave1

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 5][]

到此，SSH无密码验证配置完成

下期是重点，配置hadoop集群参数

[https_blog.csdn.net_DXH924_article_details_103832306]: https://blog.csdn.net/DXH924/article/details/103832306
[2020010511490883.png]: https://img-blog.csdnimg.cn/2020010511490883.png
[2020010511512973.png]: https://img-blog.csdnimg.cn/2020010511512973.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200105115310758.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20200105115416858.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/2020010511553356.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 3]: https://img-blog.csdnimg.cn/20200105115832527.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 4]: https://img-blog.csdnimg.cn/20200105120106954.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70
[20200105120215558.png]: https://img-blog.csdnimg.cn/20200105120215558.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA_size_16_color_FFFFFF_t_70 5]: https://img-blog.csdnimg.cn/20200105120308375.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RYSDkyNA==,size_16,color_FFFFFF,t_70