ubantu14.0.4下SSH无密码登陆设置

一. 环境

    1. Hadoop

       下载地址: http://hadoop.apache.org/common/releases.html

              版本: hadoop-2.4.1.tar.gz

       2.Jdk

           下载地址：http://hadoop.apache.org/common/releases.html

               版本： jdk-8u11-linux-i586.tar.gz   

二、SSH无密码验证配置

   Hadoop运行过程中需要管理远端Hadoop守护进程，在Hadoop启动以后,NameNode是通过SSH（Secure Shell）来启动和停止各个DataNode上的各种守护进程的。这就必须在节点之间执行指令的时候是不需要输入密码的形式，故我们需要配置SSH运用无密码公钥认证的形式，这样NameNode使用SSH无密码登录并启动DataName进程，同样原理，DataNode上也能使用SSH无密码登录到NameNode。

    2.1 安装和启动SSH协议

                  安装ssh和rsync

                 

 apt-get install ssh apt-get install rsync

    2.2 配置Master无密码登录所有Salve

         1）SSH无密码原理

                  Master（NameNode |JobTracker）作为客户端，要实现无密码公钥认证，连接到服务器Salve（DataNode | Tasktracker）上时，需要在Master上生成一个密钥对，包括一个公钥和一个私钥，而后将公钥复制到所有的Slave上。当Master通过SSH连接Salve时，Salve就会生成一个随机数并用Master的公钥对随机数进行加密，并发送给Master。Master收到加密数之后再用私钥解密，并将解密数回传给Slave，Slave确认解密数无误之后就允许Master进行连接了。这就是一个公钥认证过程，其间不需要用户手工输入密码。重要过程是将客户端Master复制到Slave上。

         2）Master机器上生成密码对

在Master节点上执行以下命令：

                  

ssh-keygen -t rsa -P ''

                  这条命是生成其无密码密钥对，询问其保存路径时直接回车采用默认路径。生成的密钥对：id_rsa和id_rsa.pub，默认存储在"/root/.ssh"目录下。

         

ls /root

    查看"/root"下是否有".ssh"文件夹，且".ssh"文件下是否有两个刚生产的无密码密钥对:id_rsa和is_rsa.pub。

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

接着在Master节点上做如下配置，把id_rsa.pub追加到授权的key里面去。

            

                  在验证前，需要做两件事儿。第一件事儿是修改文件"authorized_keys"权限（权限的设置非常重要，因为不安全的设置安全设置，会让你不能使用RSA功能），另一件事儿是用root用户设置"/etc/ssh/sshd_config"的内容。使其无密码登录有效。

         1）修改文件"authorized_keys"

                  

chmod 600 ~/.ssh/authorized_keys

                  然后用ls -al  命令查看权限是否修改， 备注：如果不进行设置，在验证时，扔提示你输入密码，在这里花费了将近半天时间来查找原因。

          2）设置SSH配置

                  用root用户登录服务器修改SSH配置文件"/etc/ssh/sshd_config"的下列内容。

                  

vim /etc/ssh/sshd_config

                  内容修改如下:

                      RSAAuthenticationyes # 启用 RSA 认证

                      PubkeyAuthenticationyes # 启用公钥私钥配对认证方式

                      AuthorizedKeysFile/root/.ssh/authorized_keys # 公钥文件路径（和上面生成的文件同）

                  设置完之后记得重启SSH服务，才能使刚才设置有效。

                  service sshd restart         或     service ssh restart

                  (有时候这命令可能不好使，网上查看有的说service已被sysv-rc-conf替代，如果无法重启，可以试试这个)

 

                  退出root登录，使用hadoop普通用户验证是否成功。

                      

ssh localhost

图

                  从上面得知无密码登录本级已经设置完毕，接下来的事儿是把公钥复制所有的Slave机器上。使用下面的命令格式进行复制公钥：

             scp ~/.ssh/id_rsa.pub 远程用户名@远程服务器IP:~/

                  

scp ~/.ssh/id_rsa.pubhadoop@192.168.1.122:~/

                  上面的命令是复制文件"id_rsa.pub"到服务器IP为"192.168.1.122"的用户为"hadoop"的"~/"下面。

 

        

         下面就针对IP为"192.168.1.122"的Slave2.Hadoop的节点进行配置。

 

　　1）把Master.Hadoop上的公钥复制到Slave2.Hadoop上

         上面中我们得知，已经把文件"id_rsa.pub"传过去了，因为并没有建立起无密码连接，所以在连接时，仍然要提示输入输入Slave2.Hadoop服务器用户hadoop的密码。为了确保确实已经把文件传过去了，用SecureCRT登录Slave2-Hadoop:192.168.1.122服务器，查看"/home"下是否存在这个文件。

 

         2）在"/home/hadoop/"下创建".ssh"文件夹

　　         这一步并不是必须的，如果在Slave1.Hadoop的"/home/hadoop"已经存在就不需要创建了，因为我们之前并没有对Slave机器做过无密码登录配置，所以该文件是不存在的。用下面命令进行创建。（备注：用hadoop登录系统，如果不涉及系统文件修改，一般情况下都是用我们之前建立的普通用户hadoop进行执行命令。）

                  

mkdir /root/.ssh

         然后是修改文件夹".ssh"的用户权限，把他的权限修改为"700"，用下面命令执行：

                  

chmod 700 ~/.ssh

         备注：如果不进行，即使你按照前面的操作设置了"authorized_keys"权限，并配置了"/etc/ssh/sshd_config"，还重启了sshd服务，在Master能用"sshlocalhost"进行无密码登录，但是对Slave1.Hadoop进行登录仍然需要输入密码，就是因为".ssh"文件夹的权限设置不对。这个文件夹".ssh"在配置SSH无密码登录时系统自动生成时，权限自动为"700"，如果是自己手动创建，它的组权限和其他权限都有，这样就会导致RSA无密码远程登录失败。

 

         3）追加到授权文件"authorized_keys"

　　    到目前为止Master.Hadoop的公钥也有了，文件夹".ssh"也有了，且权限也修改了。这一步就是把Master.Hadoop的公钥追加到Slave2-Hadoop的授权文件"authorized_keys"中去。使用下面命令进行追加并修改"authorized_keys"文件权限：

            

 cat ~/id_rsa.pub >> ~/.ssh/authorized_keys chmod 600 ~/.ssh/authorized_keys

 

         4）用root用户修改"/etc/ssh/sshd_config"

　　         具体步骤参考前面Master.Hadoop的"设置SSH配置"，具体分为两步：第1是修改配置文件；第2是重启SSH服务。

 

　　5）用Master.Hadoop使用SSH无密码登录Slave2-Hadoop

         当前面的步骤设置完毕，就可以使用下面命令格式进行SSH无密码登录了。

         在master主机上 ssh 192.168.1.122

 

 

 

    2.3 配置所有Slave无密码登录Master

 

　　         和Master无密码登录所有Slave原理一样，就是把Slave的公钥追加到Master的".ssh"文件夹下的"authorized_keys"中，记得是追加（>>）。

　　         为了说明情况，我们现在就以"Slave2-Hadoop"无密码登录"Master.Hadoop"为例，进行一遍操作，也算是巩固一下前面所学知识，剩余的"Slave2.Hadoop"和"Slave3.Hadoop"就按照这个示例进行就可以了。

　　         首先创建"Slave1.Hadoop"自己的公钥和私钥，并把自己的公钥追加到"authorized_keys"文件中。用到的命令如下：

             

ssh-keygen –t rsa –P ''cat ~/.ssh/id_rsa.pub >>~/.ssh/authorized_keys

 

         　接着是用命令"scp"复制"Slave1.Hadoop"的公钥"id_rsa.pub"到"Master.Hadoop"的"/home/hadoop/"目录下，并追加到"Master.Hadoop"的"authorized_keys"中。

 

         1）在"Slave1.Hadoop"服务器的操作

　　         用到的命令如下：

             

scp ~/.ssh/id_rsa.pub     hadoop@192.168.1.120:~/

         2）在"Master.Hadoop"服务器的操作

　　         用到的命令如下：

             

cat ~/id_rsa.pub >>~/.ssh/authorized_keys