惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

IT之家
IT之家
Recent Announcements
Recent Announcements
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
The GitHub Blog
The GitHub Blog
MyScale Blog
MyScale Blog
爱范儿
爱范儿
GbyAI
GbyAI
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
美团技术团队
Y
Y Combinator Blog
博客园 - 叶小钗
Apple Machine Learning Research
Apple Machine Learning Research
Martin Fowler
Martin Fowler
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
罗磊的独立博客
M
MIT News - Artificial intelligence
博客园 - Franky
V
Visual Studio Blog
I
InfoQ
V
V2EX
Hugging Face - Blog
Hugging Face - Blog
腾讯CDC
博客园 - 司徒正美
L
LangChain Blog

博客园 - 小林觉

理解软件工程 通过 n 进制整数对称加法,寻找回文串数字 正多边形内点黄金分割冒险游戏 兰顿蚂蚁:从无序到有序的伟大征程 不成熟的想法:计算的粒度 技术债务墙:一种让技术债务可见并可协商的方法 墙裂推荐 shell 脚本通过Webhook 发送消息到微信群 - 小林觉 关于中医的一段对话 [ZZ] -- 思维训练故事 应用深度神经网络预测学生期末成绩 Python中的模块引用机制 - 小林觉 - 博客园 批量修改含空格的文件名「Linux」 Markdown数学公式语法 - 小林觉 - 博客园 批处理修改IP Hadoop 操作常见问题解决 linux 下vim中关于删除某段,某行,或者全部删除的命令 ZZ Hadoop 集群安装(主节点安装) 少儿编程(2):简单的数学计算 - 小林觉 - 博客园 少儿编程(1):计算思维
Hadoop 集群安装(从节点安装配置)
小林觉 · 2019-01-13 · via 博客园 - 小林觉

1、Java环境配置
view plain copy
sudo mv /tmp/java /opt/
jdk安装完配置环境变量,编辑/etc/profile:

view plain copy
sudo vim /etc/profile
在文件末尾,添加如下内容:

view plain copy
export JAVA_HOME=/opt/java/
export PATH=\(JAVA_HOME/bin:\)PATH
刷新环境变量:

view plain copy
source /etc/profile
利用java查看版本号命令验证是否安装成功:

view plain copy
java -version
2、修改hosts文件
编辑/etc/hosts文件:

view plain copy
sudo vim /etc/hosts
添加本机IP地址对应本机映射名和其它节点IP地址对应映射名:

view plain copy
0.0.0.0 master
0.0.0.0 slave1
0.0.0.0 slave2
节点IP地址即”内网管理地址“

3、创建公钥
在zhangyu用户下创建公钥:

view plain copy
ssh-keygen
出现如下内容:

Enter file in which to save the key (/home/zhangyu/.ssh/id_rsa):

直接使用默认选项,回车即可,出现如下内容:

Enter passphrase (empty for no passphrase):

直接回车,出现内容:

Enter same passphrase again:

直接回车,创建完成。

拷贝公钥,过程中需要输入用户密码:"zhangyu"

view plain copy
ssh-copy-id master
view plain copy
ssh-copy-id slave1
view plain copy
ssh-copy-id slave2
命令执行过程中需要输入“yes”和密码“zhangyu”。

拷贝完可以测试连接。

4、Hadoop环境配置
view plain copy
sudo mv /tmp/hadoop /opt/
hadoop安装完配置环境变量,编辑/etc/profile:

view plain copy
sudo vim /etc/profile

在文件末尾添加如下内容:

view plain copy
export HADOOP_HOME=/opt/hadoop/
export PATH=\(HADOOP_HOME/bin:\)PATH
刷新环境变量:

view plain copy
source /etc/profile
利用hadoop查看版本号命令验证是否安装成功:

view plain copy
hadoop version
5、创建数据文件夹:
view plain copy
sudo mkdir /data
所有者修改为当前用户:

view plain copy
sudo chown -R zhangyu.zhangyu /data
至此,从节点1配置完成。