hadoop-2.7.5,hbase1.2.6.zookeeper.3.3.6完全分布式安装教程资源-CSDN文库

需积分: 9 184 浏览量 2018-03-16 18:03:02 上传评论收藏 114KB DOCX 举报

资源推荐

资源详情

资源评论

大数据平台的搭建：



Hadoop 平台的搭建

 本地虚拟机的准备，我准备了一台虚拟机，设置好 ，安装配置好  环境变量，本地

能互相  通之后。

 集群环境至少需要  个节点（也就是  台服务器设备）： 个 ， 个 ，第一

步做好之后，就利用  进行虚拟机克隆，节点之间局域网连接，可以相互  通，下

面举例说明，配置节点  分配如下：

192.168.8.128 master

192.168.8.129 slave1

192.168.8.130 slave2

修改配置文件 !"!#：

 exportJAVA_HOME=/usr/java/jdk1.8.0_111#不同的 jdk 路径需要修改此

项

 exportPATH=$JAVA_HOME/bin:$PATH

 exportHADOOP_HOME=/data/yunva/hadoop-2.7.3

$ exportHADOOP_INSTALL=$HADOOP_HOME

 exportHADOOP_MAPRED_HOME=$HADOOP_HOME

 exportHADOOP_COMMON_HOME=$HADOOP_HOME

 exportHADOOP_HDFS_HOME=$HADOOP_HOME

% exportYARN_HOME=$HADOOP_HOME

& exportHADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native

10. exportPATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin

备注：若不是进行的虚拟机克隆操作，只需要将 java_home 改成各自匹配的绝对路径即可

$添加 ' 映射关系：

分别在三个节点上添加  映射关系：

(!"!

添加的内容如下：

192.168.8.128 master

192.168.8.129 slave1

192.168.8.130 slave2

 集群之间 ' 无密码登陆

设置  无密码自动登陆  和 )在每台机子上执行下面三步*

主要有三步：

+ 生成公钥和私钥

, 导入公钥到认证文件

- 更改权限

(.

("/!!0122/!!10.

("33/!44"33/!!5

测试，第一次登录可能需要 . 确认，之后就可以直接登录了：

(

(

(

当所有的服务器都 .     生成公钥后，在  上操作无密码登

陆 !! 成功后，直接拷贝给其他主机即可

然后，将证书文件复制到其他机器的用户主目录下

# scp -P 48490 authorized_keys master:/root/.ssh/

# scp -P 48490 authorized_keys slave1:/root/.ssh/

# scp -P 48490 authorized_keys slave2:/root/.ssh/

Hadoop 集群安装配置

配置文件都在!!.1!!"!!目录下

参照文件夹中的文件修改就行

 "6：

7"#182

7.2

727!2

712!!!!7!12

7!.2

7.2

729917!2

7129:!!:&3337!12

7!.2

7.2

72#1;7!2

71237!12

7!.2

7!"#182

剩余8页未读，继续阅读

内容反馈

LeoGoGoGoo

粉丝: 537
资源: 26

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip