<代码>在企业里快速搭建大数据平台除了Ambria外还可以用Cloudera经理,这两种工具相对于纯手工搭建确实便捷很多,但是有利也有弊,相对于新手来说就不便于掌握内部原理,不好排错等,而纯手工搭建,出错较多,不容易成功。
一。规划:
192.168.3.201 mysql服务器/代理
192.168.3.202代理namenode
192.168.3.203代理namenode(备)resourcemanager
192.168.3.204代理resourcemanager(备)
192.168.3.205代理
二。环境准备
-
<李>系统:Centos 6.5 64位李
<李>
配置IP主机名,
各个服务器IP配置:# vim/etc/sysconfig/network-script/根据
服务网络重启
各个服务器名配置:# vim/etc/sysconfig/network
的/etc/hosts vim
<代码> 192.168.3.201 rac201.com 192.168.3.202 rac202.com 192.168.3.203 rac203.com 192.168.3.204 rac204.com 192.168.3.205 rac205.com 3 .检查DNS配置,确保能上网 # vim/etc/resolve.conf # ping www.baidu.com 4 .关闭防火墙和禁用selinux getenforce查看selinux的状态并修改为禁用状态 # vim/etc/sysconfig/selinux SELINUX=禁用 重启生效 5. 禁用和关闭防火墙 临时禁用# iptables - f # setenforce 0 或设置开机不启动 #服务iptables停止 # chkconfig iptables掉 6. 所有服务器卸载自带的JDK,安装新版本,比如1.7或1.8版本的 # rpm qa | grep java # rpm - e - nodeps tzdata - java - 2012 j - 1. el6。noarch java-1.6.0-openjdk-1.6.0.0-1.50.1.11.5.el6_3。x86_64 java-1.7.0-openjdk-1.7.0.9-2.3.4.1.el6_3.x86_64 # mkdir - p/opt/模块 #焦油zxf jdk-8u141-linux-x64。广州- c/opt/模块 7. 对所有服务器配置JAVA环境变量 # vi/etc/profile 出口JAVA_HOME=/opt/模块/jdk1.8.0_141 导出路径=$路径:$ JAVA_HOME/bin #/etc/profile来源 8. 拷贝配置到其他服务器 # scp - r/opt/模块/jdk1.8.0_141 root@rac202.com://opt/模块 # scp - r/opt/模块/jdk1.8.0_141 root@rac203.com://opt/模块 # scp - r/opt/模块/jdk1.8.0_141 root@rac204.com://opt/模块 # scp - r/opt/模块/jdk1.8.0_141 root@rac205.com://opt/模块 检查:java - version 9. 配置服务器之间免密钥登录 9.1 # ssh - keygen # ssh-copy-id -我~/. ssh/id_rsa。酒吧rac201.com # ssh-copy-id -我~/. ssh/id_rsa。酒吧rac202.com # ssh-copy-id -我~/. ssh/id_rsa。酒吧rac203.com # ssh-copy-id -我~/. ssh/id_rsa。酒吧rac204.com # ssh-copy-id -我~/. ssh/id_rsa。酒吧rac205.com 9.2 # ssh rac01.com # #不退出要忘记连接后要退出 # ssh rac02.com #退出 # ssh rac03.com #退出 # ssh rac04.com #退出 # ssh rac05.com #退出 10. 服务器时间同步 10.1启动ntpd进程服务 # ntpd服务开始 # chkconfig ntpd alt=" Cloudera经理大数据平台搭建">
Cloudera经理大数据平台搭建
