洋麻搭建hadoop大数据平台系列2 -客户机配置 - 行业资讯 - 肥雀云

本案例搭建的环境介绍如下:Ambari 2.4.2 +, HDP 2.5, (hadoop 2.7, hive 1.2,; Tez ; Spark 2.0) + jdk1.8.25 + centos7.0,这里首先要关注些注意事项,至于为什么会一一说明。

<强>第一部分:注意事项:

指定表格中<坳宽度=" 93 "/> 指定表格中版本必须低于7.2 selinux必须关闭firewalld必须关闭127.0.0.1,主持人该条记录删除本地仓库必须搭建根账户ssh启用指定hdfs数据目录安装jdk1.8.0所有机器时间必须同步

1:版本必须低于7.2,这里踩了个大坑,刚开始选用了7.3,最后发现经常莫名其妙的异常,经常安装失败。后来从官方查到(没有放在最显眼的位置说明):

2只127.0.0.1,主持人该条记录删除,这也是在埋坑过后发现的

3。本地仓库必须搭建,如果不搭建本地仓库,太痛苦了。下载过程巨慢,而且每次重新来的时候,巨费时间。

4。根账户ssh启用,这个我也考虑过使用专门账户,虽然洋麻也支持该功能,但是需要做相应的很多更改,如果是测试机版本,还是便捷点比较好,后期可以通过洋麻的相关安全策略来补上。

5。其他的几项注意事项,大家一看就懂的,不过还是得细心检查比较好。否则后面的拍错过程会费掉很多精力

<强>第二部分:开始配置客户端及ambari-server

<强>

1。集群端机器分配如下:

指定表格中<坳宽度=" 128 "/> <坳宽度=" 120 "/> <坳宽度=" 160 "/> 指定表格中centos7.010.1.11.1hadoop11-1centos7.010.1.11.2hadoop11-2centos7.010.1.11.3hadoop11-3centos7.010.1.11.4hadoop11-4centos7.010.1.11.5hadoop11-5centos7.010.1.11.6hadoop11-6centos7.010.1.11.7hadoop11-7

2。检查centos版本,关闭selinux, firewalld,添加主机记录,安装jdk1.8,

检查时区和时间是否统一

yum install 国家结核控制规划

配置根ssh登陆