CDH安装 | Blog

1、准备阶段

准备虚拟机，按照个人需求。这里假定有三台机器，设置一号为主机。三号为mysql机。

注意：每做完一个阶段都要记得打快照，以免不可恢复。

2、修改IP和主机名

1、修改主机名

hostnamectl set-hostname 主机名

2、修改IP地址

vi /etc/sysconfig/network-scripts/ifcfg-ens33

需要注意查看本机ip并保证本机IP前三个数字与虚拟机相同，不然会导致无法ping通。

3、重启虚拟机并查看ip和hostname是否修改成功

service network restart

4、验证网络是否能ping通

3、系统环境配置

1、配置域名映射

vi /etc/hosts

格式如下(中间用空格隔开)：

192.168.233.xxx host1

192.168.233.xxx host2

192.168.233.xxx host3

每一台虚拟机上都需要配置

2、配置免密登录

1、生成密钥对

2、ssh-keygen -t rsa 直接回车

3、cd .ssh

ssh-copy-id 192.168.233.xxx

每台机器上配该机器和其他几台的免密，比如在第一台上要配置第一台、第二台以及第三台的免密登录。

4、ssh 192.168.233.xxx验证

3、关闭防火墙

4、关闭SELINUX

setenforce 0

vi /etc/selinux/config

修改内容：SELINUX=disable

5、安装JDK

注意：将JDK安装在/usr/java内，否则会导致无法检测到。

1、查看有哪些jdk包： rpm -qa | grep java

2、删除已有的包（带openjdk）： rpm -e --nodeps java~~

3、vi /etc/profile

4、source /etc/profile

5、java -version验证

6、权限问题

6、配置时间同步

1、安装chrony

yum install chrony

2、在主节点上配置 vi /etc/chrony.conf

server ntp.aliyun.com iburst

allow all

local stratum 10

3、在副节点上

4、启动chrony并设置开机自启

5、timedatectl查看服务

6、chronyc trcking 查看延时

7、修改系统参数

8、安装httpd

1、所有位置

2、启动

9、下载第三方依赖包

10、安装Mysql 在cdh03这一台机器上

1、安装下列组件

2、启动

3、设置无密码状态

4、设置

5、赋权

6、设置允许外网访问

11、上传mysql驱动jar包

三个机器都要上传

12、CM组件和节点安装

1、cdh2 cdh3只上传agent和daemons包

2、cdh1三个都上传

13、安装CDH6.2.0

1、下载好CDH组件

2、在CDH1节点上传

3、移动到指定目录

4、修改server配置文件

5、修改agent配置文件

4、启动集群

等待一段时间再访问

如果检测不到cdh：chown -R cloudera-scm:cloudera-scm /opt/cloudera/parcel-repo/