Cloudera大数据平台环境搭建(CDH5.13.1)傻瓜式说明书精编版 下载本文

内容发布更新时间 : 2024/11/8 23:11:54星期一 下面是文章的全部内容请认真阅读。

……………………………………………………………最新资料推荐…………………………………………………

Cloudera大数据平台环境搭建

(CDH5.13.1版)

版本 作者 发布日期 v1.0 郭维忠 2018-03-10

……………………………………………………………最新资料推荐…………………………………………………

目录

Cloudera大数据平台环境搭建 ........................................................................................................................................................................ 1 (CDH5.13.1版) .................................................................................................................................................................................................. 1 1.

基础环境 ............................................................................................................................................................................................................. 4

1.1. 1.2. 1.3. 1.4. 1.5. 1.6. 1.7. 1.8. 1.9. 1.10. 1.11. 1.12.

软件环境 ......................................................................................................................................................................................................................... 4 配置规划 ......................................................................................................................................................................................................................... 4 所需要的软件资源 ..................................................................................................................................................................................................... 4 修改机器名(所有节点) ...................................................................................................................................................................................... 5 设置防火墙(所有节点) ...................................................................................................................................................................................... 6 配置免密码登录SSH ................................................................................................................................................................................................. 6 关闭SELINUX(所有节点) ................................................................................................................................................................................. 8 修改Linux内核参数(所有节点) ................................................................................................................................................................... 8 其他安装与配置(所有节点) ......................................................................................................................................................................... 10 配置NTP服务 ........................................................................................................................................................................................................... 10 安装oracle JDK1.8 (所有节点) .................................................................................................................................................................. 12 Mysql安装(主节点) ......................................................................................................................................................................................... 13

2. 安装CM ............................................................................................................................................................................................................ 15

2.1. 2.2. 2.3. 2.4. 2.5. 2.6. 2.7. 2.8.

传包,解包 ................................................................................................................................................................................................................. 15 创建数据库 ................................................................................................................................................................................................................. 15 创建用户 ...................................................................................................................................................................................................................... 16 制作本地YUM源 ..................................................................................................................................................................................................... 16 拷贝jar包 ................................................................................................................................................................................................................... 17 修改cloudera-scm-agent配置.......................................................................................................................................................................... 17 启动CM Server和Agent ..................................................................................................................................................................................... 18 访问CM ........................................................................................................................................................................................................................ 18

3. 安装CDH ......................................................................................................................................................................................................... 18

3.1. 3.2. 3.3. 3.4. 3.5. 3.6. 3.7. 3.8. 3.9. 3.10.

登录后界面 ................................................................................................................................................................................................................. 18 选择CM版本 ............................................................................................................................................................................................................. 19 指定主机 ...................................................................................................................................................................................................................... 20 选择CDH版本 .......................................................................................................................................................................................................... 21 3.4.1. 出现 “主机运行状态不良”错误 ............................................................................................................................................................ 22 检查主机正确性 ....................................................................................................................................................................................................... 23 选择安装的服务 ....................................................................................................................................................................................................... 23 角色分配 ...................................................................................................................................................................................................................... 24 数据库设置 ................................................................................................................................................................................................................. 24 3.8.1. 测试连接报错: ............................................................................................................................................................................................ 25 群集设置 ...................................................................................................................................................................................................................... 26 开始安装 ...................................................................................................................................................................................................................... 28

……………………………………………………………最新资料推荐…………………………………………………

3.11. 安装完成 ...................................................................................................................................................................................................................... 29 3.11.1.

警告信息: ................................................................................................................................................................................................ 29

4. 常见错误 .......................................................................................................................................................................................................... 31

4.1. 4.2.

初始化数据库错误: ............................................................................................................................................................................................. 31 未能连接到 Host Monitor................................................................................................................................................................................... 32