欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  运维

CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装

程序员文章站 2022-04-21 10:44:53
...

Cloudera Manager and Cloudera Hadoop

  1. 改hostname/关闭防火墙/关闭selinux/ssh免密钥登录/NTP同步

  2. 下载相关文件(建议CM和CDH版本一致;同时注意CDH与JDK版本兼容性)

  • cloudera-manager.repo 一个配置文件
  • cm install 安装脚本
  • cm rpms rpm的本地源文件(也可通过可以选择下载tar文件直接解压)
  • CDH parcel CDH的安装文件,离线安装使用,只需下载对应的parcel及sha1还有manifest.json文件,国外网站可能速度慢,此处使用科大的反向代理
  1. 安装CM(此处使用本地源文件安装,下载tar文件的不再赘述)

在所有节点执行下列步骤

  1. 将cloudera-manager.repo 配置文件拷入/etc/yum.repos.d/文件夹

  2. 验证repo文件是否有效

yum list|grep cloudera
#如果列出的不是你安装的版本,执行下面命令重试
yum clean all 
yum list | grep cloudera
  1. rpm源文件放入任意目录,执行yum -y install *.rpm,安装CM

在主节点执行下列步骤

  1. 将bin文件拷入主节点任意目录
  2. 将parcel相关文件(3个)拷入/opt/cloudera/parcel-repo,注意sha1文件改名为sha,不要修改文件内容
  3. 赋予执行权限,安装CM./cloudera-manager-installer.bin

CM的数据库

  1. 可能会出现没有数据库的错误,非生产环境可以默认绑定PostgreSQL数据库
  2. sudo yum install cloudera-manager-server-db-2
  3. sudo service cloudera-scm-server-db start
  4. 使用其他数据库可以看见官网

  5. 安装CDH

  6. 浏览器进入master_ip:7180,登录(账户密码默认admin)
  7. 选择相应的需要安装的CDH版本,基本上就是下一步了

  8. 可能遇到的错误

  • 安装CDH过程中卡在"正在获取安装锁"过程,删除对应主机上的缓存即可

cd /tmp

rm -rf scm_prepare_node.*

yum clean all

reboot

  • 其他问题可以参见链接或者直接谷歌

  • 卸载可以参见官网

  1. 参考

以上就是CentOS6.5上Cloudera Manager和Cloudera Hadoop的离线安装的详细内容,更多请关注其它相关文章!