欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
  • 手动安装cloudera cdh4.2 hadoop + hbase + hive(一)

    安装版本 hadoop-2.0.0-cdh4.2.0hbase-0.94.2-cdh4.2.0hive-0.10.0-cdh4.2.0jdk1.6.0_38 安装前说明 安装目录为/opt 检查hosts文件 关闭防火墙 设置时钟同步 使用说明 安装hadoop、hbase、hive成功之后启动方式...

    程序员文章站2024-04-02
  • 在CDH3上运行mahout的random forest算法时的异常处理 博客分类: mahout

    在应用apache mahout中的random forest分类的时候,报java.lang.IllegalStateException: java.io.EOFException异常。具体如下图: 这个错误发生是在训练出模型后,将模型存储的时候。原因是cloudera的hadoop版本在mapr...

    程序员文章站2024-03-23
  • 在CDH3上运行mahout的random forest算法时的异常处理 博客分类: mahout

    在应用apache mahout中的random forest分类的时候,报java.lang.IllegalStateException: java.io.EOFException异常。具体如下图: 这个错误发生是在训练出模型后,将模型存储的时候。原因是cloudera的hadoop版本在mapr...

    程序员文章站2024-03-23
  • CDH5安装 博客分类: hadoop cdhinstall 

    CDH安装有很多方式:tar包安装,从官网上下载tar包,此种方式类似apache版本hadoop,配置和部署相对来说麻烦。cloudera manager parcels安装,此种方式最方便、最省事,但如果是国内网的话,期间下载包会非常慢,而且每个节点分别下载。建议直接在官网下载rpm包,手动分发...

    程序员文章站2024-03-19
  • hadoop-2.6.0-cdh5.5.2源码编译:支持snappy压缩

    1、下载tar包下载 hadoop-2.6.0-cdh5.5.2-src.tar.gz2、解压并查看# tar zxvg hadoop-2.6.0-cdh5.5.2-src.tar.gz# head -15 BUILDING.txt Build instructions for Hadoop----...

    程序员文章站2024-03-18
  • zeppelin在CDH上的安装及使用 -- 填坑

    zeppelin可以跟spark、flink、kylin等直接访问,将结果可视化显示。在安装zeppelin的过程中碰到各种问题,跟陈大神一起研究了好几天,终于把问题解决。我们安装zeppelin的目的主要是用spark快速的验证kylin的统计的可视化结果是否跟spark直接计算的可视化结果一致。...

    程序员文章站2024-03-18
  • CDH时钟偏差警报 博客分类: 大数据

    安装了Cloudera之后,总是提示时钟偏差,但是ntpd服务是正常工作的.原来Cloudera的agent是使用ntpdc命令进行进行判定的https://community.cloudera.com/t5/Cloudera-Manager-Installation/Cloudera-5-4-x-

    程序员文章站2024-03-17
  • CDH之安装部署的坑 博客分类: 大数据技术 CDH部署CDH异常 

    *、CDH部署之系统一片飘红报log空间不足HBase用的堆内存其实不是很大,非JVM堆用得多,所以不要设置过大 *、CDH部署异常调整之-HBase启动后报内存溢出首先查看kafka的日志路径看是否过大du指令,然后调整相应参数  *、CDH部署之kafka启动异常由于集群异常宕机,导致kafka...

    程序员文章站2024-03-15
  • oozie时区问题 (CDH环境)

    背景: 配置oozie的 coordinator job时必然会遇到时区问题,在此记录下解决方案~集群环境:CDH 5.13.0 ,其中oozie版本:4.1.0注:以下四步最好都修改一、Hue中配置由于我们都是通过hue对oozie进行配置,所以首先保证hue中 time_zone为 Asia/S...

    程序员文章站2024-03-13
  • CDH hive元数据 DBS TBLS COLUMNS_V2视图关系 博客分类: 大数据

     CDH hive元数据 DBS TBLS COLUMNS_V2视图关系SELECT T.DB_ID,T.NAME,T1.TBL_NAME,T1.TBL_TYPE,T3.COLUMN_NAME,T3.TYPE_NAME,T3.COMMENT,T3.INTEGER_IDXFROM DBS T,TBLS...

    程序员文章站2024-03-12
  • Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建

    目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实...

    程序员文章站2024-02-12
  • 手动安装cloudera cdh4.2 hadoop + hbase + hive(一)

    安装版本 hadoop-2.0.0-cdh4.2.0hbase-0.94.2-cdh4.2.0hive-0.10.0-cdh4.2.0jdk1.6.0_38 安装前说明 安装目录为/opt 检查hosts文件 关闭防火墙 设置时钟同步 使用说明 安装hadoop、hbase、hive成功之后启动方式...

    程序员文章站2024-02-12
  • Hadoop集群(CDH4)实践之 (2) HBase&Zookeeper搭建

    目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实...

    程序员文章站2024-02-10
  • Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建

    目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实...

    程序员文章站2024-02-08
  • Hadoop集群(CDH4)实践之 (0) 前言

    目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实...

    程序员文章站2024-02-04
  • Hadoop集群(CDH4)实践之 (2) HBase&Zookeeper搭建

    目录结构 Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建 Hadoop集群(CDH4)实践之 (2) HBaseZookeeper搭建 Hadoop集群(CDH4)实践之 (3) Hive搭建 Hadoop集群(CHD4)实...

    程序员文章站2024-01-30
  • CDH5.0.2升级至CDH5.2.0

    升级需求1.为支持spark kerberos安全机制2.为满足impala trunc函数3.为解决impala import时同时query导致impala hang问题升级步骤参考http://www.cloudera.com/content/cloudera/en/documentation...

    程序员文章站2024-01-19
  • Cloudera Manager 和 CDH 4 终极安装 - 冰羽的世界

    http://www.tuicool.com/articles/AnuiUra

    程序员文章站2024-01-19
  • 手动装配Hadoop Cloudera CDH4.2版本

    第1章 概要说明41.1 Hadoop是什么?41.2 为什么选择CDH版本?41.3 集群配置环境41.4 网络结构图5第2章 安装hadoop环境62.1 准备安装包62.2 默认用户组root:root62.3 卸载自带的jdk62.4 安装和配置jdk环境62.5 配置/etc/hosts6...

    程序员文章站2024-01-19
  • Cloudera官方课程CDH管理员(CCAH)、开发者(CCA175)、数据分析 数据库 

    Administrator管理员培训              培训时长:4天/28课时             认证考试:CCAH从安装及配置、负载均衡及调整,以及 诊断和解决部署问题等各方面了解 Hadoop 系统管理员的概念和实践。面向需要建立或维护 Hadoop 集群的管 理员。培训对象要求...

    程序员文章站2024-01-19