日复一日伐树的熊哥
专攻JAVAweb开发,大数据开发,机器学习领域的研发工作
展开
-
记一次Hbase2.1.x历史数据数据迁移方案
cdh6.3.2集群的hbase2.1.x的历史数据迁移,使用snapshot方式迁移历史数据,使用restore_snapshot方式恢复hbase历史表及数据原创 2023-10-13 11:20:26 · 1199 阅读 · 0 评论 -
cdh6.3.2集群在线主机扩容
cdh6.3.2集群主机在线扩容,cloudermanager添加主机,hadoop扩容原创 2023-10-08 16:28:00 · 351 阅读 · 0 评论 -
记一次生产环境cdh6.3.2集群yarn组件nodemanager节点down掉的事故分析
cdh6.3.2集群yarn组件的nodemanager不可用原因分析原创 2023-10-08 10:24:12 · 555 阅读 · 0 评论 -
cdh6.3.2 Flink On Yarn taskmanager任务分配倾斜问题的解决办法
第一个参数代表是否在一个节点分配多个container,第二个参数代表在一个节点上一次性最多分配几个container。CDH6.3.0中第一个参数默认为true,则意味着会在一个节点上分配多个container,则会有多个taskmanager。第二个参数默认为-1,则意味着不限制,则会一次性分配较多container。原创 2023-08-18 15:52:26 · 894 阅读 · 0 评论 -
HIVE3.1.2外部表映射hdfs的ORC文件,列值为空的问题解决办法
HIVE3.1.2外部表映射hdfs的ORC文件,列值为空的问题解决办法。因为ORC的schema列名包含大写字母,导致列值被置为空。增加大写字母敏感属性值为false即可。或者创建表的时候指定该属性值。原创 2023-06-13 11:15:38 · 430 阅读 · 0 评论 -
公司大数据CDH技术选型升级为EMR集群的技术调研
公司大数据CDH技术选型升级为EMR集群的技术调研;开源大数据平台 E-MapReduce(简称“EMR”)是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、StarRocks、Flink、Presto、ClickHouse等开源大数据计算和存储引擎。EMR计算资源支持灵活的弹性控制。原创 2023-05-15 13:37:34 · 683 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(九)之部署flink1.13.2客户端
CDH6.3.2大数据集群生产环境安装(九)之部署flink1.13.2客户端原创 2023-04-13 13:52:08 · 712 阅读 · 0 评论 -
CDH6.3.2解决yarn historyServer页面为空,登录用户为Logged in as: dr.who的问题
Logged in as: dr.who,yarn,jobHistory,CDH6.3.2原创 2023-04-12 18:38:49 · 410 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(八)之各组件参数调优,yarn参数调优,hdfs参数调优等
CDH6.3.2大数据集群生产环境安装(八)之各组件参数调优,yarn参数调优,hdfs参数调优等原创 2023-04-11 11:13:37 · 443 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(七)之PHOENIX组件安装
cdh6.3.2大数据集群安装之phoenix组件安装原创 2023-04-10 14:26:00 · 728 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(六)之clouderManager初始化以及CDH的kafka、hdfs、zookeeper、hbase、spark等各组件安装
CDH6.3.2大数据集群生产环境安装(六)之clouderManager初始化以及CDH的kafka、hdfs、zookeeper、hbase、spark等各组件安装原创 2023-04-10 11:28:06 · 354 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(五)之httpd和clouderManagerServer、agent组件安装
CDH6.3.2大数据集群生产环境安装(五)之httpd和clouderManagerServer、agent组件安装原创 2023-04-06 18:21:55 · 420 阅读 · 1 评论 -
CDH6.3.2大数据集群生产环境安装(四)之JDK1.8和Mysql5.7.9安装
CDH6.3.2大数据集群生产环境安装(四)之JDK1.8和Mysql5.7.9安装原创 2023-04-04 18:22:54 · 590 阅读 · 1 评论 -
mysql5.7.9默认启用ipv6地址和tcp6协议导致访问不通的解决办法
mysql5.7.9默认启用IPV6地址和tcp6协议导致访问不通mysql服务原创 2023-04-04 18:01:17 · 1536 阅读 · 0 评论 -
CDH6.3.2大数据集群生产环境安装(三)之磁盘挂载
CDH6.3.2大数据集群安装之磁盘挂载 mount lsblk df -TH原创 2023-04-03 10:42:22 · 539 阅读 · 1 评论 -
CDH6.3.2大数据集群生产环境安装(二)
CDH6.3.2大数据集群生产环境搭建,cm集群搭建 ,cloudermanager集群搭建原创 2023-03-30 12:29:18 · 233 阅读 · 1 评论 -
CDH6.3.2大数据集群生产环境安装(一)
CDH6.3.2大数据集群生产环境搭建,cm集群搭建,clouderManager集群搭建原创 2023-03-30 12:20:43 · 270 阅读 · 1 评论 -
Inconsistent namespace mapping properties. Ensure that config phoenix.schema.isNamespaceMapping
cdh6.3.2 phoenix连接hbase异常 Inconsistent namespace mapping properties. Ensure that config phoenix.schema.isNamespaceMappingEnabled is consistent on client and server原创 2023-03-17 09:54:01 · 360 阅读 · 1 评论