Hadoop
关注
分享
扫一扫
深度学习V666
这个作者很懒，什么都没留下…
展开
-
Hive 执行日志
【代码】Hive 执行日志。原创 2024-06-28 08:51:04 · 306 阅读 · 0 评论 -
MapReduce优化方法
MapReduce优化方法主要从六个方面考虑：数据输入、Map阶段、Reduce阶段、IO传输、数据倾斜问题和常用的调优参数。原创 2024-06-27 09:30:02 · 917 阅读 · 0 评论 -
sqoop hive mysql 互传shell代码
【代码】sqoop hive mysql 互传shell代码。原创 2024-01-12 16:20:34 · 397 阅读 · 0 评论 -
Hive表数据同步至HBase
（2）利用 HBase 的 bulkload 命令移动 HFile 至合适的位置。（1）编写 Spark 程序转换原始数据为 HFile。原创 2023-08-30 19:48:29 · 203 阅读 · 1 评论 -
Hive to Elaticsearch 数据导入
【代码】Hive to Elaticsearch 数据导入。原创 2023-08-18 09:04:00 · 148 阅读 · 1 评论 -
HBase参数调优
内存大小：master默认为1G，可增加到2G，regionserver默认1G，可调大到10G，或者更大，zk并不耗资源，可以不用调整；HBase RegionServer 的 Java 堆栈大小（字节）HBase Master 的 Java 堆栈大小（字节）原创 2023-07-20 17:31:58 · 333 阅读 · 0 评论