大数据系统
GZMetrics
啦啦啦
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop Streaming 问题及排查
@[TOP] 运行报错及排查 hdfs dfs -rm -r /output1 mapred streaming \ -input /idis_demo_dir \ -output /output1 \ -mapper wc_map.py \ -reducer wc_reducer.py \ -file wc_map.py \ -file wc_reducer.py 报错: Caused by: java.io.IOException: Cannot run program "原创 2020-09-14 12:58:42 · 1459 阅读 · 0 评论 -
k8s 中 hawq 无法启动 segment 问题排查
文章目录问题现象问题本质解决方案解决过程方案1:重新编译 hawq安装依赖依赖镜像编译 HAWQ方案2:根据现象找原因hawq init master错误1:错误2hawq init segmentPG数据库初始化sysctldockerfilek8s中报错修复后的 docker file测试进入系统验证配置环境变量启动集群验证集群执行查询,验证正确性 问题现象 HAWQ 能创建表,但是无法进行写操作(插入、更新) 问题本质 无可用 segment 解决方案 echo "kernel.sem = 250原创 2020-09-14 12:55:15 · 941 阅读 · 0 评论 -
Hadoop 自动判分程序
学生提交 Hadoop 之后,实现自动判分 流程如下图原创 2020-07-22 10:40:20 · 451 阅读 · 0 评论
分享