druid 和 CDH关于hadoop版本不兼容问题

本文介绍了解决Druid与Hadoop版本不一致导致的MapReduce任务错误的方法。通过在middlemgr运行配置文件中设置特定参数,可以确保使用正确的Hadoop版本,避免因版本差异引发的问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

如果druid的hadoop版本和CDH带的版本不一致,则在MR,比如Hadoop-based Batch Ingestion则有可能报错,解决方法是:

在middle mgr runtime.properties 配置中加入如下信息:

 -Dhadoop.mapreduce.job.classloader=true -DHADOOP_USER_NAME=hdfs 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值