druid 和 CDH关于hadoop版本不兼容问题

墨衍会员 · AI 创作全网分发 墨衍智能分发 本文由作者通过墨衍一键同步至各平台 1分发平台 900+累计阅读 938平均单平台已同步平台优快云微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年，写一次发全网我也要 → 码龄12年

关注

原创最新推荐文章于 2026-07-18 14:02:41 发布 938 阅读 AI 写同款· GEO 优化 ›

大数据各组件搭建，版本冲突问题解决方案最近由于搭建hadoop、flink、kafka的环境，需要做一整套大数据的方案。分别取相应的官网上查看几个组件的最新情况。 hadoop选用CDH，目前最新版本为CDH6.0.0 对应的hbase、hive、spark等组件的版本如下：组件版本发行版 CDH 版本 Supervisord 3.0 不可用不适用 ... 阅读详情

如果druid的hadoop版本和CDH带的版本不一致，则在MR，比如Hadoop-based Batch Ingestion则有可能报错，解决方法是：

在middle mgr runtime.properties 配置中加入如下信息：

-Dhadoop.mapreduce.job.classloader=true -DHADOOP_USER_NAME=hdfs

收录于

java

当前文章被收录于：

java

494 篇文章 1 人学习

订阅专栏查看详情

druid

当前文章被收录于：

druid

22 篇文章 2 人学习

订阅专栏查看详情

当前文章被以下社区和专栏收录：

标签

#druid #hadoop

druid-0.21.1 搭建及使用基于CDH6.3.2 官网下载最新版包官网说明：https://druid.apache.org/docs/latest/tutorials/cluster.html 准备3台服务器。master、data、query各一台安装包目录结构：修改common配置文件 vim conf/druid/cluster/_common/common.runtime.properties druid.extensions.loadList=["druid-hdfs-storage", "druid-kafka-indexing-s 阅读详情

相关推荐

Cloudera Hadoop企业级故障排查与调优实战指南

Cloudera Hadoop是企业级大数据平台的核心发行版，其本质是Hadoop生态在生产环境中的深度封装与工程化落地。理解其运行原理，关键在于掌握配置驱动的服务协同机制、Kerberos与Ranger构成的多层安全模型，以及YARN资源调度与Hive/Impala性能调优的数据闭环方法论。它不仅涉及HDFS高可用、HiveServer2故障定位等典型场景，更要求运维与数据工程师具备从Cloudera Manager配置继承链、TLS证书SAN字段校验到LLAP缓存命中率分析的全栈排障能力。本指南聚焦CD

604

Druid：Druid.io 部署&使用文档

参考：http://lxw1234.com/archives/2015/11/554.htm 海量数据实时OLAP分析系统-Druid.io安装配置和体验 http://druid.io/docs/0.9.2/design/design.html Druid官网搭建Druid.io 部署&使用文档1.集群模式下部署 Prerequisites : Java 7 or higher & Z

辉哥大数据 1万+

hadoop集群版本兼容问题

选择自己要下载的hadoop版本，以及对应的cdh5的办版本，然后其它组件全部选择cdh5对应的版本即可集群组件cdh5下载地址：https://archive.cloudera.com/cdh5/ 官方下载地址：http://archive.apache.org/dist/ 比如我选择的是hadoo版本是hadoop-2.5.0并且cdh5的版本选择的是cdh5.3.6，那么其...

QYmufeng的博客 1192

hadoop cdh版本不一致报错问题

如果在执行hadoop相关任务报如下类似错误说明项目的pom依赖中的3.0.0-cdh6.3.1版本的hadoop与集群所用的hadoop版本不一致，此时我们需要将项目中的pom修改，将hadoop依赖版本改为与集群上cdh版本一致的hadoop版本即可,然后重新打包部署即可 java版本不一致在执行java程序时，报如下错误，即 Unsupported major.minor version 52.0 这种错误显然时java版本差距过大，可通过查看运行主机的java版本,然后更换更新的(我就遇到过

weixin_44175698的博客 719

大数据Apache Druid（四）：使用Imply进行Druid集群搭建

Imply基于Druid进行了一些组件的开发，是Druid的集成包，提供开源版本和商业版本，类似CDH一样，使安装Druid简化了部署，Imply也是Druid团队开发。我们可以使用Imply安装Druid，在Imply的官网https://imply.io进行下载，经过测试这个版本在提交加载数据任务时有一些bug（加载数据任务总是失败）。node3node4node5将imply安装包上传到node3“/software”目录下，并解压。...

Lansonli（蓝深李）的博客 1413

QGIS效率提升神器：qgis_mcp插件+VSCode联合工作流配置全解析

本文详细解析了如何通过配置qgis_mcp插件与VSCode的联合工作流，实现语音控制和代码自动化来大幅提升QGIS操作效率。该方案将自然语言交互与现代编辑器生态结合，为地理信息专业人士构建了智能、高效的全新工作模式，彻底改变传统GIS操作方式。

weixin_29228203的博客 190

大数据实时多维OLAP分析数据库Apache Druid入门分享-上

Apache Druid是⼀款针对海量数据进⾏⾼性能实时分析OLAP引擎的实时分析型数据库，本篇了解其特征和适用场景，并与其他框架横向对比；最后部署一个单机版演示本地文件摄取入库,并演示基于Json API本地查询和SQL两种查询方式。

itxiaoshen博客 1255

从光耦隔离到稳定驱动：信捷伺服与STM32的硬件设计陷阱与救赎

本文深入探讨了信捷伺服驱动器与STM32微控制器配合时的硬件设计关键问题，包括光耦隔离电路选型、电源电压选择、拨码开关设置等核心环节。针对伺服驱动器的稳定驱动需求，提供了从电路设计到抗干扰策略的完整解决方案，帮助工程师规避常见陷阱，提升工业控制系统的可靠性。

gold8的专栏 311

cdh6.2.1+flink1.9+druid1.8搭建实践

1、CDH版本调研和相应依赖整理综述一般组件版本管理工具包含两种方式，第一种ambari 第二种为cloudra 两种各有优缺点，但立足公司实际情况，需要一种相对来说，比较稳定，并且易于管理监控更加方便，一般不用二次开发的集群。并且cloudera相对ambari市场占有率比较大解决方案相对比较成熟。因此决定采用cloudera manager 去监控管理公司的集群。版本选择 Clouder...

weixin_40809627的博客 1148

C2000 CLA协处理器：嵌入式实时控制性能优化与实战指南

在嵌入式实时控制系统中，主CPU常因高频率、低延迟的控制算法而面临性能瓶颈。为解决此问题，协处理器技术应运而生，它通过硬件并行架构分担计算密集型任务，从而提升系统整体性能。其核心原理在于独立的计算单元与总线设计，能够实现近乎零延迟的响应，这对于电机驱动、数字电源等闭环控制场景具有极高的技术价值。本文聚焦于德州仪器C2000系列微控制器中的控制律加速器（CLA），深入解析其作为独立浮点协处理器如何通过任务调度与消息RAM通信机制，有效实现性能倍增，并提供了从内存配置到代码调试的完整工程实践方案。

weixin_29192211的博客 305

在Ubuntu上安装Node.js编程

在Ubuntu操作系统上安装Node.js是非常简单的，本文将为您提供详细的安装步骤。这是一个简单的Node.js HTTP服务器示例，它将在本地主机的端口3000上监听请求，并返回"Hello, World!npm是Node.js的包管理器，您可以使用它来安装和管理Node.js模块。您已成功在Ubuntu上安装了Node.js，并创建并运行了一个简单的Node.js应用程序。现在，您已经成功安装了Node.js和npm，让我们创建一个简单的Node.js应用程序并运行它。如有任何疑问，请随时提问。

CodeNexus的博客 3524

druid.io出现的问题及解决方法

近期由于公司需要，研究了druid.io，下面是我遇到的一些问题以及解决办法，当做记录。使用的druid.io版本为0.12.3 1、使用druid-hdfs-storage扩展将hdfs用于深度存储。使用Map / Reduce作业从hadoop批量加载数据。公司已有的集群是CDH-5.10.1版本，该版本的cdh使用hadoop2.6.0，druid.io的0.12.3版本中自带的h...

youyoufusheng的博客 1435

YOLO26 标签分配机制：STAL 小目标感知分配策略

YOLO26提出的STAL标签分配策略通过尺度感知机制优化了小目标检测性能。该方法根据目标面积将检测对象分为小、中、大三类，分别采用差异化的分配参数（TopK数量、IoU阈值和中心度权重），特别是对小目标采用更宽松的匹配条件和更高的中心度权重。实验结果表明，STAL策略显著提升了小目标检测精度（AP_small），同时保持了整体检测性能（mAP），为解决目标检测中尺度不平衡问题提供了有效方案。

一键难忘的博客 788

Druid集群导入hadoop数据问题

与hadoopjar包冲突 Druid java.lang.OutOfMemoryError: unable to create new native thread 解决方案参考：Working with different versions of Hadoop 调整Druid集群所在机器的u...

chuzai3906的博客 715

38、四旋翼无人机的机械建模、控制与仿真及小型无人机高度的最优鲁棒无模型控制

本文探讨了四旋翼无人机的机械建模、控制与仿真方法，采用基于PID控制器的分层控制策略实现稳定飞行与路径跟踪，并开发了结合CAD模型与MATLAB环境的飞行模拟器。同时，针对小型无人机高度控制问题，提出了一种基于粒子群优化（PSO）的最优鲁棒无模型控制（PSO-MFC）方法，有效解决了参数整定难题，实现了零稳态误差跟踪和强抗干扰能力。两种方法在仿真中均表现出良好性能，为无人机控制系统的设计与优化提供了理论与实践基础。

l6m7n8的博客 99

AI原生应用架构师指南：系统化思维框架解析

随着ChatGPT、Stable Diffusion等AI技术的普及，「AI原生应用」（AI-Native Application）已从概念走向实践。传统应用以「功能逻辑」为核心（比如用代码写死的购物车规则），而AI原生应用以「数据+模型」为核心（比如根据用户行为动态推荐商品）。本文的目的是为架构师提供一套系统化思维框架如何区分「伪AI应用」和「真AI原生应用」？数据、模型、业务场景三者如何协同设计？架构师需要关注哪些关键技术节点？如何避免「为了AI而AI」的陷阱？

AI Python 编程之道的博客 491

druid集群搭建

一、基础环境 cdh5.14.0 Hadoop 2.6.0+cdh5.14.0+2715 HDFS 2.6.0+cdh5.14.0+2715 ZooKeep...

507

Ultralytics 框架中 model.predict() 返回的 results 对象的详细解析

通过掌握 results 对象的使用方法，您可以快速实现模型部署、数据分析与可视化。

浩瀚之水的专栏 747

【离线数仓CDH版本】即席查询工具（Presto、Druid、Kylin）、CDH数仓、Impala查询

1.即席查询一、Presto 大数据量、秒级、多数据源的查询引擎【支持各种数据源work的内存级查询】由coordinator和多个work构成，work对应不同数据源Catalog 特点：基于内存运算，无需map reduce，但连查表可能会产生大量临时数据安装：server、client、可视化client 优化：列式、...

USTSD的博客 836

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android：LinePhone3.2.7(最新版本)，官网地址：http://www.linphone.org/

Druid使用问题解决

与hadoopjar包冲突 Druid java.lang.OutOfMemoryError: unable to create new native thread 解决方案参考：Working with different versions of Hadoop 调整Druid集群所...

chuzai3906的博客 1122

霍尼韦尔SoftMaster使用说明

druid集群的搭建

1、启动zookeeper 下载zookeeper安装包，解压、安装 bin/zkServer.sh start 2、修改druid配置文件（1） conf/druid/_common/common.runtime.properties a、修改zookeeper列表 b

suphieLiang的博客 4003

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料，已经经过了本人的筛选和整理，希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助！

关于hadoop:2.6.0-cdh5.16.2与hive1.1.0-cdh5.16.2兼容springboot问题

weixin_43814165的博客 780

druid cluster安装

修改配置文件 1.druid.host=cdhpreview01（当前机器host ，不能为localhost 因为多个节点之前都是localhost无法识别） 2.druid.extensions.loadList=["druid-parquet-extensions", "mysql-metadata-storage","druid-hdfs-storage", "druid-kafka-indexing-service", "druid-datasketches"] 增加"druid-parq..

u013009809的专栏 208

springboot+Kerberos认证hadoop3.0，连接hive

上一篇讲的是springboot如何连接hadoop3.0 地址：https://blog.youkuaiyun.com/u011165335/article/details/106303379 那个是没有开启Kerberos认证的；先贴一下组件版本：我这里的是CDH6.1.1+HADOOP3.0+HIVE2.1.1 这里主要说明： 1.springboot如何连接Kerberos认证的hadoop3.0 配置： hdfs.path=hdfs://xxxx:8020 代码： package com.xxxx.tp

u011165335的博客 4600

初识Druid

点击 “蓝字” 关注我们什么是Druid？Druid的三个设计原则？快速查询（Fast Query）水平扩展能力（Horizontal ...

木野归郎 239

即席查询组件对比

提供Hadoop/Spark之上的SQL查询接口及多维分析（MOLAP）能力以支持超大规模数据，能在亚秒内查询巨大的Hive表；，在处理PB级别数据、毫秒级查询、数据实时处理方面，比传统的OLAP系统有了显著的性能改进。虽presto可以解析SQL，但它不是一个标准的数据库，不是MySQL、Oracle的代替品，也不能用来处理在线事务，而 apache版的数仓使用的是Druid+Presto+Kylin查询引擎，有兴趣的可以学习下。）摘要：Druid是一个快速的列式分布式的支持实时分析的。

互联网知识分享 1023

上一篇： [推荐 ]druid 架构理解

下一篇： windows环境下搭建hadoop 3.1.2

Cloudera Hadoop企业级故障排查与调优实战指南

06-23

604