dolphinscheduler-3.4.0

原创已于 2026-06-06 17:40:46 修改 · 658 阅读

6 GEO检测

收录于

当前文章被以下社区和专栏收录：

于 2026-02-25 18:37:20 首次发布

流批一体架构实践专栏收录该内容

6 篇文章 ¥99.90 ¥299.90

订阅专栏

超级会员免费看

本文详细介绍了 DolphinScheduler 3.4.0 在大数据环境下的完整部署流程，涵盖基础环境准备（JDK、主机配置、用户免密）、MySQL 8.4 数据库部署与初始化、ZooKeeper 搭建，以及 DolphinScheduler 各核心组件（API Server、Master/Worker/Alert Server）的配置要点，包括 MySQL 驱动集成、HDFS 配置文件复制、application.yaml 与 dolphinscheduler_env.sh 等关键配置项修改，以及一键安装、服务启停与访问验证。

1、基础环境

1.1、集群资源规划

在这里插入图片描述

1.2、HostName

cat > /etc/hosts << EOF
192.168.xxx.xxx xxx-245
192.168.xxx.xxx xxx-246
192.168.xxx.xxx xxx-247
192.168.xxx.xxx xxx-248
EOF

1.3、创建用户及免密

ansible cluster -m user -a "name=hadoop password

标签

#hadoop

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

小成学大数据

关注关注

5
点赞
踩
6

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

dolphinscheduler独立集群部署文档（海豚调度）

weixin_52134189的博客

06-14

901

海豚调度独立集群部署文档

datasophon之dolphinscheduler手动升级3.4.0

echo_decode的博客

03-23

582

摘要：为解决DolphinScheduler 3.1.8版本TGT续期问题，在DataSophon 1.2.1环境中手动升级至3.4.0版本。升级过程包括：获取安装包后迁移JMX监控配置，调整启动脚本权限与环境变量（重点修改dolphinscheduler_env.sh），处理3.x版本不再默认提供的插件目录（需离线部署并严格匹配路径名称）。以Worker-Server为例，通过修改start.sh注入JMX监控参数完成服务配置。该方案解决了Kerberos续期Bug，同时保持与DDP架构的兼容性，为同类

0 条评论

写评论

DolphinScheduler 3.4.0升级实战与性能优化指南

weixin_34146805的博客

07-02

406

工作流调度系统是现代大数据平台的核心组件，其性能直接影响数据处理效率。DolphinScheduler作为Apache顶级开源项目，通过版本迭代持续优化任务调度能力。3.4.0版本通过重构核心引擎，实现了工作流加载时间降低33%、API响应速度提升34%的显著改进。在DataSophon等大数据平台集成场景中，升级过程涉及数据库Schema变更、配置文件迁移等关键技术环节，需要特别注意版本兼容性和回滚方案设计。本文基于生产环境升级实践，详解从备份策略到性能调优的全流程，特别包含资源文件管理和JVM参数配置等

DolphinScheduler 3.4.0手动升级指南与最佳实践

最新发布

weixin_29070721的博客

09-12

270

分布式任务调度系统是现代大数据平台的核心组件，通过解耦任务依赖关系实现自动化运维。DolphinScheduler作为开源调度系统，其版本升级涉及数据库Schema变更和配置优化等关键技术点。本文以生产环境验证的3.4.0版本为例，详解包含环境检查、数据备份、服务启停等关键步骤的手动升级方案，特别强调通过MySQL dump实现元数据备份，以及基于HDFS的资源文件存储配置。针对企业级用户关注的稳定性需求，提供包括线程池调优、历史数据清理在内的后期维护方案，帮助运维团队实现调度系统平稳升级。

DolphinScheduler 3.2.2 保姆级教程：从零搭建分布式调度集群（含MySQL配置避坑指南）

apple5的专栏

02-16

952

本文提供了DolphinScheduler 3.2.2生产级分布式集群的完整部署指南。从基础环境规划、ZooKeeper与MySQL配置，到集群服务部署、Worker分组及资源中心配置，详细解析了每一步操作，并特别包含了MySQL 8.0驱动配置等关键避坑点，旨在帮助用户从零搭建一个高可用、可扩展的分布式工作流调度系统。

DolphinScheduler 分布式调度系统二开达梦数据库初始化sql

01-03

DolphinScheduler 分布式调度系统二开达梦数据库初始化sql

自然二进制数与格雷码的相互转换

Loudrs的博客

05-07

7490

自然二进制数与格雷码两者优势：自然二进制数的编码方式简单明了，容易理解，在加减运算中能够直接进行，同时十分方便进行一些位运算操作（如移位、取反等）。格雷码计数时只有一位变化，可有效减少计数器状态的冗余转换，同时在传输数据时能够减小传输错误的概率，此外带权重编码处理更加方便。在一定程度上自然二进制数与格雷码优缺点基本相反，综上所述，自然二进制数和格雷码各有优劣之处，需要根据具体应用场景选择合适的编码方式。简单来说，在计数器和编码器中，倾向于使用格雷码；而在进行加减运算时，则倾向于使用自然二进制数。

新能源充电桩充电枪口标准

网络安全的研究者、新能源行业的追求者

12-10

4686

建立的标准确保了新能源汽车充电的安全性、兼容性和效率，促进了新能源汽车产业的发展。

OpenStack详解、排错、经验总结

weixin_40548182的博客

09-02

1974

第1章 Openstack简介 1.1 计算（Compute）：Nova。一套控制器，用于为单个用户或使用群组管理虚拟机实例的整个生命周期，根据用户需求来提供虚拟服务。负责虚拟机创建、开机、关机、挂起、暂停、调整、迁移、重启、销毁等操作，配置CPU、内存等信息规格。自Austin版本集成到项目中。 1.2 对象存储（Object Storage）：Swift。一套用于在大规模可扩展系统中通过内置冗余及高容错机制实现对象存储的系统，允许进行存储或者检索文件。可为Glance提供镜像存储，为Cinder提供

从源码编译CesiumForUnreal

专注GIS开发

06-26

5642

从源码编译CesiumForUnreal插件

Plecs standalone 4.9.5最新版本，赶紧来下载使用吧，需要做并网逆变器及光伏储能变换器的朋友赶紧下载起来

08-13

2415

PLECS 4.9.5较4.7.1版实现全面升级：采用自适应求解器切换技术，支持多核CPU/GPU加速，仿真速度提升30-50%；新增模型引用功能，实现模块化设计；强化光伏/风电等新能源组件，支持多物理场耦合分析；优化代码生成功能，兼容多种硬件平台和FMU导入。新版特别适用于复杂电力电子系统、多域联合仿真及硬件在环测试项目，但对硬件配置要求更高。基础教学项目仍可使用4.7.1版本。建议用户根据项目复杂度选择升级方案。

Android 蓝牙——概述（一）

小旭的专栏

01-17

3491

Profiles (蓝牙应用规范)，它从应用场景的角度为蓝牙技术的使用制定了不同的规范。这也是和大众日常生活接触最多的一部分。蓝牙支持很多Profiles：MAP：（MessageAccessProfile），短信访问协议，允许设备间的信息交换，短信。使用场景:智能车载中同步短信等信息。HFP：（Hands-free Profile），电话免提协议，让蓝牙设备(如蓝牙耳机/车机)可以控制电话，如接听、挂断、拒接等。

YOLO系列专栏（十二）：YOLO26行业落地实战(三)：无人机航拍场景——户外巡检（机载边缘计算+YOLO26）

qq_36130719的博客

03-31

258

无人机航拍巡检场景，面临机载设备算力/显存有限、高空航拍目标小、户外环境复杂（风力、光线变化）、图像抖动等问题，对模型的轻量化、实时性、小目标检测能力要求极高。YOLO26相比传统模型，在该场景中具备三大核心优势：✅ 极致轻量化：INT8量化+模型剪枝后，模型体积可压缩至5MB以内，显存占用控制在512MB以内，适配Jetson Xavier NX等机载边缘计算设备；✅ 小目标检测能力强：优化检测头与锚框配置，可精准识别高空航拍中的小尺寸目标（如线路断股、绝缘子裂纹），检测准确率高；

AgentScope实战训练营- Java从零开始快速构建Agent完整教程

program哲学

06-03

856

本文基于阿里巴巴开源的 AgentScope Java 框架，从零开始手把手带你构建 AI 智能体应用。内容涵盖环境搭建、基础对话、工具调用、结构化输出、多Agent流水线、Hook可观测性、会话持久化、MCP协议、RAG知识库集成、多模态工具、技能系统、Spring Boot Web部署等21个核心模块，附带完整可运行代码示例，帮助Java开发者快速掌握Agent开发全流程。

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

OV9734 DATASHEET，完整规格书

OV9734完整规格书，包括电气参数，尺寸规格，寄存器配置表等

霍尼韦尔SoftMaster使用说明

VC中sqlite的使用

在VC中对sqlite的使用，实现数据库大批数据的快速插入，读取数据库中的数据在ListCtrl中显示