Apache DolphinScheduler API调用说明

最新推荐文章于 2025-03-25 17:07:20 发布
最新推荐文章于 2025-03-25 17:07:20 发布
阅读量1w 收藏 13
点赞数 6
分类专栏： DolphinScheduler 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/samz5906/article/details/106825655
版权
Apache DolphinScheduler 提供了API接口调用，适用于与第三方系统的集成。创建令牌是调用的前提，登录调度系统生成令牌，并设定有效期限和指定用户。完成创建后，可在API文档页面找到apiserver地址进行接口测试，如查询项目列表。使用时需在请求头中设置Content-Type为application/json，Host为apiserver IP，以及生成的token。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

背景

调度一般都是通过页面创建项目、流程等，但是需要和第三方系统集成就需要通过调度API管理项目、流程。

操作步骤

创建token

1） 登录调度系统，进入 安全中心->令牌管理 ，单击 创建令牌按钮，创建令牌。如下图所示
在这里插入图片描述

2） 选择失效时间(就是token有效期，自己内部系统就设置长点)，选择用户(用户是指谁调的接口，比如创建项目需要指定谁创建)单击“生成令牌”，
拷贝token字符串，然后保存就 ok在这里插入图片描述

使用token

  1. 找到API文档页面
    apiserver地址:12345/dolphinscheduler/doc.html
    选一个测试的接口，本次测试选的查询项目projects/query-project-list

  2. 打开postman,填写地址，
    header中填写
    Content-Type:application/json
    Host:你 apiserver ip
    token: 你刚刚生成的tokne

在这里插入图片描述

上面是请求后返回结果，一切ok.

最低0.47元/天 解锁文章
海豚调度器调用api接口启动工作流（亲试可用）
大模型大数据攻城狮的专栏
06-05 1275
在大数据时代，工作流调度器成为了数据管道和ETL任务中不可或缺的工具。DolphinScheduler作为一款强大的工作流调度器，支持多种任务类型和工作流的可视化管理。除了通过Web界面操作外，DolphinScheduler也提供了API接口，使得第三方系统集成和自动化脚本调用成为可能。在工作需要通过api接口启动海豚调度器的工作流，由于生产环境的海豚调度器是1.3.5版本，不同版本的api有所不同，请根据实际进行调整。
【DolphinScheduler】api调用
hyj
10-25 6524
一、背景 一般都是通过页面来创建项目、流程等，但是与第三方系统集成就需要通过调用 API 来管理项目、流程。 二、说明 在第三方系统集成调用api的时候需要使用token信息，所以要先创建token。 三、创建token 1、登录调度系统，点击 "安全中心"，再点击左侧的 "令牌管理"，点击 "令牌管理" 创建令牌 2、选择 "失效时间" (Token有效期)，选择 "用户" (以指定的用户执行接口操作)，点击 "生成令牌" ，拷贝 Token 字符串，然后...
dolphinescheduler调用API
小白白的博客
03-05 2247
language=zh_CN&lang=cn，我是用k8s部署的，所以ip和端口是由service决定的，一般访问文档是在集群外的机器访问，要记得把dolphinscheduler-api的service中的type改为NodePort，端口也不一定是12345，要看你的service暴露的是哪个端口。官方的api使用文档：https://dolphinscheduler.apache.org/zh-cn/docs/3.2.1/guide/api/open-api。返回结果显示创建成功，上ui看看。
大数据学习（87）-工作流调度系统Apache DolphinScheduler
最新发布
weixin_61006262的博客
03-25 1051
（目前处在孵化阶段）是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统，其致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用。DolphinScheduler是今年（2019年）中国易观公司开源的一个调度系统，在今年美国时间2019年8月29号，易观开源的分布式任务调度引擎DolphinScheduler（原EasyScheduler）正式通过顶级开源组织Apache基金会的投票决议，根据Apache。
DolphinScheduler-api 的调用
wudonglianga的专栏
07-25 5112
1. DS 的api 调用 1.1 参考资料 1.对应的api 接口文档： http://192.168.1.163:12345/dolphinscheduler/doc.html 2. 查看源码：https://github.com/apache/dolphinscheduler (找到对应的版本下载) 2.api 调用： 3. 参数解释 key value 解释 executeType REPEAT_RUNNING NONE,REPEAT_RUNNING, RECOVER_SUS
dolphinscheduler 的api 调度使用RestTemplate采用内置用户 调用接口
wudonglianga的专栏
07-31 1318
1. 项目的整体架构 2. 相当于每次调用接口的时候先登录 用户登录 -------> 返回获取header 头中获取token 然后在通过token 调用其他接口 合理的方法是： 每次登录后将获取到的token 存到redis 中然后其他接口在调用的时候先从redis 获取token(因为token 中有 有效时间的限制) ， 如果没有token 的话就 在登录获取token 然后才存入redis中。 @PostMapping("/getRequestToken")
dolphin schedulerAPI调用（二）——创建任务
小白白的博客
03-11 1931
工作流code、项目code、上流节点code等可以在后端是数据库查询，可以在k8s上查看一下起的数据库是mysql还是postgresql，我这边是postgresql，根据values.yaml中配置的账号密码信息登录到数据库，可以查询到code。实际使用中，发现文档写得很不全乎，创建任务的api接口不对，具体的传参文档中也没写全，于是决定直接在前端查看创建任务实际调用的api，以及传递的参数。打开dolphinscheduler的界面，右键，检查，选择network，提交任务，查看api及参数。
Apache DolphinScheduler征稿 — Apache DolphinScheduler 快速入门与部署
盛夏温暖流年
06-10 1979
目录 一.Apache DolphinScheduler 背景 二.Apache DolphinScheduler 介绍 三.Apache DolphinScheduler 特性 四.Apache DolphinScheduler 单机部署流程 1.Linux 操作系统版本要求 2.服务器建议配置 3.基础软件安装 4. 下载二进制 tar.gz 包并安装 5. 创建部署用户并赋予目录操作权限 6. ssh 免密配置 7. 数据库初始化 8. 修改运行参数 9. 一键...
dolphinscheduler3.18源码包+Helm v3.12.3二进制安装包
09-14
3. **API接口**：Dolphinscheduler提供了丰富的RESTful API，供外部系统集成和调用。通过源码，我们可以理解API的设计原则和实现细节。 4. **插件机制**：Dolphinscheduler支持自定义任务类型，源码中会涉及到任务...
Apache DolphinScheduler 单机部署方案
数据之路
02-25 7495
单机部署(Standalone) DolphinScheduler单机部署分为后端部署和前端部署两部分： 1、后端部署 1.1 : 基础软件安装(必装项请自行安装) PostgreSQL (8.2.15+) or Mysql (5.6或者5.7系列) : 两者任选其一即可 JDK (1.8+) : 必装，请安装好后在/etc/profile下配置 JAVA_HOME 及 PATH 变量 Z...
Apache DolphinScheduler集群部署方案
数据之路
02-25 4487
集群部署(Cluster) DolphinScheduler集群部署分为后端部署和前端部署两部分： 1、后端部署 1.1 : 基础软件安装(必装项请自行安装) PostgreSQL (8.2.15+) or Mysql (5.6或者5.7系列) : 两者任选其一即可 JDK (1.8+) : 必装，请安装好后在/etc/profile下配置 JAVA_HOME 及 PATH 变量 ZooK...
DolphinScheduler-api调度之RestTemplate
wudonglianga的专栏
07-31 2186
1. 通过RestTemplate 的工具类进行封装然后调用 get 和post 通过RestTemplate 进行调用DolphinScheduler 的接口 post 方式实现 文档接口 – 流程实例的执行 通过postmain 调用： ds 界面 所有代码如下 1.1 工具类：RestTemplateUtils.ava package com.wudl.ds.utils; import org.springframework.http.HttpEntity; import org.spr
2021SC@SDUSC（dolphinscheduler-api）
Santan1412的博客
10-06 1155
dolphinscheduler-api API接口层，主要负责处理前端UI层的请求。该服务统一提供RESTful api向外部提供请求服务。 接口包括工作流的创建、定义、查询、修改、发布、下线、手工启动、停止、暂停、恢复、从该节点开始执行等等。 涉及的API太多，不宜深入研究，只研究其大致框架、功能。具体的API列表及其使用方法可查看官方文档 启动入口 org.apache.dolphinscheduler.api下面有两个类：ApiApplicationServer、CombinedApplic
dolphinscheduler1.3版本源码分析---API模块
sj1231984的专栏
12-30 1821
API模块主要功能 api模块主要提供对外接口，界面上的对流程、定时的管理等相关操作都是通过调用API模块的接口实现的，API模块直接跟数据库打交道，不会与master和worker模块交互。 相关接口概览 同时由于api模块集成了swagger，我们可以通过访问 http://xxxx/dolphinscheduler/doc.html来查看详细的API说明 流程定时调度逻辑 当我们创建好流程，并对流程增加定时管理后，dolphin是如何定时去调度流程的呢？该部分逻辑其实也是在API模.
Apache DolphinScheduler 发布 3.1.2 版本，Python API 实现优化
Apache DolphinScheduler开源社区
12-23 1464
点亮⭐️Star · 照亮开源之路https://github.com/apache/dolphinscheduler近日，Apache DolphinScheduler 发布了 3.1.2 版本。此版本主要基于 3.1.1 版本进行了 6 处 Python API 优化，19 处 Bug 修复，并更新了 4 个文档。其中较为重要的 Bug 修复为：Worker 杀进程不生效 #12995补...
DolphinScheduler 调用flink以及api的 使用
wudonglianga的专栏
07-25 5926
1.ds 调用flink 的使用 官方文档连接 ：https://dolphinscheduler.apache.org/zh-cn/docs/latest/user_doc/quick-start.html 2. 首先可以创建队列 作为程序调用的时候作为队列使用， 创建后不能删除。 3. 创建租户 1.租户对应的是linux 用户, 用户worker 提交作业所使用的的用户， 如果linux 没有这个用户， worker 会在执行脚本的时候创建这个用户 2.租户和租户编码都是唯一不能重复，好比一个人有名
零基础Apache DolphinScheduler 实现分布式PythonAPI租赁使用（上）
一毛钱的年代
06-30 1520
目录 1 功能设想 2 环境配置及启动运行 开发工具 注意事项 启动运行 3 部署配置Apache DolphinScheduler 4 Python API调度开发及页面编码 5 任务节点以及工作流开发 1 功能设想 背景： 最近有个业务场景需要设计但是迟迟未开工，因为懒！作为一个野生独立开发者，缺少的不是想法，而是强有力的执行力.恰好今天无聊到了C站的活动列表逛逛看到《拥抱开源-Apache DolphinScheduler》这个活动，Apache DolphinScheduler？
2021SC@SDUSC（dolphinscheduler-api3）
Santan1412的博客
11-10 483
ProcessDefinitionService org.apache.dolphinscheduler.api.service.ProcessDefinitionService承担流程定义具体的CURD逻辑，调用各种mapper、dao。 public Map<String, Object> createProcessDefinition(User loginUser, String projectName, String name,
Dolphinscheduler的API接口问题
m0_64998696的博客
10-18 1091
2：taskDefinition的taskCode与taskRelationJson的postTaskCode，与Locations中的taskCode要一样，这三个参数的形式可以看源码中的Test，里面有，这里给大家分别贴出来一个合格的形式。我们只需要在创建好task后，将获取到的taskCode再进行工作流关系中的修改工作流关系，将taskCode设置到一个任务的preTaskCode中，就可以使用查询project下的task中看到该task。这个code是自己写的一个随机14位随机数。
dolphinscheduler api调度
12-28
### 关于DolphinScheduler API调度 对于希望集成第三方系统的场景，可以利用DolphinScheduler提供的API来管理项目、流程等资源。由于涉及的API较多，建议专注于理解其大致框架与核心功能，而详细的API列表以及具体使用方式应当参照官方文档[^1]。 为了开始使用这些API，创建访问令牌（token）是一个必要的前置操作[^2]。这一步骤确保了安全性和权限控制机制的有效实施。 #### 获取并了解API文档 最直接的方式是查阅[DolphinScheduler官方网站](https://dolphinscheduler.apache.org/)上的相关资料[^4]。这里不仅提供了全面的任务调度指南，还包括了如何部署单机版环境的具体指导[^3]，这对于初步探索API非常有帮助。 #### 示例：获取Token接口请求 下面给出一段Python代码片段作为示例，展示如何向DolphinScheduler发送HTTP POST请求以获得用于后续调用其他API所需的认证Token： ```python import requests from urllib.parse import urljoin def get_token(base_url, username, password): endpoint = '/users/login' full_url = urljoin(base_url, endpoint) payload = { 'userName': username, 'userPass': password } response = requests.post(full_url, json=payload) if response.status_code == 200: data = response.json() token = data.get('data', {}).get('id') return f'Bearer {token}' else: raise Exception(f"Failed to obtain token: {response.text}") ``` 此函数接收基础URL、用户名及密码参数，并返回一个带有`Bearer`前缀的字符串形式的Token，该Token可用于授权之后的所有API请求。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值