Workflow submission failed: Error submitting workflow test_new_oozie: E0501

最新推荐文章于 2022-12-21 18:08:31 发布
原创 最新推荐文章于 2022-12-21 18:08:31 发布 · 2.3k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#oozie #hue #amberi

本文解决Ambari安装Oozie后，从Hue提交workflow时遇到的“Connection refused”错误。问题源于HDFS、YARN、MapReduce客户端配置缺失，需重新安装并重启Oozie服务。

amberi 安装oozie后从hue提交workflow报错：
Workflow submission failed: Error submitting workflow test_new_oozie: E0501: Could not perform authorization operation, Call From hdp1-oozie-1.novalocal/xxx.xxx.xxx.xxx to soapahdfs:8020 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused

错误的大致意思是：oozie的任务提交到hadoop的时候拒绝服务，我们hdfs端口是8020

问题原因：amberi在安装oozie的过程中hdfs client，yarn client，mapreduce2 client都安装失败了，导致hadoop的配置没有刷新到oozie的虚拟机上导致的

解决办法：重新安装hdfs client，yarn client，mapreduce2 client到oozie虚拟机，然后重启oozie服务即可

【Oozie】SSH Workflow报错之Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
sinat_40431164的博客
12-12 3048
【问题】添加workflow，拖拽一个ssh，user and host填写USER@HOST，ssh command填写一个最简单的ll命令，保存，submit，报错： Caused by: java.io.IOException: Not able to perform operation [ssh -o PasswordAuthentication=no -o KbdInteractiveD...
DolphinScheduler任务调度源码剖析
旺旺的博客
09-22 5399
DolphinScheduler任务调度源码剖析
Hue上编辑oozie workflow执行失败
fairynini的博客
03-27 731
看日志可以看出，sql的字句都被报 找不到此命令。可见脚本不认识sql，可以查看是hue拖拽的脚本类型错了。 应改成即可：
Hue 提交oozieworkflow失败，报各种错误，例如数组越界等无厘头erro，导致不能提交
fairynini的博客
03-22 972
关掉浏览器再打开即可。 万能的重启。
Submission
aizhouqian5537的博客
12-20 296
EI： ICIC Express Letters:http://www.icicelb.org/elb/index.html IJICIC:http://www.ijicic.net/ijicic/index.html jcp:http://www.jocm.us/ jcis:http://www.jofcis.com/ advances in mechanical eng...
重新提交workflow节点
cuanzadan2654的博客
08-24 245
1. 选择具有administrator 的workflow职责，一般是Workflow Administrator Web Applications 或者是Workflow Administrator. 2.选择Status...
alfred-jira-search:Alfred Workflow可以快速搜索Jira问题:magnifying_glass_tilted_right:
05-28
阿尔弗雷德·吉拉（Alfred Jira）搜索 Alfred工作流程可快速搜索您的Jira问题 :magnifying_glass_tilted_right: 安装 从下载最新的工作流。 您将收到有关Alfred未来更新的通知。 配置 系统将要求您使用以下值配置...
action-workflow-run-wait:等待所有`workflow_run`所需的工作流成功
04-29
等待所有workflow_run流程成功运行所需的工作流程 为什么？ 该当请求或完成工作流运行发生的事件，并允许您根据另一个工作流的最终结果执行工作流。 例子 on : workflow_run : workflows : [ test ] types : - ...
Alfred-Find-emoji：一个简单的alfred工作流程快速查找emoji:smiling_face_with_horns::smiling_face_with_horns::thinking_face::thinking_face:
02-05
一键调出搜索页面，需要先在Alfred Workflow中设置热键 按Enter键复制表情图标 依存关系 python2.7 安装 下载完成后，点击下载的文件，之后点击引入即可 之后帮我点个star呗〜 :handshake: :handshake: 去做 优化...
workflow_ocr:这是一个Nextcloud工作流程应用程序，可让您通过服务器端的OCR处理文件
05-21
首先从官方Nexcloud-appstore下载或安装Nextcloud Workflow OCR应用程序，或者从发行页面下载相应的tarball。 cd /var/www/ < NEXTCLOUD> /apps wget ...
alfred-workflow-translate::top_hat:通过Alfred快速访问Google翻译
05-04
适用于Alfred 3+的Google翻译工作流程 通过Alfred快速访问Google翻译。 带有两个示例关键字触发器：“ es”（英语到西班牙语）和“ se”... 使用npm安装此软件包： $ npm install -g alfred-workflow-translate
工作流错误：The workflow failed to start due to an internal error.
weixin_30682127的博客
12-26 886
问题症状： 自定义的工作流，在自己的测试环境都可以正常运行，但是部署到客户的机器后，部署成功，运行工作流出现错误：The workflow failed to start due to an internal error. 工作流状态放回到没有运行前的状态，找不到出错信息，系统日志，sharepoint日志都没有记载。 解决方式： 发现是因为协助型模板创建的站点默认没有激活工作流featu...
（连接拒接）Call From hadoop 1 failed on connection exception: java.net.ConnException
SuperMan程序人生（关注微信公众号）
10-10 4018
官方答复： ls: Call From hadoop1/192.168.132.130 to hadoop1:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/Connec...
关于启动/配置hadoop时出现的问题
qq_41681570的博客
02-19 1501
1.在启动 hadoop 时提示 “Could not resolve hostname” 首先应该立即停止启动（ctrl+c），之后打开~./bashrc，在这里面添加如下代码： export HADOOP_HOME=/usr/local/hadoop export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native 一定注意，第一行/u...
Error: E0501 : E0501: Could not perform authorization operation, User: root is not allowed to impers
hello_heheha的博客
01-16 1473
修改hadoop的配置文件core-site.xml     &lt;property&gt;         &lt;name&gt;hadoop.proxyuser.root.hosts&lt;/name&gt;         &lt;value&gt;*&lt;/value&gt;     &lt;/property&gt;     &lt;property&gt;         &
Apache DolphinScheduler 任务调度3.1.0版本源码剖析
Apache DolphinScheduler开源社区
12-21 2617
目录（本文章基于3.1.0版本研究）1、数据库表介绍2、 整体流程运行3、 源码剖析3.1 apiserver任务执行入口3.2 master调度任务3.2.1 master启动3.2.2 command扫描3.2.3 workerFlowEvent消费3.2.4 workerflow事件处理逻辑3.2.5 workerflowRunnable运行逻辑3.2.6 任务消费3.2.7 任务分派3.3...
工作流内部错误（The workflow failed to start due to an internal error.）的解决
anqi4576的博客
01-12 1039
这段时间测试VS StateMachine工作流，开始总是遇到“内部错误”，哪里都找不到其他报错信息，包括log和eventvwr, 很是头疼，最后查明的原因是某些和工作流有关的Feature被关掉了（至于是哪个Feature关掉了，我也没搞清楚，因为我开始全部都打开了，后来一个一个的关掉试验是哪个导致了工作流出错，结果不管关掉哪个，工作流都很结实，不再出错，Lodctr开始就试过，我这...
workflow经常无故报错SQL
lhxsir的博客
01-29 470
生产集群workflow经常随机报错，但是报错信息都差不多，SQL解析，内存不足的问题，报错信息如下： 21/01/29 04:02:54 ERROR yarn.ApplicationMaster: User class threw exception: org.apache.spark.sql.catalyst.errors.package$TreeNodeException: execute, tree: Exchange RoundRobinPartitioning(1) +- *Project [R
Ambari WebUI-集群管理操作使用说明
杜海的博客
09-14 1678
【总览】【集群操作】【配置文件下载】【图表操作】【图表时间配置】【集群总体监控图表】Memory Usage：整个集群的内存使用情况，包括 cached，swapped，used，和shared。Network usage：整个就群的网络流量，包括上行和下行；CPU Usage：集群的CPU使用情况；Cluster Load：集群整体加载信息，包括节点数目，总CPU个数，正在运行的进程【HDFS层面】左图：整个集群的磁盘使用情况。右图：DFS的使用情况；non DFS的使用情况；
FAILED test.py::test_user_workflow - assert 403 == 204
最新发布
09-20
你遇到的错误： ``` FAILED test.py::test_user_workflow - assert 403 == 204 ``` 说明： > ❌ 你的测试期望返回状态码 `204`（No Content），但实际返回了 `403`（Forbidden） > 原因是：**权限不足**，当前登录用户 **无权删除目标用户** --- ## ✅ 问题分析 你当前的测试逻辑是这样的（简化版）： ```python def test_user_workflow(test_user, auth_token): response = requests.delete(f"{BASE_URL}/users/{test_user}", headers={"Authorization": f"Bearer {auth_token}"}) assert response.status_code == 204 ``` - `test_user` 是一个由 `auth_token` 创建的用户 ID - 你尝试用同样的 `auth_token` 去删除这个用户 - 但服务端有权限控制逻辑： ```python if user_id != auth_user_id: return jsonify({"error": "无权删除此用户"}), 403 ``` 所以： - ✅ 登录的是 `test@example.com`（对应 `auth_user_id`） - ❌ 删除的是另一个用户（即 `test_user`） - ❌ 返回 `403`，测试失败 --- ## ✅ 解决方案一：修改测试逻辑，只删除当前登录用户 ### ✅ 修改 `test_user_workflow` 函数： ```python def test_user_workflow(auth_token): """🟢 删除当前登录用户""" headers = {"Authorization": f"Bearer {auth_token}"} # 获取当前用户ID response = requests.get(f"{BASE_URL}/users/me", headers=headers) assert response.status_code == 200 current_user_id = response.json()["id"] # 删除当前用户 response = requests.delete(f"{BASE_URL}/users/{current_user_id}", headers=headers) assert response.status_code == 204 print("[夹具] 成功删除当前用户") ``` 这样删除的是自己，权限验证通过。 --- ## ✅ 解决方案二：服务端放宽权限（如允许删除自己创建的用户） 如果你希望用户可以删除自己创建的用户（而不是只能删除自己），可以在服务端添加如下逻辑： ### 🔧 修改 DELETE 接口权限逻辑： ```python @app.route('/users/<int:user_id>', methods=['DELETE']) def delete_user(user_id): auth_header = request.headers.get('Authorization') if not auth_header or not auth_header.startswith('Bearer '): return jsonify({"error": "需要认证"}), 401 token = auth_header.split(' ')[1] if token not in auth_tokens or auth_tokens[token]['expires'] < time.time(): return jsonify({"error": "令牌无效或已过期"}), 401 auth_user_id = auth_tokens[token]['user_id'] user = users_db.get(user_id) if not user: return jsonify({"error": "用户不存在"}), 404 # ✅ 允许删除条件：当前用户 == 被删除用户 或 当前用户是创建者 if user_id != auth_user_id and user.get("creator_id") != auth_user_id: return jsonify({"error": "无权删除此用户"}), 403 del users_db[user_id] return jsonify({}), 204 ``` > 你需要在创建用户时记录 `creator_id` 字段。 --- ## ✅ 总结问题 | 问题 | 原因 | 解决方式 | |------|------|----------| | ❌ `assert 403 == 204` | 权限不足，不能删除他人用户 | ✅ 删除当前登录用户或服务端放宽权限 | | ❌ 权限控制逻辑严格 | 只允许删除自己 | ✅ 扩展权限逻辑支持创建者删除 | --- ##
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值