azkaban 3.2 Missing required property 'azkaban.native.lib'

最新推荐文章于 2024-06-23 21:59:03 发布
最新推荐文章于 2024-06-23 21:59:03 发布
阅读量3.9k 收藏 1
点赞数 1
CC 4.0 BY-SA版权
分类专栏： java 文章标签： java azkaban
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/m0_38021517/article/details/78092908
本文解决了Azkaban部署过程中遇到的问题，通过修改ProcessJob.java文件中的execute as user属性为false来规避错误。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

这个问题很奇怪，第一次部署的时候没有出现，换了个环境部署就出现了，如果是老版本的话呢

plugins/jobtypes/commonprivate.properties下把 azkaban.native.lib=false就行了

但是我再3.2的那个配置文件下并没有找到这个可以改的地方

最后的解决方法是：common/java/azkaban/jobExeccutor/utils/ProcessJob.java里  

boolean isExecuteAsUser = sysProps.getBoolean(EXECUTE_AS_USER, true);
 



改成


boolean isExecuteAsUser = sysProps.getBoolean(EXECUTE_AS_USER, false);











                

        

    

    
  



    



                



	

		

			

				
					
azkaban部署报错：Missing required property “azkaban.native.lib”

				
			

			

				

					leys123的专栏
				

				

					01-08
					
					1972
					
				

			

		

		

			
				
azkaban部署报错：Missing required property “azkaban.native.lib”



解决：

1、修改exec及web的azkaban.properties文件：vi /mnt/disk1/azkaban/azkaban-3.91/azkaban-exec-server/conf/azkaban.properties

vi /mnt/disk1/azkaban/azkaban-3.91/azkaban-web-server/conf/azkaban.proper..

			
		

	



                

            
              



	

		

			

				
					
Azkaban踩坑：Missing required property 'azkaban.native.lib' 、Cannot request memory (Xms 0 kb, Xmx 0kb)

				
			

			

				

					qq_31454379的博客
				

				

					05-09
					
					838
					
				

			

		

		

			
				
Azkaban部署踩坑
Cannot request memory (Xms 0 kb, Xmx 0 kb) from system for job jobA, sleep for 60 secs and retry

向系统申请资源失败，一直重试，这个错误是一般是由于系统内存资源不够决定的，有两个解决方案，其一保证内存6G以上；其二，修改一下配置：

/azkaban-web-server-3.84.4/conf/azkaban.properties

#原配置 StaticRemainingFlowSi

			
		

	



              


  
              

                


	

		

			

				
					
azkaban---Missing required property 'azkaban.native.lib'

				
			

			

				

					qq_36770189的博客
				

				

					08-06
					
					1452
					
				

			

		

		

			
				
解决办法：

进入到/azkaban-web-server/plugins/jobtypes


vim commonprivate.properties


加上azkaban.native.lib=false





然后拷贝commonprivate.properties到azkaban-exec-server/plugins/jobtypes

重启即可（注意一定要azkaban-we...

			
		

	





	

		

			

				
					
Azkaban报错：Missing required property ‘azkaban.native.lib’

				
			

			

				

					maplecsd的博客
				

				

					10-05
					
					1096
					
				

			

		

		

			
				
Missing required property ‘azkaban.native.lib’
使用Azkaban提交了一个工作流，结果就报错：Missing required property ‘azkaban.native.lib’
原因
我出现这个原因是因为我没有先切换到Azkaban的exec目录或web-server目录下，直接使用类似"/opt/module/azkaban/azkaban-exec-server-3.84.4/bin/start-exec.sh"这样的命令来启动Azkaban，这

			
		

	



		

			
		



	

		

			

				
					
azkaban3.2版 azkaban.native.lib异常解决方法

				
			

			

				

					06-29
				

			

		

		

			
				
azkaban3.2版 azkaban.native.lib异常解决方法
azkaban3.2版 azkaban.native.lib异常解决方法

			
		

	





	

		

			

				
					
【Azkaban】 Missing required property ‘azkaban.native.lib‘ cause: null

				
			

			

				

					Sunny的专栏
				

				

					04-21
					
					2268
					
				

			

		

		

			
				
1.使用环境

版本：Azkaban3.X

部署模式：集群

2.问题描述

Azkaban一直执行都没有问题，最近执行job的时候全部都包以下错误


azkaban.utils.UndefinedPropertyException: Missing required property 'azkaban.native.lib'
	at azkaban.utils.Props.getString(Props.java:454)
	at azkaban.jobExecutor.ProcessJob.run(

			
		

	





	

		

			

				
					
azkaban.utils.UndefinedPropertyException: Missing required property ‘azkaban

				
			

			

				

					weixin_45417821的博客
				

				

					01-24
					
					1785
					
				

			

		

		

			
				
24-01-2022 17:12:17 CST hdfs_to_ods_log INFO - Starting job hdfs_to_ods_log at 1643015537791
24-01-2022 17:12:17 CST hdfs_to_ods_log INFO - job JVM args: '-Dazkaban.flowid=gmall' '-Dazkaban.execid=3' '-Dazkaban.jobid=hdfs_to_ods_log'
24-01-2022 17:12:17 C.

			
		

	





	

		

			

				
					
azkaban.native.lib 问题全面解决方案

				
			

			

				

					qq_39067793的博客
				

				

					09-28
					
					1136
					
				

			

		

		

			
				
azkaban ExecutorManagerException: Running flow XXXX not found
页面上报 Missing required property ‘azkaban.native.lib’
或者Missing required property ‘azkaban.native.lib’ cause: null
中间遇见错误的集中解决方案:

报错内容 Stats for this flow execution are not available.
这种一般是没有acti

			
		

	





	

		

			

				
					
Azkaban3.2调度系统部署

				
			

			

				

					10-24
				

			

		

		

			
				
azkaban3.2调度系统已编译，可直接加压部署，附部署文档

			
		

	





	

		

			

				
					
【uniapp】[Vue warn]: Missing required prop: “type“

				
			

			

				

					weixin_38792911的博客
				

				

					11-26
					
					3520
					
				

			

		

		

			
				
报错问题：

解决：
是因为页面中icon使用的不对，正确用法

type要写，参数可以为success,具体写法参照官方文档：https://uniapp.dcloud.io/component/icon?id=icon



			
		

	





	

		

			

				
					
elasticsearch出现co.elastic.clients.util.MissingRequiredPropertyException: Missing required property报错

					
最新发布

				
			

			

				

					qq_50790981的博客
				

				

					06-23
					
					1956
					
				

			

		

		

			
				
在elasticsearch 8.7.0通过查询删除DeleteByQuery并设置为异执行后就会出现这一报错co.elastic.clients.util.MissingRequiredPropertyException: Missing required property 'DeleteByQueryResponse.throttledMillis'。Elasticsearch API 规范中可能存在错误，其中错误地需要响应对象的属性，从而导致在反序列化响应时出现错误MissingRequiredPr

			
		

	





	

		

			

				
					
azkaban.utils.UndefinedPropertyException: Missing required property ‘azkaban.native.lib‘

				
			

			

				

					99滴神
				

				

					06-20
					
					1163
					
				

			

		

		

			
				
使用azkaban调度时出现以下错误：
 
14-06-2019 19:11:58 PDT initKerberos INFO - Starting job initKerberos at 1560564718825
14-06-2019 19:11:58 PDT initKerberos INFO - azkaban.webserver.url property was not set
14-06-2019 19:11:58 PDT initKerberos INFO - job JVM args: -D

			
		

	





	

		

			

				
					
azkaban.utils.UndefinedPropertyException: Missing required property 'azkaban.native.lib'

				
			

			

				

					poem_2010的博客
				

				

					06-15
					
					3364
					
				

			

		

		

			
				
调用azkaban 的时候, 出现错误



14-06-2019 19:11:58 PDT initKerberos INFO - Starting job initKerberos at 1560564718825
14-06-2019 19:11:58 PDT initKerberos INFO - azkaban.webserver.url property was not set
14-...

			
		

	





	

		

			

				
					
ES BulkRequest 写入索引数据失败排查和解决

				
			

			

				

					小杨互联网
				

				

					08-18
					
					6246
					
				

			

		

		

			
				
1，查看我们的索引mapping有没有问题，是不是索引的数据格式导致我们数据写入不进去，基本上百分之九十就是这个问题，但是我们的并不是。我们的日期格式在es是yyyymmdd hhmmss格式但是这里是个时间蹉格式，肯定就不对了，但是你会说我jsonfamart也不行吗？这样也不行，我序列化的时候tostring不行吗，答案是不行的，只有在序列化的时候转换一下。问题场景：1，使用BulkRequest写入索引数据不生效，接口正常返回，索引没有数据。这个错就很明显了我们的时间格式不对对不对，咋解决呢？...

			
		

	





	

		

			

				
					
jpa找不到字段问题记录：

				
			

			

				

					方一水的博客
				

				

					01-01
					
					1168
					
				

			

		

		

			
				
jpq找不到字段问题记录： 
原因：数据库字段没有设置自增长，

			
		

	





	

		

			

				
					
Azkaban基础总结

				
			

			

				

					qq_43797434的博客
				

				

					08-31
					
					922
					
				

			

		

		

			
				
第一章 Azkaban概述
1.1 为什么需要工作流调度系统
1）一个完整的数据分析系统通常都是由大量任务单元组成：
Shell脚本程序，Java程序，MapReduce程序、Hive脚本等
2）各任务单元之间存在时间先后及前后依赖关系
3）为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行；

1.2 常见工作流调度系统
1）简单的任务调度：直接使用Linux的Crontab来定义；
2）复杂的任务调度：开发调度平台或使用现成的开源调度系统，比如Azkaban、Ooize、Airflow

			
		

	





	

		

			

				
					
Missing required property “azkaban.native.lib”

				
			

			

				

					都是浮云
				

				

					06-17
					
					2234
					
				

			

		

		

			
				
Missing required property ‘azkaban.native.lib’
17-06-2020 16:06:43 PDT jobB INFO - Starting job jobB at 1592435203853
17-06-2020 16:06:43 PDT jobB INFO - azkaban.webserver.url property was not set
17-06-2020 16:06:43 PDT jobB INFO - job JVM args: '-Dazkaba

			
		

	





	

		

			

				
					
轻松部署Azkaban3.2调度系统与完整文档

				
			

			

				

					
				

			

		

		

			
				
安装通常包括解压缩安装包到指定目录，并设置好运行所需的配置文件，如azkaban.properties。 - 执行服务器的部署：负责实际执行任务，处理具体的作业调度逻辑。安装需要将azkaban-exec-server-3.20.0.tar.gz解压缩，...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		
评论 5

	

  
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值