
大数据工具
文章平均质量分 77
凭嗓门抢地主
这个作者很懒,什么都没留下…
展开
-
apache-sqoop使用问题及总结
目录1.找不到hive2.sqoophook、hivedatatypes使用版本为ambari-2.7.3,自带的sqoop-1.4.71.找不到hive21/09/08 11:16:16 ERROR tool.ImportTool: Import failed: java.io.IOException: Cannot run program "hive": error=2, No such file or directory在安装sqoop的机器上,安装hive客户端并配置环.原创 2021-09-08 17:30:22 · 588 阅读 · 0 评论 -
apache-dolphinscheduler的使用问题总结
一、租户问题二、指定虚拟python环境的python类型任务的执行时环境变量问题三、资源中心创建目录或者文件失败四、由zookeeper同步引起的shutdown问题原创 2021-08-27 21:06:20 · 3345 阅读 · 0 评论 -
Airflow2.0.0问题及解决(不定期持续更新)
1.psycopg2.OperationalError:FATAL:remaining connection slots are reserved for non-replication原创 2021-06-04 21:02:58 · 952 阅读 · 2 评论 -
比较保险、方便、彻底的卸载ambari方式
比较保险、方便的卸载ambari目录一、在ambari页面停止所有服务,如果不嫌烦的话,可以直接在页面右边的action按钮里将服务依次删除二、重点:yum卸载三、清理残留文件夹和文件四、如果需要,删除相关用户如hdfs等。此处略一、在ambari页面停止所有服务,如果不嫌烦的话,可以直接在页面右边的action按钮里将服务依次删除二、重点:yum卸载因为amabri中的大数据组件使用的是hdp统一进行安装的,并且需要配置yum源通过yum安装。因此我们使用命令:yum原创 2021-04-24 15:31:07 · 2200 阅读 · 0 评论