
etl
文章平均质量分 90
山雨欲来风满楼之LZG
大难至易,大繁至简!!!
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Kettle连接oracle 19c数据库问题解决办法
对于jdbc 连接数据库时,url兼容两种模式如下:1、"jdbc:oracle:thin:@127.0.0.1:1512:pdb"2、"jdbc:oracle:thin:@127.0.0.1:1512/pdb"第1中模式端口后使用的是“:” 那么pdb代表的是数据库的实例名 一般情况数据库都是多实例的第2中模式端口后使用的是“/” 那么pdb代表的是数据库的服务名如果使用第1中模式,将pdb错误的填为服务名就会报错,显示错误,kettle就是因为这个原因报错。查...原创 2020-06-27 17:41:09 · 3604 阅读 · 0 评论 -
sqoop-import 并行抽数及数据倾斜解决
最近在数据中台的数据抽数优化工作,由于单表数据量太大(每天千万级别)导致sqoop抽数使用单实例报内存溢出以及抽数时间过长,决定采用sqoop的多实例并行抽数,参考了一些文档,但同时遇到了一些问题,趁有点时间把遇到问题的解决方法写下来供大家借鉴。并行化sqoop-常用命令及参数:https://www.yuque.com/shanyu-aqvcy/hkqgb7/vngsoxsqoop...原创 2020-01-14 11:15:44 · 6793 阅读 · 11 评论