Sqoop
关注
分享
扫一扫
开发老张
这个作者很懒，什么都没留下…
展开
-
Sqoop从MySQL导出时间的时区问题
当使用 Sqoop 向 MySQL 导入数据时（MySQL 的 datetime 导入到 Hive 的 string），会出现时间导入后在 Hive 表中的时间晚于 MySQL 中显示的时间 8 小时，造成数据分析错误；原创 2022-11-01 10:42:59 · 893 阅读 · 0 评论 -
sqoop 从HDFS导出数据到MySQL8
当数仓运算完成后，需要导出结果到 MySQL 中时，报数据解析错误；经过一通检查发现 sqoop 语句写的并没有什么错误，分隔符也没问题，也都正常分割了，但就是往 MySQL 导入时报格式匹配错误；原创 2022-10-27 13:12:33 · 1340 阅读 · 0 评论 -
Sqoop 导入数据时的部分任务错误
查了半天，也测试了提示说的那两个配置，并不是这个问题，最后发现创建 Hadoop 集群时有台机器的 hostname 设置的不对，改过来就好了，唉，搭建集群时的一个疏忽，导致后面查了半天这个问题，在这里记录下，也给有同样问题的朋友一个提示。原创 2022-09-27 10:12:12 · 1106 阅读 · 0 评论 -
Sqoop 安装部署
今天重新部署一台 sqoop，就手再记录一下官网：sqoop.apache.org说明：sqoop 有两个大版本，1 和 2，且两个是完全不同的，但 2 现在一直是 1.99.x 版本，并未到 2.x 版本，因此我们选用 1.4.6 版本（当前最新是 1.4.7，使用最新的前一个版本）；原创 2022-09-07 17:35:49 · 819 阅读 · 0 评论