DataX-MySQL-to-Hive之Hadoop HA

最新推荐文章于 2024-10-29 11:01:55 发布

原创

最新推荐文章于 2024-10-29 11:01:55 发布 · 318 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #hive #mysql

这是一个关于数据迁移的脚本案例，详细描述了如何使用脚本将MySQL数据库中的数据通过HDFS Writer写入Hadoop的HDFS文件系统。脚本涉及到的数据表为`sys_user`，并配置了包括数据源、目标路径、字段类型等参数。

1、脚本

{
   
   
    "setting": {
   
   },
    "job": {
   
   
        "setting": {
   
   
            "speed": {
   
   
                "channel": 2
            }
        },
        "content": [
            {
   
   
				"reader": {
   
   
                    "name": "mysqlreader",
                    "parameter": {
   
   
                        "username": "root",
                        "password": "123456",
                        "connection": [
                            {
   
   
                                "querySql": [
                                    "select * from sys_user;"
                                ],
                                "jdbcUrl":