DataX按record限速

最新推荐文章于 2024-01-07 20:00:00 发布

原创

最新推荐文章于 2024-01-07 20:00:00 发布 · 798 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#datax限速

本文详细介绍了使用DataX工具进行大规模数据库迁移的过程，包括从MySQL读取数据并更新到另一个MySQL数据库的具体配置，涉及列名映射、连接参数设置及速度控制等关键步骤。

{
  "core": {
    "transport": {
      "channel": {
        "speed": {
          "record": "3000"
        }
      }
    }
  },
  "job": {
    "setting": {
      "speed": {
        "record": "3000"
      },
      "errorLimit": {
        "record": 0,
        "percentage": 0
      }
    },
    "content": [
      {
        "reader": {
          "name": "mysqlreader",
          "parameter": {
            "column": [
              "F_trans_id",
              "F_enabled",
              "F_trans_type",
              "F_payment_mode",
              "F_state",
              "F_create_time",
              "F_create_time_ext",
              "F_end_time",
              "F_end_time_ext",
              "F_modify_time",
              "F_seller_user_id",
              "F_seller_login_name",
              "F_seller_true_name",
              "F_buyer_user_id",
              "F_buyer_login_name",
              "F_buyer_true_name",
              "F_trans_id_ext",