mysql和pgsql夸库查询插入

最新推荐文章于 2024-08-12 18:52:18 发布

jamst8522127

最新推荐文章于 2024-08-12 18:52:18 发布

阅读量329

点赞数

分类专栏： RUBY mysql 文章标签：数据库

RUBY 同时被 2 个专栏收录

171 篇文章

订阅专栏

mysql

9 篇文章

订阅专栏

本文深入探讨了在MySQL环境中处理与PGSQL表的跨库操作，通过ETL方法实现了数据迁移。展示了利用SQL查询与代码逻辑结合，有效地将数据从多个源整合至目标数据库，特别关注于数据聚合、分组与排序的优化策略。重点介绍了自定义SQL语法的应用，包括使用数组、聚合函数与动态参数化查询，以及如何在实际业务场景中提高数据处理效率。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

当mysql中用到pgsql表的垮库操作时，首先可以使用ETL是可以解决的，今天学习了一种代码处理方式解决方案。


insert_sql = <<-sql
          insert into #{audience_attributes_table}
          select opxpid, "c", array_to_string(jx_array_sort(madlib.array_agg(pretargeting_id)), ',')
          from (
            select mt.opxpid as opxpid, ap.pretargeting_id as pretargeting_id
            from #{master_table} mt
            inner join
            #{map_audiences_pretargetings}
            on mt.hash_value = ap.audience_id
            where mt.hash_key = 'aids'
            and mt.hash_value in (#{aids.uniq.join(",")})
            group by 1,2
          ) m
          group by 1, 2;
        sql

#拼装查询结果。


def map_audiences_pretargetings
        pids = Pretargeting.find(:all, :select => :id, :conditions => ["start_date <= ? AND end_date >= ? AND approval_status = ?", Date.today + 3.days, Date.today - 3.days, true])
        adjustments = AudiencesPretargeting.find_all_by_pretargeting_id(pids.collect(&:id)).collect{|ad_pg| [ad_pg.pretargeting_id,ad_pg.audience_id]}

        adjustments_flattened = adjustments.map{ |adj| ",(#{adj[0]}, #{adj[1]})" }
        "(
             VALUES
             (0, 0)
             #{adjustments_flattened.join}
         ) AS ap (pretargeting_id, audience_id)"
end