使用 row_number()over(partition by 对数据去重

最新推荐文章于 2025-06-28 22:00:07 发布

MyySophia

最新推荐文章于 2025-06-28 22:00:07 发布

阅读量3.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： GP(GreenPlum 大规模并行数据库)

本文链接：https://blog.youkuaiyun.com/MyySophia/article/details/95591614

GP(GreenPlum 大规模并行数据库) 专栏收录该内容

167 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何使用SQL的row_number()over(partition by)函数进行数据去重，结合具体例子说明在实际业务中如何处理去重问题，例如在HMS系统中插入数据时确保数据唯一。示例SQL展示了如何按照特定字段取最新记录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

row_number()over(partition by .. order by ..

数据准备：

import psycopg2
from random import random
conn = psycopg2.connect(database="qmstst", user="sys", password="**", host="10.50.**.1**", port="5432")
cur = conn.cursor()

def insertData():
    names = ['路人甲', '王尼玛', '唐马儒']
    zbfms = ['年龄', '身高', '体重']

    for i in range(100):
        sqlstr = 'insert into testRowToColumn(name, zbfm, value) values'
        for j in range(100):
            for name in names:
                for zbfm in zbfms:
                    sqlstr += "

了解本专栏