Python列表去重

最新推荐文章于 2025-06-13 07:57:55 发布

weixin_33937778

最新推荐文章于 2025-06-13 07:57:55 发布

阅读量314

点赞数

文章标签： python

本文总结了五种Python中去除列表重复元素的方法，包括使用集合、字典、排序查重、groupby及遍历等技术手段，并提供了示例代码。

无聊统计了下列表去重到底有多少种方法。

1.集合

list(set(alist))

如果要保持顺序：

import random
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    b=list(set(a))
    b.sort(key=a.index)

2.字典

大都是利用哈希表特性

{}.fromkeys(alist).keys()

或者手动写：

import random
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    d={}
    for i in a:
        d[i]=1
    print d.keys()

3.排序后查重

import random
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    a.sort()
    print [x for i,x in enumerate(a) if not i or x!=a[i-1]]

4.itertools.groupby

import random
import itertools
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    a.sort()
    print [x[0] for x in itertools.groupby(a)]

5.遍历

import random
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    b=[] 
    for i in a:
        if i not in b:
            b.append(i)

或者用reduce：

import random
import functools
if __name__=='__main__':
    a=[random.randint(0,10) for i in xrange(10)]
    functools.reduce(lambda x,y:x if y in x else x+[y],[[],]+a)

还有其它方法没？