Python列表去重的3种最常用方法

qq360737395 · 2026-04-22 00:18:38 发布

在真实项目开发中，我们经常遇到 重复数据：

如果不及时去重，不仅浪费内存，还会导致统计结果失真。今天小编就带你用 最接地气 的方式，学会 Python 列表去重。

利用 字典 key 唯一 的特性，把列表元素当 key，重复值自动被过滤。

城市列表 = ["北京", "上海", "北京", "广州", "上海"]

去重后 = list(dict.fromkeys(城市列表))

print("去重结果：", 去重后) # 输出：['北京', '上海', '广州']

在Python3在线环境里直接复制粘贴即可运行，无需安装任何软件！

城市列表 = ["北京", "上海", "北京", "广州", "上海"]

去重后 = list(set(城市列表))

print("去重结果：", 去重后) # 顺序可能变化，如['上海', '北京', '广州']

set() 会打乱原顺序，如果你不关心顺序，用它最省事。

把方法 1 封装成函数，以后任何列表都能一键去重。

def 列表去重(任意列表):

"""编程狮推荐：通用去重函数"""

return list(dict.fromkeys(任意列表))

# 测试

水果 = ["苹果", "香蕉", "苹果", "橙子"]

print(列表去重(水果)) # ['苹果', '香蕉', '橙子']

假设你从数据库查到如下数据：

1	`积分榜` `=` `["小明",` `"小红",` `"小刚",` `"小明",` `"小红"]`

跟着编程狮敲 3 行代码：

积分榜 = ["小明", "小红", "小刚", "小明", "小红"]

唯一榜单 = list(dict.fromkeys(积分榜))

print("排行榜去重后：", 唯一榜单)

# 输出：['小明', '小红', '小刚']

把结果直接回写到数据库，再也不怕重复统计啦！

问题	编程狮解答
会不会改变原列表？	不会，三种方法都返回新列表，原列表安全。
字典法为什么能保留顺序？	Python 3.7 起字典有序，`dict.fromkeys()` 会按第一次出现的顺序记录。
性能哪个最好？	数据量 <10 万时三者差异不大；超大数据推荐 `pandas.drop_duplicates()`，我们下期再讲。