Python用set去重列表技巧

在文章实战开发的过程中，我们经常会遇到一些这样那样的问题，然后要卡好半天，等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《Python用set去重列表的方法》，聊聊，希望可以帮助到正在努力赚钱的你。

使用set去重会打乱顺序，list(set(lst))适用于无需保序场景；需保序时推荐dict.fromkeys()，可高效保留原始顺序。

在Python中，用集合（set）给列表去重是一个常见且高效的方法。因为集合中的元素是**唯一且无序**的，所以可以利用它自动去除重复项。

基本方法：使用 set() 转换

将列表传入 set() 构造函数，会自动生成一个不含重复元素的集合，然后再转回列表。

original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = list(set(original_list))
print(unique_list) # 输出可能是 [1, 2, 3, 4, 5]（顺序不保证）

注意：由于集合是无序的，原列表的元素顺序可能被打乱。

保持顺序的去重方法

如果希望去重后保留原始顺序，不能直接用 list(set(...))。可以结合集合记录已出现的元素，遍历原列表实现。

original_list = [1, 2, 2, 3, 4, 4, 5]
seen = set()
unique_list = []
for item in original_list:
    if item not in seen:
        seen.add(item)
        unique_list.append(item)
print(unique_list) # 输出 [1, 2, 3, 4, 5]

这种方法通过 seen 集合快速判断是否已存在，时间复杂度接近 O(n)，效率高且保持顺序。

使用 dict.fromkeys() 的简洁写法（推荐）

Python 3.7+ 中字典保持插入顺序，可以用 dict.fromkeys() 实现一行去重并保留顺序。

original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = list(dict.fromkeys(original_list))
print(unique_list) # 输出 [1, 2, 3, 4, 5]

这比手动循环更简洁，是目前最常用的保持顺序去重方式。

基本上就这些。如果不需要保持顺序，直接用 list(set(lst)) 最快；需要顺序时，推荐用 dict.fromkeys()。

以上就是《Python用set去重列表技巧》的详细内容，更多关于的资料请关注golang学习网公众号！