python 如何去掉列表中重复的值
用户关注问题
怎样判断列表中有哪些元素是重复的？
我想知道列表里哪些元素出现了多次，该怎么查找这些重复的元素呢？
利用集合和计数方法检测重复元素
可以使用collections模块中的Counter类，它能统计列表中每个元素出现的次数，出现次数大于1的即为重复元素。例如：
from collections import Counter
lst = [1,2,3,2,4,1,5]
counter = Counter(lst)
duplicates = [item for item, count in counter.items() if count > 1]
print(duplicates) # 输出 [1, 2]
如何保持列表元素的原始顺序去除重复值？
我在去重时想保留元素出现的先后顺序，有什么简单的方法吗？
使用字典保持顺序去重
Python 3.7及以后版本字典保持插入顺序，可以将列表转换为字典的键来去重，同时保留顺序。示例如下：
lst = [3,5,2,3,5,7,2]
unique_lst = list(dict.fromkeys(lst))
print(unique_lst) # 输出 [3,5,2,7]
对于大型列表，去除重复值的高效方法有哪些？
当我的列表很大时，有没有性能更好一点的去重策略？
利用集合配合循环去重以提高效率
使用集合(set)的查找效率高的特点，可以在遍历列表时判断元素是否已出现，从而实现高效去重并保留顺序。具体做法如下：
lst = [1,2,3,2,4,1,5]
seen = set()
result = []
for item in lst:
if item not in seen:
seen.add(item)
result.append(item)
print(result) # 输出 [1,2,3,4,5]