python中列表如何去掉重复的元素

列表去重是Python中常见的数据处理任务，主要方法有：使用集合(set)、列表推导式、字典(dict)。其中使用集合(set)去重最为简单和高效。使用集合去重的主要原因是集合本身不允许重复元素存在，因此可以直接利用这一特性来去重。

下面详细介绍这几种方法：

一、使用集合（set）

使用集合（set）去重是最常见且高效的方法。因为集合本身不允许有重复元素，因此我们可以通过将列表转换为集合，再转换回列表的方式来实现去重。代码示例如下：

# 原始列表
list_with_duplicates = [1, 2, 2, 3, 4, 4, 5]
使用集合去重
list_without_duplicates = list(set(list_with_duplicates))
print(list_without_duplicates)

解析：

set(list_with_duplicates)：将列表转换为集合，自动去重。
list(...)：将集合转换回列表。

优点：

简单、直观。
执行速度快。

缺点：

无法保证元素的原始顺序。

二、使用列表推导式

如果希望保留列表中元素的原始顺序，可以使用列表推导式结合集合来实现去重。代码示例如下：

# 原始列表
list_with_duplicates = [1, 2, 2, 3, 4, 4, 5]
使用列表推导式去重并保留顺序
list_without_duplicates = []
seen = set()
for item in list_with_duplicates:
    if item not in seen:
        list_without_duplicates.append(item)
        seen.add(item)
print(list_without_duplicates)

解析：

初始化一个空列表list_without_duplicates和一个空集合seen。
遍历原始列表，对于每一个元素，检查是否已经在集合seen中。
如果不在集合中，则添加到结果列表，并将该元素添加到集合中。

优点：

保留元素的原始顺序。

缺点：

代码稍显复杂。
执行速度相对较慢。

三、使用字典（dict）

在Python 3.7及以后的版本中，字典的插入顺序是有序的，因此可以利用这一特性来去重并保留原始顺序。代码示例如下：

# 原始列表
list_with_duplicates = [1, 2, 2, 3, 4, 4, 5]
使用字典去重并保留顺序
list_without_duplicates = list(dict.fromkeys(list_with_duplicates))
print(list_without_duplicates)

解析：

dict.fromkeys(list_with_duplicates)：创建一个字典，其键是原始列表中的元素。
将字典转换回列表。

优点：

保留元素的原始顺序。
代码简洁。

缺点：

可能不如集合操作快，但在保留顺序的前提下效率较高。

四、使用循环和条件判断

除了上述方法，还可以通过循环和条件判断手动实现去重。虽然这种方法不如前面几种简洁，但也能达到去重的目的。代码示例如下：

# 原始列表
list_with_duplicates = [1, 2, 2, 3, 4, 4, 5]
使用循环和条件判断去重并保留顺序
list_without_duplicates = []
for item in list_with_duplicates:
    if item not in list_without_duplicates:
        list_without_duplicates.append(item)
print(list_without_duplicates)

解析：