6種在 Python 中從 List 中刪除重復(fù)項(xiàng)的方法
來源 | https://medium.com/@cookbug/six-ways-to-remove-duplicates-from-list-in-python-970d998b1384
翻譯 | 楊小愛
Python從列表中刪除重復(fù)項(xiàng)的方法，在本文中列出了6種方法，這些方法在許多應(yīng)用程序中都會(huì)遇到。作為程序員，我們最好了解它們，以便在需要時(shí)編寫有效的程序。
方法1：最簡單容易的方法
此方法基于遍歷整個(gè)列表，將第一個(gè)元素添加到新列表中。
# Python 3 code to demonstrate# removing duplicated from list# using naive methods# initializing listtest_list = [1, 3, 5, 6, 3, 5, 6, 1]print ("The original list is : " + str(test_list))# using naive method to remove duplicated from listres = []for i in test_list:if i not in res:res.append(i)# printing list after removalprint ("The list after removing duplicates : " + str(res))
輸出結(jié)果：
原始列表是：[1, 3, 5, 6, 3, 5, 6, 1]
刪除重復(fù)項(xiàng)后的列表：[1, 3, 5, 6]
方法2：理解列表
這個(gè)方法其實(shí)是第一種方法的簡化版，它使用了列表推導(dǎo)式，可以用一行代碼代替上面的循環(huán)方法。
# Python 3 code to demonstrate# removing duplicated from list# using naive methods# initializing listtest_list = [1, 3, 5, 6, 3, 5, 6, 1]print ("The original list is : " + str(test_list))# using naive method to remove duplicated from listres = []for i in test_list:if i not in res:res.append(i)# printing list after removalprint ("The list after removing duplicates : " + str(res))
方法3：使用 set()
這是從列表中刪除重復(fù)元素的最流行的方法。但是，這種方法最大的缺點(diǎn)之一是set后列表中元素的順序不再和原來一樣。
# Python 3 code to demonstrate# removing duplicated from list# using set()# initializing listtest_list = [1, 5, 3, 6, 3, 5, 6, 1]print ("The original list is : " + str(test_list))# using set()to remove duplicated from listtest_list = list(set(test_list))# printing list after removal# distorted orderingprint ("The list after removing duplicates : " + str(test_list))
輸出結(jié)果：
原始列表是：[1, 5, 3, 6, 3, 5, 6, 1]
刪除重復(fù)項(xiàng)后的列表：[1, 3, 5, 6]
方法 4：使用列表理解 + enumerate()
此方法使用枚舉根據(jù)列表理解刪除重復(fù)元素。通過檢查該元素是否已存在于列表中來跳過該元素。此方法保持列表中元素的順序。
示例代碼：
# Python 3 code to demonstrate# removing duplicated from list# using list comprehension + enumerate()# initializing listtest_list = [1, 5, 3, 6, 3, 5, 6, 1]print ("The original list is : " + str(test_list))# using list comprehension + enumerate()# to remove duplicated from listres = [i for n, i in enumerate(test_list) if i not in test_list[:n]]# printing list after removalprint ("The list after removing duplicates : " + str(res))
方法 5：使用 collections.OrderedDict.fromkeys()
這是完成特殊任務(wù)的最快方式。它首先刪除列表中的重復(fù)項(xiàng)并返回一個(gè)字典，最后將其轉(zhuǎn)換為列表。此方法也可用于字符串，之后列表中元素的順序也發(fā)生了變化。
# Python 3 code to demonstrate# removing duplicated from list# using collections.OrderedDict.fromkeys()from collections import OrderedDict# initializing listtest_list = [1, 5, 3, 6, 3, 5, 6, 1]print ("The original list is : " + str(test_list))# using collections.OrderedDict.fromkeys()# to remove duplicated from listres = list(OrderedDict.fromkeys(test_list))# printing list after removalprint ("The list after removing duplicates : " + str(res))
方法 6：處理嵌套列表中的重復(fù)元素
用于多維列表（列表嵌套）重復(fù)元素移除。這里假設(shè)列表（也是一個(gè)列表）中具有相同元素（但不一定是相同順序）的元素被認(rèn)為是重復(fù)的。然后使用下面的 set() + sorted() 方法完成任務(wù)。
# Python3 code to demonstrate# removing duplicate sublist# using set() + sorted()# initializing listtest_list = [[1, 0, -1], [-1, 0, 1], [-1, 0, 1],[1, 2, 3], [3, 4, 1]]# printing original listprint("The original list : " + str(test_list))# using set() + sorted()# removing duplicate sublistres = list(set(tuple(sorted(sub)) for sub in test_list))# print resultprint("The list after duplicate removal : " + str(res))
輸出結(jié)果：
原始列表：[[1, 0, -1], [-1, 0, 1], [-1, 0, 1], [1, 2, 3], [3, 4, 1]]
去重后的列表：[(-1, 0, 1), (1, 3, 4), (1, 2, 3)]
您也可以使用 set() + map() + sorted()
# Python3 code to demonstrate# removing duplicate sublist# using set() + map() + sorted()# initializing listtest_list = [[1, 0, -1], [-1, 0, 1], [-1, 0, 1],[1, 2, 3], [3, 4, 1]]# printing original listprint("The original list : " + str(test_list))# using set() + map() + sorted()# removing duplicate sublistres = list(set(map(lambda i: tuple(sorted(i)), test_list)))# print resultprint("The list after duplicate removal : " + str(res))
輸出結(jié)果：
原始列表：[[1, 0, -1], [-1, 0, 1], [-1, 0, 1], [1, 2, 3], [3, 4, 1]]
去重后的列表：[(-1, 0, 1), (1, 3, 4), (1, 2, 3)]
本文完~
學(xué)習(xí)更多技能
請(qǐng)點(diǎn)擊下方公眾號(hào)
