Python從List中刪除重復(fù)項的六種方法
方法1:最簡單容易的方法
此方法基于遍歷整個列表,將第一個元素添加到新列表中。
# Python 3 code to demonstrate
# removing duplicated from list
# using naive methods
# initializing list
test_list = [1, 3, 5, 6, 3, 5, 6, 1]
print ("The original list is : " + str(test_list))
# using naive method to remove duplicated from list
res = []
for i in test_list:
if i not in res:
res.append(i)
# printing list after removal
print ("The list after removing duplicates : " + str(res))輸出結(jié)果:
原始列表是:[1, 3, 5, 6, 3, 5, 6, 1]
刪除重復(fù)項后的列表:[1, 3, 5, 6]
方法2:理解列表
這個方法其實是第一種方法的簡化版,它使用了列表推導(dǎo)式,可以用一行代碼代替上面的循環(huán)方法。
# Python 3 code to demonstrate
# removing duplicated from list
# using naive methods
# initializing list
test_list = [1, 3, 5, 6, 3, 5, 6, 1]
print ("The original list is : " + str(test_list))
# using naive method to remove duplicated from list
res = []
for i in test_list:
if i not in res:
res.append(i)
# printing list after removal
print ("The list after removing duplicates : " + str(res))方法3:使用 set()
這是從列表中刪除重復(fù)元素的最流行的方法。但是,這種方法最大的缺點之一是set后列表中元素的順序不再和原來一樣。
# Python 3 code to demonstrate
# removing duplicated from list
# using set()
# initializing list
test_list = [1, 5, 3, 6, 3, 5, 6, 1]
print ("The original list is : " + str(test_list))
# using set()to remove duplicated from list
test_list = list(set(test_list))
# printing list after removal
# distorted ordering
print ("The list after removing duplicates : " + str(test_list))輸出結(jié)果:
原始列表是:[1, 5, 3, 6, 3, 5, 6, 1]
刪除重復(fù)項后的列表:[1, 3, 5, 6]
方法 4:使用列表理解 + enumerate()
此方法使用枚舉根據(jù)列表理解刪除重復(fù)元素。通過檢查該元素是否已存在于列表中來跳過該元素。此方法保持列表中元素的順序。
示例代碼:
# Python 3 code to demonstrate
# removing duplicated from list
# using list comprehension + enumerate()
# initializing list
test_list = [1, 5, 3, 6, 3, 5, 6, 1]
print ("The original list is : " + str(test_list))
# using list comprehension + enumerate()
# to remove duplicated from list
res = [i for n, i in enumerate(test_list) if i not in test_list[:n]]
# printing list after removal
print ("The list after removing duplicates : " + str(res))方法 5:使用 collections.OrderedDict.fromkeys()
這是完成特殊任務(wù)的最快方式。它首先刪除列表中的重復(fù)項并返回一個字典,最后將其轉(zhuǎn)換為列表。此方法也可用于字符串,之后列表中元素的順序也發(fā)生了變化。
# Python 3 code to demonstrate
# removing duplicated from list
# using collections.OrderedDict.fromkeys()
from collections import OrderedDict
# initializing list
test_list = [1, 5, 3, 6, 3, 5, 6, 1]
print ("The original list is : " + str(test_list))
# using collections.OrderedDict.fromkeys()
# to remove duplicated from list
res = list(OrderedDict.fromkeys(test_list))
# printing list after removal
print ("The list after removing duplicates : " + str(res))方法 6:處理嵌套列表中的重復(fù)元素
用于多維列表(列表嵌套)重復(fù)元素移除。這里假設(shè)列表(也是一個列表)中具有相同元素(但不一定是相同順序)的元素被認(rèn)為是重復(fù)的。然后使用下面的 set() + sorted() 方法完成任務(wù)。
# Python3 code to demonstrate
# removing duplicate sublist
# using set() + sorted()
# initializing list
test_list = [[1, 0, -1], [-1, 0, 1], [-1, 0, 1],
[1, 2, 3], [3, 4, 1]]
# printing original list
print("The original list : " + str(test_list))
# using set() + sorted()
# removing duplicate sublist
res = list(set(tuple(sorted(sub)) for sub in test_list))
# print result
print("The list after duplicate removal : " + str(res))輸出結(jié)果:
原始列表:[[1, 0, -1], [-1, 0, 1], [-1, 0, 1], [1, 2, 3], [3, 4, 1]]
去重后的列表:[(-1, 0, 1), (1, 3, 4), (1, 2, 3)]
您也可以使用 set() + map() + sorted()
# Python3 code to demonstrate
# removing duplicate sublist
# using set() + map() + sorted()
# initializing list
test_list = [[1, 0, -1], [-1, 0, 1], [-1, 0, 1],
[1, 2, 3], [3, 4, 1]]
# printing original list
print("The original list : " + str(test_list))
# using set() + map() + sorted()
# removing duplicate sublist
res = list(set(map(lambda i: tuple(sorted(i)), test_list)))
# print result
print("The list after duplicate removal : " + str(res))輸出結(jié)果:
原始列表:[[1, 0, -1], [-1, 0, 1], [-1, 0, 1], [1, 2, 3], [3, 4, 1]]
去重后的列表:[(-1, 0, 1), (1, 3, 4), (1, 2, 3)]
到此這篇關(guān)于Python從List中刪除重復(fù)項的六種方法的文章就介紹到這了,更多相關(guān)Python List刪除重復(fù)項內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Python實現(xiàn)將sqlite數(shù)據(jù)庫導(dǎo)出轉(zhuǎn)成Excel(xls)表的方法
這篇文章主要介紹了Python實現(xiàn)將sqlite數(shù)據(jù)庫導(dǎo)出轉(zhuǎn)成Excel(xls)表的方法,結(jié)合實例形式分析了Python針對sqlite數(shù)據(jù)庫的連接、讀取及使用寫操作包(xlwt)生成Excel表的相關(guān)實現(xiàn)技巧,需要的朋友可以參考下2017-07-07
5分鐘教會你用Docker部署一個Python應(yīng)用
Docker是一個開源項目,為開發(fā)人員和系統(tǒng)管理員提供了一個開放平臺,可以將應(yīng)用程序構(gòu)建、打包為一個輕量級容器,并在任何地方運行,下面這篇文章主要給大家介紹了關(guān)于如何通過5分鐘教會你用Docker部署一個Python應(yīng)用,需要的朋友可以參考下2022-06-06
使用 prometheus python 庫編寫自定義指標(biāo)的方法(完整代碼)
這篇文章主要介紹了使用 prometheus python 庫編寫自定義指標(biāo)的方法,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-06-06
Python數(shù)據(jù)分析之分析千萬級淘寶數(shù)據(jù)
網(wǎng)購已經(jīng)成為人們生活不可或缺的一部分,本次項目基于淘寶app平臺數(shù)據(jù),通過相關(guān)指標(biāo)對用戶行為進(jìn)行分析,從而探索用戶相關(guān)行為模式。感興趣的可以學(xué)習(xí)一下2022-03-03
web.py 十分鐘創(chuàng)建簡易博客實現(xiàn)代碼
web.py是一款輕量級的Python web開發(fā)框架,簡單、高效、學(xué)習(xí)成本低,特別適合作為python web開發(fā)的入門框架2016-04-04

