Python實(shí)現(xiàn)字典去除重復(fù)的方法示例
更新時(shí)間：2017年07月31日 12:15:56 作者：無法自拔
這篇文章主要介紹了Python實(shí)現(xiàn)字典去除重復(fù)的方法,涉及Python字典遍歷、文件讀取、去除重復(fù)等相關(guān)操作技巧,需要的朋友可以參考下
本文實(shí)例講述了Python實(shí)現(xiàn)字典去除重復(fù)的方法。分享給大家供大家參考，具體如下：
#!/usr/bin/env python
# encoding: utf-8
#字典去重小代碼
import sys
import os
import platform
try:
pass
except:
print '''you have something wrong this is a simple jiaoben '''
sys.exit()
why = 'why.txt'
for i in xrange(len(sys.argv)):
if(i>=1):
other = sys.argv[i]
if os.path.exists(other):
pass
else:
print other + ' file not find'
sys.exit()
if 'Windows' in platform.system():
os.system("type "+other+" >> "+why)
else:
os.system("cat "+other+" >> "+why)
yuan = open('why.txt','r')
dirc = open('whynot.txt','w')
for line in set(yuan.readlines()):
if line == '' or line == '\r\n':
pass
else:
dirc.writelines(line)
很簡單的思路 把文件放入到why.txt中 然后再去重得到whynot.txt
Usage: quchong.py 1.txt 2.txt 3.txt 等等
PS：本站還有兩款比較簡單實(shí)用的在線文本去重復(fù)工具，推薦給大家使用：
在線去除重復(fù)項(xiàng)工具：
http://tools.jb51.net/code/quchong
在線文本去重復(fù)工具：
http://tools.jb51.net/aideddesign/txt_quchong
更多關(guān)于Python相關(guān)內(nèi)容可查看本站專題：《Python字典操作技巧匯總》、《Python字符串操作技巧匯總》、《Python常用遍歷技巧總結(jié)》、《Python數(shù)據(jù)結(jié)構(gòu)與算法教程》、《Python函數(shù)使用技巧總結(jié)》及《Python入門與進(jìn)階經(jīng)典教程》
希望本文所述對大家Python程序設(shè)計(jì)有所幫助。
相關(guān)文章
這篇文章主要為大家詳細(xì)介紹了python爬蟲實(shí)例，包括爬蟲技術(shù)架構(gòu)，組成爬蟲的關(guān)鍵模塊，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2018-06-06
Python保留指定位數(shù)小數(shù)的5種方法總結(jié)
很多小伙伴在學(xué)習(xí)python的時(shí)候可能會遇到對數(shù)據(jù)進(jìn)行格式化輸出的需求,其中最常見的需求為保留幾位小數(shù),這篇文章主要給大家介紹了關(guān)于Python保留指定位數(shù)小數(shù)的5種方法,需要的朋友可以參考下2023-08-08
這篇文章主要介紹了Python中閉包與lambda的作用域解析，具有很好的參考價(jià)值，希望對大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2022-07-07
這篇文章主要介紹了python音頻處理的示例詳解,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2020-12-12
本教程將指導(dǎo)你如何編寫一個(gè)Python程序,該程序能夠在啟動(dòng)時(shí)檢查計(jì)算機(jī)的CPU型號,如果檢測到CPU型號包含“I3”,則會彈出一個(gè)警告窗口,感興趣的小伙伴跟著小編一起來看看吧2024-12-12
我們使用Python處理日期/時(shí)間的時(shí)候，經(jīng)常會遇到各種各樣的問題。本文為大家總結(jié)了兩個(gè)Python比較兩個(gè)日期的方法，需要的可以參考一下2022-07-07
PDF文件中的圖片可以豐富文檔內(nèi)容,提升用戶的閱讀體驗(yàn),除了在PDF中添加圖片外,有時(shí)也需要替換或刪除其中的圖片,文本將提供三個(gè)示例,介紹如何使用Python?操作PDF文件中的圖片,需要的朋友可以參考下2024-04-04
這篇文章主要介紹了python計(jì)算圓周率pi的方法,涉及Python針對數(shù)學(xué)運(yùn)算的相關(guān)技巧,需要的朋友可以參考下2015-07-07
這篇文章主要介紹了將python文件打包成exe可運(yùn)行文件的步驟，本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-04-04
Python實(shí)現(xiàn)bilibili時(shí)間長度查詢的示例代碼
這篇文章主要介紹了Python實(shí)現(xiàn)bilibili時(shí)間長度查詢的示例代碼，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-01-01