Python過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容的方法

更新時(shí)間：2018年10月21日 15:42:41 作者：Joseph_ChiRunningAnt

今天小編就為大家分享一篇Python過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容的方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧

Python過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容，并將過(guò)濾后的內(nèi)容保存到新的txt中

示例如下

原文件

Python 過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容

處理之后的文件

Python 過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容

直接上代碼

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到結(jié)果

Python 過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容

以上這篇Python過(guò)濾txt文件內(nèi)重復(fù)內(nèi)容的方法就是小編分享給大家的全部?jī)?nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。

您可能感興趣的文章:

相關(guān)文章

Python+threading模塊對(duì)單個(gè)接口進(jìn)行并發(fā)測(cè)試
這篇文章主要為大家詳細(xì)介紹了Python+threading模塊對(duì)單個(gè)接口進(jìn)行并發(fā)測(cè)試，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下
2019-06-06
詳解Python3中的Sequence type的使用
這篇文章主要介紹了詳解Python3中的Sequence type的使用,是Python入門(mén)學(xué)習(xí)中的基礎(chǔ)知識(shí),需要的朋友可以參考下
2015-08-08
淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別
這篇文章主要介紹了淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別說(shuō)明，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
2020-06-06
詳解DBSCAN算法原理及其Python實(shí)現(xiàn)
DBSCAN,即Density-Based Spatial Clustering of Applications with Noise,基于密度的噪聲應(yīng)用空間聚類(lèi),本文將詳細(xì)介紹DBSCAN算法的原理及其Python實(shí)現(xiàn),需要的可以參考下
2023-12-12
詳解Python自動(dòng)化之文件自動(dòng)化處理
今天給大家?guī)?lái)的是關(guān)于Python的相關(guān)知識(shí),文章圍繞著Python文件自動(dòng)化處理展開(kāi),文中有非常詳細(xì)的介紹及代碼示例,需要的朋友可以參考下
2021-06-06
Python中有哪些關(guān)鍵字及關(guān)鍵字的用法
這篇文章主要介紹了Python中有哪些關(guān)鍵字及關(guān)鍵字的用法,分享python中常用的關(guān)鍵字，本文結(jié)合示例代碼給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下
2023-02-02
python 如何利用argparse解析命令行參數(shù)
這篇文章主要介紹了python 利用argparse解析命令行參數(shù)的步驟，幫助大家更好的理解和學(xué)習(xí)python，感興趣的朋友可以了解下
2020-09-09
關(guān)于pytest結(jié)合csv模塊實(shí)現(xiàn)csv格式的數(shù)據(jù)驅(qū)動(dòng)問(wèn)題
這篇文章主要介紹了pytest結(jié)合csv模塊實(shí)現(xiàn)csv格式的數(shù)據(jù)驅(qū)動(dòng),使用python中的csv模塊來(lái)處理csv文件，結(jié)合pygtest的參數(shù)化處理方式來(lái)實(shí)現(xiàn)ddt，本文通過(guò)示例代碼給大家介紹的非常詳細(xì)，需要的朋友參考下吧
2022-05-05
Python‘==‘ 及 ‘is‘相關(guān)原理解析
這篇文章主要介紹了Python‘==‘ 及 ‘is‘相關(guān)原理解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
2020-09-09
健身房被搭訕?用python寫(xiě)了個(gè)小米計(jì)時(shí)器助人為樂(lè)
今天教大家Python圖形界面開(kāi)發(fā)的相關(guān)知識(shí),文章圍繞著如何實(shí)現(xiàn)一個(gè)小米手機(jī)上的秒表計(jì)時(shí)器功能展開(kāi),文中有非常詳細(xì)的代碼示例,需要的朋友可以參考下
2021-06-06