Python過濾txt文件內(nèi)重復(fù)內(nèi)容的方法

更新時間：2018年10月21日 15:42:41 作者：Joseph_ChiRunningAnt

今天小編就為大家分享一篇Python過濾txt文件內(nèi)重復(fù)內(nèi)容的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧

Python過濾txt文件內(nèi)重復(fù)內(nèi)容，并將過濾后的內(nèi)容保存到新的txt中

示例如下

原文件

Python 過濾txt文件內(nèi)重復(fù)內(nèi)容

處理之后的文件

Python 過濾txt文件內(nèi)重復(fù)內(nèi)容

直接上代碼

# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
 if not m[i] in m1:
  m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
 filename.write(m1[i]+"\n")

可看到結(jié)果

Python 過濾txt文件內(nèi)重復(fù)內(nèi)容

以上這篇Python過濾txt文件內(nèi)重復(fù)內(nèi)容的方法就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持腳本之家。

您可能感興趣的文章:

相關(guān)文章

Python+threading模塊對單個接口進(jìn)行并發(fā)測試
這篇文章主要為大家詳細(xì)介紹了Python+threading模塊對單個接口進(jìn)行并發(fā)測試，具有一定的參考價值，感興趣的小伙伴們可以參考一下
2019-06-06
詳解Python3中的Sequence type的使用
這篇文章主要介紹了詳解Python3中的Sequence type的使用,是Python入門學(xué)習(xí)中的基礎(chǔ)知識,需要的朋友可以參考下
2015-08-08
淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別
這篇文章主要介紹了淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別說明，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
2020-06-06
詳解DBSCAN算法原理及其Python實現(xiàn)
DBSCAN,即Density-Based Spatial Clustering of Applications with Noise,基于密度的噪聲應(yīng)用空間聚類,本文將詳細(xì)介紹DBSCAN算法的原理及其Python實現(xiàn),需要的可以參考下
2023-12-12
詳解Python自動化之文件自動化處理
今天給大家?guī)淼氖顷P(guān)于Python的相關(guān)知識,文章圍繞著Python文件自動化處理展開,文中有非常詳細(xì)的介紹及代碼示例,需要的朋友可以參考下
2021-06-06
Python中有哪些關(guān)鍵字及關(guān)鍵字的用法
這篇文章主要介紹了Python中有哪些關(guān)鍵字及關(guān)鍵字的用法,分享python中常用的關(guān)鍵字，本文結(jié)合示例代碼給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下
2023-02-02
python 如何利用argparse解析命令行參數(shù)
這篇文章主要介紹了python 利用argparse解析命令行參數(shù)的步驟，幫助大家更好的理解和學(xué)習(xí)python，感興趣的朋友可以了解下
2020-09-09
關(guān)于pytest結(jié)合csv模塊實現(xiàn)csv格式的數(shù)據(jù)驅(qū)動問題
這篇文章主要介紹了pytest結(jié)合csv模塊實現(xiàn)csv格式的數(shù)據(jù)驅(qū)動,使用python中的csv模塊來處理csv文件，結(jié)合pygtest的參數(shù)化處理方式來實現(xiàn)ddt，本文通過示例代碼給大家介紹的非常詳細(xì)，需要的朋友參考下吧
2022-05-05
Python‘==‘ 及 ‘is‘相關(guān)原理解析
這篇文章主要介紹了Python‘==‘ 及 ‘is‘相關(guān)原理解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下
2020-09-09
健身房被搭訕?用python寫了個小米計時器助人為樂
今天教大家Python圖形界面開發(fā)的相關(guān)知識,文章圍繞著如何實現(xiàn)一個小米手機(jī)上的秒表計時器功能展開,文中有非常詳細(xì)的代碼示例,需要的朋友可以參考下
2021-06-06