python實現文本去重且不打亂原本順序
更新時間：2016年01月26日 22:43:36 投稿：mdxy-dxy
這篇文章主要介紹了python實現文本去重且不打亂原本順序,需要的朋友可以參考下
代碼也是在網上找的，效率挺不錯的，特別適合字典文件的去重
#coding=utf-8 import sys def open_txt(): #打開TXT文本寫入數組 try: xxx = file(sys.argv[1], 'r') for xxx_line in xxx.readlines(): passlist.append(xxx_line) xxx.close() except: return 0 def write_txt(): #打開TXT文本寫入數組 try: yyy = file(sys.argv[2], 'w') for i in list_passwed: yyy.write(i) yyy.close() except: return 0 global passlist #聲明全局變量 passlist = [] #用戶名：anonymous 密碼為空 open_txt() #TXT導入數組 #passlist = list(set(passlist)) #python 列表去重 global list_passwed #列表去重，不打亂原來的順序 list_passwed=[] for i in passlist: if i not in list_passwed: list_passwed.append(i) write_txt()
python 讀取TXT到數組 列表去重，不打亂原來的順序
####################################################################
#qq:316118740
#BLOG:http://hi.baidu.com/alalmn
# python 讀取TXT到數組 列表去重，不打亂原來的順序
# 剛學寫的不好請大家見諒
####################################################################
def open_txt(): #打開TXT文本寫入數組
try:
infile = file('admin.txt', 'r')
xxx = file('admin.txt', 'r')
for xxx_line in xxx.readlines():
passlist.append(xxx_line)
xxx.close()
except:
return 0
def list_del(): #清空list列表
try:
i = 0 #得到list的第一個元素
while i < len(passlist):
del passlist[i]
del list_passwed[i]
except:
return 0
######################################
global passlist #聲明全局變量
passlist = [] #用戶名：anonymous 密碼為空
www_cj(www) #域名拆解
open_txt() #TXT導入數組
#passlist = list(set(passlist)) #python 列表去重
global list_passwed #列表去重，不打亂原來的順序
list_passwed=[]
for i in passlist:
if i not in list_passwed:
list_passwed.append(i)
###################################### 遍歷數組組合出 密碼
I1 = 0 #得到list的第一個元素
while I1 < len(list_passwed):
print "WWWWWWWWWWW",I1
if I1==len(list_passwed):
break #退出循環(huán)
I2 = 0 #得到list的第一個元素
while I2 < len(list_passwed):
print "1111:",list_passwed[I1],"2222:",list_passwed[I2]
I2 = I2 + 1 #二層
I1 = I1 + 1 #一層
######################################
補充
# -*- coding: utf-8 -*-
'''
只使用與較小的文件，比較大的文件運行時間長
'''
def quchong(infile,outfile):
infopen = open(infile,'r',encoding='utf-8')
outopen = open(outfile,'w',encoding='utf-8')
lines = infopen.readlines()
list_1 = []
for line in lines:
if line not in list_1:
list_1.append(line)
outopen.write(line)
infopen.close()
outopen.close()
quchong("源文件路徑","目標文件路徑")
本文實例講述了python讀取TXT到數組及列表去重后按原來順序排序的方法。分享給大家供大家參考。
相關文章
本文介紹了如何通過Python腳本批量復制并規(guī)范命名視頻文件,實現自動補齊數字編號、保留原始文件、智能識別有效文件等功能,聽過代碼示例介紹的非常詳細,需要的朋友可以參考下2025-03-03
django admin 根據choice字段選擇的不同來顯示不同的頁面方式
這篇文章主要介紹了django admin 根據choice字段選擇的不同來顯示不同的頁面方式，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-05-05
在現代社會中,搖號系統廣泛應用于車牌搖號、房屋搖號等公共資源分配領域,本文將詳細介紹如何使用Python實現一個簡單的搖號系統,有需要的可以了解下2024-11-11
下面小編就為大家分享一篇python3 發(fā)送任意文件郵件的實例，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-01-01
Python基于pyCUDA實現GPU加速并行計算功能入門教程
這篇文章主要介紹了Python基于pyCUDA實現GPU加速并行計算功能,結合實例形式分析了Python使用pyCUDA進行GPU加速并行計算的原理與相關實現操作技巧,需要的朋友可以參考下2018-06-06
今天小編就為大家分享一篇Python檢查ping終端的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-01-01
本文主要介紹了pywinauto自動化測試使用經驗，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2023-03-03
Python Pillow.Image 圖像保存和參數選擇方式
今天小編就為大家分享一篇Python Pillow.Image 圖像保存和參數選擇方式，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-01-01
Python是一種功能強大的語言，廣泛用于自動執(zhí)行各種任務，只要想通過自動化日常任務來節(jié)省時間的人，Python?都能滿足您的需求。本文整理了5個Python腳本，希望對大家有所幫助2023-01-01
在本篇文章里小編給大家整理的是一篇關于python切片復制列表的知識點相關內容，有興趣的朋友們可以跟著學習下。2021-10-10