Python使用pandas處理CSV文件的實(shí)例講解
Python中有許多方便的庫可以用來進(jìn)行數(shù)據(jù)處理,尤其是Numpy和Pandas,再搭配matplot畫圖專用模塊,功能十分強(qiáng)大。
CSV(Comma-Separated Values)格式的文件是指以純文本形式存儲(chǔ)的表格數(shù)據(jù),這意味著不能簡單的使用Excel表格工具進(jìn)行處理,而且Excel表格處理的數(shù)據(jù)量十分有限,而使用Pandas來處理數(shù)據(jù)量巨大的CSV文件就容易的多了。
我用到的是自己用其他硬件工具抓取得數(shù)據(jù),硬件環(huán)境是在Linux平臺(tái)上搭建的,當(dāng)時(shí)數(shù)據(jù)是在運(yùn)行腳本后直接輸出在terminal里的,數(shù)據(jù)量十分龐大,為了保存獲得的數(shù)據(jù),在Linux下使用了數(shù)據(jù)流重定向,把數(shù)據(jù)全部保存到了文本文件中,形成了一個(gè)本地csv文件。
Pandas讀取本地CSV文件并設(shè)置Dataframe(數(shù)據(jù)格式)
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ') #filename可以直接從盤符開始,標(biāo)明每一級的文件夾直到csv文件,header=None表示頭部為空,sep=' '表示數(shù)據(jù)間使用空格作為分隔符,如果分隔符是逗號(hào),只需換成 ‘,'即可。
print df.head()
print df.tail()
#作為示例,輸出CSV文件的前5行和最后5行,這是pandas默認(rèn)的輸出5行,可以根據(jù)需要自己設(shè)定輸出幾行的值

數(shù)據(jù)讀取示例
圖片中顯示了我本地?cái)?shù)據(jù)的前5行與最后5行,最前面一列沒有標(biāo)號(hào)的是行號(hào),數(shù)據(jù)一共有13列,標(biāo)號(hào)從0到12,一行顯示不完全,在第9列以后換了行,并且用反斜杠“\”標(biāo)注了出來。
2017年4月28日更新
使用pandas直接讀取本地的csv文件后,csv文件的列索引默認(rèn)為從0開始的數(shù)字,重定義列索引的語句如下:
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ',names=["week",'month','date','time','year','name1','freq1','name2','freq2','name3','data1','name4','data2'])
print df
此時(shí)打印出的文件信息如下,列索引已經(jīng)被重命名:

以上這篇Python使用pandas處理CSV文件的實(shí)例講解就是小編分享給大家的全部內(nèi)容了,希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
python實(shí)現(xiàn)圖書管理系統(tǒng)
這篇文章主要為大家詳細(xì)介紹了python實(shí)現(xiàn)圖書管理系統(tǒng),文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-03-03
PyTorch中torch.matmul()函數(shù)常見用法總結(jié)
torch.matmul()也是一種類似于矩陣相乘操作的tensor連乘操作。但是它可以利用python中的廣播機(jī)制,處理一些維度不同的tensor結(jié)構(gòu)進(jìn)行相乘操作,這篇文章主要介紹了PyTorch中torch.matmul()函數(shù)用法總結(jié),需要的朋友可以參考下2023-04-04
Python argparse模塊實(shí)現(xiàn)解析命令行參數(shù)方法詳解
argparse 是 python 自帶的命令行參數(shù)解析包,可以用來方便的服務(wù)命令行參數(shù)。本文將通過示例和大家詳細(xì)講講argparse的使用,需要的可以參考一下2022-09-09
python 時(shí)間的訪問和轉(zhuǎn)換 time示例小結(jié)
Python 的 time 模塊提供了各種與時(shí)間處理相關(guān)的功能,包括獲取當(dāng)前時(shí)間、操作日期/時(shí)間以及執(zhí)行與時(shí)間相關(guān)的各種其它功能,這篇文章主要介紹了python 時(shí)間的訪問和轉(zhuǎn)換 time,需要的朋友可以參考下2024-05-05
python中requests使用代理proxies方法介紹
這篇文章主要介紹了python中requests使用代理proxies方法介紹,具有一定參考價(jià)值,需要的朋友可以了解下。2017-10-10
opencv 實(shí)現(xiàn)特定顏色線條提取與定位操作
這篇文章主要介紹了opencv 實(shí)現(xiàn)特定顏色線條提取與定位操作,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-06-06
PyQt5結(jié)合matplotlib繪圖的實(shí)現(xiàn)示例
這篇文章主要介紹了PyQt5結(jié)合matplotlib繪圖的實(shí)現(xiàn)示例,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-09-09

