python解決pandas處理缺失值為空字符串的問題
更新時(shí)間：2018年04月08日 08:55:37 作者：漸行漸遠(yuǎn)silence
下面小編就為大家分享一篇python解決pandas處理缺失值為空字符串的問題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧
踩坑記錄：
用pandas來做csv的缺失值處理時(shí)候發(fā)現(xiàn)奇怪BUG，就是excel打開csv文件，明明有的格子沒有任何東西，當(dāng)然，我就想到用pandas的dropna()或者fillna()來處理缺失值。
但是pandas讀取csv文件后發(fā)現(xiàn)那個(gè)空的地方isnull()竟然是false，就是說那個(gè)地方有東西。。。
后來經(jīng)過排查發(fā)現(xiàn)看似什么都沒有的地方有空字符串，故pandas認(rèn)為那兒不是缺失值，所以就不能用dropna()或者fillna()來處理。
解決思路：先用正則將空格匹配出來，然后全部替換為NULL，再在用pandas讀取csv時(shí)候指定 read_csv（na_values='NULL'）就是將NULL認(rèn)為是nan處理，接下來就可以用dropna()或者fillna()來處理了
以上這篇python解決pandas處理缺失值為空字符串的問題就是小編分享給大家的全部內(nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
python腳本監(jiān)聽域名證書過期時(shí)間并通知消息到釘釘(最新推薦)
這篇文章主要介紹了python腳本監(jiān)聽域名證書過期時(shí)間并通知消息到釘釘(最新推薦),本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-11-11
python pands實(shí)現(xiàn)execl轉(zhuǎn)csv 并修改csv指定列的方法
今天小編就為大家分享一篇python pands實(shí)現(xiàn)execl轉(zhuǎn)csv 并修改csv指定列的方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-12-12
今天小編就為大家分享一篇python讀取txt文件中特定位置字符的方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-12-12
今天小編就為大家分享一篇Python 修改列表中的元素方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-06-06
今天小編就為大家分享一篇使用Tensorboard工具查看Loss損失率，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2020-02-02
這篇文章主要介紹了Python定義函數(shù)功能與用法,結(jié)合實(shí)例形式詳細(xì)分析了Python函數(shù)的定義、參數(shù)、返回值、作用域等相關(guān)概念、原理及使用方法,需要的朋友可以參考下2019-04-04
python datetime 和時(shí)間戳互相轉(zhuǎn)換問題
time和datetime都是Python中的內(nèi)置模塊（不需要安裝，直接可以使用），都可以對(duì)時(shí)間進(jìn)行獲取，對(duì)時(shí)間格式進(jìn)行轉(zhuǎn)換，如時(shí)間戳和時(shí)間字符串的相互轉(zhuǎn)換，本文先給大家介紹python datetime 和時(shí)間戳互轉(zhuǎn)問題，感興趣的朋友一起看看吧2022-11-11
python 除法運(yùn)算 比較奇怪，和別的程序語言不大一樣。從Python2.2開始，除法運(yùn)算符除了/之外，又引入了一個(gè)除法運(yùn)算符：//，后一種運(yùn)算符只用于進(jìn)行整除法。對(duì)于除法運(yùn)算符/，默認(rèn)時(shí)的行為跟Python2.2之前的一樣，它視操作數(shù)而定，既可以進(jìn)行整除，也可以進(jìn)行真除法。2014-09-09
這篇文章主要介紹了python解壓縮文件或文件夾兩種常見方式,Python的zipfile和shutil模塊提供了強(qiáng)大的文件和文件夾壓縮與解壓縮功能,zipfile模塊適合精細(xì)控制,而shutil模塊則快速簡單,文中提供了詳細(xì)的代碼示例,需要的朋友可以參考下2025-04-04
在日常工作中,我們經(jīng)常需要處理大量文件,但有時(shí)候會(huì)遇到文件重復(fù)的情況,為了有效管理文件并避免重復(fù)占用存儲(chǔ)空間,我們可以編寫一個(gè)簡單的Python程序來檢查文件夾中是否存在重復(fù)文件,本文將介紹如何使用Python和其庫來編寫一個(gè)文件重復(fù)檢查器2024-08-08