python編碼格式導(dǎo)致csv讀取錯(cuò)誤問題csv.reader,pandas.csv

第python編碼格式導(dǎo)致csv讀取錯(cuò)誤問題(csv.reader,pandas.csv目錄python編碼格式導(dǎo)致csv讀取錯(cuò)誤pandas讀取csv常見錯(cuò)誤及解決1）第一種錯(cuò)誤2）第二種錯(cuò)誤

python編碼格式導(dǎo)致csv讀取錯(cuò)誤

本文記錄python小白我今天遇到的這兩個(gè)問題（csv.reader和pandas.csv_read）：

pandas模塊CParserError:Errortokenizingdata.Cerror:Expected1fieldsinline4,saw2錯(cuò)誤

csv模塊linecontainsNULLbyte錯(cuò)誤

今天處理數(shù)據(jù)時(shí)疏忽了，而且還偷懶把數(shù)據(jù)復(fù)制到xlsx保存后，直接修改文件后綴成.csv準(zhǔn)備用來讀取。之后運(yùn)行算法要讀數(shù)據(jù)的時(shí)候果然問題來了。

importpandasaspd

path='water30.csv'

df=pd.read_csv(path)

注：后兩行可寫作df=pd.read_csv(water30.csv)。

但由于read_csv本身有好多參數(shù)（雖然這里不用）,故寫成path習(xí)慣好些。

這樣會(huì)報(bào)錯(cuò)CParserError:Errortokenizingdata.Cerror:Expected1fieldsinline4,saw2

我在網(wǎng)上查了好多種解決辦法，由于read_csv的參數(shù)很多，所以各有其詞，我這里遇到的應(yīng)該也只是其中一種，久尋無果。直到我看到這里說看了模塊_csv.c的代碼后，發(fā)現(xiàn)文件里不能有\(zhòng)0,所以csv文件不可以是unicode編碼的，可以是ANSI。

針對(duì)我直接改后綴名的結(jié)果是，點(diǎn)擊那個(gè).csv打開時(shí)就已經(jīng)提示我：

也就是這里改后綴并沒有把文件格式弄好。所以我選擇另存為改選了文件格式為

之后，讀取就不會(huì)報(bào)錯(cuò)了。

注：有個(gè)疑問沒有解決，就是那個(gè)我直接改后綴得到的那個(gè).csv我用記事本打開查看了一下，編碼就是ANSI啊。那我就不知道為什么報(bào)錯(cuò)了不過問題倒是暫時(shí)解決了。

現(xiàn)在讀取到的格式為

是個(gè)結(jié)構(gòu)體。

另外，對(duì)于：csv模塊linecontainsNULLbyte錯(cuò)誤。和上面出現(xiàn)問題原因和解決方案是一樣的，比如

importcsv

csvfile=file('water30.csv','rb')

reader=csv.reader(csvfile)

forlineinreader:

printline

csvfile.close()

報(bào)錯(cuò)：Error:linecontainsNULLbyte

修正后，讀入的數(shù)據(jù)格式為list，如下

[1,2,2,1,2]

[1,1,1,2,2]

[1,2,1,1,1]

[1,1,1,1,2]

[1,1,1,2,2]

[1,1,1,2,2]

[0.697,0.744,0.634,0.403,0.481]

[0.46,0.376,0.264,0.237,0.149]

[1,1,1,1,1]

pandas讀取csv常見錯(cuò)誤及解決

1）第一種錯(cuò)誤

錯(cuò)誤提示：

pandas.errors.ParserError:Errortokenizingdata.Cerror:Expected1fieldsinline121,saw2

解決方法：

importpandasaspd

data=pd.read_csv(inputfile,encoding='utf-8',header=None,sep='\t')

2）第二種錯(cuò)誤

錯(cuò)誤提示：

pandas.errors.ParserError:Errortokenizingdata.Cerror:EOFinsidestringstartingatline15945

解決方法：

importpandasaspd

importcsv