缺失數(shù)據(jù)——推薦

1、1缺失數(shù)據(jù)第6章缺失數(shù)據(jù)1.缺失觀測及其類型缺失信息三種缺失符號Nullable類型與NA符號NA特性convert_dtypes方法缺失數(shù)據(jù)的處理（運(yùn)算與分組加乘累計groupby方法中的缺失值填充與剔除fillna方法（填充）dropna方法（剔除）插值4.1線性插值4.2高級插值1.缺失觀測及其類型缺失信息返回布爾代數(shù)使用會返回布爾表缺失值統(tǒng)計缺失信息三種缺失符號np.nan不等于任何東西，包括自己，為什么np.nan會不等于自己，如果等于自己的，不利于統(tǒng)計，例如要統(tǒng)計相等的值。np.nan在numpy中為浮點(diǎn)型，數(shù)據(jù)集讀取時，只要有缺失值，就會是浮點(diǎn)型。1.導(dǎo)致中包含浮點(diǎn)型，所以整體浮

2、點(diǎn)型對于布爾類型的列表，如果是np.nan填充，那么它的值會自動變?yōu)門rue而不是False。#將浮點(diǎn)型的.轉(zhuǎn)換為但當(dāng)修改一個布爾列表時，會改變列表類型，而不是賦值為TrueIHOHlieBISH浮II在所有的表格讀取后，無論列是存放什么類型的數(shù)據(jù)，默認(rèn)的缺失值全為np.nan類型因此整型列轉(zhuǎn)為浮點(diǎn)；而字符由于無法轉(zhuǎn)化為浮點(diǎn)，因此只能歸并為object類型(O)，原來是浮點(diǎn)型的則類型不變InjS：:df7Il.dtypeOutIS:cltype(zloat64n)In：19：:dfEMath.dtypeOut191:dtype(t)In工工；dfEClass.dtypeOut20:dtype(

3、OyNoneNone等于自身，布爾值為False,修改布爾值不會改變數(shù)據(jù)類型，在傳入數(shù)值類型后，會自動變?yōu)閚p.nan。NaTNaT是針對時間序列的缺失值，是Pandas的內(nèi)置類型，可以完全看做時序版本的np.nan,與自己不等，且使用equals是也會被跳過Nullable類型與NA符號Nullable整型IntNullable布爾booleanstring類型NA的特性邏輯運(yùn)算只需看該邏輯運(yùn)算的結(jié)果是否依賴pd.NA的取值，如果依賴，則結(jié)果還是NA,如果不依賴，則直接計算結(jié)果算術(shù)運(yùn)算和比較運(yùn)算這里只需記住除了下面兩類情況，其他結(jié)果都是NA即可convert_dtypes方法讀取數(shù)據(jù)時，就把數(shù)據(jù)列轉(zhuǎn)為Nullable類型2缺失數(shù)據(jù)的運(yùn)算與分組加號與乘號規(guī)則使用加法時,缺失值為0使用乘法時,缺失值為1使用累計函數(shù)時,缺失值自動略過#表當(dāng)前元素先前元素相差百分比當(dāng)然iieriodsiin素先元素相差百分比Igroupby方法中的缺失值自動忽略為缺失值的組3.填充與剔除fillna方法值填充與前后向填充(分別與ffill方法和bfill方法等價)填充中的對齊特性dropna方法axis參數(shù)：表示按行或列進(jìn)行剔