數(shù)據(jù)分析師-Pandas基礎

Series是帶標簽的一維數(shù)組,可以保存任何數(shù)據(jù)類型,軸標簽統(tǒng)稱為索引

Series相比于ndarray,是自帶索引index的數(shù)組,一維數(shù)組+對應索引,且索引的切片功能類似

Series相比于dict,Series像是有序的字典,其索引原理與字典相似(字典用key,Series用index)

一、pandas的數(shù)據(jù)結構:Series

1.Series的創(chuàng)建:

(1)方法一:由字典創(chuàng)建 pd.Series(): key就是index--不支持可變序列,values就是values

(2)方法二:通過一維數(shù)組創(chuàng)建 pd.Series()

pd.Series(arr,index=list('abcdefghij'),dtype = np.str,name='test')#默認index是0開始步長為1的數(shù)字

注意:參數(shù)index是用來改變索引的,參數(shù)dtype是用來設置數(shù)值類型的,參數(shù)name是為Series創(chuàng)建名稱

s.name方法:輸出數(shù)組的名稱格式為str,無名稱返回None

s3 = s1.rename('hehe')#.rename()重命名數(shù)組的名稱,并指向新的數(shù)組,原數(shù)組不變

(3)方法三:通過標量創(chuàng)建,必須有index參數(shù)表明有多少個值:pd.Series(100,index=range(4))

(4)#索引本身可以不唯一,但是盡量避免

2.Series中.index查看索引/標簽(得到的是生成器rangeindex,需要用list查看)?

.value查看值(得到的是ndarray)

3.Series的索引

(1)下標索引,類似于列表,指的是未明確的index:s[4]? ?注:s[-1]用-1索引,會報錯

(2)標簽索引,指的是明確的index(這里的index是字符串):s['a'],多標簽索引s[['a','b']]:嵌套,返回的是新數(shù)組

(3)切片索引**

s1 = pd.Series(np.random.rand(5))

s2 = pd.Series(np.random.rand(5),index = list('abcde'))

print(s1[1:4])#下標索引 :如果Series沒有明確index標簽,切片代表著左閉右開

print(s2['a':'c'])#標簽索引:如果Series有index標簽,切片就是按照標簽索引(也就是左閉右閉)

print(s1[:-1])

print(s2[::2])#下標/標簽索引可以做切片

(4)布爾型索引:s[bs或s>50]--用[判斷條件],其中判斷條件可以使語句也可以是布爾型數(shù)組

bs = s.isnull()#數(shù)組判斷后返回由布爾值組成的新數(shù)組

s[4] = None#添加一個空值,或np.nan

4.Series的基本技巧

(1)數(shù)據(jù)查看:默認查看五條 s.head()前五條? ?s.tail()后五條

(2)重新索引.reindex():根據(jù)新的索引重新排序,當新索引不存在時返回NaN,不是改變index名稱的方法**

s2 = s.reindex(['c','d','e','f'],fill_value = 0)#參數(shù)fill_value缺失值填充

(3)對齊+:按照標簽對齊相加值,不對齊的返回NaN

(4)刪除索引(某行).drop: 參數(shù)inplace默認False返回副本 true改變原Series 例:s.drop(['j','s'])刪除多行

(5)添加:直接通過下標索引/標簽index添加

s1和s2都是Series:s3 = s1.append(s2)**append方法直接添加數(shù)組,生成新數(shù)組;不變之前的數(shù)組

二、pandas的數(shù)據(jù)結構:DataFrame

DataFrame是表格型數(shù)據(jù)結構,帶有標簽的二維數(shù)組

DataFrame帶有index行標簽和columns列標簽

.index查看行標簽,DataFrame的index是rangeindex,需要list查看

.columns查看列標簽

.values查看值生成二維數(shù)組ndarray

1.DataFrame的創(chuàng)建

(1)方法一:數(shù)組/list組成的字典 pd.DataFrame():字典的key是columns,index默認為數(shù)值標簽,字典值的長度必須一致--columns可以長度不一致名字要相同,不同的填充NAN? index長度必須一致,名字可以不同

pd.DataFrame(data1,columns = ['c','b','a'],index=['f1','f2'])?#columns可以重新制定列的順序,格式為list,如果沒有該列用NaN填充 ; ##index參數(shù)重新定義index,長度必須保持一致,格式為list

(2)方法二 Series組成的字典創(chuàng)建:column為字典key,index為Series的標簽(如果Series沒有指定標簽,則是默認數(shù)字標簽);***Series可以長度不同,生成的df會出現(xiàn)NaN----columns和?index可以不一致

(3)***常用方法三 通過二維數(shù)組np.random.randn(9).reshape(3,3)直接創(chuàng)建: 不指定index和columns會默認數(shù)字標簽--columns必須長度一致 index必須長度一致,兩者名字都是現(xiàn)成定義的

(4)方法四 直接用字典組成的列表Json:columns是字典的key,一個字典代表一條數(shù)據(jù);長度不同會填充空值;--columns可以長度不一致名字要相同,不同的填充NAN? index長度必須一致,名字可以不同

(5)}方法五 由字典組成的嵌套字典:columns為字典的key,index為子字典的key

data = {'Jack':{'math':90,'art':90,'english':78} ***這里的index不會改變原index,不同于原index會返回Nan

2.DataFrame選擇列:數(shù)據(jù)的字段

df = pd.DataFrame(np.random.rand(12).reshape(3,4)*100,index=['one','two','three'],columns = ['a','b','c','d'])

(1)df['a']直接列名,選擇單列返回Series,選擇多列返回DataFrame,不支持切片

3.DataFrame選擇行:數(shù)據(jù)的條數(shù)

(1)df.loc['one']:按照index標簽選擇行,支持切片,#選擇單行返回Series(cloumns為索引index),選擇多行返回DataFrame

data3 = df1.loc['one':'three']#類似于Series標簽索引左閉右閉

data4 = df2.loc[0:3]#類似于Series標簽索引左閉右閉

(2)data5 = df[:1] #df[切片]為數(shù)字時,默認選擇行,且只能進行切片的選擇不能單獨選擇df[0];返回的是DataFrame,即便選擇一行

(3)df.iloc[-1]、df.iloc[::2]:按照整數(shù)位置索引 #類似于Series下標索引左閉右開?#選擇單行返回Series(cloumns為索引index),選擇多行返回DataFrame

4.布爾型索引??和Series原理相同

(1)全部判斷 b1 = df<20 : 索引結果保留所有數(shù)據(jù)True返回原數(shù)據(jù),F(xiàn)alse返回NaN

(2)單列做判斷 b2 = df['a']>50:索引結果保留單列判斷為True的行數(shù)據(jù),包括行數(shù)據(jù)

(3)多列做判斷 b3 = df[['a','b']]>50:索引結果保留所有數(shù)據(jù),true返回原數(shù)據(jù),false返回NaN

(4)多行做索引 b4 = df.loc[['one','three']]<50 :?索引結果保留所有數(shù)據(jù),true返回原數(shù)據(jù),false返回NaN

5.多重索引:同時索引行和列--先選擇列后選擇行,相當于對數(shù)據(jù)先選擇字段在選擇數(shù)據(jù)量

df = pd.DataFrame(np.random.rand(16).reshape(4,4)*100, index=['one','two','three','four'],columns = ['a','b','c','d'])

print(df['a'].loc[['three','four']])#先列后行

print(df[['b','c','d']].iloc[0:2])#先列后行

print(df[df<50].loc[['one','two']])#先布爾后行

print(df[df<50][['a','b']])#先布爾后列

6.數(shù)據(jù)的查看、轉置、刪除、添加、修改

(1)df.head()查看頭部數(shù)據(jù),默認五條? ?df.tail()查看尾部數(shù)據(jù),默認五條

(2)df.T : .T轉置

(3)修改/增加列/行 df['e'] = 10? df.loc[4] = 100

(4)del df['a']#刪除列??

(5).drop()刪除行 axis=0默認 inplace默認False刪除后生成新數(shù)據(jù)不改變原數(shù)據(jù);

#刪除列 axis=1

(6)對齊+:DataFrame之間的數(shù)據(jù)自動按照列和索引對齊

(7)排序:按值排序(一列一列的排序) df.sort_values(['a'],ascending = True))#升序 ascending = False降序)--在合適條件下,可以多列排序

(8)排序:按索引排序 df.sort_index()

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,882評論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,208評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事?!?“怎么了?”我有些...
    開封第一講書人閱讀 175,746評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,666評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,477評論 6 407
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 54,960評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,047評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,200評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,726評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,617評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,807評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,327評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 44,049評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,425評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,674評論 1 281
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,432評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,769評論 2 372