pandas教程(一)Series与DataFrame
前言
如何學(xué)習(xí):先隨著小編看一下幾個重要的函數(shù)方法,然后用實例加以鞏固
預(yù)備知識:NumPy數(shù)組是一個多維數(shù)組對象,稱為ndarray。其由兩部分組成:實際的數(shù)據(jù)、描述這些數(shù)據(jù)的元數(shù)據(jù)
此外小編為你準(zhǔn)備了:Python系列
開始使用pandas,你需要熟悉它的兩個重要的數(shù)據(jù)結(jié)構(gòu):?
Series:是一個值的序列,它只有一個列,以及索引。
DataFrame:是有多個列的數(shù)據(jù)表,每個列擁有一個 label,當(dāng)然,DataFrame 也有索引。
首先我們導(dǎo)入包:
In [1]: from pandas import Series, DataFrame In [2]: import pandas as pd下面我們將詳細(xì)介紹Series、DataFrame這倆個部分
一、Series
Series是一個一維的類似的數(shù)組對象,包含一個數(shù)組的數(shù)據(jù)(任何NumPy的數(shù)據(jù)類型)和一個與數(shù)組關(guān)聯(lián)的數(shù)據(jù)標(biāo)簽,被叫做 索引 。最簡單的Series是由一個數(shù)組的數(shù)據(jù)構(gòu)成:
通常,需要創(chuàng)建一個帶有索引來確定沒一個數(shù)據(jù)點的Series:
In [5]: obj2 = Series([4, 7, -5, 3], index=['d', 'b', 'a', 'c']) In [6]: obj2 Out[6]: d 4 b 7 a -5 c 3 dtype: int64 In [7]: obj2.index Out[7]: Index(['d', 'b', 'a', 'c'], dtype='object')與正規(guī)的NumPy數(shù)組相比,你可以使用索引里的值來選擇一個單一值或一個值集:
我們也可以對Series進(jìn)行一些處理,然后,再進(jìn)行輸出:
In [11]: obj2 Out[11]: d 6 b 7 a -5 c 3 dtype: int64In [12]: obj2[obj2 > 0] Out[12]: d 6 b 7 c 3 dtype: int64In [13]: obj2 * 2 Out[13]: d 12 b 14 a -10 c 6 dtype: int64另一種思考的方式是,Series是一個定長的,有序的字典,因為它把索引和值映射起來了。它可以適用于許多期望一個字典的函數(shù):
In [14]: 'b' in obj2 Out[14]: TrueIn [15]: 'e' in obj2 Out[15]: False如果你有一些數(shù)據(jù)在一個Python字典中,你可以通過傳遞字典來從這些數(shù)據(jù)創(chuàng)建一個Series:
只傳遞一個字典的時候,結(jié)果Series中的索引將是排序后的字典的鍵:
In [19]: states = ['California', 'Ohio', 'Oregon', 'Texas'] In [20]: obj4 = Series(sdata, index=states) In [21]: obj4 Out[21]: California NaN Ohio 35000.0 Oregon 16000.0 Texas 71000.0 dtype: float64在這種情況下, sdata 中的3個值被放在了合適的位置,但因為沒有發(fā)現(xiàn)對應(yīng)于 ‘California’ 的值,就出現(xiàn)了 NaN (不是一個數(shù)),這在pandas中被用來標(biāo)記數(shù)據(jù)缺失或 NA 值。在pandas中用函數(shù) isnull 和 notnull 來檢測數(shù)據(jù)丟失:
In [22]: pd.isnull(obj4) Out[22]: California True Ohio False Oregon False Texas False dtype: boolIn [23]: pd.notnull(obj4) Out[23]: California False Ohio True Oregon True Texas True dtype: boolSeries的索引可以通過賦值就地更改:In [24]: obj.index = ['Bob', 'Steve', 'Jeff', 'Ryan'] In [25]: obj Out[25]: Bob 4 Steve 7 Jeff -5 Ryan 3 dtype: int64
二、DataFrame
一個Datarame表示一個表格,類似電子表格的數(shù)據(jù)結(jié)構(gòu),包含一個經(jīng)過排序的列表集,它們每一個都可以有不同的類型值(數(shù)字,字符串,布爾等等)。Datarame有行和列的索引;它可以被看作是一個Series的字典(每個Series共享一個索引)。與其它你以前使用過的(如 R 的 data.frame )類似Datarame的結(jié)構(gòu)相比,在DataFrame里的面向行和面向列的操作大致是對稱的。在底層,數(shù)據(jù)是作為一個或多個二維數(shù)組存儲的,而不是列表,字典,或其它一維的數(shù)組集合。
直接指定列數(shù)據(jù)來創(chuàng)建DataFrame
In [1]: data = {'state': ['Ohio', 'Ohio', 'Ohio', 'Nevada', 'Nevada'],...: 'year': [2000, 2001, 2002, 2001, 2002],...: 'pop': [1.5, 1.7, 3.6, 2.4, 2.9]}In [2]: DataFrame(data) Out[2]:pop state year 0 1.5 Ohio 2000 1 1.7 Ohio 2001 2 3.6 Ohio 2002 3 2.4 Nevada 2001 4 2.9 Nevada 2002以Series數(shù)組來創(chuàng)建DataFrame
這兩種創(chuàng)建方法的不同之處在于:第一種方法創(chuàng)建的DataFrame的列(column)的數(shù)據(jù)類型是相同的,第二種方法創(chuàng)建的DataFramed的行(row)的數(shù)據(jù)類型是相同的。
設(shè)置DataFrame列的排列順序:
In [3]: DataFrame(data, columns=['year', 'state', 'pop']) Out[3]:year state pop 0 2000 Ohio 1.5 1 2001 Ohio 1.7 2 2002 Ohio 3.6 3 2001 Nevada 2.4 4 2002 Nevada 2.9和Series一樣,如果你傳遞了一個行,但不包括在 data 中,在結(jié)果中它會表示為NAN值:
In [4]: frame2 = DataFrame(data, columns=['year', 'state', 'pop', 'debt'],...: index=['one', 'two', 'three', 'four', 'five'])In [5]: frame2 Out[5]:year state pop debt one 2000 Ohio 1.5 NaN two 2001 Ohio 1.7 NaN three 2002 Ohio 3.6 NaN four 2001 Nevada 2.4 NaN five 2002 Nevada 2.9 NaNIn [6]: frame2.columns Out[6]: Index(['year', 'state', 'pop', 'debt'], dtype='object')和Series一樣,在DataFrame中的一列可以通過字典記法或?qū)傩詠頇z索:
In [7]: frame2['state'] Out[7]: one Ohio two Ohio three Ohio four Nevada five Nevada Name: state, dtype: objectIn [8]: frame2.year Out[8]: one 2000 two 2001 three 2002 four 2001 five 2002 Name: year, dtype: int64列可以通過賦值來修改。例如,空的 ‘debt’ 列可以通過一個純量或一個數(shù)組來賦值:
In [9]: frame2['debt'] = 16.5In [10]: frame2 Out[10]:year state pop debt one 2000 Ohio 1.5 16.5 two 2001 Ohio 1.7 16.5 three 2002 Ohio 3.6 16.5 four 2001 Nevada 2.4 16.5 five 2002 Nevada 2.9 16.5In [11]: frame2['debt'] = np.arange(5.)In [12]: frame2 Out[12]:year state pop debt one 2000 Ohio 1.5 0.0 two 2001 Ohio 1.7 1.0 three 2002 Ohio 3.6 2.0 four 2001 Nevada 2.4 3.0 five 2002 Nevada 2.9 4.0通過列表或數(shù)組給一列賦值時,所賦的值的長度必須和DataFrame的長度相匹配。如果你使用Series來賦值,它會代替在DataFrame中精確匹配的索引的值,Series沒有的數(shù)據(jù)在DataFrame中就會被更新為NaN:
In [13]: val = Series([-1.2, -1.5, -1.7], index=['two', 'four', 'five'])In [14]: frame2['debt'] = valIn [15: frame2 Out[15]:year state pop debt one 2000 Ohio 1.5 NaN two 2001 Ohio 1.7 -1.2 three 2002 Ohio 3.6 NaN four 2001 Nevada 2.4 -1.5 five 2002 Nevada 2.9 -1.7給一個不存在的列賦值,將會創(chuàng)建一個新的列。 像字典一樣 del 關(guān)鍵字將會刪除列:
In [16]: frame2['eastern'] = frame2.state = 'Ohio'In [17]: frame2 Out[17]:year state pop debt eastern one 2000 Ohio 1.5 NaN Ohio two 2001 Ohio 1.7 -1.2 Ohio three 2002 Ohio 3.6 NaN Ohio four 2001 Ohio 2.4 -1.5 Ohio five 2002 Ohio 2.9 -1.7 OhioIn [18]: del frame2['eastern']In [19]: frame2.columns Out[19]: Index(['year', 'state', 'pop', 'debt'], dtype='object')總結(jié)
以上是生活随笔為你收集整理的pandas教程(一)Series与DataFrame的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Python多线程学习教程
- 下一篇: Scrapy框架学习记录