Pandas DataFrames筛选数据

来源:互联网 发布:淘宝单号购买平台 编辑:程序博客网 时间:2024/05/16 07:41

</pre><span style="font-size:18px">最近突然发现了pandas真实特别好用,实在需要好好学习下。貌似经过pd方法导入的数据都是DataFrame类型(二维)或者Series类型(一维)。今天在百度经验里看到了DataFrame的数据筛选,自己也尝试了下,顺便记录下来。</span><p></p><p><span style="font-size:18px">1.先加载os包,打开一个csv文件,读出其中内容</span></p><p></p><pre name="code" class="python">import osimport pandas as pd aqicsv = pd.read_csv("D:\\aqifit_numsum10\\newaqifit.csv")



2.此时的aqicsv为DataFrame格式,可进行describe操作,获得一些统计上的指标

aqicsv["predictaqi_norm1"].describe()


3.可筛选出predictaqi_norm1这一列大于100的行

aqicsv[aqicsv["predictaqi_norm1"]>100]
<span style="font-family: Arial, Helvetica, sans-serif;"></span><pre name="code" class="python"><span style="font-family: Arial, Helvetica, sans-serif;">aqicsv[aqicsv.predictaqi_norm1>100]</span><span style="font-family: Arial, Helvetica, sans-serif;"> </span>

4.可使用&(并)与| (或)实现多条件筛选

aqicsv[(aqicsv["FID"]>37898) & (aqicsv["FID"]<38766) ]

aqicsv[(aqicsv.predictaqi_norm1>150) |(aqicsv.predictaqi_norm1<100) ]


5.如果只需要其中两列数据,而同时利用另外两列进行筛选时可以这样.如果只需要其中的某几列可以写为aqicsv[['FID','x','y']]

aqicsv[['x','y']][(aqicsv.FID >10000) | (aqicsv.predictaqi_norm1 >150)]


6.可用isin方法筛选一些特定值,但要将其写入某一列中

testlist = aqicsv.predictaqi_norm1[:50]

aqicsv['predictaqi_norm1'].isin(testlist)



0 0