一、前言

本文主要介绍了在Python中,如何利用Pandas去读取数据、查询指定条件的数据、以及数据的详细信息.

二、数据集

网上随便找的数据集

三、数据查看常用方法

1、读取数据

import pandas as pd

#读取excel文件

data=pd.read_excel('C:/Users/abc/Desktop/users_info.xlsx')

2、查看数据的大小

数据量(行)、数据指标(列)、数据维度、尺寸

#查看数据尺寸

print(data.shape)

#查看数据数量

print(data.size)

3、获取前/后N条数据

获取前4条数据:head()方法

print(data.head(4))

默认获取前5条数据:

print(data.head())

获取后N条数据: 使用tail()函数默认显示后5条

print(data.tail(4))

4、完整展示每个字段的数据

如下图:有些字段的数据被折叠起来,用省略号表示

可以通过设置界面显示的最大列数据量来解决参数:max_columns若设置的数大于数据表的列数,则可以完整地展示所有列的内容比如数据表共有37列数据,我们不妨把数字设置为40

#设置界面显示的最大行列数据量

#若设置的数大于数据表的列数,则可以完整地展示所有列的内容

pd.options.display.max_columns= 40

data.head()

结果: 可以看到之前被折叠的数据已经全部展示出来了

若不知道数据有多少列,参数max_columns的值可以设为None,也可以完整展示所有字段的数据

#设置界面显示的最大列数据量

#若设置的数大于数据表的列数,则可以完整地展示所有列的内容

pd.options.display.max_columns= None

data.head()

5、行的数据被折叠

如图:数据表的行数较多时,直接展示的话,部分数据会被折叠起来,用省略号表示

设置最大行参数max_rows的值即可解决pd.options.display.max_rows= None :即展示所有行的数据若数据量较大,数据全部展示的话,比较耗时间,此时可以选择head()方法来显示前N条数据

#设置界面显示的最大行数据量

#若设置的数大于数据表的列数,则可以完整地展示所有列的内容

pd.options.display.max_rows= None

data

四、查看指定条件的数据

1、查询指定字段内容的数据

如图:字段名为"ORGANIZE_NAME",字段值为“统计班”的数据共有27条,37是指数据表共有37个字段

#查看指定条件的数据表

data[data['ORGANIZE_NAME']=='统计班'].shape

2、查询条件的叠加

如图:字段名为"ORGANIZE_NAME",字段值为“统计班”,并且字段”address“为广州的数据共有22条

#叠加条件

data[data['ORGANIZE_NAME']=='统计班'][data['address']=='广州'].shape

3、查看指定行/列的数据

(1)查看指定列

查看字段名为 "ORGANIZE_NAME"的前5个内容:

#查看指定列

data["ORGANIZE_NAME"].head()

查看字段名为"ORGANIZE_NAME" 和 字段名为“address” 的前5个内容:

#查看多列数据

data[["ORGANIZE_NAME","address"]].head()

(2)查看指定行

【20:30】: 查询的数据范围包含左区间,不包含右区间

#查看指定行

data[20:25]

(3)查看指定的行和列

使用loc方法loc[20,“ORGANIZE_NAME”]: 即查看第20行,字段名为“ORGANIZE_NAME ” 的数据

#查看指定的行和列

data.loc[20,"ORGANIZE_NAME"]

查看字段名为“ORGANIZE_NAME ” 第20到30行的数据

#查看指定的行和列

data.loc[20:30,"ORGANIZE_NAME"]

查看多行多列数据:

#查看指定的行和列

data.loc[20:30,["ORGANIZE_NAME","ACCOUNT"]]

iloc方法:

该方法可以对列进行索引查询,而loc方法不可以对列进行索引查询查看前5列的第20-30行的数据

#查看指定行和列

data.iloc[20:31,:5]

iat方法:查看指定行和列的数据: 查询第10行第1列的数据:

#查看指定行和列

data.iat[10,0]

等价于:

#查看指定行和列

data.loc[10,"USER_ID"]

五、查看数据的详细信息

1、查看数据的详细信息、数据指标的类型

#查看数据的详细信息和数据指标的类型

data.dtypes

2、统计不同类型数据指标的数量

比如下图:数据类型为 int64 的有2个字段

#统计不同类型数据指标的数量

from collections import Counter

Counter(data.dtypes.values)

3、查看数据的详细信息

包括:指标类型统计、数据大小、内存占用信息

#查看数据的详细信息、指标类型统计、数据大小、内存占用信息

data.info()

相关文章

评论可见,请评论后查看内容,谢谢!!!
 您阅读本篇文章共花了: