楼主: casey_c
1775 1

[程序分享] 数据集的聚合(Aggregation)与分组(Grouping) [推广有奖]

  • 0关注
  • 10粉丝

博士生

92%

还不是VIP/贵宾

-

威望
0
论坛币
96 个
通用积分
2.0091
学术水平
2 点
热心指数
15 点
信用等级
2 点
经验
11502 点
帖子
278
精华
0
在线时间
94 小时
注册时间
2016-11-22
最后登录
2022-5-2

相似文件 换一批

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
首先导入所需的 Pandas 库与 Numpy 库,以及构建方便于结果展示的 display 类:


  1. import numpy as np
  2. import pandas as pd

  3. class display(object):
  4.     """Display HTML representation of multiple objects"""
  5.     template = """<div style="float: left; padding: 10px;">
  6.     <p style='font-family:"Courier New", Courier, monospace'>{0}</p>{1}
  7.     </div>"""
  8.     def __init__(self, *args):
  9.         self.args = args
  10.         
  11.     def _repr_html_(self):
  12.         return '\n'.join(self.template.format(a, eval(a)._repr_html_())
  13.                          for a in self.args)
  14.    
  15.     def __repr__(self):
  16.         return '\n\n'.join(a + '\n' + repr(eval(a))
  17.                            for a in self.args)
复制代码
接下来,我们导入 Seaborn 库,我们可以在这个库里找到我们所需的示例数据——一份天文观测数据:


  1. import seaborn as sns
  2. planets = sns.load_dataset('planets')
  3. planets.shape
复制代码
(1035, 6)
如下所示,我们的天文观测数据中一共有1035条记录,包含了所观测星球的轨道周期、质量等 6 个字段:
  1. planets.head()
复制代码
1.jpg 作为一般的流程,我们会对得到的数据集进行一下汇总分析,在前面的章节中我们曾经了解过 Pandas 库中自带的 sum 函数与 mean 函数:
  1. rng = np.random.RandomState(42)
  2. ser = pd.Series(rng.rand(5))
  3. ser
复制代码
2.jpg
  1. ser.sum()
复制代码
2.8119254917081569
  1. ser.mean()
复制代码
0.56238509834163142
  1. df = pd.DataFrame({'A': rng.rand(5),
  2.                    'B': rng.rand(5)})
  3. df
复制代码
3.jpg
  1. df.mean()
复制代码
4.jpg
  1. df.mean(axis='columns')
复制代码
5.jpg 在这个例子中,推荐大家使用 describe 函数,这个函数能够一次性输出每个列元素的多项关键统计指标,并且组织为数据框形式:
  1. planets.dropna().describe()
复制代码
6.jpg 接下来,我们将向大家演示如何进行数据的分组,Pandas 库中的 groupby 函数能够根据指定的列名创建对应的 DataFrameGroupBy 对象:
  1. df = pd.DataFrame({'key': ['A', 'B', 'C', 'A', 'B', 'C'],
  2.                    'data': range(6)}, columns=['key', 'data'])
  3. df
复制代码
7.jpg
  1. df.groupby('key')
复制代码
<pandas.core.groupby.DataFrameGroupBy object at 0x7feaf87b9050>
对 DataFrameGroupBy 调用一系列函数则可以得到我们想要的分组汇总结果,如计算样本数总和:
  1. df.groupby('key').sum()
复制代码
8.jpg
我们类似的操作处理示例的天文观测数据,查看一下每一种 method 下观测到的星球轨道周期中位数:
  1. planets.groupby('method')
复制代码
<pandas.core.groupby.DataFrameGroupBy object at 0x7feaf87b9a90>
  1. planets.groupby('method')['orbital_period']
复制代码
<pandas.core.groupby.SeriesGroupBy object at 0x7feaf87d6050>
  1. planets.groupby('method')['orbital_period'].median()
复制代码

9.jpg
以上内容转自 数析学院,原文内容较多,暂时搬运到这,有需要的同学可以直接查看原文
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝


沙发
casey_c 发表于 2017-3-6 14:37:04 |只看作者 |坛友微信交流群

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-4-27 02:25