从pandas groupby返回聚合数据帧

时间:2013-02-21 13:44:51

标签: python group-by pandas

我正试图用方法包围Pandas group。我想编写一个函数来执行一些聚合函数,然后返回一个Pandas DataFrame。这是使用sum()的简化示例。我知道有更简单的方法来做简单的求和,在现实生活中我的功能更复杂:

import pandas as pd
df = pd.DataFrame({'col1': ['A', 'A', 'B', 'B'], 'col2':[1.0, 2, 3, 4]})

In [3]: df
Out[3]: 
  col1  col2
0    A     1
1    A     2
2    B     3
3    B     4

def func2(df):
    dfout = pd.DataFrame({ 'col1' : df['col1'].unique() ,
                           'someData': sum(df['col2']) })
    return  dfout

t = df.groupby('col1').apply(func2)

In [6]: t
Out[6]: 
       col1  someData
col1                 
A    0    A         3
B    0    B         7

我没想到会有两次col1,也不希望神秘指数看起来像什么。我真的以为我会得到col1& someData

在我的真实应用程序中,我正在按多列分组,并且真的想要获取DataFrame而不是Series对象。
关于Pandas在上面的例子中做了什么的解决方案或解释的任何想法?

-----添加信息-----

我应该从这个例子开始,我想:

In [13]: import pandas as pd

In [14]: df = pd.DataFrame({'col1':['A','A','A','B','B','B'], 'col2':['C','D','D','D','C','C'], 'col3':[.1,.2,.4,.6,.8,1]})

In [15]: df
Out[15]: 
  col1 col2  col3
0    A    C   0.1
1    A    D   0.2
2    A    D   0.4
3    B    D   0.6
4    B    C   0.8
5    B    C   1.0

In [16]: def func3(df):
   ....:         dfout =  sum(df['col3']**2)
   ....:         return  dfout
   ....: 

In [17]: t = df.groupby(['col1', 'col2']).apply(func3)

In [18]: t
Out[18]: 
col1  col2
A     C       0.01
      D       0.20
B     C       1.64
      D       0.36

在上图中,apply()功能的结果是Pandas系列。它缺少df.groupby的groupby列。我正在努力的本质是如何创建一个我应用于groupby的函数,该函数返回函数的结果和它被分组的列?

-----又一次更新------

看来如果我这样做:

 pd.DataFrame(t).reset_index()

我找回了一个非常接近我所追求的数据帧。

1 个答案:

答案 0 :(得分:7)

您看到列为0的原因是因为.unique()的输出是数组

了解申请如何运作的最佳方式是分组检查每个行动:

In [11] :g = df.groupby('col1')

In [12]: g.get_group('A')
Out[12]: 
  col1  col2
0    A     1
1    A     2

In [13]: g.get_group('A')['col1'].unique()
Out[13]: array([A], dtype=object)

In [14]: sum(g.get_group('A')['col2'])
Out[14]: 3.0

大多数情况下,您希望这是一个汇总的

grouped.apply的输出将始终将组标签作为索引('col1'的唯一值),因此col1的示例构造对我来说似乎有点迟钝。

注意:要将'col1'(索引)弹回列,您可以调用reset_index,所以在这种情况下。

In [15]: g.sum().reset_index()
Out[15]: 
  col1  col2
0    A     3
1    B     7
相关问题