yse*_*rka 3 python transformation pandas
在 a 之后groupby,使用时agg,如果columns:functions传递了一个 dict ,则函数将应用到相应的列中。然而,这种语法不适用于transform. 还有另一种方法可以在 中应用多个函数transform吗?
让我们举一个例子:
import pandas as pd
df_test = pd.DataFrame([[1,2,3],[1,20,30],[2,30,50],[1,2,33],[2,4,50]],columns = ['a','b','c'])
Out[1]:
a b c
0 1 2 3
1 1 20 30
2 2 30 50
3 1 2 33
4 2 4 50
def my_fct1(series):
return series.mean()
def my_fct2(series):
return series.std()
df_test.groupby('a').agg({'b':my_fct1,'c':my_fct2})
Out[2]:
c b
a
1 16.522712 8
2 0.000000 17
Run Code Online (Sandbox Code Playgroud)
前面的例子展示了如何将不同的函数应用于 中的不同列agg,但是如果我们想转换列而不聚合它们,agg就不能再使用了。所以:
df_test.groupby('a').transform({'b':np.cumsum,'c':np.cumprod})
Out[3]:
TypeError: unhashable type: 'dict'
Run Code Online (Sandbox Code Playgroud)
我们如何使用以下预期输出执行这样的操作:
a b c
0 1 2 3
1 1 22 90
2 2 30 50
3 1 24 2970
4 2 34 2500
Run Code Online (Sandbox Code Playgroud)
您仍然可以使用 dict ,但需要一些技巧:
df_test.groupby('a').transform(lambda x: {'b': x.cumsum(), 'c': x.cumprod()}[x.name])
Out[427]:
b c
0 2 3
1 22 90
2 30 50
3 24 2970
4 34 2500
Run Code Online (Sandbox Code Playgroud)
如果您需要保留a列,您可以执行以下操作:
df_test.set_index('a')\
.groupby('a')\
.transform(lambda x: {'b': x.cumsum(), 'c': x.cumprod()}[x.name])\
.reset_index()
Out[429]:
a b c
0 1 2 3
1 1 22 90
2 2 30 50
3 1 24 2970
4 2 34 2500
Run Code Online (Sandbox Code Playgroud)
另一种方法是使用 if else 检查列名:
df_test.set_index('a')\
.groupby('a')\
.transform(lambda x: x.cumsum() if x.name=='b' else x.cumprod())\
.reset_index()
Run Code Online (Sandbox Code Playgroud)
我认为现在(pandas 0.20.2)函数transform不是用dict- 具有类似函数的列名称来实现的agg。
如果函数Series以相同的长度返回:
df1 = df_test.set_index('a').groupby('a').agg({'b':np.cumsum,'c':np.cumprod}).reset_index()
print (df1)
a c b
0 1 3 2
1 1 90 22
2 2 50 30
3 1 2970 24
4 2 2500 34
Run Code Online (Sandbox Code Playgroud)
但如果需要聚合不同的长度join:
df2 = df_test[['a']].join(df_test.groupby('a').agg({'b':my_fct1,'c':my_fct2}), on='a')
print (df2)
a c b
0 1 16.522712 8
1 1 16.522712 8
2 2 0.000000 17
3 1 16.522712 8
4 2 0.000000 17
Run Code Online (Sandbox Code Playgroud)