Pandas groupby() 比较并计算两列

Question

我有以下 Pandas 数据框：

name1   name2
A       B
A       A
A       C
A       A
B       B
B       A

我想添加一个名为的列，new该列对每组的计数name1频率name1与 相同name2。

因此，预期输出是以下数据帧：

name1   name2   new
A       B       2       
A       A       2
A       C       2
A       A       2
B       B       1
B       A       1

我已尝试以下操作，但出现错误：

df['new'] = df.groupby('name1').apply(lambda x: (x[x['name1'] == x['name2']].fillna(False).sum()))

类型错误：插入列的索引与框架索引不兼容

Answer 1

您可以比较name1，name2然后 group byname1和sum Trues：

df['new'] = df.name2.eq(df.name1).astype(int).groupby(df.name1).transform('sum')

df
#  name1 name2  new
#0     A     B    2
#1     A     A    2
#2     A     C    2
#3     A     A    2
#4     B     B    1
#5     B     A    1

或者，如果使用apply，则首先聚合计数，然后使用map生成new列：

cnt = df.groupby('name1').apply(lambda g: (g.name1 == g.name2).sum())
df['new'] = df.name1.map(cnt)

时间安排：

df = pd.concat([df]*10000)

%timeit df['new'] = df.name2.eq(df.name1).astype(int).groupby(df.name1).transform('sum')
# 100 loops, best of 3: 4.85 ms per loop

%%timeit
cnt = df.groupby('name1').apply(lambda g: (g.name1 == g.name2).sum())
df['new'] = df.name1.map(cnt)
# 10 loops, best of 3: 22.1 ms per loop