我在 LinkedIn 上学习了一个关于多索引熊猫数据帧的简短教程,在那里我无法重现一个看似非常基本的操作(3:00)。您无需观看视频即可掌握问题。
以下使用来自 seaborn 的数据集的片段将显示我无法使用视频中显示的技术将列添加到多索引 Pandas 数据帧,并在此处的 SO 帖子中进行了描述。
开始了:
import pandas as pd
import seaborn as sns
flights = sns.load_dataset('flights')
flights.head()
flights_indexed = flights.set_index(['year', 'month'])
flights_unstack = flights_indexed.unstack()
print(flights_unstack)
Run Code Online (Sandbox Code Playgroud)
输出:
passengers
month January February March April May June July August September October November December
year
1949 112 118 132 129 121 135 148 148 136 119 104 118
1950 115 126 141 135 125 149 170 170 158 133 114 140
1951 145 150 178 163 172 178 199 199 184 162 146 166
1952 171 180 193 181 183 218 230 242 209 191 172 194
1953 196 196 236 235 229 243 264 272 237 211 180 201
1954 204 188 235 227 234 264 302 293 259 229 203 229
1955 242 233 267 269 270 315 364 347 312 274 237 278
1956 284 277 317 313 318 374 413 405 355 306 305 336
1957 315 301 356 348 355 422 465 467 404 347 310 337
1958 340 318 362 348 363 435 491 505 404 359 362 405
1959 360 342 406 396 420 472 548 559 463 407 362 405
1960 417 391 419 461 472 535 622 606 508 461 390 432
Run Code Online (Sandbox Code Playgroud)
现在我想附加一个列,显示每年每月的总和使用
flights_unstack.sum(axis = 1)
Run Code Online (Sandbox Code Playgroud)
输出:
year
1949 1520
1950 1676
1951 2042
1952 2364
1953 2700
1954 2867
1955 3408
1956 3939
1957 4421
1958 4572
1959 5140
1960 5714
Run Code Online (Sandbox Code Playgroud)
上面提到的两个来源通过使用一些简单的东西来证明这一点:
flights_unstack['passengers', 'total'] = flights_unstack.sum(axis = 1)
Run Code Online (Sandbox Code Playgroud)
在这里,'total' 应该作为现有索引下的一个新列出现。但我得到这个:
类型错误:无法将项目插入还不是现有类别的 CategoricalIndex
我正在使用 Python 3,2015 年视频中的作者也是如此。
这里发生了什么?
我仅使用上述系列中的值进行了大量尝试,以及将数据机器人重塑、转置、合并和连接为 pd.Series 和 pd.DataFrame。并重置索引。我可能忽略了一些重要的细节,现在我希望你们中的一些人提出建议。
编辑 1 - 这是在 jezrael 提出第一个建议后的尝试:
import pandas as pd
import seaborn as sns
flights = sns.load_dataset('flights')
flights.head()
flights_indexed = flights.set_index(['year', 'month'])
flights_unstack = flights_indexed['passengers'].unstack()
flights_unstack['total'] = flights_unstack.sum(axis = 1)
Run Code Online (Sandbox Code Playgroud)
输出:
类型错误:无法将项目插入还不是现有类别的 CategoricalIndex
改变:
flights_unstack = flights_indexed.unstack()
Run Code Online (Sandbox Code Playgroud)
到:
flights_unstack = flights_indexed['passengers'].unstack()
Run Code Online (Sandbox Code Playgroud)
用于Multiindex在列中删除。
最后一个是add_categories新列名称所必需的:
flights_unstack.columns = flights_unstack.columns.add_categories(['total'])
flights_unstack['total'] = flights_unstack.sum(axis = 1)
print (df)
January February March April May June July August September \
month
1949 112 118 132 129 121 135 148 148 136
1950 115 126 141 135 125 149 170 170 158
1951 145 150 178 163 172 178 199 199 184
1952 171 180 193 181 183 218 230 242 209
1953 196 196 236 235 229 243 264 272 237
1954 204 188 235 227 234 264 302 293 259
1955 242 233 267 269 270 315 364 347 312
1956 284 277 317 313 318 374 413 405 355
1957 315 301 356 348 355 422 465 467 404
1958 340 318 362 348 363 435 491 505 404
1959 360 342 406 396 420 472 548 559 463
1960 417 391 419 461 472 535 622 606 508
October November December total
month
1949 119 104 118 1520
1950 133 114 140 1676
1951 162 146 166 2042
1952 191 172 194 2364
1953 211 180 201 2700
1954 229 203 229 2867
1955 274 237 278 3408
1956 306 305 336 4003
1957 347 310 337 4427
1958 359 362 405 4692
1959 407 362 405 5140
1960 461 390 432 5714
Run Code Online (Sandbox Code Playgroud)
设置:
import pandas as pd
temp=u"""month;January;February;March;April;May;June;July;August;September;October;November;December
1949;112;118;132;129;121;135;148;148;136;119;104;118
1950;115;126;141;135;125;149;170;170;158;133;114;140
1951;145;150;178;163;172;178;199;199;184;162;146;166
1952;171;180;193;181;183;218;230;242;209;191;172;194
1953;196;196;236;235;229;243;264;272;237;211;180;201
1954;204;188;235;227;234;264;302;293;259;229;203;229
1955;242;233;267;269;270;315;364;347;312;274;237;278
1956;284;277;317;313;318;374;413;405;355;306;305;336
1957;315;301;356;348;355;422;465;467;404;347;310;337
1958;340;318;362;348;363;435;491;505;404;359;362;405
1959;360;342;406;396;420;472;548;559;463;407;362;405
1960;417;391;419;461;472;535;622;606;508;461;390;432"""
#after testing replace 'pd.compat.StringIO(temp)' to 'filename.csv'
df = pd.read_csv(pd.compat.StringIO(temp), sep=";", index_col=[0])
print (df)
df.columns = pd.CategoricalIndex(df.columns)
df.columns = df.columns.add_categories(['total'])
df['total'] = df.sum(axis = 1)
Run Code Online (Sandbox Code Playgroud)