小编Sor*_*deh的帖子

在将 Pandas 数据帧插入 BigQuery 表时处理 NaN 值

我正在使用以下代码将具有多个NaN值的 Pandas 数据框插入到 BigQuery 表中。数据帧在云 Datalab 中准备。

import google.datalab.bigquery as bq

bqtable = ('project_name', 'dataset_name', 'table_name')
table = bq.Table(bqtable)

table_schema = bq.Schema.from_data(df)
table.create(schema = table_schema, overwrite = True)

table.insert(df)
Run Code Online (Sandbox Code Playgroud)

由于NaN数据框中的值,我收到以下错误:

RequestException: HTTP request failed: Invalid JSON payload received. 
Unexpected token. : "user_id": NaN,
                               ^
Run Code Online (Sandbox Code Playgroud)

我知道这JSON不明白,NaN但我不能只是fillna用来将这些NaN值转换为其他值,因为我需要将这些字段插入nullBigQuery 表中。有没有人有解决方法?

dataframe python-3.x pandas google-bigquery google-cloud-datalab

9
推荐指数
1
解决办法
3192
查看次数