带有UTF-8数据的Python CSV DictReader

Question

AFAIK,Python(v2.6)csv模块默认不能处理unicode数据,对吗？在Python文档中有一个关于如何从UTF-8编码文件中读取的示例.但是此示例仅将CSV行作为列表返回.我希望按名称访问行列,csv.DictReader但是使用UTF-8编码的CSV输入文件.

谁能告诉我如何以有效的方式做到这一点？我将不得不处理100个MByte大小的CSV文件.

Answer 1

我自己想出了一个答案:

def UnicodeDictReader(utf8_data, **kwargs):
    csv_reader = csv.DictReader(utf8_data, **kwargs)
    for row in csv_reader:
        yield {unicode(key, 'utf-8'):unicode(value, 'utf-8') for key, value in row.iteritems()}

_{注意:这已更新,因此根据评论中的建议解码密钥}

Answer 2

对我而言，关键不是操纵csv DictReader args，而是操纵文件打开器本身。这达到了目的：

with open(filepath, mode="r", encoding="utf-8-sig") as csv_file:
    csv_reader = csv.DictReader(csv_file)

不需要特殊的课程。现在，无论有没有BOM，我都可以打开文件而不会崩溃。