在huggingface库中,有一种特殊格式的数据集,称为箭头数据集
https://arrow.apache.org/docs/python/dataset.html
https://huggingface.co/datasets/wiki_lingua
我必须将普通的 pandas 数据框转换为数据集或读取表格 csv 文件作为数据集。
那可能吗?
pandas pyarrow
pandas ×1
pyarrow ×1