我想刮掉一页数据(使用Python Scrapy库),而不必在页面上定义每个字段.相反,我想使用id元素作为字段名称动态生成字段.
id
起初我认为最好的方法是拥有一个收集所有数据的管道,并在它拥有所有数据后输出.
然后我意识到我需要将数据传递给项目中的管道,但我无法定义项目,因为我不知道它将需要哪些字段!
解决这个问题的最佳方法是什么？
python scrapy
python ×1
scrapy ×1