将经过训练的 Spacy 2 管道迁移到 Spacy 3

Question

到目前为止，我一直在使用 spacy 2.3.1，并为我的自定义语言类训练并保存了几个管道。但现在使用 spacy 3.0，spacy.load('model-path')我面临着诸如此类config.cfg file not found的错误等问题。

升级 spacy 后是否必须从头开始训练模型？是否有迁移训练模型的分步指南？

Answer 1

恐怕您将无法仅迁移经过训练的管道。使用 v2 训练的管道与 v3 不兼容，因此您无法直接使用spacy.load它们。

您必须将代码库迁移到 v3，并重新训练模型。您有两个选择：

• 更新您的训练循环以将 API 调用从 v2 更改为 v3，请参阅此处了解更多详细信息： https: //spacy.io/usage/v3#migrating
• （推荐方法）：将您的训练代码完全转换为 v3 中的新配置系统。虽然这看起来可能是一个很大的差异，但您很快就会掌握配置系统的窍门，并且您会注意到与从头开始编写所有内容相比，它的功能更加强大且方便得多。要开始使用配置系统，请查看命令init config，例如：

python -m spacy init config config.cfg --lang en --pipeline ner,textcat --optimize accuracy

这将为您提供一些合理的默认设置，以及一个可以根据您的要求进一步自定义的配置文件。