通过分割推断不同的补丁大小与训练补丁大小是否正确？

Question

我正在用高分辨率图像（高于 8GB）训练卫星模型。我生成较小的补丁来处理巨大的图像。使用与训练补丁大小不同的补丁大小进行推理是否正确？

exp: 训练patch大小为512*512

推理补丁大小为2048*2048（它减少了处理时间，结果看起来不错）

*不调整大小

Answer 1

这取决于您的型号。

如果您的模型是完全卷积模型，那么它具有潜在的平移等方差属性。网络的预测不受其感受野之外的事物的影响，因此增加输入大小（不调整大小）不应影响预测。

但是，如果您的模型基于 Transformers/Attention，那么您将不再具有平移等方差，并且网络的感受野将成为整个输入。因此，改变输入大小将导致不同的预测。

了解您的型号。