CIFilter / CIKernel 中的最大图像大小？

Question

有谁知道自定义 CIFilter 对图像大小的限制是什么？我创建了一个过滤器，当图像高达 2 兆像素时，它会按预期执行，但当图像更大时会产生非常奇怪的结果。我已经在我的可可应用程序和石英作曲家中对此进行了测试。我开发的过滤器是一个几何类型的失真过滤器，（我认为）需要一个 ROI 和一个跨越整个输入图像的 DOD。我创建了这个过滤器来重新映射全景图像，所以我希望它可以处理非常大（50-100 兆像素）的图像。

作为一个简单的测试，考虑以下 CIFilter（可以在 Quartz Composer 中使用），它简单地转换图像，以便将图像的左下角转换到中心（我知道这可以通过仿射变换来完成，但我需要在更复杂的过滤器中执行这样的操作）。当图像为 2000x1000 时，此过滤器按预期工作，但当输入图像为 4000x2000 像素时会产生奇怪的结果。问题在于，要么平移没有将角准确移动到中心，要么图像输出完全消失。我注意到大图像上更复杂的过滤器的其他奇怪问题，但我认为这个简单的过滤器说明了我的问题，可以在 Quartz Composer 中复制。

kernel vec4 equidistantProjection(sampler src, __color color)
{
     vec2 coordinate = samplerCoord(src);
     vec2 result;
     vec4 outputImage;

     result.x = (coordinate.x - samplerSize(src).x / 2.0);
     result.y = (coordinate.y - samplerSize(src).y / 2.0);

     outputImage = unpremultiply(sample(src,result));

     return premultiply(outputImage);
}

使用工作坐标而不是采样器坐标时会出现相同的奇怪行为，但在这种情况下，大小为 2000x1000 的图像会出现错误，但对于大小为 1000x500 的图像可以正常工作

kernel vec4 equidistantProjection(sampler src, __color color, vec2 destinationDimensions)
{
     vec2 coordinate = destCoord();
     vec2 result;
     vec4 outputImage;

     result.x = (coordinate.x - destinationDimensions.x / 2.0);
     result.y = (coordinate.y - destinationDimensions.y / 2.0);

     outputImage = unpremultiply(sample(src,result));
     outputImage = unpremultiply(sample(src,samplerTransform(src, result)));

     return premultiply(outputImage);
}

作为参考，我在过滤器- (CIImage *)outputImage方法的 Objective-C 部分添加了以下内容，以将 DOD 设置为整个输入图像。

- (CIImage *)outputImage
{
    CISampler *src = [CISampler samplerWithImage: inputImage];



     NSArray * outputExtent = [NSArray arrayWithObjects:
            [NSNumber numberWithInt:0],
            [NSNumber numberWithInt:0],
            [NSNumber numberWithFloat:[inputImage extent].size.width],
            [NSNumber numberWithFloat:[inputImage extent].size.height],nil];


return [self apply: filterKernel, src, inputColor, zoom, viewBounds, inputOrigin,
     kCIApplyOptionDefinition, [src definition], kCIApplyOptionExtent, outputExtent, nil];

}

此外，我添加了以下方法来设置我在我的- (id)init方法中调用的 ROI ：[filterKernel setROISelector:@selector(regionOf:destRect:userInfo:)];

- (CGRect) regionOf:(int)samplerIndex destRect:(CGRect)r userInfo:obj
{

     return r;
}

对此问题的任何帮助或建议将不胜感激。我确信 CIFilters 可以处理更大的图像，因为我使用了超过 50 兆像素图像的 CIBumpDistortion 所以我一定做错了什么。有任何想法吗？

Answer 1

使用 CoreImage 我发现它可以将大图像切割成部分。例如，在您的情况下，4k x 2k 图像可以拆分为 4 个 2k x 1k 图像并单独渲染。不幸的是，这种优化技巧会影响samplerCoord并且一些依赖于坐标的过滤器在大图像上无法正确工作。

我的解决方案是使用destCoord而不是samplerCoord。当然，您应该记住，可以在非零原点和destCoord 中渲染图像。我编写了自己的过滤器，因此我能够将整个范围作为 vec4 参数传递。

示例：尝试使用 CIFilter 生成图像，如下所示：

float gray = (samplerCoord.x / samplerSize.width) * (samplerCoord.y / samplerSize.height);

这个输出应该给我们 (0,0) 处的黑色和 (1,1) 处的白色，对吗？但是，对于大图像，您会看到很少的四边形，而不是单个渐变。发生这种情况是由于来自 CoreImage 引擎的优化渲染，我还没有找到传递它的方法，但是您可以通过这种方式重新编写内核：

float gray = ((destCoord.x - rect.x) / rect.size) * ((destCoord.y - rect.y) / rect.height)

其中rect是您必须通过的采样器的实际范围。我为此使用了 [inputImage extent] ，但它取决于过滤器，并且在您的情况下可以是其他内容。

希望这个解释说清楚了。顺便说一句，即使使用大图像，系统内核看起来也能正常工作，因此您应该只在自定义内核中担心这些技巧。