设置 AVMutableVideoComposition 指令会导致处理程序不被调用

IHa*_*ion 5 image-processing avfoundation ios swift swift4

我有一个功能来过滤 AVPlayerItem 的资产。问题之一是设置视频的转换。但是,每当我设置 的AVMutableVideoCompositionInstructionAVMutableVideoComposition,就不再调用处理程序。

这是我的代码:

private func filter(playerItem: AVPlayerItem) {

    let videoComposition = AVMutableVideoComposition(asset: playerItem.asset, applyingCIFiltersWithHandler: { (request) in
        print("Composing") // does not print whenever the instructions are added
        if let filteredImage = filterImage(request.sourceImage) {
            request.finish(with: filteredImage, context: nil)
        } else {
            request.finish(with: RenderError.couldNotFilter) // An error
        }
    })

    guard let videoTrack = playerItem.asset.tracks(withMediaType: .video).first else { return }

    let size = CGSize(width: videoTrack.naturalSize.height, height: videoTrack.naturalSize.width)
    videoComposition.renderSize = size

    let videoInstruction = AVMutableVideoCompositionInstruction()
    videoInstruction.timeRange = CMTimeRange(start: kCMTimeZero, duration: playerItem.asset.duration)

    let transformInstruction = AVMutableVideoCompositionLayerInstruction(assetTrack: videoTrack)
    let translate = CGAffineTransform(translationX: size.width, y: size.height)
    let rotate = CGAffineTransform(rotationAngle: CGFloat.pi)
    transformInstruction.setTransform(translate.concatenating(rotate), at: kCMTimeZero)
    videoInstruction.layerInstructions.append(transformInstruction)
    videoComposition.instructions.append(videoInstruction)

    playerItem.videoComposition = videoComposition
}
Run Code Online (Sandbox Code Playgroud)

为什么handler不再调用,我该如何解决?

如果你能回答,我会给你很多布朗尼积分!

Dan*_*iel 5

我向 Apple 提交了错误报告,显然这种行为不是错误。这是他们的回应:

工程已提供有关此问题的以下信息:

CoreImage 过滤和基于层指令的合成不能同时使用。当添加到使用 +[videoCompositionWithAsset:applyingCIFiltersWithHandler:] 初始化的 AVMutableVideoComposition 时,层指令不会运行。要在这种情况下使用层指令,请将功能移动到处理程序中,而不是将层指令添加到 AVMutableVideoComposition。

这解释了为什么指令似乎没有做任何事情,并且没有调用处理程序。他们说将转换功能移动到处理程序而不是使用指令;不幸的是,我不太清楚如何实施这个解决方案——这是另一个问题。