为什么我可以将 h264 编码视频从网络摄像头流式传输到显示器和文件，但不能流式传输原始视频？

Question

我想从 Logitech C920 网络摄像头流式传输原始视频，同时两者GStreamer 1.0 显示视频并将视频保存到文件。

如果我从相机流式传输 h264 编码的视频（相机提供硬件编码的 h264），则此方法有效，但如果我从相机流式传输原始视频，则此方法会失败。但是，如果我仅显示或仅保存到文件，则流式原始视频可以工作。

为什么它适用于 h264 视频流，但不适用于原始视频流？

h264 编码视频流从相机到显示和文件（有效）：

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-h264,width=640,height=480,framerate=15/1 ! tee name=t \
    t. ! queue ! h264parse ! avdec_h264 ! xvimagesink sync=false \
    t. ! queue ! h264parse ! matroskamux \
    ! filesink location='h264_dual.mkv' sync=false

从相机到仅显示的原始视频流（有效）：

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! xvimagesink sync=false

从相机到唯一文件的原始视频流（作品）：

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! videoconvert ! x264enc ! matroskamux \
    ! filesink location='raw_single.mkv' sync=false

从相机到显示器和文件的原始视频流（失败）：

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! tee name=t \
    t. ! queue ! xvimagesink sync=false \
    t. ! queue ! videoconvert ! x264enc ! h264parse ! matroskamux \
    ! filesink location='raw_dual.mkv' sync=false

最后一个命令（显示和文件的原始视频）失败，没有任何警告或错误。gst-launch 终端输出与仅写入文件时完全相同。xvimage 窗口出现并显示来自相机的图像，但图像没有改变（即冻结）。还会出现一个零字节文件。

我已经尝试了上述命令的多个版本，但我认为这些是可以重现问题的最少命令。

有谁明白我做错了什么？

Answer 1

可以将原始视频从网络摄像头（并非特定于 C920）流式传输到显示文件和 h.264 编码文件。该x264enc属性tune需要设置为zerolatency。

h.264 示例：

gst-launch-1.0 -v v4l2src device=/dev/video0 \ ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \ ! tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \ videoconvert ! x264enc tune=zerolatency ! h264parse ! \ matroskamux ! filesink location='raw_dual.mkv' sync=false

或者，可以完全跳过 h.264 并编码为 theora 或 vp8。

理论示例：

gst-launch-1.0 -v v4l2src device=/dev/video0 ! \ video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 ! \ tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \ videoconvert ! theoraenc ! theoraparse ! \ matroskamux ! filesink location='raw_dual.mkv' sync=false

vp8 示例：

gst-launch-1.0 -v v4l2src device=/dev/video0 ! \ video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 ! \ tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \ videoconvert ! vp8enc ! \ matroskamux ! filesink location='raw_dual.mkv' sync=false

非常感谢扬·斯珀尼和蒂姆。