小编gle*_*man的帖子

MediaCodec和Camera:颜色空间不匹配

我一直在尝试使用新的低级MediaCodec,在Android平板电脑上使用H264编码来处理摄像头捕获的输入.我已经遇到了一些困难,因为MediaCodecAPI的文档很少,但我终于有了一些工作要做.

我按如下方式设置相机:

        Camera.Parameters parameters = mCamera.getParameters();
        parameters.setPreviewFormat(ImageFormat.YV12); // <1>
        parameters.setPreviewFpsRange(4000,60000);
        parameters.setPreviewSize(640, 480);            
        mCamera.setParameters(parameters);
Run Code Online (Sandbox Code Playgroud)

对于编码部分,我正在实例化MediaCodec对象,如下所示:

    mediaCodec = MediaCodec.createEncoderByType("video/avc");
    MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 640, 480);
    mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 500000);
    mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 15);
    mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar); // <2>
    mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mediaCodec.start();
Run Code Online (Sandbox Code Playgroud)

最终目标是创建一个RTP流(并与Skype对应),但到目前为止,我只是将原始H264直接流式传输到我的桌面.在那里,我使用以下GStreamer管道来显示结果:

gst-launch udpsrc port=5555 ! video/x-h264,width=640,height=480,framerate=15/1 ! ffdec_h264 ! autovideosink
Run Code Online (Sandbox Code Playgroud)

一切都很好,除了颜色.我需要在计算机中设置2个颜色格式:一个用于摄像头预览(行标记<1>)和一个用于MediaCodec对象(标记为<2>)

确定<1>我使用的线的可接受值parameters.getSupportedPreviewFormats().据此,我知道相机上唯一支持的格式是ImageFormat.NV21ImageFormat.YV2.

<2>,我检索的MediaCodecInfo.CodecCapabilities -object类型视频/ AVC,作为整数值与对应19(MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar和2130708361(其不与任何值对应MediaCodecInfo.CodecCapabilities).

除上述之外的任何其他值都会导致崩溃.

结合这些设置会得到不同的结果,我将在下面展示.这是Android上的屏幕截图(即"真实"颜色): 在Android平板电脑上输入 以下是Gstreamer显示的结果:

<1> …

android colors rtp gstreamer h.264

32
推荐指数
2
解决办法
2万
查看次数

使用Android MediaCodec从摄像头编码H.264

我试图让它在Android 4.1上运行(使用升级的Asus Transformer平板电脑).感谢Alex对我之前的问题的回答,我已经能够将一些原始的H.264数据写入文件,但是这个文件只能播放ffplay -f h264,而且似乎丢失了有关帧速率的所有信息(极快的播放).此外,色彩空间看起来不正确(atm使用摄像机默认的编码器侧).

public class AvcEncoder {

private MediaCodec mediaCodec;
private BufferedOutputStream outputStream;

public AvcEncoder() { 
    File f = new File(Environment.getExternalStorageDirectory(), "Download/video_encoded.264");
    touch (f);
    try {
        outputStream = new BufferedOutputStream(new FileOutputStream(f));
        Log.i("AvcEncoder", "outputStream initialized");
    } catch (Exception e){ 
        e.printStackTrace();
    }

    mediaCodec = MediaCodec.createEncoderByType("video/avc");
    MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 320, 240);
    mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 125000);
    mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 15);
    mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar);
    mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mediaCodec.start();
}

public void close() {
    try {
        mediaCodec.stop();
        mediaCodec.release();
        outputStream.flush();
        outputStream.close();
    } …
Run Code Online (Sandbox Code Playgroud)

android video-encoding video-streaming h.264 android-camera

30
推荐指数
3
解决办法
5万
查看次数

使用MediaCodec进行H264流媒体

我目前正在尝试将Android用作Skype端点.在这个阶段,我需要将视频编码为H.264(因为它是Skype支持的唯一格式)并将其封装在RTP中以使流式传输工作.

显然,MediaRecorder出于各种原因,它并不适合这种情况.一个是因为它在完成后添加了MP4或3GP标头.另一个原因是为了将延迟降至最低,硬件加速可能会派上用场.这就是为什么我想利用最近的低级别增列和框架,是MediaCodec,MediaExtractor

目前,我计划如下工作.相机将其视频写入缓冲区.MediaCodec使用H264对视频进行编码,并将结果写入另一个缓冲区.此缓冲区由RTP封装器读取,后者将流数据发送到服务器.这是我的第一个问题:这个计划听起来对你有用吗?

现在我已经陷入第一步了.由于互联网上关于使用相机的所有文档都使用了MediaRecorder,我找不到在编码之前将原始数据存储到缓冲区的方法.是addCallbackBuffer适合呢?任何人都有一个例子的链接?

接下来,我找不到很多关于MediaCodec的文档(因为它相当新).有固定教程的人吗?

最后:关于RTP库的任何建议?

非常感谢提前!

android rtp video-streaming h.264

8
推荐指数
2
解决办法
8971
查看次数

AndroidPlot:在X轴上设置标签

随着AndroidPlot网站的关闭,我有点陷入这个问题.已经提出了几个类似的问题,但没有一个得到适当的回答,所以我走了.

我想知道如何重新标记我的X轴.例如,如果我想绘制关于月度数据的值,我会(1, 82)为Januari,(2,67)Februari 绘制它,依此类推.之后,我想将X标签更改[1, 2, 3, ...]x_labels = ["Januari", "Februari", ...].我怎样才能做到这一点?

哦,请提供一个答案,x_labels可以是任何东西(如果有一些特定的月度标签方法,你永远不知道).

谁可以帮忙?谢谢!

android androidplot

5
推荐指数
1
解决办法
7217
查看次数

无法让OpenCV的warpPerspective在Android上运行

我一直在努力在我的Android应用程序中实现四到四系统.目的是让用户拍照,添加4个角点,并将从图像中提取的四边形作为矩形.

我看了一下这个方法这个问题,为此使用OpenCV.结果代码是这样的:

public static Bitmap warp(Bitmap image, MyPoint p1, MyPoint p2, MyPoint p3, MyPoint p4) {
    int resultWidth = 500;
    int resultHeight = 500;

    Mat inputMat = new Mat(image.getHeight(), image.getHeight(), CvType.CV_8UC4);
    Utils.bitmapToMat(image, inputMat);
    Mat outputMat = new Mat(resultWidth, resultHeight, CvType.CV_8UC4);

    Point ocvPIn1 = new Point(p1.getX(), p1.getY());
    Point ocvPIn2 = new Point(p2.getX(), p2.getY());
    Point ocvPIn3 = new Point(p3.getX(), p3.getY());
    Point ocvPIn4 = new Point(p4.getX(), p4.getY());
    List<Point> source = new ArrayList<Point>();
    source.add(ocvPIn1);
    source.add(ocvPIn2);
    source.add(ocvPIn3);
    source.add(ocvPIn4);
    Mat startM = …
Run Code Online (Sandbox Code Playgroud)

android opencv transform perspective

5
推荐指数
1
解决办法
6552
查看次数

Mime型Android相机PreviewFormat

我想使用MediaCodec对来自摄像头的数据进行编码(原因:它更低级,所以希望比使用MediaRecorder更快).使用Camera.PreviewCallBack,我将数据从相机捕获到一个字节缓冲区,以便将其传递给MediaCodec对象.

要做到这一点,我需要填写一个MediaFormat -object,如果我知道来自摄像头的数据的MIME代码,这将是相当容易的.我可以使用setPreviewFormat()选择te ImageFormat -class中声明的常量之一来选择这种格式.

因此我的问题是:给定ImageFormat类提供的不同选项来设置相机预览格式,相应的MIME类型代码是什么?

非常感谢提前.

video android mime android-camera

4
推荐指数
1
解决办法
4404
查看次数

CSS显示:填充高度的表格.Chrome/Safari与Firefox/Opera不同

使用display:tabledisplay:table-rowCSS属性,我希望我的内容填充div的剩余可用高度.如果内容超出可用高度,我想要显示一个滚动条.

这是小提琴:http://jsfiddle.net/3HYJx/2/

Google Chrome和Safari中显示的行为是我想要实现的行为.但是,Firefox和Opera以不同的方式显示它.尚未尝试IE,但担心最坏的情况.

为什么这种行为如此不同?甚至更好:我如何在每个浏览器中实现我想要的(如Chrome中所示)?

非常感谢提前.


Chrome和Safari:
Chrome/Safari示例

Firefox和Opera:
Firefox/Opera示例

css firefox google-chrome

2
推荐指数
1
解决办法
7452
查看次数