我一直在尝试使用新的低级MediaCodec,在Android平板电脑上使用H264编码来处理摄像头捕获的输入.我已经遇到了一些困难,因为MediaCodecAPI的文档很少,但我终于有了一些工作要做.
我按如下方式设置相机:
Camera.Parameters parameters = mCamera.getParameters();
parameters.setPreviewFormat(ImageFormat.YV12); // <1>
parameters.setPreviewFpsRange(4000,60000);
parameters.setPreviewSize(640, 480);
mCamera.setParameters(parameters);
Run Code Online (Sandbox Code Playgroud)
对于编码部分,我正在实例化MediaCodec对象,如下所示:
mediaCodec = MediaCodec.createEncoderByType("video/avc");
MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 640, 480);
mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 500000);
mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 15);
mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT,
MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar); // <2>
mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
mediaCodec.start();
Run Code Online (Sandbox Code Playgroud)
最终目标是创建一个RTP流(并与Skype对应),但到目前为止,我只是将原始H264直接流式传输到我的桌面.在那里,我使用以下GStreamer管道来显示结果:
gst-launch udpsrc port=5555 ! video/x-h264,width=640,height=480,framerate=15/1 ! ffdec_h264 ! autovideosink
Run Code Online (Sandbox Code Playgroud)
一切都很好,除了颜色.我需要在计算机中设置2个颜色格式:一个用于摄像头预览(行标记<1>)和一个用于MediaCodec对象(标记为<2>)
确定<1>我使用的线的可接受值parameters.getSupportedPreviewFormats().据此,我知道相机上唯一支持的格式是ImageFormat.NV21和ImageFormat.YV2.
为<2>,我检索的MediaCodecInfo.CodecCapabilities -object类型视频/ AVC,作为整数值与对应19(MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar和2130708361(其不与任何值对应MediaCodecInfo.CodecCapabilities).
除上述之外的任何其他值都会导致崩溃.
结合这些设置会得到不同的结果,我将在下面展示.这是Android上的屏幕截图(即"真实"颜色):
以下是Gstreamer显示的结果:
<1> …
我试图让它在Android 4.1上运行(使用升级的Asus Transformer平板电脑).感谢Alex对我之前的问题的回答,我已经能够将一些原始的H.264数据写入文件,但是这个文件只能播放ffplay -f h264,而且似乎丢失了有关帧速率的所有信息(极快的播放).此外,色彩空间看起来不正确(atm使用摄像机默认的编码器侧).
public class AvcEncoder {
private MediaCodec mediaCodec;
private BufferedOutputStream outputStream;
public AvcEncoder() {
File f = new File(Environment.getExternalStorageDirectory(), "Download/video_encoded.264");
touch (f);
try {
outputStream = new BufferedOutputStream(new FileOutputStream(f));
Log.i("AvcEncoder", "outputStream initialized");
} catch (Exception e){
e.printStackTrace();
}
mediaCodec = MediaCodec.createEncoderByType("video/avc");
MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 320, 240);
mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 125000);
mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 15);
mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, MediaCodecInfo.CodecCapabilities.COLOR_FormatYUV420Planar);
mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
mediaCodec.start();
}
public void close() {
try {
mediaCodec.stop();
mediaCodec.release();
outputStream.flush();
outputStream.close();
} …Run Code Online (Sandbox Code Playgroud) 我目前正在尝试将Android用作Skype端点.在这个阶段,我需要将视频编码为H.264(因为它是Skype支持的唯一格式)并将其封装在RTP中以使流式传输工作.
显然,MediaRecorder出于各种原因,它并不适合这种情况.一个是因为它在完成后添加了MP4或3GP标头.另一个原因是为了将延迟降至最低,硬件加速可能会派上用场.这就是为什么我想利用最近的低级别增列和框架,是MediaCodec,MediaExtractor等
目前,我计划如下工作.相机将其视频写入缓冲区.MediaCodec使用H264对视频进行编码,并将结果写入另一个缓冲区.此缓冲区由RTP封装器读取,后者将流数据发送到服务器.这是我的第一个问题:这个计划听起来对你有用吗?
现在我已经陷入第一步了.由于互联网上关于使用相机的所有文档都使用了MediaRecorder,我找不到在编码之前将原始数据存储到缓冲区的方法.是addCallbackBuffer适合呢?任何人都有一个例子的链接?
接下来,我找不到很多关于MediaCodec的文档(因为它相当新).有固定教程的人吗?
最后:关于RTP库的任何建议?
非常感谢提前!
随着AndroidPlot网站的关闭,我有点陷入这个问题.已经提出了几个类似的问题,但没有一个得到适当的回答,所以我走了.
我想知道如何重新标记我的X轴.例如,如果我想绘制关于月度数据的值,我会(1, 82)为Januari,(2,67)Februari 绘制它,依此类推.之后,我想将X标签更改[1, 2, 3, ...]为x_labels = ["Januari", "Februari", ...].我怎样才能做到这一点?
哦,请提供一个答案,x_labels可以是任何东西(如果有一些特定的月度标签方法,你永远不知道).
谁可以帮忙?谢谢!
我一直在努力在我的Android应用程序中实现四到四系统.目的是让用户拍照,添加4个角点,并将从图像中提取的四边形作为矩形.
我看了一下这个方法和这个问题,为此使用OpenCV.结果代码是这样的:
public static Bitmap warp(Bitmap image, MyPoint p1, MyPoint p2, MyPoint p3, MyPoint p4) {
int resultWidth = 500;
int resultHeight = 500;
Mat inputMat = new Mat(image.getHeight(), image.getHeight(), CvType.CV_8UC4);
Utils.bitmapToMat(image, inputMat);
Mat outputMat = new Mat(resultWidth, resultHeight, CvType.CV_8UC4);
Point ocvPIn1 = new Point(p1.getX(), p1.getY());
Point ocvPIn2 = new Point(p2.getX(), p2.getY());
Point ocvPIn3 = new Point(p3.getX(), p3.getY());
Point ocvPIn4 = new Point(p4.getX(), p4.getY());
List<Point> source = new ArrayList<Point>();
source.add(ocvPIn1);
source.add(ocvPIn2);
source.add(ocvPIn3);
source.add(ocvPIn4);
Mat startM = …Run Code Online (Sandbox Code Playgroud) 我想使用MediaCodec对来自摄像头的数据进行编码(原因:它更低级,所以希望比使用MediaRecorder更快).使用Camera.PreviewCallBack,我将数据从相机捕获到一个字节缓冲区,以便将其传递给MediaCodec对象.
要做到这一点,我需要填写一个MediaFormat -object,如果我知道来自摄像头的数据的MIME代码,这将是相当容易的.我可以使用setPreviewFormat()选择te ImageFormat -class中声明的常量之一来选择这种格式.
因此我的问题是:给定ImageFormat类提供的不同选项来设置相机预览格式,相应的MIME类型代码是什么?
非常感谢提前.
使用display:table和display:table-rowCSS属性,我希望我的内容填充div的剩余可用高度.如果内容超出可用高度,我想要显示一个滚动条.
这是小提琴:http://jsfiddle.net/3HYJx/2/
Google Chrome和Safari中显示的行为是我想要实现的行为.但是,Firefox和Opera以不同的方式显示它.尚未尝试IE,但担心最坏的情况.
为什么这种行为如此不同?甚至更好:我如何在每个浏览器中实现我想要的(如Chrome中所示)?
非常感谢提前.