Android(安卓)关于获取摄像头帧数据
转自http://blog.csdn.net/muyu114/article/details/7642765
第一部分:
由于Android下摄像头预览数据只能 ImageFormat.NV21 格式的,所以解码时要经过一翻周折.
[java] view plaincopy
- CameramCamera=Camera.open();
- Camera.Parametersp=mCamera.getParameters();
- p.setPreviewFormat(ImageFormat.NV21);
- /*这是唯一值,也可以不设置。有些同学可能设置成PixelFormat下面的一个值,其实是不对的,具体的可以看官方文档*/
- mCamera.setParameters(p);
- mCamera.startPreview();
下面是解码核心部分:
[java] view plaincopy- @Override
- publicvoidonPreviewFrame(byte[]data,Cameracamera){
- Sizesize=camera.getParameters().getPreviewSize();
- try{
- YuvImageimage=newYuvImage(data,ImageFormat.NV21,size.width,size.height,null);
- if(image!=null){
- ByteArrayOutputStreamstream=newByteArrayOutputStream();
- image.compressToJpeg(newRect(0,0,size.width,size.height),80,stream);
- Bitmapbmp=BitmapFactory.decodeByteArray(stream.toByteArray(),0,stream.size());
- stream.close();
- }
- }catch(Exceptionex){
- Log.e("Sys","Error:"+ex.getMessage());
- }
- }
代码很简单。就是把YUV数据转成 Bitmap 就行了,系统提供 YuvImage 类。
第二部分:
原理是利用手机的摄像头取景,然后解码视频流
拆分成位图,然后对位图进行处理和识别
要在android手机里面捕获视频流
当然,手机必须得有摄像头
然后嘛,第一步是在AndroidManifest.xml加入如下权限声明
<permission android:name="android.permission.CAMERA"></permission><uses-permission android:name="android.permission.CAMERA" /><uses-feature android:name="android.hardware.camera" /><uses-feature android:name="android.hardware.camera.autofocus" />
摄像头的预览和捕获只能通过surfaceview..
而且他的工作模式必须是SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS
不然不能在surfaceview里面显示出预览的图像
然后在surfaceCreated方法里面加入我们的摄像头初始化
public void surfaceCreated(SurfaceHolder arg0) { //启动相机服务 mCamera = Camera.open(); Log.i("Camera", "surface open"); try { //设置预览 这个holder是 SurfaceView的getHolder()方法得到的
mCamera.setPreviewDisplay(holder);
Camera.Parameters parameters = mCamera.getParameters(); //设置图片格式 parameters.setPictureFormat(PixelFormat.JPEG); //设置预览的帧数,受硬件影响.
parameters.setPreviewFrameRate(10);
//设置尺寸 parameters.setPreviewSize(preV.getWidth(), preV.getHeight()); mCamera.setParameters(parameters); //设置回调的类
mCamera.setPreviewCallback(new ViewCallback(preV, this)); //开始预览 mCamera.startPreview(); } catch (Exception e) { //释放相机 mCamera.release(); mCamera = null; return; }}
然后看看我们的ViewCallback类
在这个类里面要实现PreviewCallback
主要是里面的 public void onPreviewFrame(byte[] data, Camera arg1) {}
data就是返回的数据流了, 不过麻烦的是这个流并不是rgb编码的,是YUV420SP编码的,
Camera.Parameters 里面有个setPreviewFormat() 这个虽然可以设置 但是具体能不能编码成JPEG是受你的手机影响的
老老实实得解码吧...网上关于YUV420SP编码的内容相当相当少..
static public void decodeYUV420SP(byte[] rgbBuf, byte[] yuv420sp, int width, int height) { final int frameSize = width * height;if (rgbBuf == null)throw new NullPointerException("buffer 'rgbBuf' is null");if (rgbBuf.length < frameSize * 3)throw new IllegalArgumentException("buffer 'rgbBuf' size "+ rgbBuf.length + " < minimum " + frameSize * 3);if (yuv420sp == null)throw new NullPointerException("buffer 'yuv420sp' is null");if (yuv420sp.length < frameSize * 3 / 2)throw new IllegalArgumentException("buffer 'yuv420sp' size " + yuv420sp.length+ " < minimum " + frameSize * 3 / 2); int i = 0, y = 0; int uvp = 0, u = 0, v = 0; int y1192 = 0, r = 0, g = 0, b = 0; for (int j = 0, yp = 0; j < height; j++) { uvp = frameSize + (j >> 1) * width; u = 0; v = 0; for (i = 0; i < width; i++, yp++) { y = (0xff & ((int) yuv420sp[yp])) - 16; if (y < 0) y = 0; if ((i & 1) == 0) { v = (0xff & yuv420sp[uvp++]) - 128; u = (0xff & yuv420sp[uvp++]) - 128; } y1192 = 1192 * y; r = (y1192 + 1634 * v); g = (y1192 - 833 * v - 400 * u); b = (y1192 + 2066 * u); if (r < 0) r = 0; else if (r > 262143) r = 262143; if (g < 0) g = 0; else if (g > 262143) g = 262143; if (b < 0) b = 0; else if (b > 262143) b = 262143; rgbBuf[yp * 3] = (byte)(r >> 10); rgbBuf[yp * 3 + 1] = (byte)(g >> 10); rgbBuf[yp * 3 + 2] = (byte)(b >> 10); } } }
具体怎么实现的我就不是很清楚了..好像是灰度在前面 然后把蓝色和青色混合成一个变量跟在后面..
但是呢.这个方法效率很低..特别是些cpu差的机器
可以数数..每次都是横向*纵向 算法复杂度挺高的..
然后我把他压缩了10倍..就是每隔10个点取一次,效率瞬间就上来了.
现在运行你的程序, 你可能会发现摄像头的样子很奇怪。
其实是因为屏幕方向的问题
把你的屏幕设置为永久横向即可
this.setRequestedOrientation(ActivityInfo.SCREEN_ORIENTATION_LANDSCAPE);//覆盖屏幕 不显示通知栏this.requestWindowFeature(Window.FEATURE_NO_TITLE);getWindow().setFlags(WindowManager.LayoutParams.TYPE_STATUS_BAR, WindowManager.LayoutPar
更多相关文章
- Android2.2 API 中文文档系列(2) —— EditText
- android edittext 设置行距不影响光标高度
- Android(安卓)TabLayout 浅显总结
- Android(安卓)Studio(二):快捷键设置、插件安装
- Android(安卓)底部虚拟按键颜色修改
- Android(安卓)View类属性及方法
- android 设置progressbar的背景颜色
- Android基础 --- Widget
- Android全屏时软键盘遮住输入框修改布局解决方案