`
rys5851968
  • 浏览: 147915 次
社区版块
存档分类
最新评论

Android开发:实时处理摄像头预览帧视频------浅析PreviewCallback,onPreviewFrame,AsyncTask的综合应用

 
阅读更多

很多时候,android摄像头模块不仅预览,拍照这么简单,而是需要在预览视频的时候,能够做出一些检测,比如最常见的人脸检测。在未按下拍照按钮前,就检测出人脸然后矩形框标示出来,再按拍照。那么如何获得预览帧视频么?

只需要在Activity里继承PreviewCallback这个接口就行了。示例如下:

public class RectPhoto extends Activity implements SurfaceHolder.Callback, PreviewCallback{}。(注意这个SurfaceHolder.Callback是用来预览摄像头视频,参见我的前贴)。

继承这个方法后,会自动重载这个函数:public void onPreviewFrame(byte[] data, Camera camera) {}这个函数里的data就是实时预览帧视频。一旦程序调用PreviewCallback接口,就会自动调用onPreviewFrame这个函数。调用PreviewCallback的方法有三种,可以参考这里,总共有三种方式调用这个回调。所谓回调就是当条件满足时,自动触发调用这个函数。分别是:.setPreviewCallback, setOneShotPreviewCallback, setPreviewCallbackWithBuffer, 我一般是使用第二种方式。

这里解释下,如果Activity继承了PreviewCallback这个接口,只需 Camera.setOneShotPreviewCallback(this);就可以了。程序会自动调用主类Activity里的onPreviewFrame函数。如果Camera.setOneShotPreviewCallback()这个函数是在主类Activity里的内部类如class A里面,里面的参数应写为Camera.setOneShotPreviewCallback(YourActivity.this)。当然这里,也可以定义一个变量,如Camera.PreviewCallback mPreviewCallback,在调用的时候用Camera.setOneShotPreviewCallback(mPreviewCallback)来完成。相信很多人都熟悉这点,就不罗嗦了。

按理说只要在onPreviewFrame()这个函数里写你的处理程序就可以了。当通常不这么做,因为处理实时预览帧视频的算法可能比较复杂,这就需要借助AsyncTask开启一个线程在后台处理数据。这里假设我们定义一个FaceTask来进行人脸检测,可以这样写:

/*自定义的FaceTask类,开启一个线程分析数据*/
private class FaceTask extends AsyncTask<Void, Void, Void>{

private byte[] mData;
//构造函数
PalmTask(byte[] data){
this.mData = data;
}

@Override
protected Void doInBackground(Void... params) {
// TODO Auto-generated method stub
Size size = myCamera.getParameters().getPreviewSize(); //获取预览大小
final int w = size.width; //宽度
final int h = size.height;
final YuvImage image = new YuvImage(mData, ImageFormat.NV21, w, h, null);
ByteArrayOutputStream os = new ByteArrayOutputStream(mData.length);
if(!image.compressToJpeg(new Rect(0, 0, w, h), 100, os)){
return null;
}
byte[] tmp = os.toByteArray();
Bitmap bmp = BitmapFactory.decodeByteArray(tmp, 0,tmp.length);
doSomethingNeeded(bmp); //自己定义的实时分析预览帧视频的算法

return null;
}

}

注意上面的bmp就是Bitmap格式的实时预览帧数据。doSomethingNeeded(bmp) 就是你要对预览帧视频进行的处理,可以是检测人脸或其他,如分析有无火灾。或者是进行传输。 另外,这里是通过YuvImage和ImageFormat.NV21来解析数据的。在华为u9200上,android4.0.3的系统运行良好。不同手机上支持的格式可能有所不同。网上也有自己写算法进行转化的,需要的可以自己找,但这里如果支持这个格式就不用自己写转换算法了。
onPreviewFrame()里可以这样写:

/*获取预览帧视频*/
public void onPreviewFrame(byte[] data, Camera camera) {
// TODO Auto-generated method stub
if(null != mFaceTask){
switch(mFaceTask.getStatus()){
case RUNNING:
return;
case PENDING:
mFaceTask.cancel(false);
break;
}
}
mFaceTask = new PalmTask(data);
mFaceTask.execute((Void)null);

}

上面的mFaceTask是一个全局变量。通过onPreviewFrame,AsyncTask的综合应用,让复杂的处理算法执行在后台,也就是doInBackground这里,是不是比较绿色?

接下来就是什么时候触发onPreviewFrame()这个函数里,可以是按一个按键触发一次,就在按键的监听里写上 myCamera.setOneShotPreviewCallback(RectPhoto.this);便会自动触发一次。有人说想先聚焦,然后再分析预览帧。就在onAutofocus里的回调写。如下:

//自动聚焦变量回调
myAutoFocusCallback = new AutoFocusCallback() {

public void onAutoFocus(boolean success, Camera camera) {
// TODO Auto-generated method stub
if(success)//success表示对焦成功
{
Log.i(tag, "myAutoFocusCallback: success...");
myCamera.setOneShotPreviewCallback(RectPhoto.this);


}
else
{
//未对焦成功

Log.i(tag, "myAutoFocusCallback: 失败了...");

//这里也可以加上myCamera.autoFocus(myAutoFocusCallback),如果聚焦失败就再次启动聚焦。
}


}
};

大多数时候,希望程序自动每隔多长时间,自动进行一次检测预览帧。这也好办,实施如下:

	class ScanThread implements Runnable{

		public void run() {
			// TODO Auto-generated method stub
			while(!Thread.currentThread().isInterrupted()){
				try {
					if(null != myCamera && isPreview)
					{
//myCamera.autoFocus(myAutoFocusCallback);
						myCamera.setOneShotPreviewCallback(RectPhoto.this);
						Log.i(tag, "setOneShotPreview...");
					}
					Thread.sleep(1500);
				} catch (InterruptedException e) {
					// TODO Auto-generated catch block
					e.printStackTrace();
					Thread.currentThread().interrupt();
				}
			}
			
		}
		
	}
在onCreate里new Thread(new ScanThread()).start()开启扫描线程。如果想手动触发中止这种扫描活动,可以在ScanThread里的while循环里设置标志位,具体可看我以前的博文


最后提醒的是,如果程序中加入了previewCallback,在surfaceDestroy释放camera的时候,最好执行myCamera.setOneShotPreviewCallback(null); 或者myCamera.setPreviewCallback(null);中止这种回调,然后再释放camera更安全。否则可能会报错。

欢迎android爱好者加群248217350,备注:yanzi

-----------------------------------------------------------------本文系原创,转载请注明作者:yanzi1225627


分享到:
评论

相关推荐

    基于Socket的Android手机视频实时传输

    主要是在手机客户端(Android)通过实现Camera.PreviewCallback接口,在其onPreviewFrame重载函数里面获取摄像头当前图像数据,然后通过Socket将图像数据和相关的用户名、命令等数据传输到服务器程序中。服务器端...

    Android直播实现(一)Android端推流、播放

    需要自己实现的代码只是打开摄像头,写一个SurfaceView进行预览,然后实现PreviewCallback将摄像头每一帧的数据交给javacv即可 javacv地址:https://github.com/bytedeco/javacv demo地址:...

    Android代码-GraphicsTestBed

    GraphicsTestBed 此项目为学习Android Graphics时写的各种Demo,根据目录排放如下,...CameraV1GLSurfaceView:对应博客为 - Android Camera使用OpenGL ES 2.0和GLSurfaceView对预览进行实时处理(黑白滤镜) CameraV

    Android使用MediaCodec将摄像头采集的视频编码为h264

    本文实例为大家分享了Android使用MediaCodec将摄像头采集的视频编码为h264,供大家参考,具体内容如下 MainActivity.java import android.app.Activity; import android.graphics.ImageFormat; import android....

    PreviewCallback纠正图像方向

    纠正图像方向,及最快的转换byte[]为图像的方法

    AndroidHeartRate

    由贾斯汀·韦瑟雷尔(Justin Wetherell)创建Google: : GitHub: : 领英(LinkedIn): : 电子邮件: 推特: : 细节该应用程序使用PreviewCallback机制从预览帧中获取最新图像。 然后,它处理YUV420SP数据并提取...

    Android动态人脸检测的示例代码(脸数可调)

    这个类提供了强大的人脸检测功能,可以方便我们进行人脸的侦测,因此我们使用他来进行动态的人脸检测,实现原理,其实也挺简单,主要是通过Carmen的回调PreviewCallback 在其中对帧图进行操作,并通过FaceDetector来...

    二维码生成器

    previewCallback ; txtScanResult TextView this findViewById R id txtScanResult ; bt Button this findViewById R id bt ; bt setOnClickListener btclick ; 初始化定时器 mTimer new Timer ; ...

    Android Camera实现毫秒级拍照实例

    我们知道自定义Camera需要以下几步 打开相机,即实例化Camera对象,Camera camera = Camera.open()... 获取图片,这里只是从预览中获取因此使用,camera.setPreviewCallback(new Camera.PreviewCallback(){……..});

    HeartRate Monitor心跳监听功能

    只需要伴随心的跳动,结果通过颜色或者其他等数据来显示出来的,源码基本可以确定是通过摄像头采集指尖部分的图像数据,然后通过医学意义上的图像模式去匹配采集到的数据,简单的说就是一个图像处理的过程,指尖的...

    连拍照相机,画中画

    用previewcallback 实现的连拍 在这个基础上 弄了个画中画

Global site tag (gtag.js) - Google Analytics