您的位置:首页 > 移动开发 > Android开发

[置顶] opencv-android笔记1:android studio 2.3 + opencv-android-sdk 实现 camera预览

2017-03-07 20:32 691 查看

opencv-android笔记1:android studio 2.3 + opencv-android-sdk 实现 camera预览

Android studio环境配置不再赘述,可以参照我的其他博客。

Android应用程序开发环境搭建:http://blog.csdn.net/ja33son/article/details/61192072

Opencv-android-sdk:链接:http://pan.baidu.com/s/1boI67nh 密码:umu2

新建项目后,File-New-Import Module,选择解压后sdk中android项目的路径:opencv-3.2.0-android-sdk\OpenCV-android-sdk\sdk\java,引入module!



出现错误了不要紧,先不去管它,切换到project界面下,打开app的build.gradle文件,以及引入的module的build.gradle文件。将app中build.gradle的部分字段复制到module中,字段包括compileSdkVersion、buildToolsVersion、minSdkVersion、targetSdkVersion,复制到对应位置,目的是为了使两个module的编译环境相同。不这么做,就报错给你看。



不要忘记,改变build.gradle以后,Sync你的工程。




下一步是很关键的,将解压后的库文件(opencv-3.2.0-android-sdk\OpenCV-android-sdk\sdk\native\下的libs文件夹)添加到项目目录(app/src/main/)中。要将目录名字改为jniLibs。

注:我们使用到的库,只有每个平台文件夹(arm64-v8a、armeabi、armeabi-v7a、mips、mips64、x86、x86_64)下的libopencv_java3.so,感兴趣的同学可以将其他库移除,会有效减小apk体积。也可以使用Lint Cleaner Plugin或者AndroidStudio自带的瘦身工具,这里不做演示。



之后,将引入的module作为外部库项目导入到app中,开发环境就搭建好了。

注:Project Structure的快捷键是Ctrl+Shift+Alt+s



环境搭建完成后,就可以做一些简单的工作了。以下是获取opencv camera图像数据,并对图像进行简
4000
单处理的demo。

首先是Manifest.xml配置文件,声明一下相机的权限。由于Android M以后,权限机制改变,只声明已经失效了,需要在activity中申请,后面会详细说明。

添加以下权限:

<uses-permission android:name="android.permission.CAMERA" />


<?xml version="1.0" encoding="utf-8"?>
<manifest xmlns:android="http://schemas.android.com/apk/res/android"
package="com.ja3son.cvcamera">

<uses-permission android:name="android.permission.CAMERA" />

<application
android:allowBackup="true"
android:icon="@mipmap/ic_launcher"
android:label="@string/app_name"
android:roundIcon="@mipmap/ic_launcher_round"
android:supportsRtl="true"
android:theme="@style/AppTheme">
<activity android:name=".MainActivity">
<intent-filter>
<action android:name="android.intent.action.MAIN" />

<category android:name="android.intent.category.LAUNCHER" />
</intent-filter>
</activity>
</application>

</manifest>


然后是布局文件:

<?xml version="1.0" encoding="utf-8"?>
<FrameLayout xmlns:android="http://schemas.android.com/apk/res/android"
xmlns:opencv="http://schemas.android.com/apk/res-auto"
xmlns:tools="http://schemas.android.com/tools"
android:layout_width="match_parent"
android:layout_height="match_parent">

<org.opencv.android.JavaCameraView
android:id="@+id/camera_view"
android:layout_width="match_parent"
android:layout_height="match_parent"
opencv:show_fps="true" />

</FrameLayout>


在引入org.opencv.android.JavaCameraView的时候,preview窗口可能会报错,只需要在preview窗口提示的信息中,点击一下build,就可以解决了。

注:以上解决方法在Android Studio2.3中适用,其他版本中没有进行测试,即使现在不build,最后运行项目的时候也会build的。以上方法只提供给强迫症患者

JavaCameraView就是提供相机预览的类了,但让人失望的是,JavaCameraView没有调用Camera API2接口,而是使用老版本Camera API1。后续会做opencv接入Camera API2的东西,感兴趣的同学可以持续关注。

之后就是Activity文件:

import android.Manifest;
import android.os.Build;
import android.os.Bundle;
import android.support.v7.app.AppCompatActivity;

import org.opencv.android.CameraBridgeViewBase;
import org.opencv.android.JavaCameraView;
import org.opencv.android.OpenCVLoader;
import org.opencv.core.Mat;

public class MainActivity extends AppCompatActivity implements CameraBridgeViewBase.CvCameraViewListener2 {

private JavaCameraView camera_view;
private int M_REQUEST_CODE = 203;
private String[] permissions = {Manifest.permission.CAMERA};

@Override
protected void onCreate(Bundle savedInstanceState) {
super.onCreate(savedInstanceState);
setContentView(R.layout.activity_main);
camera_view = (JavaCameraView) findViewById(R.id.camera_view);
camera_view.setCvCameraViewListener(this);
if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.M) {
requestPermissions(permissions, M_REQUEST_CODE);
}
}

@Override
protected void onPause() {
super.onPause();
if (camera_view != null) {
camera_view.disableView();
}
}

@Override
protected void onResume() {
super.onResume();
if (OpenCVLoader.initDebug()) {
camera_view.enableView();
}
}

@Override
protected void onDestroy() {
super.onDestroy();
if (camera_view != null) {
camera_view.disableView();
}
}

@Override
public void onCameraViewStarted(int width, int height) {
}

@Override
public void onCameraViewStopped() {
}

@Override
public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {
return inputFrame.rgba();
}
}


简单解释一下activity中进行的操作:

activity实现CameraBridgeViewBase.CvCameraViewListener2接口,实现对camera数据的监听和控制。

onCreate方法中初始化View,申请权限,设置监听。camera_view.setCvCameraViewListener(this)设置监听后,重写方法就可以获得camera预览数据了。直接调用requestPermissions方法,就会在程序初始化时弹出系统预制的权限申请对话框,在Android N中是如此,其他版本中未验证。由于此代码只是demo,且本人懒,所以没做权限拒绝申请相关的处理,感兴趣的同学可以实现onRequestPermissionsResult方法进行控制。

onResume方法中初始化opencv库,初始化成功,则进行camera_view.enableView()操作,使view开始预览。如果全部按照前面步骤操作,就不存在初始化库失败的情况。如果存在,请参考前文,重新来过。

onCameraFrame方法中只是返回了原始图像,return inputFrame.rgba()。这时运行程序,就能在屏幕上看到相机的图像了。只不过图像是横着的,因为我懒,没旋转。以下代码是对图像进行简单图像处理的代码,将

@Override
public void onCameraViewStarted(int width, int height) {
}

@Override
public void onCameraViewStopped() {
}

@Override
public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {
return inputFrame.rgba();
}


全部替换为:

private Mat mCannyResult;

@Override
public void onCameraViewStarted(int width, int height) {
mCannyResult = new Mat(height, width, CvType.CV_8UC1);
}

@Override
public void onCameraViewStopped() {
mCannyResult.release();
}

@Override
public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {
Imgproc.Canny(inputFrame.gray(), mCannyResult, 60, 80);
return mCannyResult;
}


结果图就是



对图像的处理可以简单说明一下:

在StartCamera的时候,初始化一个Mat,这个Mat是8位无符号整形单通道矩阵(CvType.CV_8UC1),为什么是单通道呢?都知道RGB是三个通道,每个颜色一个,RGBA是四通道,多出一个Alpha透明度通道。灰度图,不需要颜色通道,所以一个通道就够了。因为我们只需要取灰度数据就足够检测边缘了,没错,我们对图像简单的处理就是Canny检测边缘。

有了Mat以后,在onCameraFrame方法中,调用Imgproc.Canny(inputFrame.gray(), mCannyResult, 60, 80)方法,简单说一下参数,第一个为原始数据,就是camera预览的灰度图。第二个是输出图像,就是Canny以后的数据。后两个double类型的参数,就是边缘检测的阈值边界。以例子为准的话,低于60的点不算作边缘。在60与80之间的点,参考周围点,如果周围有边界点,则记为边缘点。高于80的点,为边缘点。

以上就是opencv的入门demo了,结合这个就可以做很多有意思的东西了。后续会做android studio 结合NDK开发opencv的例子,敬请关注。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: