人脸识别开发实践总结

最近因为公司业务,酒店自助办理入住,需要用到人脸识别的功能,我们选用的是第三方腾讯云的SDK,用了获取唇语验证码和活体核身两个接口来实现的。业务需求是这样的,先通过摄像头识别到人脸之后,点击开始,获取唇语验证码,然后普通话均匀读出数字,但是期间也遇到了一些问题,再此记录一下,先看看我们的界面。

朗读数字.png

遇到的问题

  1. 视频画面被压缩的问题
    如上图中,视频画面是一个圆形的,最开始的思路,直接用TextureView,限制宽高是一样的,最后显示出来视频画面是变形的,并且占不满整个圆形,后来一路查找之后,想设置Camare的宽高比例为1:1,就能和圆形的宽高比一致了,后来发现,可以占满圆形,但是画面比例还是会变形,后来查看了腾讯云SDK里面设置视频画面的宽高比例是写死的4:3,发现问题了所在。这里有3个比例,TextureView的宽高比,Camare的宽高比,视频画面Camcorder的宽高比,要3者保持一致才能解决画面变形的问题,问题的就纠结点在于之前一直是想改变其他两个比例来适配TextureView(1:1)的,现在转换一个思路,就是把TextureView的宽高比例设置成4:3,比如之前宽高都为230dp,现在宽就是230*4/3了,多出来的部分用白色盖住,不显示就可以了。
  • Camcorder的宽高
    代码里写死的比例4:3
    人脸识别1.jpg
  • TextureView的宽高
<TextureView
android:id="@+id/textureView"
android:layout_width="230dp"
android:layout_height="230dp"
android:layout_gravity="center" />

// 修正宽高比
textureView.viewTreeObserver.addOnGlobalLayoutListener(mCameraOnGlobalLayoutListener)

/**
 * 修正检测人脸视频画面宽高比
 */
private val mCameraOnGlobalLayoutListener = object : ViewTreeObserver.OnGlobalLayoutListener {
    override fun onGlobalLayout() {
        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.JELLY_BEAN) {
            camera_preview.viewTreeObserver.removeOnGlobalLayoutListener(this)
        } else {
            camera_preview.viewTreeObserver.removeGlobalOnLayoutListener(this)
        }

        val w = camera_preview.width
        val whRatio = 4.toFloat() / 3 // 宽:高 = 4:3,这个比例是腾讯云api里写死的CameraHelper里
        val newH = Math.round(w * whRatio)
        val lp = camera_preview.layoutParams
        lp.height = newH
        camera_preview.layoutParams = lp
        LogUtil.e("TextureView,onGlobalLayout(): w=$w, h=$newH")
    }
}
  • Camare的宽高
/**
* 在摄像头启动前设置参数
*
* @param camera
*/
public static void setCameraParams(Context context, Camera camera, float curWidth) {
    if (context.getResources().getConfiguration().orientation != Configuration.ORIENTATION_LANDSCAPE) {
        camera.setDisplayOrientation(90);
    } else {
        camera.setDisplayOrientation(0);
    }
    // 获取摄像头支持的pictureSize列表
    Camera.Parameters parameters = camera.getParameters();
    List<Camera.Size> previewSizes = parameters.getSupportedPreviewSizes();
    // 设置PreviewSize
    Camera.Size previewSize = getPropPreviewSize(previewSizes, curWidth);
    parameters.setPreviewSize(previewSize.width, previewSize.height);

    parameters.setJpegQuality(100);
    if (parameters.getSupportedFocusModes().contains(Camera.Parameters.FOCUS_MODE_CONTINUOUS_PICTURE)) {
        // 连续对焦
        parameters.setFocusMode(Camera.Parameters.FOCUS_MODE_CONTINUOUS_PICTURE);
    }
    camera.cancelAutoFocus();
    camera.setParameters(parameters);
}

/**
* 获取摄像头符合规定的Size
*/
public static Camera.Size getPropPreviewSize(List<Camera.Size> list, float curWidth) {
    Collections.sort(list, (a, b) -> {
        int aPixels = a.height * a.width;
        int bPixels = b.height * b.width;
        if (bPixels < aPixels) {
            return -1;
        }
        if (bPixels > aPixels) {
            return 1;
        }
        return 0;
    });
    int i = 0;
    for (Camera.Size s : list) {
        LogUtil.i("list--width--" + s.width + "-----list--height--" + s.height);
        //宽高比4/3
        if (s.width >= ScreenUtil.dip2px(curWidth) && equalRate(s, 1.33f)) {
            LogUtil.i("PreviewSize:w = " + s.width + ",h = " + s.height);
            break;
        }
        i++;
    }
    if (i == list.size()) {
        LogUtil.i("如果没找到,就选最大的size");
        //如果没找到,就选最大的size
        i = 0;
    }
    return list.get(i);
}
  1. 息屏之后,再打开这个页面,画面会卡住的问题
 private var isCameraWithSurface = false // 相机和surface是否关联起来,处理息屏返回时画面卡住的BUG
/**
*  息屏之后再打开回调这个方法
*/
override fun onPause() {
    super.onPause()
    LogUtil.e("---onPause---")
    releaseCamera()
    isCameraWithSurface = false
}

textureView.surfaceTextureListener = mCameraTextureListener

/**
* 视频画面检测接口
* onSurfaceTextureUpdated方法里,重启摄像头
*/
private val mCameraTextureListener = object : TextureView.SurfaceTextureListener {

    override fun onSurfaceTextureAvailable(surface: SurfaceTexture?, width: Int, height: Int) {
        LogUtil.d("TextureView onSurfaceTextureAvailable------")
        isCameraWithSurface = true
        if (mCamera != null) {
            CompareUtils.setCameraParams(mContext, mCamera, surfaceViewWidth)
            try {
                mCamera?.setFaceDetectionListener(mCameraFaceDetectionListener)
                mCamera?.setPreviewTexture(surface) // 使用SurfaceTexture
                mCamera?.startPreview()
                startFaceDetection()
            } catch (ioe: IOException) {
                // Something bad happened
                ioe.printStackTrace()
                LogUtil.e("Something bad happened")
            }
        }
    }

    override fun onSurfaceTextureSizeChanged(surface: SurfaceTexture?, width: Int, height: Int) {
        LogUtil.d("TextureView onSurfaceTextureSizeChanged------")
    }

    override fun onSurfaceTextureUpdated(surface: SurfaceTexture?) {
        LogUtil.d("TextureView onSurfaceTextureUpdated------")
        if (!isCameraWithSurface) {
            LogUtil.d("重新初始化------$mCamera")
            if (mCamera != null) {
                CompareUtils.setCameraParams(mContext, mCamera, surfaceViewWidth)
                try {
                    mCamera?.setFaceDetectionListener(mCameraFaceDetectionListener)
                    mCamera?.setPreviewTexture(surface) // 使用SurfaceTexture
                    mCamera?.startPreview()
                    startFaceDetection()
                    isCameraWithSurface = true
                } catch (ioe: IOException) {
                    // Something bad happened
                    ioe.printStackTrace()
                    LogUtil.e("Something bad happened")
                }
            }
        }
    }

    override fun onSurfaceTextureDestroyed(surface: SurfaceTexture?): Boolean {
        LogUtil.e("TextureView onSurfaceTextureDestroyed")
        if (mCamera != null) {
            mCamera?.setFaceDetectionListener(null)
            mCamera?.stopPreview()
            mCamera?.release()
            mCamera = null
        }
        return true
    }
}

以上就是我踩过的坑,以后能帮助到有需要的朋友绕坑而行。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,997评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,603评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,359评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,309评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,346评论 6 390
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,258评论 1 300
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,122评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,970评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,403评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,596评论 3 334
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,769评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,464评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,075评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,705评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,848评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,831评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,678评论 2 354

推荐阅读更多精彩内容

  • 人生都是不易的,尽管是在别人看来锦衣玉食,不缺钱不缺爱的人也会面临他自己的困境。想往前迈一步,或是职位提升一级,或...
    寄居蟹的壳儿阅读 394评论 0 0
  • 雨停云息,伊人何许。 手藏青丝,梦散去别离。 案上丹青,谁执笔,谱一世回忆。 奈何桥,三生石,刻下你的名字。 断桥...
    心中的那个女孩阅读 261评论 0 0
  • 随着猛烈的台风,天空飞扬着无数的落叶。落叶越来越多,形成了一个黑乎乎的落叶团。 台风把落叶团卷过城填,乡村,河流,...
    咚喃嘻呗阅读 1,157评论 2 0
  • 住在公寓当中的我们,总是会碰见各种形形色色的奇葩邻居,而我家楼上啊,就住着一个刚刚开始学习钢琴的小孩儿,一天三个小...
    wikeyou阅读 182评论 0 0