最近虹軟新增了人證識別、活體檢測的功能,好像以前的人臉識別也更新過版本,以前一篇文章用虹軟Android SDK作人臉識git
別,寫過虹軟人臉識別的用法,最近把人臉識別、人證識別,活體檢測功能都簡單的封裝了一下,使用起來能夠更簡單一點;github
可是因爲appkey是和so庫綁定的,因此不能直接依賴,須要下載項目換成本身的so庫就能使用或者發佈了,仍是挺方便的canvas
虹軟人臉識別庫的介紹`` so庫和appkey是綁定的數組
以人臉識別爲例,它包括人臉檢測、人臉追蹤、人臉識別、年齡識別、性別識別這5種引擎,每一個引擎都有一個so庫和jar包,申請的5種AppKey和APPID是和本身下載的so庫是綁定的,不能混淆使用app
人臉檢測(FD)ide
用於獲取靜態圖片的人臉的位置和角度,傳入格式爲NV21的圖片數據(byte[]),返回一個AFD_FSDKFace對象的集合,AFD_FSDKFace只儲存了一個位置和角度;若是用於視頻流裏面好像也不報錯ui
public class AFD_FSDKFace { Rect mRect; int mDegree;
人臉追蹤(FT)this
和人臉檢測同樣,也是用來獲取人臉的位置和角度,不過只適用於獲取視頻流的人臉,也就是在相機的onPreviewFrame方法裏面使用,返回的是AFT_FSDKFace對象的集合,也只儲存了一個位置和角度;若是用於靜態圖片好像是會報錯的3d
public class AFT_FSDKFace { Rect mRect; int mDegree;
人臉識別(FR)code
用於獲取人臉特徵和對比人臉特徵的 獲取人臉特徵,須要傳入格式爲NV21的圖片數據(byte[])和人臉的位置、人臉的角度,因此須要先用前面的引擎獲取到人臉的信息,返回一個AFR_FSDKFace對象,這個對象也只保存了人臉特徵(byte[]) 對比人臉,須要傳入兩個AFR_FSDKFace對象,返回一個AFR_FSDKMatching對象,只保存了類似度
public class AFR_FSDKFace { public static final int FEATURE_SIZE = 22020; byte[] mFeatureData; ... public class AFR_FSDKMatching { float mScore = 0.0F;
活體檢測
活體檢測是檢測是否是活人的,也是傳入人臉的位置、人臉的角度,又是一個新的FaceInfo對象,傳入的是FaceInfo的集合,返回LivenessInfo集合,可是目前只支持單人臉咱們只管第一個數據,LivenessInfo裏面保存的返回的結果,活體、非活體、人臉超過一個、未知錯誤(常常返回,問題不大)
人證對比
用來對比人臉和身份證的,傳入傳入格式爲NV21的證件照片(byte[])和人臉的照片,還有各自的圖片大小和比對閾值;返回一個CompareResult對象,包括類似度、是否成功等信息
public class CompareResult { private boolean isSuccess; private double result;
人證識別實際上是人臉識別的那幾個引擎(FD,FT,FR)的集合,因此有同時集成確定包衝突了,可使用人臉識別的so庫,而後把人臉識別的jar包都刪了,使用人證的jar包,人證的激活碼使用FR的激活碼就好了 屏幕快照 2018-10-11 下午3.41.05.png-15.5kB
其餘的年齡、性別的引擎應該都差很少
封裝後的部分功能的展現
初始化AppKey和APPID
new AcrFaceManagerBuilder().setContext(this) .setFreeSdkAppId(Constants.FREESDKAPPID) .setFdSdkKey(Constants.FDSDKKEY) .setFtSdkKey(Constants.FTSDKKEY) .setFrSdkKey(Constants.FRSDKKEY) .setLivenessAppId(Constants.LIVENESSAPPID) .setLivenessSdkKey(Constants.LIVENESSSDKKEY) .create(); }
相機預覽追蹤人臉位置
//初始化人臉追蹤引擎 FaceTrackService faceTrackService = new FaceTrackService(); //設置傳入的圖片的大小 faceTrackService.setSize(previewSize.width, previewSize.height); camera.setPreviewCallback(new Camera.PreviewCallback() { @Override public void onPreviewFrame(byte[] data, Camera camera) { //獲取人臉的位置信息 List<AFT_FSDKFace> fsdkFaces = faceTrackService.getFtfaces(data); //畫出人臉的位置 drawFaceRect(fsdkFaces); //輸出數據進行其餘處理 cameraPreviewListener.onPreviewData(data.clone(), fsdkFaces); ... } });
相機本身實現,獲取人臉位置的代碼很是簡單,就一句代碼,畫出人臉的位置實現是用了兩個surfaceView,一個用於相機畫面展現,另外一個畫出人臉的位置
畫出人臉的位置
值得注意的是獲取的人臉的位置Rect是傳入的圖片的相對位置,圖片大小是相機預覽設置的大小,畫的時候是畫在了surfaceView上面,surfaceView通常和預覽大小是不同的,並且還要考慮畫面是否旋轉、相機的位置等,因此須要先進行轉換
Rect rect1=DrawUtils.adjustRect(rect, previewSizeX, previewSizeY,canvas.getWidth(), canvas.getHeight(), cameraOri, cameraId);
獲取人臉特徵進行註冊
//初始化人臉識別引擎 FaceRecognitionService faceRecognitionService = new FaceRecognitionService(); faceRecognitionService.setSize(width, height); //獲取人臉特徵 AFR_FSDKFace afr_fsdkFace =faceRecognitionService.faceData(data, aft_fsdkFace.getRect(), aft_fsdkFace.getDegree()); tv_status.setText("人臉特徵爲:" + afr_fsdkFace.getFeatureData());
aft_fsdkFace爲上一步獲取的人臉的位置信息
相機獲取的人臉和已保存的人臉進行對比
//獲取保存的人臉特徵 byte[] faceData=faces.get(0).getData(); //對比人臉特徵 float socre=faceRecognitionService.faceRecognition(afr_fsdkFace.getFeatureData(),faceData); tv_status.setText("類似度爲:" + sorce);
afr_fsdkFace爲上一步獲取的人臉的特徵,faceData爲已保存的人臉特徵,也有提供一我的臉和多個對比獲取類似度最高的一個的方法
活體檢測
//激活活體檢測 LivenessService.activeEngine(new LivenessActiveListener() { @Override public void activeSucceed() { toast("激活成功"); } @Override public void activeFail(String massage) { LogUtils.log(massage); toast("激活失敗:" + massage); } }); LivenessService livenessService = new LivenessService(); // List<FaceInfo> faceInfos = new ArrayList<>(); faceInfos.add(new FaceInfo(aft_fsdkFace.getRect(), aft_fsdkFace.getDegree())); //判斷是不是活體 boolean isLive=livenessService.isLive(faceInfos,data); aft_fsdkFace爲上一步獲取的人臉的位置信息,第一次激活好像須要聯網
人證對比
//初始化 IdCardVerifyManager.getInstance().init(Constants.IDCARDAPPID, Constants.FRSDKKEY); //bitmap轉NV21數據 byte[] nv21Data = ImageUtils.getNV21(bitmap.getWidth(), bitmap.getHeight(), bitmap); //傳入證件照片 DetectFaceResult result = IdCardVerifyManager.getInstance().inputIdCardData(nv21Data, bitmap.getWidth(), bitmap.getHeight()); //傳入相機獲取的人臉數據 DetectFaceResult result = IdCardVerifyManager.getInstance().onPreviewData(data, mWidth, mHeight, true); //對比類似度 CompareResult compareResult = IdCardVerifyManager.getInstance().compareFeature(THRESHOLD); if (compareResult.isSuccess()) { tv_status.setText("類似度爲:" + compareResult.getResult()); }
證件圖片是本地的,轉成了NV21的格式的byte數組,方法也集成了
圖片獲取人臉特徵
//先把bitmap轉NV21格式 byte[] photoData = ImageUtils.getNV21(bitmap1.getWidth(), bitmap1.getHeight(), bitmap1); //獲取人臉位置信息 List<AFD_FSDKFace> afd_fsdkFaces = faceFindService.findFace(photoData); for (AFD_FSDKFace afdFsdkFace : afd_fsdkFaces) { //獲取每個人臉的特徵 AFR_FSDKFace afr_fsdkFace = faceRecognitionService.faceData(photoData, afdFsdkFace.getRect(), afdFsdkFace.getDegree()); }
引擎釋放
livenessService.destoryEngine(); faceTrackService.destoryEngine(); faceRecognitionService.destroyEngine(); IdCardVerifyManager.getInstance().unInit();
效果都還不錯,主要是所有免費,源碼下載能夠直接運行,能夠查看全部功能
屏幕快照 2018-10-11 下午4.50.30.png-32.4kB
demo下載地址:http://oy5r220jg.bkt.clouddn.com/arcface_v1.0.3.apk 項目地址:https://github.com/tyhjh/Arcface