在人臉識別領(lǐng)域，有一些比較經(jīng)典的算法，例如特征臉法（Eigenface）、局部二值模式法、Fisherface等，不過在這里選擇了一個目前應(yīng)用比較廣泛且流行的方法作為示例，叫做OpenFace。當(dāng)然，我們不做實際的測試，只是通過它來了解識別的原理。

OpenFace屬于基于模型的方法，它是一個開源庫，包含了landmark，head pose，Actionunions，eye gaze等功能，以及訓(xùn)練和檢測所有源碼的開源人臉框架。

在前面的步驟中，已經(jīng)為大家介紹如何通過HOG的方法將圖像中人臉的特征數(shù)據(jù)提取出來，也就是成功檢測到了人臉。

這時又有一個問題，就是這個人臉的姿勢好像不是那么“正”，同樣一個人，如果她的姿勢，面部的朝向不同，人類仍然能認(rèn)出她來，而計算機可能就認(rèn)不出了。

解決這個問題，有一個辦法，就是檢測人臉主要特征的特征點，然后根據(jù)這些特征點對人臉做對齊校準(zhǔn)。這是Vahid Kazemi和Josephine Sullivan在2014年發(fā)明的方法，他們給人臉的重要部分選取68個特征點（Landmarks），這68個點的位置是固定的，所以只需要對系統(tǒng)進(jìn)行一些訓(xùn)練，就能在任何臉部找到這68個點。

圖片來源：OpenFace API

有了這68個點，就可以對人臉進(jìn)行校正了，主要是通過仿射變換將原來比較歪的臉擺正，盡量消除誤差。這里的仿射變換主要還是進(jìn)行一些旋轉(zhuǎn)、放大縮小或輕微的變形，而不是夸張的扭曲，那樣就不能看了。

圖片來源：OpenFace github說明頁面

過程大約是這樣，原來的臉被進(jìn)行了一定程度的校正。

這樣我們把原始的人臉圖像以及HOG的特征向量輸入，能夠得到一張姿勢正確的只含有人臉的圖像。

注意，到這一步我們還不能直接拿這張人臉圖像去進(jìn)行比對，因為工作量太大，我們要做的是繼續(xù)提取特征。

接著，我們將這個人臉圖像再輸入一個神經(jīng)網(wǎng)絡(luò)系統(tǒng)，讓它為這個臉部生成128維的向量，也可以說是這個人臉的128個測量值，它們可以表示眼睛之間的距離，眼睛和眉毛的距離、耳朵的大小等等。這里只是方便大家理解而舉例，實際上具體這128維的向量表示了哪些特征，我們不得而知。

當(dāng)然，這一步說起來簡單，其實難點在于如何訓(xùn)練這樣的一個卷積神經(jīng)網(wǎng)絡(luò)。具體的訓(xùn)練方法不是我們需要了解的，但我們可以了解一下訓(xùn)練的思路。訓(xùn)練時我們可以輸入一個人臉圖像的向量表示、同一人臉不同姿態(tài)的向量表示和另一人臉的向量表示，反復(fù)進(jìn)行類似的操作，并不斷調(diào)整，調(diào)整的目標(biāo)是讓同一類對應(yīng)的向量表示盡可能接近，其實也就是同一個人的向量表示盡可能距離較近，同理，不同類別的向量表示距離盡可能遠(yuǎn)。

其實訓(xùn)練的思路也很好理解，因為一個人的人臉不管姿態(tài)怎么變，在一段時間內(nèi)有些東西是固定的，比如眼睛間的距離、耳朵的大小、鼻子的長度等。

在得到這128個測量值后，最后一步就簡單了，就是將這128個測量值和我們訓(xùn)練、測試過的所有面部數(shù)據(jù)做比對，測量值最接近的，就是我們要識別的那個人了。這樣就可以完成一次人臉的識別。