通過 anchor box 的方法：如圖 3 所示，不要和圖 2 混淆，這里是通過特征圖預測原圖的 anchorbox 區(qū)域，具體在 Facebox 中有描述。

圖 3 anchor box

如何設定算法檢測最小人臉尺寸？

主要是看滑動窗的最小窗口和 anchorbox 的最小窗口。

滑動窗的方法

假設通過 12×12 的滑動窗，不對原圖做縮放的話，就可以檢測原圖中 12×12 的最小人臉。

但是往往通常給定最小人臉 a=40、或者 a=80，以這么大的輸入訓練 CNN 進行人臉檢測不太現實，速度會很慢，并且下一次需求最小人臉 a=30*30 又要去重新訓練，通常還會是 12×12 的輸入，為滿足最小人臉框 a，只需要在檢測的時候對原圖進行縮放即可：w=w×12/a。

anchorbox 的方法

原理類似，這里主要看 anchorbox 的最小 box，通過可以通過縮放輸入圖片實現最小人臉的設定。

如何定位人臉的位置

滑動窗的方式：

滑動窗的方式是基于分類器識別為人臉的框的位置確定最終的人臉。

圖 4 滑動窗

FCN 的方式：

通過特征圖映射到原圖的方式確定最終識別為人臉的位置，特征圖映射到原圖人臉框是要看特征圖相比較于原圖有多少次縮放（縮放主要查看卷積的步長和池化層）。

假設特征圖上(2,3)的點，可粗略計算縮放比例為 8 倍，原圖中的點應該是(16,24)；如果訓練的 FCN 為 12*12 的輸入，對于原圖框位置應該是(16,24,12,12)。

當然這只是估計位置，具體的在構建網絡時要加入回歸框的預測，主要是相對于原圖框的一個平移與縮放。

通過 anchor box 的方式：

通過特征圖映射到圖的窗口，通過特征圖映射到原圖到多個框的方式確定最終識別為人臉的位置。

如何通過一個人臉的多個框確定最終人臉框位置？

圖 5 通過 NMS 得到最終的人臉位置

NMS 改進版本有很多，最原始的 NMS 就是判斷兩個框的交集。如果交集大于設定的閾值，將刪除其中一個框。

那么兩個框應該怎么選擇刪除哪一個呢？因為模型輸出有概率值，一般會優(yōu)選選擇概率小的框刪除。

基于級聯(lián)卷積神經網絡的人臉檢測（Cascade CNN）

Cascade CNN 的框架結構是什么？

級聯(lián)結構中有 6 個 CNN，3 個 CNN 用于人臉非人臉二分類，另外 3 個 CNN 用于人臉區(qū)域的邊框校正。

給定一幅圖像，12-net 密集掃描整幅圖片，拒絕 90% 以上的窗口。剩余的窗口輸入到 12-calibration-net 中調整大小和位置，以接近真實目標。接著輸入到 NMS 中，消除高度重疊窗口。下面網絡與上面類似。

Cascade CNN 人臉校驗模塊原理是什么？

該網絡用于窗口校正，使用三個偏移變量：

Xn:水平平移量，Yn:垂直平移量，Sn:寬高比縮放。

候選框口(x,y,w,h)中，(x,y)表示左上點坐標，(w,h)表示寬和高。

我們要將窗口的控制坐標調整為：

這項工作中，我們有種模式。偏移向量三個參數包括以下值：

同時對偏移向量三個參數進行校正。

訓練樣本應該如何準備？

人臉樣本；

非人臉樣本。

級聯(lián)的好處

最初階段的網絡可以比較簡單，判別閾值可以設得寬松一點，這樣就可以在保持較高召回率的同時排除掉大量的非人臉窗口；

最后階段網絡為了保證足夠的性能，因此一般設計的比較復雜，但由于只需要處理前面剩下的窗口，因此可以保證足夠的效率；

級聯(lián)的思想可以幫助我們去組合利用性能較差的分類器，同時又可以獲得一定的效率保證。

基于多任務卷積神經網絡的人臉檢測（MTCNN）

MTCNN 模型有三個子網絡，分別是 P-Net,R-Net,O-Net。

為了檢測不同大小的人臉，開始需要構建圖像金字塔，先經過 PNet 模型，輸出人臉類別和邊界框（邊界框的預測為了對特征圖映射到原圖的框平移和縮放得到更準確的框），將識別為人臉的框映射到原圖框位置可以獲取 patch，之后每一個 patch 通過 resize 的方式輸入到 RNet，識別為人臉的框并且預測更準確的人臉框，最后 RNet 識別為人臉的的每一個 patch 通過 resize 的方式輸入到 ONet，跟 RNet 類似，關鍵點是為了在訓練集有限情況下使模型更魯棒。

還要注意一點：構建圖像金字塔的的縮放比例要保留，為了將邊界框映射到最開始原圖上。

Facebox

（1）Rapidly Digested Convolutional Layers（RDCL）

在網絡前期，使用 RDCL 快速的縮小 feature map 的大小。主要設計原則如下：

Conv1, Pool1, Conv2 和 Pool2 的 stride 分別是 4, 2, 2 和 2。這樣整個 RDCL 的 stride 就是 32，可以很快把 feature map 的尺寸變小。

卷積（或 pooling）核太大速度就慢，太小覆蓋信息又不足。權衡之后，將 Conv1, Pool1, Conv2 和 Pool2 的核大小分別設為 7x7,3x3,5x5,3x3。

使用 CReLU 來保證輸出維度不變的情況下，減少卷積核數量。

（2）Multiple Scale Convolutional Layers（MSCL）

在網絡后期，使用 MSCL 更好地檢測不同尺度的人臉。主要設計原則有：

類似于 SSD，在網絡的不同層進行檢測；

采用 Inception 模塊。由于 Inception 包含多個不同的卷積分支，因此可以進一步使得感受野多樣化。

（3）Anchor densification strategy

為了 anchor 密度均衡，可以對密度不足的 anchor 以中心進行偏移加倍，如下圖所示：