Neural Nework - 人臉檢測

介紹

在本例中，我們將使用 Ameba Pro2 開發板進行人臉檢測。 基於5個面部特徵點（左眼，右眼，鼻子，嘴巴左側和嘴巴右側）檢測人臉。

流程

打開人臉檢測示例 “File” -> “Example” -> “AmebaNN” -> “RTSPFaceDetection”。

在標記的代碼片段中，將您的 WiFi 網絡 SSID 填入“ssid”，將網絡密碼填入“pass”。

使用以黃色標記的 modelSelect() 函式選擇Neural Network (NN) 工作和模型。 該函式有 4 個參數：Neural Network工作、物體偵測模型、人臉偵測模型和人臉辨識模型。 如果您選擇的Neural Network工作不需要它們，請替換為“NA_MODEL”。 請注意，必須在調用 begin() 之前調用 modelSelect()。
有效的Neural Network工作: OBJECT_DETECTION, FACE_DETECTION, FACE_RECOGNITION
有效的物體偵測模型:
YOLOv3 model: DEFAULT_YOLOV3TINY, CUSTOMIZED_YOLOV3TINY
YOLOv4 model: DEFAULT_YOLOV4TINY, CUSTOMIZED_YOLOV4TINY
YOLOv7 model: DEFAULT_YOLOV7TINY, CUSTOMIZED_YOLOV7TINY
有效的人臉偵測模型: DEFAULT_SCRFD, CUSTOMIZED_SCRFD
有效的人臉辨識模型: DEFAULT_MOBILEFACENET, CUSTOMIZED_MOBILEFACENET

如果您想使用自己的 NN 模型，請選擇自定義選項（例如，CUSTOMIZED_YOLOV4TINY/ CUSTOMIZED_SCRFD/ CUSTOMIZED_MOBILEFACENET）。 要了解轉換 AI 模型的過程，請參閱此處。 此外，請參閱此處以了解如何安裝和使用轉換後的模型。

編譯代碼並將其上傳到 Ameba。 按下Reset鍵後，等待Ameba Pro 2開發板連上WiFi網絡。 用於 RTSP 的開發板 IP 地址和網絡端口號將顯示在串行監視器中。
可以使用 VLC 驗證檢測到的面部結果。 您可以從連結下載 VLC 媒體播放器 (這裡)。
軟件安裝完成後，打開VLC media player，進入 “Media” -> “Open Network Stream”。

確保您的 PC 連接到與 Ameba Pro2 開發板相同的網絡以進行串流式傳輸。 由於 RTSP 被用作串流媒體協議，在 VLC 媒體播放器中鍵入“rtsp://{IPaddress}:{port}”作為網絡 URL，將 {IPaddress} 替換為您的 Ameba Pro2 開發板的 IP 地址，以及 {port } 使用串行監視器中顯示的 RTSP 端口（例如，“rtsp://192.168.1.154:554”）。 默認的 RTSP 端口號是 554。
接下來，點擊“播放”開始RTSP 串流式傳輸以查看結果。 來自攝像機的視頻串流將顯示在 VLC 媒體播放器中。

帶有人臉界標的邊界框將被繪製到 RTSP 視頻串流中，以標記相機檢測到的人臉。 需要注意的是，在每個通道上，它最多支援 6 層，每層最多可支援 30 個 OSD 元素。

偵測到的人臉資訊將顯示在Serial Monitor中。 儘管檢測到了8張臉，但每層每通道僅能顯示30個OSD元素。因此，為了避免OSD元素呈現不完整，本例中只會顯示兩張臉，並附上邊界框和標誌點。