手把手教你做一個成本40元不到的人臉識別小相機

本文以UP主工科男孫老師近期發(fā)布的視頻產(chǎn)品為例，按以下順序講解如何基于聆思官方提供的資料做一個成本40元不到的人臉識別小相機。

● 實例介紹

● DIY使用的主要元器件介紹

● 程序和燒錄

● 實例演示視頻

下圖是孫老師視頻中分享的人臉識別相機的模塊圖片，可以看到PCBA相當簡潔，PCBA正中間有一顆聆思 CSK6011A 型號的芯片作為主控，左側(cè)是用于存儲固件的 Flash，剩下的則是用于交互的按鍵與晶振、阻容、LED等器件。算上屏幕和攝像頭，整個方案量產(chǎn)成本預估40元不到。

我們可以看到PCBA上方有兩個按鍵，BOOT按鍵可以用來實現(xiàn)人臉錄入，K1按鍵可以用來啟動人臉識別，識別結(jié)果可以通過屏幕直接顯示出來。

PCBA的側(cè)面預留了一個可用于燒錄與輸出應用信息的串口，當檢測到人臉之后，它就會不停的輸出檢測到的信息，除了有沒有人臉，還有人臉在畫面中的、xy坐標、大小三個方向的偏轉(zhuǎn)角信息等等，這樣就可以把相機當做一個傳感器模塊和其他硬件模塊搭配，做一些更好玩的應用。

孫老師做的小相機模塊主要元器件為這幾種：主芯片、攝像頭、屏幕、開關(guān)電源（DCDC）、電容電阻等，主要信息如下：

● ARM Star MCU：最高300MHz主頻

● HIFI4 DSP：最高300MHz主頻

● NPU：128GOPS算力

● SRAM: 1MB

● PSRAM：8MB

● 內(nèi)置最高支持 8MB Flash，可選最高 16MB 的外置 Flash

更詳細芯片信息，如規(guī)格書、硬件設計參考等資料可以進入聆思文檔中心下載：https://docs2.listenai.com/x/af7lMsf-Scg

型號為 GC0328，官方已基于攝像頭對算法做過優(yōu)化，不建議更換其他攝像頭，可以通過聆思官方文檔或聯(lián)系官方客服小助手了解攝像頭更多的信息

● 接口：DPV

● 像素：30萬

孫老師在這個小相機項目中選擇了一個小尺寸的 TFT 屏，主控芯片 CSK6011A 本身具備 SPI 和 I2C 接口，支持接觸摸屏，如官方的大模型開發(fā)板使用的是更大尺寸的觸摸顯示屏。

● 屏顯接口:SPI

● 觸摸接口:I2C

● 可根據(jù)實際需求更換或去掉屏幕

開發(fā)板模塊可以由串口的5V進行供電，

芯片供電需要通過開關(guān)電源芯片轉(zhuǎn)換為3.3V

使用可以參考聆思官方提供的原理圖根據(jù)實際情況搭配使用

人臉識別相機可以參考聆思CSK6大模型開發(fā)板原理圖裁剪功能獲得，有想嘗試拓展模塊玩法的朋友也可以很方便的進行改造，開發(fā)板資料的下載地址：https://docs2.listenai.com/x/nTn9kMMCU#%E5%BC%80%E5%8F%91%E6%9D%BF%E8%AE%BE%E8%AE%A1%E8%B5%84%E6%96%99%E4%B8%8B%E8%BD%BD

芯片支持串口燒錄，模塊預留串口，外接串口工具板即可進行燒錄。

SDK下載地址：https://docs2.listenai.com/x/XuPPPS80c#%E7%A4%BA%E4%BE%8B%E5%B7%A5%E7%A8%8B%E4%BB%8B%E7%BB%8D

● 返回人臉邊界框、人臉標定點、頭部姿態(tài)角度、人臉識別特征

● 頭部姿態(tài)角度如圖，支持pitch、roll、yaw三個角度

● 將檢測到的人臉特征值和本地存儲的人臉特征值輸入算法進行比對， 并返回比對結(jié)果

聆思官方提供有開源的SDK除了人臉識別，還提供有坐姿檢測、頭肩跟蹤、手勢識別、物體分類等AI能力SDK，需要哪個燒錄哪個，詳情可以參考SDK目錄下的README文件。

cskburn desktop是聆思科技提供的一款桌面燒錄工具，支持windwos、Liunx、macOS，一鍵安裝，連接串口即可快速對 CSK6系芯片、開發(fā)套件快速進行固件燒錄，進行下載地址：https://docs2.listenai.com/x/oo2_KzYFd

進入燒錄模式：芯片燒錄可以用BOOT+RST組合進入燒錄模式。

以下圖為例，串口工具鏈接后，按住BOOT后再按RST即可進入燒錄模式。

UP主孫老師改造的視頻：https://www.bilibili.com/video/BV1fH4y1A7DV?vd_source=5bc4be50ddf65370d8b5cadb25a6e836

● 孫老師開源的人臉識別小相機工程資料：https://oshwhub.com/sunhaoqin/csk6011

● 如果要基于現(xiàn)有SDK進行二次開發(fā)，可以參考一下文檔一鍵部署開發(fā)環(huán)境。

○ 環(huán)境搭建：https://docs2.listenai.com/x/ZgVUIzY6M

○ 獲取SDK：https://docs2.listenai.com/x/GvIW8tsaE

● 想給模塊加上網(wǎng)絡模塊或其他AI能力，可以參考聆思CSK6大模型開發(fā)板資料進行調(diào)整改造，下載地址：https://docs2.listenai.com/x/nTn9kMMCU