QCS610 AI智慧看板是一款基於高通QCS610芯片的高性能、低功耗的人工智能終端設備,應用於零售業,可執行人流統計、會員識別、年齡檢測、性別檢測及眼睛注視等功能,針對不同客群投放廣告,也可以分析顧客查看廣告的時間,找出顧客感興趣的廣告內容,本方案使用Thundercomm Turbox C610開發板,內部建制Android作業系統,AI加速藉由Snapdragon Neural Processing Engine (SNPE) SDK搭配QCS610 Hexagon DSP加速推論。

► Thundercomm Turbox C610介紹

TurboX C610/C410 Open Kit是一款高性價比的解決方案,可快速完成智能攝像頭和智能物聯網設備的性能評估及原型搭建。它具有豐富的接口,包括USB Type A、HDMI in、以太網和攝像頭擴展板,能夠以“開放”的方式構建攝像頭設備,包括全景攝像頭、智能攝像頭和視頻會議攝像頭。 C610/C410 Open Kit支持Linux和Android操作系統,結合了強大的人工智能和機器學習功能,以滿足智慧城市、商業和企業、家庭和車輛應用日益增長的需求。


應用場景AI模型

本方案使用五種不同模型搭配:

  1. 行人偵測(TFLite)
  2. 人臉偵測(TFLite)
  3. 年齡推論(dlc)
  4. 性別推論(dlc)
  5. 瞳孔偵測(FaceMesh)

 

執行方案程式

下圖為App執行主畫面,分別為四支廣告,區分為女性兩隻(香水及彩妝)及男性兩隻(汽車、手提箱)。預設女性廣告,當判斷廣告看板前面站著的人為男性則替換為男性廣告。本方案廣告內容目前為App內建廣告,可以依照需求修改為雲端下載廣告進行播放。
智慧看板,智慧廣告,智能看板,智能廣告看板,廣告

方案工程模式

下圖為工程模式,當點選右邊廣告時,畫面就會切換成以下圖示。當推論前方人員為男性,上方廣告自動切換為男性;左下圖為攝像頭抓取後推論標示使用,方便開發及驗證;右上方「+」「-」按鈕為攝像頭放大跟縮小功能; L、R、T標籤的滑動Bar為辨識區域;「Face Add」按鈕為增加人員ID標示;「Config」可以設定儲存行人的時間及顯示三種儲存的Log;「Gaze」為瞳孔辨識結果,方便驗證;其他文字顯示相關資訊。
智慧看板,智慧廣告,智能看板,智能廣告看板,廣告

智慧看板,智慧廣告,智能看板,智能廣告看板,廣告

下圖為行人偵測的Log:

下圖為人臉分析的Log:

下圖為瞳孔偵測的Log:

►場景應用圖

►展示板照片

thundercomm

►方案方塊圖

►核心技術優勢

高通QCS610採用11nm FinFET製程,搭載高通Kryo 460 CPU、高通Adreno 612 GPU和高通Hexagon DSP,以及高通人工智慧引擎,能夠支援多種AI網路和物聯網應用。它還具備雙14位元高通Spectra 250L ISP,能夠處理高達24MP的雙攝影像,並提供優異的降噪和低光效果。此外,它還支援4K Ultra HD視訊錄製和播放,以及多種連網選項,包括Wi-Fi、藍牙、乙太網路和5G/4G。高通QCS610是一款適用於智慧型相機、邊緣運算AI裝置、零售業和機器人等物聯網領域的先進解決方案。

►方案規格

◎CPU:Qualcomm Kryo™ 460, 8 Cores, 64-bit, Up to 2.2 GHz ◎GPU:Qualcomm Adreno™ 612 , OpenGL® ES 3.2, OpenCL™, Vulkan® 1.1 ◎DSP :2x Qualcomm® Hexagon™ Vector Processor, Qualcomm® Hexagon™ 685, Qualcomm® Hexagon™ ◎Wi-Fi :802.11a, 802.11b, 802.11g, 802.11n, 802.11ac ◎Bluetooth : Bluetooth 5.0 ◎Camera :Qualcomm® Spectra™ 250L ISP, Single Camera: Up to 16 MP ◎Video Playback : Up to 4K Ultra HD, H.265 (High Efficiency Video Coding (HEVC)) ◎Audio Playback :Hi-Res/192kHz, Native 44.1kHz, audio on dedicated DSP; ◎Memory :32Gb LPDDR4.x;64GB eMMC5.1; ◎Display :Resolution 2520 × 1080 @ 60 fps, FHD+, 1920 × 1200 @ 60 fps ◎OS Support:Linux, Android ►參考資料 Thundercomm TurboX C610/C410 Open Kit : https://www.thundercomm.com/product/c610-c410-open-kit/ 高通QCS610 : https://www.qualcomm.com/products/technology/processors/application-processors/qcs610 欲取得詳細資料者請聯絡詮鼎高通PM: Nina Chou (nina.chou@aitgroup.com.tw) ►關於QCS610的五個常見問答 Q: QCS610的主要特色是什麼? A: 支援多種AI功能,如人臉辨識、物件偵測、語音辨識等,並且能夠在本地端即時執行,不需要連線到雲端。這樣可以提高智慧看板的效能和安全性,並減少網路延遲和成本。 Q: QCS610適用於哪些智慧看板的場景? A: 各種智慧看板的場景,如零售、教育、醫療、交通等。例如,QCS610可以用於零售看板,透過人臉辨識和物件偵測,分析顧客的年齡、性別、情緒和購物偏好,並提供個性化的廣告和推薦。 Q: QCS610如何與其他裝置連接? A: 支援多種連接方式,如Wi-Fi、藍牙、乙太網路等。QCS610也支援HDMI輸出,可以將影像和聲音傳送到其他顯示器或喇叭。此外,QCS610也支援USB和GPIO等介面,可以連接到其他感測器或控制器。 Q: QCS610如何開發和部署AI應用? A: QCS610提供了一套完整的開發工具和平台,讓開發者可以輕鬆地開發和部署AI應用。開發者可以使用Qualcomm Neural Processing SDK,利用TensorFlow、Caffe等框架訓練和優化AI模型,並將其轉換成適合QCS610執行的格式。 Q: QCS610支援哪些作業系統和開發工具? A: QCS610支援Android 10和Linux作業系統,以及高通的Snapdragon Neural Processing Engine (SNPE)和TensorFlow Lite等開發工具,方便開發者快速部署AI應用。

相關影片

基於高通QCS610之AI智慧看板展示方案

QCS610 Digital Signage