聯詠科技Novatek NT98336是一款專為多路H265高清DVR/HVR系統設計的專業SoC芯片。它內置ARM Cortex CA53四核CPU、H.264/H265編解碼器、MJPEG編解碼器、Novatek CNN Gen2.5 2.25T硬件加速器、2D圖形加速引擎、多通道高清視頻採集、4K超高清顯示控制器、RGMII乙太網控制器、USB3.0和USB2.0端口、PCIe Gen3、SATA3.0端口和AMBA總線架構為用戶提供高性能高清DVR/HVR。NT98336還提供視頻預處理和後處理，並支持多格式視頻輸入應用於高視頻質量高清DVR/HVR的應用。
(Novatek NT98336 Evaluation Kit)
Hailo-8™人工智能處理器則是選用Hailo-8™ M.2模塊，它是一款適用於AI應用的AI加速器模塊。該AI模塊基於每秒26兆次運算(TOPS)的Hailo-8™人工智能處理器，具有高能效。Hailo-8™ AI加速器具有完整的PCIe Gen-3.0通道接口，能提供前所未有的AI性能，並為廣泛市場提供低功耗深度神經網絡推理。利用Hailo的綜合數據流編譯器及其對標準AI框架的支持，可以輕鬆移植其神經網絡模型Hailo-8，提供高性能人工智能產品。
(Hailo-8™ M.2 AI Acceleration Module)
(Hailo-8™ M.2 AI Acceleration Module + PCIe adapter board)
NT98336可透過 PCIe標準介面連接Hailo-8 AI Acceleration Module進行 AI 處理功能。
LPD(License Plate Detection)車牌偵測是一種透過車牌辨識車輛的影像處理技術，可運用於各種安全和交通應用。此方案運用已訓練好的AI模型給予Hailo-8進行車牌偵測並將得到座標資訊呈現輸出影像。
LPD硬體方案方塊圖
LPD軟體方案方塊圖
NT98336+Hailo-8 LPD執行結果
執行方式為NT98336接16CH攝影機。程式流程將這16CH畫面轉換成Hailo-8使用AI模型支援的RGB資料，藉由NT98336 CPU解析Hailo-8辨識結果得到車牌座標資料，並將車牌座標數值映射至對應的畫面透過HDMI顯示在螢幕。
下圖呈現不同角度和車牌樣式辨識結果。
Q&A
Q1. 解決方案所支援的操作系统？
A：NT98336 支援Linux 4.19.148。
Q2. 解決方案可支援到多大的影像格式輸出？
A：NT98336 HDMI最大可輸出4K2K，VGA最大可輸出1080P/60fps
Q3. 解決方案是否有提供儲存裝置介面？
A：NT98336支援2組SATA3.0的儲存裝置介面。
Q4. 解決方案中人工智能處理器支持框架有哪幾種?
A：Hailo-8™ 支持框架有TensorFLow、TensorFlow Lite、ONNX、Keras、Pytorch。
Q5. 解決方案中人工智能處理器的溫度範圍?
A：Hailo-8™ 支持-40°C至85°C的擴展溫度範圍。
Q6. 解決方案中人工智能處理器的功耗為多少?
A：Hailo-8™ 一般功耗為2.5瓦。
Q7. 解決方案中人工智能處理器的優勢?
A：Hailo-8™ 具有高達26 TOPS。
►場景應用圖
►展示板照片
►方案方塊圖
►核心技術優勢
(1) 影像監控結合AI運算 (2) 支援DVR/HVR混合應用 (3) 支持多種影像顯示輸出介面HDMI/VGA/CVBS (4) 實現實時、低延遲、高效率的人工智能推理 (5) 專有的新型結構驅動數據流架構 (6) 通過芯片級聯提供可擴展功能 (7) 實現多碼流和多模型同時處理 (8) 高精度同時處理多人與高質量的影像視頻識別分析 (9) 改進視頻分析並具有成本效益 (10) 與現有解決方案相比，成本效益最高
►方案規格
(1) ARM Cortex-CA53 Quad Cores核心晶片 (2) Multi-channel encoding up to 1080p@300fps (3) Hailo-8™ M.2支援每秒26兆次運算 (TOPS) (4) Hailo-8™ 支持框架TensorFLow、TensorFlow Lite、ONNX、Keras、Pytorch (5) 支援PCIe Gen-3.0 (6) Linux OS系統