【Sky Eye 開闊未來】詳細解說!Stixel 物件偵測法

一.   概述

上篇介紹了 精闢 !車道偏移原理解密 () ,以清晰的流程圖方式,解密算法是如何運行流程! 並展示各步驟的結果來加強可讀性,最後則是標註實際找到車道線。
然而,這裡將開始正式進入到屬於前車偵測的篇章(粉色章節),此章節為 "詳細解說 Stixel 物件偵測法",會介紹前車偵測主要核心概念與原理!告訴各位是如何偵測到車輛 ?

此外,世平集團 ATU 團隊精心設計的一套 Sky Eye 開發版,幫助我們一同開闊未來 !!  
大大通精彩方案    開闢未來_雙目立體視覺帶你進入 FCW  & LDW 新視野

 



雙目立體視覺技術指南 (前車偵測) - 文章架構示意圖
  

 

首先,探討雙目立體視覺前車偵測演算法的核心 Stixel 物件偵測演算法(Stixel Object Detection)

二.   基礎原理 - Stixel 物件偵測演算法(Stixel Object Detection)

Stixel 是由一組長條型的區域構成的中階訊息表達方式,有別於單一像素多了長度的概念
若此概念用於物件偵測的話,長度則示為物體的高度資訊。如示意圖所示,清楚地呈現像素(Piexel) 與 Stixel 、Region各個差異,其中 Region 是表示一個區域的高階訊息表達方式,可視為成整個物件。

Pixel、Stixel 與 Region 概念示意圖

圖文出處 : 知乎論壇

 

如同下方示意圖,所謂的 Region,就是從圖片取得數條相應的 Stixel 資訊,並將其資訊組成 Region 形式。
而為了避免與英文意義混淆,後續文章以 Stixel 物件的形式表示。

Stixel 物件示意圖

圖文出處 : 知乎論壇

 

在雙目立體視覺前車偵測演算法之中,必須先前取得兩鏡頭所構成的視差影像,接著由演算法將影像中的場景分為天空、地面物體三大種類(似標籤 Labeling 方式),如下圖中的 Labeling 所示。而 Stixel 演算法就是負責統計圖形中物件的資訊,並由長條資訊 Stixel 的概念,將其組成物件的資訊,如下圖中的 Stixel Image 所示。

Stixel 演算流程示意圖

圖文出處 : 知乎論壇

 

Stixel 統計方式就如下圖所示,先從影像底部開始進行檢測,途中會檢測到屬於地面標籤,當第一次檢測到物件標籤時,則開始記錄 Stixel 資訊 ; 分別記錄地面資訊、視差值、位置等資訊。持續檢測到屬於非物件標籤或是視差小於 0 的特徵點時,則結束紀錄,最後統計高度資訊並將整個 Stixel 資訊記錄至記憶體中。

Stixel 統計方式示意圖

圖文出處 : 知乎論壇

 

最後,從左至右掃描檢測影像,紀錄完成所有的 Stixel 資訊後。即可用後續的算法,以 multimap 方式,將所有 Stixel 資訊展開成 Stixel 物件,並利用實際距離、寬度等條件進行 Stixel 物件篩選。



上述,為 Stixel 物件偵測演算法的介紹,亦是雙目立體視覺前車偵測的主要概念之一。

不妨試著想像雙目立體視覺的三維空間與 Stixel 物件偵測的概念是如何成立的 ? 當然,這是需要一點想像力 ! 透過這種方式理解能更清楚知道,概念是如何衍伸 !

後續文章將介紹 Stixel 物件偵測演算法運用於 雙目立體視覺前車偵測(粉色章節) 所須的基礎原理。敬請期待 ! !  “ 雙目立體視覺前車偵測算法大公開 ()

 

三.  參考文件

[1] 每日頭條網站 - 雙目立體視覺技術的實現
[2] 每日頭條網站 - 雙目立體視覺測量系統應用
[3] 每日頭條網站 - ADAS單目/雙目/三目到底有什麼區別?
[4] 維基百科 - Block-matching algorithm
[5] 論文 - Performance Analysis between Basic Block Matching and Dynamic Programming of Stereo Matching Algorithm
[6] 教材 - Stereo Vision by Professor Fei-Fei Li

[7] 維基百科 - Epipolar geometry
[8] 維基百科 - 單應性
[9] 論文 - A Flexible New Technique for Camera Calibration
[10] 數學工廠 - Camera Calibration 相機校正
[11] CSDN - 雙目測距(雙目標定、雙目校正和立體匹配)
[12] 官方網站 – GNU Octave
[13] 官方網站 – Camera Calibration Toolbox for Matlab
[14] 維基百科 - Hough transform
[15] 論文 - Chong-Wei Li , Jui-Cheng Yen and Hun-Chen Chen, "Safe Driving Monitoring System", June. 2014.
[16] 論文 - Hernán Badino, Uwe Franke, David Pfeiffer, ”The Stixel World - A Compact Medium Level Representation of the 3D-World”, September 2009
[17] 數據邦 - 雙目的終極奧義:Stixel柱狀像素

 
如有任何相關 雙目立體視覺(Stereo Vision) 技術問題,歡迎至博文底下留言提問 !!
接下來還會分享更多 雙目立體視覺(Stereo Vision) 的技術文章 !!敬請期待 【Sky Eye 開闊未來】 !!



 

★博文內容均由個人提供,與平台無關,如有違法或侵權,請與網站管理員聯繫。

★文明上網,請理性發言。內容一周內被舉報5次,發文人進小黑屋喔~

評論