TWI858694B - 光達系統及其解析度提升方法 - Google Patents
光達系統及其解析度提升方法 Download PDFInfo
- Publication number
- TWI858694B TWI858694B TW112117055A TW112117055A TWI858694B TW I858694 B TWI858694 B TW I858694B TW 112117055 A TW112117055 A TW 112117055A TW 112117055 A TW112117055 A TW 112117055A TW I858694 B TWI858694 B TW I858694B
- Authority
- TW
- Taiwan
- Prior art keywords
- laser
- lens
- receiver
- sub
- lidar system
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/487—Extracting wanted echo signals, e.g. pulse detection
- G01S7/4876—Extracting wanted echo signals, e.g. pulse detection by removing unwanted signals
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
一種光達系統,包括:微控制器、雷射光源、鏡頭模組,以及接收器。鏡頭模組包括接收器鏡頭模組及雷射分光鏡模組。雷射分光鏡模組包括繞射光學元件及準直鏡組。雷射光源發射多個不同波長的雷射光,並包括光耦合器,光耦合器將該等雷射光光學耦合為準直光訊號。在一幀的每一子幀的感測器快門時間內,接收器的複數個像素接收該等不同波長的雷射光的至少一反射光訊號,取得複數個子幀的環境影像,並以反射光訊號所代表的距離值為該子幀的該等像素的距離值,該微控制器融合該複數個子幀的環境影像的該等像素的距離值成為該幀的一最終距離值。
Description
本發明係關於一種光達系統,特別關於一種解析度提升的光達系統。
近年,光達(Light Detection and Ranging,LiDAR)技術被廣泛使用於汽車的自動/半自動駕駛及安全警示。光達的主要部件包括:感測器(例如直接飛時測距(direct time of flight,D-ToF)感測器)、雷射光源、掃描器及資料處理器。現行的光達掃描方式可具有多種形式,例如以光學相位陣列(optical phased array,OPA)或繞射光學元件(diffractive optical element,DOE)投射小區塊光點,透過微機電系統(MEMS)微振鏡或多角反射鏡(polygon mirror)進行蛇狀來回掃描或斜向掃描一個大區塊,或透過DOE或多點線性排列光源或多次反射擴束投射線狀光束,以機械轉動方式橫向掃描一個大區塊等。透過上述掃描方式,感測器可接收反射後的光訊號。
然而,以上述掃描方式進行的雷射光源感測,其長寬比(screen ratio)較小,因此必須持續以較高頻率接收反射的光訊號。相較之下,快閃式光達(flash LiDAR)透過一次投射大面積光點,可在系統運算需求及整體耗能較低的情形下達成高頻率、高幀數的感測。而在光點密度固定的情形下,若能進一步提升快閃式光達的成像解析度,則可使成像更加清晰,增進距離測量的準確性,進一步增進行車安全。因此,亟需一種光達系統,其解析度相較於光點密度相同的現有技術更加提升,以正確判斷距離,維護行車安全。此外,亦亟需一種解析度提升方法,使光達系統的解析度相較於光點密度相同的現有技術更加提升,以正確判斷距離,維護行車安全。
本發明的主要目的在於提供一種光達系統,其解析度相較於光點密度相同的現有技術更加提升,以正確判斷距離,維護行車安全。
為了達成前述的目的,本發明提供一種光達系統,包括:一微控制器;一雷射光源,耦接至該微控制器;一鏡頭模組;以及一接收器,耦接至該微控制器,其中,該雷射光源發射多個不同波長的雷射光,並包括一光耦合器及一光纖,該光耦合器將該等雷射光光學耦合為一準直光訊號,經由該光纖傳輸。該鏡頭模組包括一雷射分光鏡模組及一接收器鏡頭模組,該雷射分光鏡模組接收來自該雷射光源發射的雷射光,並將該雷射光繞射為多束繞射光,該等繞射光向一目標發射。該雷射分光鏡模組包括一繞射光學元件及一準直鏡組。該接收器鏡頭模組接收該等繞射光接觸該目標後反射的一反射光訊號,並向該接收器發出該反射光訊號。該雷射光源以一週期時間射出一脈衝訊號。該微控制器控制該接收器在每一週期時間內的一感測器快門時間內開啟和一重置時間內關閉。在一幀的一子幀的一感測器快門時間內,該接收器的複數個像素接收該等不同波長的雷射光的至少一反射光訊號,取得複數個子幀的環境影像,並以該等反射光訊號所代表的距離值為該子幀的該等像素的距離值。該微控制器融合該複數個子幀的環境影像的該等像素的距離值成為該幀的一最終距離值。
為了達成前述的目的,本發明提供一種用於上述的光達系統的解析度提升方法,該方法包括:將該繞射光學元件設置為可動件,具有旋轉及/或往復移動的功能。在複數個旋轉角度或往復移動位置條件下,取複數子幀環境影像。該等反射光訊號在環境影像中的每一個像素代表一個子距離值,每一子幀環境影像由複數個子距離值組成具深度資訊的三維影像。在汰除異常子幀後,再將其餘複數子幀環境影像融合,若同一像素具複數個子距離值,則進行平均或擇一,若同一像素僅具有一個子距離值,則選擇該子距離值,若該像素不具距離值,則選擇測距範圍中的最大值或最小值(0),成為該幀的三維影像的該最終距離值。
本發明的功效在於,在光點密度固定的情形下,進一步提升快閃式光達的成像解析度,使成像更加清晰,增進距離測量的準確性,進一步增進行車安全。
100:光達系統
101:微控制器
102:雷射光源
104:雷射光
106:鏡頭模組
108:接收器鏡頭模組
110:雷射分光鏡模組
112:接收器
120:目標
122:像場
124:視場
126:反射光
202:凹透鏡
204:凸透鏡
206:繞射光學元件
208:凹面鏡
210:準直鏡組
221,222,223,224:雷射光
230:光耦合器
240:光纖
a:狹縫寬度
θ1:繞射角
L:投射距離
y1,y2,...-y1,-y2,...:暗紋位置
λ1,λ2,λ3:波長
302:雷射光
304:繞射光學元件
306a,306b,306c:點雲
310a,310b:繞射光學元件
502:準直鏡組
5021:凹透鏡
5022:凸透鏡
504:繞射光學元件
506:雷射光
508:繞射光
512:準直鏡組
5121:凹透鏡
5122:凸透鏡
514:繞射光學元件
516:雷射光
518:繞射光
520:凹面鏡
PW:脈衝寬度
T:週期時間
SS:感測器快門時間
R:重置時間
Ts:開始時間
Tl:結束時間
800:方法
802,804,806:步驟
901,902,903:雷射光
911,912,913:雷射光
921:雷射光
A,B,C,D,E:取樣區塊
圖1是本發明的光達系統的示意圖;圖2A及圖2B是圖1所示部分元件的內部結構示意圖;圖2C及圖2D為單狹縫繞射示意圖;圖2E顯示不同波長的雷射光產生的點雲相互疊合的情形;圖3A及圖3B是顯示繞射光學元件的運作情形;圖4顯示本發明在不同距離下的運作情形;圖5A是依據本發明的一準直鏡組配置方式;圖5B是依據本發明的另一準直鏡組配置方式;圖6是依據本發明的一範例時序圖;圖7是依據本發明的另一範例時序圖;圖8是依據本發明的解析度提升方法的流程圖;圖9A、圖9B及圖9C是本發明的範例時序圖;圖10A為真實的環境影像;圖10B、圖10C及圖10D為圖10A的取樣範例;以及圖11A、圖11B、圖11C、圖11D、圖11E及圖11F為同一幀中不同子幀的取樣情形。
以下配合圖式及元件符號對本發明的實施方式做更詳細的說明,俾使熟習該項技藝者在研讀本說明書後能據以實施。
本發明提供一種解析度提升的光達系統,以及該光達系統的解析度提升方法。透過投射多種不同波長的雷射光,並對繞射光學元件進行旋轉或振盪,可在光點密度不變的情形下,增加成像的解析度。
請參閱圖1,本發明提供一種光達系統100,包括微控制器(MCU)102、雷射光源102、鏡頭模組106及接收器112。鏡頭模組106包括接收器鏡頭模組108及雷射分光鏡模組110。雷射光源102及接收器112耦接至微控制器101。
為了測量目標120與光達系統100之間的距離,首先,微控制器101控制雷射光源102發出雷射光104。接著,雷射分光鏡模組110將雷射光104散射為複數個光點,該等光點分布於像場(field of image,FOI)122之內,且該像場122完全涵蓋目標120。隨後,該等光點在接觸目標120後,反射為複數個反射光126,該等反射光分布於視場(field of view,FOV)124之內。接收器鏡頭模組108接收反射光126,並傳送訊號至接收器112。接收器112將接收的訊號傳送至微控制器101,進行後續影像分析。
請參閱圖2A,圖1中的接收器鏡頭模組108包括由至少一凹透鏡202及至少一凸透鏡204組成的透鏡模組,該凹透鏡202及該凸透鏡204形成一聚光鏡組,可聚集圖1中的反射光126,以便傳送光訊號至接收器112。圖1中的雷射分光鏡模組110包括繞射光學元件(diffractive optical element,DOE)206、凹面鏡208及準直鏡組(collimation lens)210。其中,繞射光學元件206具有旋轉或振盪的功能。雷射分光鏡模組110之運作方式,將於下文詳述。
請參閱圖2B,圖1中的雷射光源102可發射多種(例如但不限於四種)不同波長的雷射光221、222、223及224,該雷射光源102包括光耦合器230及光纖240。雷射光221、222、223及224可例如為紅外光,例如波長為850nm、905nm、940nm及1064nm的紅外光。雷射光221、222、223及224可同時或依序發射。光耦合器230將雷射光221、222、223及224光學耦合為單一準直光訊號,經由光纖240向該鏡頭模組傳輸。
依據單狹縫繞射(single-slit diffraction)原理,繞射角θn關聯於狹縫寬度a及波長λ:a sinθ n =nλ,n=±1,±2,±3...請參閱圖2C,當投射距離L固定時,暗紋位置y1,y2,...及-y1,-y2,...關聯於繞射角θn。當波長λ為紅外光範圍(約為1000nm之數量級)而狹縫寬度a為mm之數量級時,繞射角θn極小,此時:
而暗紋位置yn為:y n =L tan θ n =Lnλ/a因此,透過發射不同波長λ的雷射光,可產生具有不同繞射點間距的點雲。如圖2D所示,波長λ1、λ2及λ3的雷射光產生的點雲具有不同的繞射點間距,故當波長λ1、λ2及λ3的雷射光被光學耦合為單一光訊號射出時,由波長分別為λ1、λ2及λ3的雷射光所產生的單狹縫繞射圖像具有不同的繞射點間距,而該等單狹縫繞射圖像可互相填補空隙,有效增加點雲密度,進而增進成像解析度。如圖2E所示,波長λ1、λ2及λ3的雷射光產生的點雲會落在不同位置,當波長λ1、λ2及λ3的雷射光被光學耦合為單一光訊號射出時,可造成該等點雲疊合,有效增加點雲密度,進而增進成像解析度。此一方法適合使用於動態偵測之情境。
請參閱圖3A,當雷射光302射向繞射光學元件304時,繞射光學元件304會將雷射光302繞射為數千至數萬個光點。該等光點在不同距離外形成點雲(point cloud)306a、306b及306c,其中點雲306a距離繞射光學元件304最近,光點最密集,點雲覆蓋面積最小;而點雲306c距離繞射光學元件304最遠,光點最不密集,點雲覆蓋面積最大。繞射光學元件304可為例如廣州印芯半導體公司(Tyrafos)的HCPDOETM,但本發明不限於此。
請參閱圖3B,透過旋轉或振盪,繞射光學元件310a及310b可為繞射光學元件304在不同時間的兩種樣態。由圖3B可知,透過繞射光學元件310a及310b的旋轉及/或往復移動,繞射光學元件310b的光點位置可涵蓋繞射光學元件310a的光點間空隙,反之亦然。因此,在一幀的複數個子幀的每一子幀(subframe)中,繞射光學元件304的光點投射位置會改變。透過融合複數個子幀,可在不增加光點密度的情形下,增加光點照射面積,提升成像解析度。此一方法適合使用於靜態偵測之情境。
由於圖3A所示的點雲覆蓋面積正比於距離的平方,故當距離較遠時,點雲覆蓋面積會快速擴大,造成單位面積光能下降,進而導致反射光強度不足。而大幅增加雷射光302的強度可能導致設備壽命下降,且對人眼易造成傷害。因此,請參閱圖4,由至少一凹透鏡202及至少一凸透鏡204組成的焦距可調變透鏡模組可依照測距範圍(detection range)調變視場大小,使不同距離下(例如15公尺、40公尺、100公尺、200公尺及300公尺)的單位面積光能大致相等,防止距離較遠時反射光強度不足的情形。或者,亦可使用複數個固定焦距的透
鏡模組,每一透鏡模組包括至少一凹透鏡202及至少一凸透鏡204,並依照測距範圍切換透鏡模組,以調變視場大小。
一種達成圖4所示配置的方式為利用準直鏡組將繞射光的覆蓋面積收束在一定範圍內。透過焦距的調變,準直鏡組可調變出射平行光的發散角,依測距範圍調整投射光點的像場範圍,以達成圖4所示之效果。可使用複數個固定焦距的準直鏡組,並依照測距範圍切換準直鏡組,以調變該像場範圍。或者,亦可使用可變焦距的準直鏡組,並依照測距範圍切換準直鏡組,以調變像場範圍。請參閱圖5A,一種準直鏡組配置為將準直鏡組502設置於可旋轉或振盪的繞射光學元件504的正前方,其中,準直鏡組502的鏡面垂直於雷射光506的入射方向。如圖5A所示,準直鏡組502可將繞射光學元件504射出的繞射光508收束為大致相互平行,使繞射光508在不同距離下的單位面積光能大致維持相等。在一實施例中,準直鏡組502包括凹透鏡5021及凸透鏡5022,其中凹透鏡5021及凸透鏡5022的間距可調變,以控制發散角。
請參閱圖5B,另一種準直鏡組配置為將準直鏡組512設置於凹面鏡520的前方,以凹面鏡520收集可旋轉或振盪的繞射光學元件514射出的繞射光。如圖5B所示,繞射光學元件514將雷射光516繞射為多束繞射光518,該等繞射光518透過凹面鏡520向準直鏡組512反射。隨後,準直鏡組512將該等繞射光518收束為大致相互平行,使繞射光518在不同距離下的單位面積光能大致維持相等。在一實施例中,準直鏡組512包括凹透鏡5121及凸透鏡5122,其中凹透鏡5121及凸透鏡5122的間距可調變,以控制發散角。此一配置相較於圖5A所示的配置,可收集到更大角度的繞射光,進而在不增加雷射光強度的情況下,增加投射出的單位面積光能。
在車輛自動駕駛的使用情境中,當車輛行駛時,光達系統100可能接收到的干擾訊號包括前方對向車道上車輛的掃描雷射、前方對向車道上車輛的前定向脈衝雷射、前方同向車道上車輛的掃描雷射及前方同向車道上車輛的後定向脈衝雷射等。因此,必須以適當的方法排除該等干擾訊號,以正確測量距離,維護行車安全。
當圖1的雷射光源102射出脈衝訊號時,為了排除干擾訊號,微控制器101可依據測距範圍,將接收器112啟動或關閉,使接收器112僅接收測距範圍內的反射光訊號。舉例而言,若待測物體在300公尺外,則自雷射光源102射
出脈衝訊號至接收器112接收反射光訊號的所需時間為2μs(R=ct/2,其中R為距離,c為光速3×108m/s,t為時間(秒))。因此,可在一個週期時間(cycle time)內,將接收器112與雷射光源102同步啟動,感測時間2μs,而其餘時間關閉,以防止接收干擾訊號。請參閱圖6,雷射光源(TX)以週期時間T射出脈衝寬度(pulse width)PW的脈衝訊號。接收器(RX)在週期時間T內的感測器快門(sensor shutter)時間SS內開啟和重置(reset)時間R內關閉,其中T=SS+R。感測器快門時間SS及重置時間R係依據測距範圍而定。在一個實施例中,當測距範圍為300公尺時,感測器快門時間SS為2μs,重置時間R為2μs,週期時間T為4μs,脈衝寬度PW為100ns。此時,接收器(RX)可接收0至300公尺內的反射光訊號,而理論圖框率(掃描次數)可高達1/T=2.5×105f/s。
請參閱圖7,除了測距範圍上限以外,亦可透過調整感測器快門時間SS,對接收器(RX)設定測距範圍下限。在圖7中,感測器快門時間SS的開始時間Ts係依據測距範圍下限而定,而結束時間Tl係依據測距範圍上限而定。在一個實施例中,當測距範圍為90至300公尺時,開始時間Ts為600ns,結束時間Tl為2μs,感測器快門時間SS為1400ns,重置時間R為2μs,週期時間T為4μs,脈衝寬度PW為100ns。此時,接收器(RX)可接收90至300公尺內的反射光訊號,而理論圖框率為1/T=2.5×105f/s。
請參閱圖8,在一幀包括複數個(至少三個,例如六個)子幀的環境影像中,方法800透過取得複數個子幀的環境影像,比較每一子幀的複數個取樣區塊的平均距離值,該微控制器融合該複數個子幀的環境影像的該等像素的距離值成為該幀的一最終距離值。在步驟802中,雷射光源依序發射複數個雷射光訊號,以取得複數個子幀的環境影像,其中,在一幀的一子幀的一感測器快門時間內,該接收器的複數個像素接收該等不同波長的雷射光的至少一反射光訊號。在每一子幀中,複數個不同波長的雷射光可同時出射並被耦合為單一光訊號,亦可分別依序出射。在步驟804中,以該等反射光訊號所代表的距離值(依據反射光時間的飛行時間(time of flight,ToF)可求得距離值)為該子幀的該等像素的距離值。在包括複數個取樣區塊的環境影像中,對該等子幀的該複數個取樣區塊的平均距離值進行批量比較(詳見下文表1、表2及表3)。在步驟806中,依據步驟804的批量比較的結果,該微控制器汰除異常子幀,並
融合正常子幀成為該幀的最終距離值。其中,「融合」可以取平均值、疊加、擇一或其他方式進行。
請參見圖9A及圖9B,如前文所述,在動態偵測的情境下,不同波長的雷射光可同時或依序發射。圖9A顯示不同波長的雷射光同時發射的情形。在一幀包括六個子幀的範例中,在每一子幀中,雷射光源(TX)以週期時間T同時發射不同波長的雷射光901、902及903,而接收器(RX)在感測器快門時間SS內開啟,接收雷射光901、902及903的反射光訊號,並將該等反射光訊號交由微控制器計算融合後的子距離值。在圖9A所示的範例中,第五子幀的反射光訊號在感測器快門時間SS中的位置與其餘子幀不同,故微控制器可汰除第五子幀的子距離值,再將其餘子幀的子距離值融合,成為該幀的最終距離值。圖9B顯示不同波長的雷射光依序發射的情形。在一幀包括六個子幀的範例中,在每一子幀中,雷射光源(TX)以週期時間T依序發射不同波長的雷射光911、912及913,而接收器(RX)在感測器快門時間SS內開啟,接收雷射光911、912或913的反射光訊號,並將該等反射光訊號交由微控制器計算該等反射光訊號所代表的子距離值。在第一子幀中,雷射光911發射。在第二子幀中,雷射光912發射。在第三子幀中,雷射光913發射。在第四子幀中,雷射光911發射。在第五子幀中,雷射光912發射。在第六子幀中,雷射光913發射。如此,微控制器可計算每一子幀的子距離值,其中,第一子幀及第四子幀關聯於雷射光911,第二子幀及第五子幀關聯於雷射光912,第三子幀及第六子幀關聯於雷射光913。在圖9B所示的範例中,第五子幀的反射光訊號在感測器快門時間SS中的位置與其餘子幀不同(亦即飛行時間不同),因此第五子幀的平均距離值會與其餘子幀不同,故微控制器可汰除第五子幀的子距離值,再將其餘子幀的子距離值融合,成為該幀的最終距離值。
請參閱圖9C,如前文所述,在靜態偵測的情境下,透過旋轉或振盪,在一幀的複數個子幀的每一子幀中,透過將繞射元件304設置為可動件,具有旋轉及/或往復移動的功能,繞射光學元件304的光點投射位置會改變。在圖9C中,在複數個旋轉角度或往復移動位置條件下,取複數子幀環境影像,雷射光921的光點投射位置在每一子幀中會改變。每一反射光訊號在環境影像中的每一個像素代表一個子距離值,每一子幀環境影像由複數個子距離值組成具有深度資訊的三維影像。隨後,微控制器在汰除異常子幀後,再將其餘複數子幀環境
影像融合,若同一像素具複數個距離值,則進行平均或擇一;若同一像素僅具有一個距離值,則選擇該子距離值;若該像素不具距離值,則選擇測距範圍中的最大值(例如500公尺)或最小值(例如0),計算該幀的三維影像的最終距離值。舉例而言,在一個實施例中,下列表1A~表1F分別代表同一取樣區塊在同一幀內的第一子幀至第六子幀,其中每一個小方格代表一個像素,有數值者代表該子幀的該像素測得的子距離值,而無數值者代表無子距離值。對於每一子幀,將具有子距離值的像素取平均距離值,並根據每一子幀的平均距離值汰除異常子幀。由表1A~表1F可知,第六子幀的平均距離值明顯不同於其餘子幀,故將第六子幀視為異常值而汰除。隨後,如表1G所示,將正常子幀(第一至第五子幀,即表1A至表1E)的每一像素疊合,再將疊合後具有子距離值的的每一像素取平均值,作為此一取樣區塊在此幀的最終距離值。在疊合時,若同一像素具有複數個子距離值,則進行平均或選擇最大值,若該像素不具子距離值,則選擇測距範圍中的最小值(例如0)。或者,若同一像素具有複數個子距離值,則進行平均或選擇最小值,若該像素不具子距離值,則選擇測距範圍中的最大值(例如500或1000)。在圖9C所示的範例中,第五子幀的子距離值與其餘子幀不同,故微控制器可汰除第五子幀的子距離值,再將其餘子幀融合,計算該幀的最終距離值。
圖10A為真實的環境影像。為了提升運算效率,並不需要將整張影像上的每一個像素皆進行距離測量,而可取樣數個區塊進行距離測量。每一取樣區塊中包括複數個像素,例如10×10像素。被取樣的像素不宜太多,例如不多於總像素數的10%,以提升運算效率。圖10B顯示取樣二個區塊的實施例。圖10C顯示取樣五個區塊的實施例。圖10D顯示取樣九個區塊的實施例。取樣區塊數不宜少於五個,以較佳地掌握環境訊息。在一個正常的子幀中,具有正常距離值的取樣區塊多於一特定比例(例如80%或88.9%,其中80%指取樣五個區塊時,容許一個取樣區塊具有異常的距離值,而88.9%指取樣九個區塊時,容許一個取樣區塊具有異常的距離值),否則視為異常子幀。
請參閱圖11A至圖11F,在一幀包括六個子幀的實施例中,該六個子幀依序為圖11A、圖11B、圖11C、圖11D、圖11E及圖11F。其中,第二子幀(圖11B)及第六子幀(圖11F)有外光侵入。為了有效濾除受干擾的子幀,可將每一子幀中各取樣區塊內的每一像素所測得的距離值融合,作為該子幀該取樣區塊的子距離值,再將同一取樣區塊在六個子幀內的六個子距離值相互比較,以濾除異常值。在一個實施例中,濾除異常值的方式為計算同一取樣區塊在六個子幀內的的六個子距離值的平均值(μ)、標準差(σ)、上閾值及下閾值,其中上閾值為平均值加上數個標準差(μ+nσ),下閾值為平均值減去數個標準差(μ-nσ),其中n的大小係依據實驗數據及實際需求而定,且可為整數或非整數,例如(但不限於)1或1.5。在下文的表2、3及4所示之實施例中,係以n=1為例進行說明,但本發明不以此為限。隨後,汰除該等子距離值中,大於上閾值或小於下閾值的子幀,並融合其餘子距離值相近的子幀,作為該該幀的最終距離值。
表2、3及4顯示可能的感測結果。在表2所示之範例中,在第一子幀時,取樣區塊A的前方無障礙物。此時,取樣區塊A的距離視為最遠距離(例如500公尺)。在第二子幀時,取樣區塊A有外光侵入,而在第六子幀時,取樣區塊A、B、C、D、E皆有外光侵入。此時,如表2所示,取樣區塊A的第二子幀及第六子幀的距離值低於下閾值,故應視為異常值而濾除。而取樣區塊B、C、D、E的第六子幀的距離值皆低於個別下閾值,故應視為異常值而濾除。
在表3所示之範例中,在第四子幀時,取樣區塊A有外光侵入,且測得的距離十分接近正常值,而在第六子幀時,取樣區塊A、B、C、D、E皆有外光侵入。此時,如表3所示,取樣區塊A的第四子幀的距離值高於上閾值,第六子幀的距離值低於下閾值,故應視為異常值而濾除。而取樣區塊B、C、D、E的第六子幀的距離值皆低於個別下閾值,故應視為異常值而濾除。由此,儘管取樣區塊A在第四子幀及第六子幀測得的距離十分接近正常值,該二子幀仍可被正確識別為異常值而濾除。
在表4所示之範例中,在第六子幀時,取樣區塊B、C、D、E有外光侵入。此時,如表4所示,取樣區塊B、C、D、E的第六子幀的距離值皆低於個別下閾值,故應視為異常值而濾除。
以上所述者僅為用以解釋本發明的較佳實施例,並非企圖據以對本發明做任何形式上的限制,是以,凡有在相同的發明精神下所作有關本發明的任何修飾或變更,皆仍應包括在本發明意圖保護的範疇。
100:光達系統
101:微控制器
102:雷射光源
104:雷射光
106:鏡頭模組
108:接收器鏡頭模組
110:雷射分光鏡模組
112:接收器
120:目標
122:像場
124:視場
126:反射光
Claims (12)
- 一種光達系統,包括:一微控制器;一雷射光源,耦接至該微控制器;一鏡頭模組,以及一接收器,耦接至該微控制器,其中:該雷射光源發射多個不同波長的雷射光,並包括一光耦合器及一光纖,該光耦合器將該等雷射光光學耦合為一準直光訊號,經由該光纖傳輸;該鏡頭模組包括一雷射分光鏡模組及一接收器鏡頭模組,該雷射分光鏡模組接收來自該雷射光源發射的雷射光,並將該雷射光繞射為多束繞射光,該等繞射光向一目標發射;該雷射分光鏡模組包括一繞射光學元件及一準直鏡組;該接收器鏡頭模組接收該等繞射光接觸該目標後反射的一反射光訊號,並向該接收器發出該反射光訊號;該雷射光源以一週期時間射出一脈衝訊號;該微控制器控制該接收器在每一週期時間內的一感測器快門時間內開啟和一重置時間內關閉;在一幀的一子幀的一感測器快門時間內,該接收器的複數個像素接收該等不同波長的雷射光的至少一反射光訊號,取得複數個子幀的環境影像,並以該等反射光訊號所代表的距離值為該子幀的該等像素的距離值;該微控制器根據該複數個子幀的環境影像的該等像素的距離值而得到該幀的一最終距離值。
- 如請求項1所述的光達系統,更包括:在包括複數個取樣區塊的環境影像中,對該等子幀的該複數個取樣區塊的平均距離值進行比較; 依據該比較的結果,該微控制器汰除異常子幀,並融合正常子幀成為該幀的該最終距離值。
- 如請求項1所述的光達系統,其中,該繞射光學元件具有旋轉或振盪的功能。
- 如請求項1所述的光達系統,其中,該接收器鏡頭模組包括由至少一凹透鏡及至少一凸透鏡組成的焦距可調變透鏡模組,依測距範圍調變視場大小。
- 如請求項1所述的光達系統,其中,該接收器鏡頭模組包括複數個固定焦距的透鏡模組,每一透鏡模組包括至少一凹透鏡及至少一凸透鏡,並依照測距範圍切換該等透鏡模組,以調變視場大小。
- 如請求項1所述的光達系統,其中,該雷射分光鏡模組包括該繞射光學元件及複數個固定焦距的準直鏡組,並依照測距範圍切換該等準直鏡組,以調變像場範圍。
- 如請求項1所述的光達系統,其中,該雷射分光鏡模組包括該繞射光學元件及一個可變焦距的準直鏡組,並依照一測距範圍切換該等準直鏡組,以調變像場範圍。
- 如請求項6或7所述的光達系統,其中,該繞射光學元件將該雷射光繞射為該等繞射光,該準直鏡組被設置於該繞射光學元件的正前方,該準直鏡組的鏡面垂直於該雷射光的入射方向,將該等繞射光收束為大致相互平行。
- 如請求項6或7所述的光達系統,更包括一凹面鏡,該繞射光學元件將該雷射光繞射為該等繞射光,該凹面鏡收集該等繞射光,該準直鏡組被設置於該凹面鏡的前方,將該等繞射光收束為大致相互平行。
- 如請求項1所述的光達系統,其中,該感測器快門時間及該重置時間係依據測距範圍而定。
- 如請求項10所述的光達系統,更包括一開始時間及一結束時間,該微控制器控制該接收器在每一週期時間內的該開始時間及該結束時間之間開啟,其餘時間關閉;該開始時間係依據測距範圍下限而定,且該結束時間係依據測距範圍上限而定。
- 一種用於如請求項1所述的光達系統的解析度提升方法,該方法包括:將該繞射光學元件設置為可動件,具有旋轉及/或往復移動的功能;在複數個旋轉角度或往復移動位置條件下,取複數子幀環境影像;該等反射光訊號在環境影像中的每一個像素代表一個子距離值,每一子幀環境影像由複數個子距離值組成具深度資訊的三維影像;在該微控制器汰除異常子幀後,再將其餘複數子幀環境影像融合,若同一像素具複數個子距離值,則進行平均或擇一,若同一像素僅具有一個子距離值,則選擇該子距離值,若該像素不具子距離值,則選擇測距範圍中的最大值,計算該幀的三維影像的該最終距離值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US18/230,334 US20240045068A1 (en) | 2022-08-05 | 2023-08-04 | LiDAR SYSTEM AND RESOLUSION IMPROVEMENT METHOD THEREOF |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US202263395347P | 2022-08-05 | 2022-08-05 | |
| US63/395,347 | 2022-08-05 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW202407380A TW202407380A (zh) | 2024-02-16 |
| TWI858694B true TWI858694B (zh) | 2024-10-11 |
Family
ID=89753737
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW112117043A TWI876338B (zh) | 2022-08-05 | 2023-05-08 | 光達系統及其外光干擾排除方法 |
| TW112117055A TWI858694B (zh) | 2022-08-05 | 2023-05-08 | 光達系統及其解析度提升方法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW112117043A TWI876338B (zh) | 2022-08-05 | 2023-05-08 | 光達系統及其外光干擾排除方法 |
Country Status (2)
| Country | Link |
|---|---|
| CN (2) | CN117518184A (zh) |
| TW (2) | TWI876338B (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW201643463A (zh) * | 2015-04-07 | 2016-12-16 | 光電波有限公司 | 小型光達系統 |
| US20200096613A1 (en) * | 2016-06-02 | 2020-03-26 | Academy Of Opto-Electronics ,Chinese Academy Of Sciences | Lidar system based on visible-near infrared-shortwave infrared light bands |
| US20200200874A1 (en) * | 2016-04-22 | 2020-06-25 | OPSYS Tech Ltd. | Multi-Wavelength LIDAR System |
| WO2020182591A1 (en) * | 2019-03-08 | 2020-09-17 | Osram Gmbh | Component for a lidar sensor system, lidar sensor system, lidar sensor device, method for a lidar sensor system and method for a lidar sensor device |
| EP3796046A1 (en) * | 2016-12-30 | 2021-03-24 | XenomatiX NV | System for characterizing surroundings of a vehicle |
| CN108027425B (zh) * | 2015-09-18 | 2022-04-08 | 罗伯特·博世有限公司 | 激光雷达传感器 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017006546A1 (ja) * | 2015-07-03 | 2017-01-12 | パナソニックIpマネジメント株式会社 | 距離測定装置および距離画像合成方法 |
| WO2020047248A1 (en) * | 2018-08-29 | 2020-03-05 | Sense Photonics, Inc. | Glare mitigation in lidar applications |
| US11287517B2 (en) * | 2019-04-19 | 2022-03-29 | Sense Photonics, Inc. | Single frame distance disambiguation |
| WO2021067377A1 (en) * | 2019-10-01 | 2021-04-08 | Sense Photonics, Inc. | Strobe based configurable 3d field of view lidar system |
| US11977169B2 (en) * | 2020-08-24 | 2024-05-07 | Innoviz Technologies Ltd. | Multi-beam laser emitter with common optical path |
| US11450103B2 (en) * | 2020-10-05 | 2022-09-20 | Crazing Lab, Inc. | Vision based light detection and ranging system using dynamic vision sensor |
-
2023
- 2023-05-08 TW TW112117043A patent/TWI876338B/zh active
- 2023-05-08 CN CN202310510239.2A patent/CN117518184A/zh active Pending
- 2023-05-08 CN CN202310513142.7A patent/CN117518185A/zh active Pending
- 2023-05-08 TW TW112117055A patent/TWI858694B/zh active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW201643463A (zh) * | 2015-04-07 | 2016-12-16 | 光電波有限公司 | 小型光達系統 |
| CN108027425B (zh) * | 2015-09-18 | 2022-04-08 | 罗伯特·博世有限公司 | 激光雷达传感器 |
| US20200200874A1 (en) * | 2016-04-22 | 2020-06-25 | OPSYS Tech Ltd. | Multi-Wavelength LIDAR System |
| US20200096613A1 (en) * | 2016-06-02 | 2020-03-26 | Academy Of Opto-Electronics ,Chinese Academy Of Sciences | Lidar system based on visible-near infrared-shortwave infrared light bands |
| EP3796046A1 (en) * | 2016-12-30 | 2021-03-24 | XenomatiX NV | System for characterizing surroundings of a vehicle |
| WO2020182591A1 (en) * | 2019-03-08 | 2020-09-17 | Osram Gmbh | Component for a lidar sensor system, lidar sensor system, lidar sensor device, method for a lidar sensor system and method for a lidar sensor device |
Also Published As
| Publication number | Publication date |
|---|---|
| TW202407380A (zh) | 2024-02-16 |
| TWI876338B (zh) | 2025-03-11 |
| CN117518184A (zh) | 2024-02-06 |
| CN117518185A (zh) | 2024-02-06 |
| TW202407379A (zh) | 2024-02-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7695186B2 (ja) | 向上した3dセンシング | |
| US10782392B2 (en) | Scanning optical system and light projecting and receiving apparatus | |
| US10754036B2 (en) | Scanning illuminated three-dimensional imaging systems | |
| CN113848540B (zh) | 一种面阵色散光谱感光组件、接收端以及激光雷达系统 | |
| JP2015178975A (ja) | 物体検出装置及びセンシング装置 | |
| CN113848537B (zh) | 一种色散光谱感光组件、接收端及激光雷达系统 | |
| US10151629B2 (en) | Spectral imaging sensors and methods with time of flight sensing | |
| EP3206074B1 (en) | Scanning optical system and light projection and reception device | |
| JP2021170033A (ja) | 走査装置 | |
| US12164033B2 (en) | Lidar projection apparatus | |
| JP2023145783A (ja) | 投光装置、投受光装置及び測距装置 | |
| TWI858694B (zh) | 光達系統及其解析度提升方法 | |
| CN110662980B (zh) | 用于扫描立体角的方法和设备 | |
| US20240045068A1 (en) | LiDAR SYSTEM AND RESOLUSION IMPROVEMENT METHOD THEREOF | |
| CN108885260B (zh) | 具有单轴扫描的渡越时间探测器 | |
| CN113848538B (zh) | 一种色散光谱激光雷达系统及测量方法 | |
| CN113447947A (zh) | 生成场景数据的装置及方法 | |
| CN113597569B (zh) | 具有全息成像光学器件的激光雷达系统 | |
| US12442899B2 (en) | MEMS actuated vibratory Risley prism for LiDAR | |
| US7379220B2 (en) | Multi-beam color scanning device | |
| CN113302513A (zh) | 用于激光雷达传感器的发送单元、激光雷达传感器和用于操控发送单元的方法 | |
| TWI835610B (zh) | 光發射模組、攝像頭模組及電子設備 | |
| CN119959907B (zh) | 大视场固态激光雷达装置及探测方法 | |
| TWI899217B (zh) | 飛時測距成像系統、操作方法以及光束發射設備 | |
| WO2025069291A1 (ja) | 撮像システム、電磁波照射システム、計測方法、及びプログラム |