TW201448567A - 適應性深度感測技術 - Google Patents

Abstract

本文說明一種裝置、系統、以及一種方法。該裝置包括一或更多感測器，其中該等感測器由一基線軌來耦合。該裝置亦包括沿該基線軌來移動該一或更多感測器之一控制器裝置，使得該基線軌用來調整該一或更多感測器之每一個間的一基線。

Description

適應性深度感測技術 發明領域

本發明一般係有關深度感測技術。更特別是，本發明係有關在各種不同深度平面之適應性深度感測技術。

發明背景

影像擷取期間，有各種不同的技術用來擷取與該影像資訊相關聯之深度資訊。該深度資訊典型用來產生包含在該影像中之深度的一表示法。該深度資訊可以是可用來指出該影像中之3D物件的深度之一點雲、一深度圖、或一三維度(3D)多邊形網格的型式。深度資訊亦可使用立體對或多視野立體重建方法來從二維度(2D)影像導出、亦可從包括結構化燈光、飛行時間感測器之一廣大範圍的直接深度感測方法、以及許多其他方法導出。該深度係於設定深度平面上擷取一固定深度解析值。

依據本發明之一實施例，係特地提出一種裝置，包含有：一或更多感測器，其中該等感測器由一基線軌來耦合；一控制器裝置，其沿該基線軌來移動該一或更多感 測器，使得該基線軌用來調整該一或更多感測器之每一個間的一基線。

100‧‧‧計算裝置

102‧‧‧中央處理單元

104‧‧‧記憶體裝置

106‧‧‧匯流排

108‧‧‧圖形處理單元

110‧‧‧驅動器

112‧‧‧影像擷取裝置

114、302、604、606、802、804‧‧‧感測器

115、304‧‧‧MEMS

116‧‧‧輸入/輸出(I/O)裝置介面

118、1106‧‧‧輸入/輸出(I/O)裝置

120‧‧‧顯示器介面

122‧‧‧顯示器裝置

124‧‧‧儲存裝置

126‧‧‧應用程式

128‧‧‧網路介面控制器

130、132‧‧‧網路

136‧‧‧列印裝置

202、204‧‧‧深度領域

206A、206B、206C、208A、208B、208C、208D、208E、208F、208G、208H、208I、208J、208K、720‧‧‧孔徑

300、500、600‧‧‧繪圖

306A、306B、306C、306D‧‧‧ 箭頭

402、404、406‧‧‧顫動格柵

408‧‧‧粗線

410‧‧‧細線

502‧‧‧格柵

504、504A、504B、504C、504D、504E、504F、504G、504H、504I‧‧‧偏置影像

506、600A、600B、704、712、 714、728、730‧‧‧參考數字

602、806‧‧‧基線軌

608、706、722、808‧‧‧基線

708、710、724、726‧‧‧視域

800‧‧‧行動裝置

902、904、906、908‧‧‧方塊

1000‧‧‧系統

1002‧‧‧平台

1004、1104‧‧‧顯示器

1006‧‧‧內容服務裝置

1008‧‧‧內容遞送裝置

1010‧‧‧導航控制器

1012‧‧‧晶片組

1014‧‧‧圖形子系統

1016‧‧‧無線電

1018‧‧‧使用者介面

1100‧‧‧小型式因素裝置

1102‧‧‧外殼

1108‧‧‧天線

1110‧‧‧導航特徵

1200‧‧‧有形、非暫態電腦可讀媒體

1202‧‧‧處理器

1204‧‧‧電腦匯流排

1206‧‧‧基線模組

1208‧‧‧擷取模組

1210‧‧‧適應性深度感測模組

圖1是一可用來提供適應性深度感測之一計算裝置的方塊圖；圖2是一具有不同基線之兩個深度領域的繪圖；圖3是一具有一MEMS裝置之一影像感測器的繪圖；圖4是一三個顫動格柵之繪圖；圖5是一該顫動移動橫跨一格柵的繪圖；圖6是一顯示沿一基線軌之MEMS控制感測器的圖形；圖7是一繪示根據兩感測器間之基線中的改變之視域改變的圖形；圖8是一行動裝置之一繪圖；圖9是一用於適應性深度感測之一方法的程序流程圖；圖10是一用以提供適應性深度感測之一示範系統的方塊圖；圖11是一圖10之系統可得以具體化的一小型式因素裝置之示意圖；以及圖12是一顯示可儲存用以適應性深度感測之編碼的有形、非暫態電腦可讀媒體1200之方塊圖。

遍及此揭露內容及圖式之同樣的數字係使用於參照相同的組件與特徵。100系列中的數字參照至最初於圖 1中所得到的特徵；200系列中的數字參照至最初於圖2中所得到的特徵；等等。

較佳實施例之詳細說明

深度與影像感測器主要為靜態、預設的裝置，於各種不同的深度平面上擷取具有固定深度解析值之深度與影像。由於該等深度感測器之預設光學視域、該等感測器之固定孔徑、以及該固定的感測器解析度，該等深度解析值與該等深度平面為固定。本文之實施例可提供適應性深度感測技術。某些實施例中，該深度表示法可根據使用該深度圖或該深度圖中之一關注區域來調和。某些實施例中，適應性深度感測為根據人類視覺系統之可縮放深度感測。該適應性深度感測可使用一微機電系統(MEMS)來執行調整該孔徑與該視域之光學中心。該適應性深度感測亦可包括一組在不同位置之顫動型樣。

下列說明與請求項中，可使用該等術語“耦合”與“連接”、以及其衍生名詞。應了解該等術語彼此間並不意欲視為同義詞。而是，於特定實施例中，“連接”可用於指出兩個或更多元件直接以實體或電氣方式彼此接觸。“耦合”可表示兩個或更多元件直接以實體或電氣方式接觸。然而，“耦合”亦可表示兩個或更多元件不直接彼此接觸，但仍彼此協力操作或互動。

某些實施例可以硬體、韌體、與軟體的其中之一或一組合來執行。某些實施例亦可作為儲存於一機器可讀 媒體中之指令來予以執行，該等指令可由一計算平台來讀取與執行以執行本文所述之操作。一機器可讀媒體可包括用以儲存或發送可由一機器，例如一電腦讀取之一型式的資訊之任何機構。例如，一機器可讀媒體可包括唯讀記憶體(ROM)；隨機存取記憶體(RAM)；磁碟儲存媒體；光學儲存媒體；快取記憶體裝置；或者電氣、光學、音響或其他型式的傳播信號，例如，載波、紅外線信號、數位信號、或可發送及/或接收信號、等等之其他介面。

一實施例為一實施態樣或範例。該說明書中參照為“某一實施例”、“一實施例”、“某些實施例”、“各種不同實施例”、或“其他實施例”表示連接該等實施例說明之一特定的特徵、架構、或特性係包括在本發明之至少某些實施例中，但不需包括在所有實施例中。出現各種不同的“某一實施例”、“一實施例”、或“某些實施例”不需皆參照為該相同實施例。來自一實施例之元件或觀點可與另一實施例之元件或觀點加以組合。

並非本文說明與繪示之所有構件、特徵、結構、特性、等等皆需包括在一特定實施例或多個實施例中。例如，若該說明書陳述一構件、特徵、架構、或特性“可”、“可能”、“可以”或“能夠”被包括，則該特定構件、特徵、架構、或特性不需被包括。若該說明書或請求項參照“一”或“一個”元件，則其不表示僅有一個該元件。若該說明書或請求項參照“一額外元件”，則其不排除有超過一個該額外元件。

應注意雖然某些實施例已參照特定實施態樣來說明，但根據某些實施例亦可有其它實施態樣。此外，該圖式中繪示及/或本文說明之電路元件或其他特徵的安排及/或順序不需以該繪示或說明的特定方式來安排。根據某些實施例可有許多其它安排。

於一圖形顯示之每一系統中，某些情況中之每一元件具有一相同參考數字或一不同的參考數字來建議該等代表元件可不同及/或類似。然而，一元件可具有彈性足以具有不同的實施態樣並與本文所示或說明之某些或所有系統來運作。圖式中顯示之各種不同元件可相同或不同。哪個參照為一第一元件而哪個稱為一第二元件是任意的。

圖1是一可用來提供適應性深度感測之一計算裝置100的方塊圖。該計算裝置100可為，例如，一膝上型電腦、桌上型電腦、平板電腦、行動裝置、或伺服器、等等。該計算裝置100可包括組配來執行儲存指令之一中央處理單元(CPU)102、以及儲存該CPU 102可執行之指令的一記憶體裝置104。該CPU可由一匯流排106耦合至該記憶體裝置104。此外，該CPU 102可為一單核心處理器、一多核心處理器、一計算叢集、或任何數量的其他組態。再者，該計算裝置100可包括超過一個CPU 102。該CPU 102可執行之指令可用來執行適應性深度感測。

該計算裝置100亦可包括一圖形處理單元(GPU)108。如圖所示，該CPU 102可透過該匯流排106耦合至該GPU 108。該GPU 108可組配來執行該計算裝置100中 之任何數量的圖形操作。例如，該GPU 108可組配來呈現或調處顯示至該計算裝置100之一使用者的圖形影像、圖形圖框、視訊、等等。某些實施例中，該GPU 108包括若干圖形引擎(未顯示)，其中每一圖形引擎組配來執行特定的圖形任務、或者執行特定類型的工作量。例如，該GPU 108可包括控制一感測器之顫動的一引擎。一圖形引擎亦可用來控制該孔徑與該視域(FOV)之光學中心以調和該深度解析與該深度領域線性。某些實施例中，解析是一特定區域中之資料點的測量。該等資料點可為深度資訊、影像資訊、或一感測器可測量之任何其他的資料點。此外，該解析可包括不同類型的資料點之一組合。

該記憶體裝置104可包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、快取記憶體、或任何其他適當的記憶體系統。例如，該記憶體裝置104可包括動態隨機存取記憶體(DRAM)。該記憶體裝置104包括驅動器110。該等驅動器110組配來執行用以該計算裝置100中之各種不同構件的操作之指令。該裝置驅動器110可為軟體、一應用程式、應用程式碼、等等。該等驅動器亦可用來操作該GPU以及控制一感測器之顫動、該孔徑、以及該視域(FOV)之光學中心。

該計算裝置100包括一或更多影像擷取裝置112。某些實施例中，該影像擷取裝置112可為一相機、立體相機、紅外線感測器、等等。該影像擷取裝置112用來擷取影像資訊與該對應的深度資訊。該影像擷取裝置112可包括感測器114，諸如一深度感測器、RGB感測器、一影像感測器、一 紅外線感測器、一X光光子計數感測器、一光感測器、或其任何組合。該等影像感測器可包括電荷耦合裝置(CCD)影像感測器、互補金氧半導體(CMOS)影像感測器、晶載系統(SOC)影像感測器、具有光靈敏薄膜電晶體之影像感測器、或其任何組合。某些實施例中，一感測器114為一深度感測器114。該深度感測器114可用來擷取與該影像資訊相關聯之深度資訊。某些實施例中，一驅動器110可用來操作該影像擷取裝置112中之一感測器，諸如一深度感測器。該等深度感測器可藉由調整該顫動型式、該孔徑、或該等感測器觀察之FOV的光學中心來執行適應性深度感測。一MEMS 115可調整一或更多感測器114間之實體位置。某些實施例中，該MEMS 115用來調整兩個深度感測器114間之位置。

該CPU 102可透過該匯流排106連接至組配來將該計算裝置100連接至一或更多I/O裝置118之一輸入/輸出(I/O)裝置介面116。該等I/O裝置118可包括，例如，一鍵盤與一指向裝置，其中該指向裝置可包括一觸控板或一觸控螢幕、等等。該等I/O裝置118可為該計算裝置100之內建構件、或者外部連接至該計算裝置100之裝置。

該CPU 102亦可透過該匯流排106鏈接至組配來將該計算裝置100連接至一顯示器裝置122之一顯示器介面120。該顯示器裝置122可包括該計算裝置100之一內建構件的一顯示螢幕。該顯示器裝置122亦可包括外部連接至該計算裝置100之一電腦監視器、電視、或投射影器、等等。

該計算裝置亦可包括一儲存裝置124。該儲存裝 置124為一實體記憶體，諸如一硬碟、一光碟、一姆指碟、一磁碟陣列、或其任何組合。該儲存裝置124亦可包括遠端儲存磁碟。該儲存裝置124可包括組配來於該計算裝置100中運作之任何數量的應用程式126。該等應用程式126可用來組合該媒體與圖形，包括3D立體相機影像與立體顯示器之3D圖形。於範例中，一應用程式126可用來提供適應性深度感測。

該計算裝置100亦可包括一網路介面控制器(NIC)128，其可組配來將該計算裝置100透過該匯流排106連接至一網路130。該網路130可為一廣域網路(WAN)、區域網路(LAN)、或網際網路、等等。

圖1之方塊圖並不意欲指出該計算裝置100係包括圖1所示之所有構件。此外，根據該特定實施態樣的細節，該計算裝置100可包括圖1未顯示之任何數量的額外構件。

該適應性深度感測可以類似人類視覺系統，其包括兩隻眼睛的方式來改變。由於眼睛的不同位置，每隻眼睛與另一眼睛比較時可擷取一不同的影像。人類眼睛可使用瞳孔來擷取影像，其為能夠用以響應進入該瞳孔之光線量而改變大小的眼睛中心之一開口。每一瞳孔間之距離可參照為一基線。人類一對眼睛擷取的影像可由此基線距離來偏置。該等偏置影像可形成深度感知，而腦部可使用來自該等偏置影像之資訊來計算該視域(FOV)中的物件深度。除了使用偏置影像來感知深度外，人類眼睛亦可使用掃視移動來相關一興趣區域之FOV的中心顫動。掃視移動包括 該FOV之中心、或焦點周圍的快速眼睛移動。該掃視移動更可將該人類視覺系統賦能以感知深度。

圖2是一具有不同基線之兩個深度領域的繪圖。該等深度領域包括一深度領域202與一深度領域204。該深度領域202可使用來自三個孔徑之資訊來計算。該孔徑為一影像擷取裝置之一透鏡中心的孔，並可執行類似該人類視覺系統之瞳孔的功能。範例中，該孔徑206A、該孔徑206B、與該孔徑206C的每一個可執行一影像擷取裝置、感測器、或其任何組合之一部分。範例中，該影像擷取裝置為一立體相機。該孔徑206A、該孔徑206B、與該孔徑206C可用來擷取用來感知該等影像中之深度的三個偏置影像。如圖繪示，該深度領域202於該整個深度領域具有一高度可變的深度粒度。特別是，如該深度領域202之格柵中的較小矩形所指出，接近該孔徑206A、該孔徑206B、與該孔徑206C，該深度領域202之深度感知為良好的。如該深度領域202之格柵中的較大矩形所指出，離該孔徑206A、該孔徑206B、與該孔徑206C最遠的，該深度領域202之深度感知為路線。

該深度領域204可使用來自七個孔徑之資訊來計算。該孔徑208A、該孔徑208B、與該孔徑208C、該孔徑208D、該孔徑208E、該孔徑208F、該孔徑208G、該孔徑208H、該孔徑208I、該孔徑208J、以及該孔徑208K的每一個可用來提供七個偏置影像。該等影像可用來計算該深度領域204。因此，相較於該深度領域202，該深度領域204於各種不同基線位置包括更多影像。結果是，相較於該深度表示202， 該深度領域204於該整個FOV具有一更一致的深度表示。該深度領域204中之一致的深度表示可由該深度領域202之格柵中的類似大小矩形區域所指出。

該深度領域可參照為諸如可用來指出該影像中之3D物件深度的一點雲、一深度圖、或一三維度(3D)多邊形網格之深度資訊的表示。雖然該等技術於本文中使用一深度領域或深度圖來說明，但亦可使用任何的深度表示。可變精確度之深度圖可使用一或更多MEMS裝置來建立以改變該影像擷取裝置的孔徑大小、以及改變該FOV之光學中心。可變精確度之深度圖會形成一可縮放的深度解析。該MEMS裝置亦可用來顫動該等感測器以及針對增加的深度解析來增加該圖訊速率。藉由顫動該等感測器，相較於具有較不顫動的一區域，該最顫動區域中的一點可具有一增加的深度解析。

MEMS控制感測器準確性顫動可使用子感測器胞元大小的MEMS動作來賦能增加的深度解析以增加解析。換言之，該顫動動作可小於該像素大小。某些實施例中，該類顫動可針對每一像素來建立受擷取之若干子像素資料點。例如，在一X-Y平面上由半感測器胞元增量來顫動該感測器可使一組四個子像素精確度影像被建立，其中該等四個顫動圖訊之每一個可用於子像素解析、或組合一起來增加該影像之準確性。

該MEMS裝置可藉由調整一或更多影像擷取裝置之FOV來控制孔徑外型。例如，一窄的FOV可將較長範 圍的深度感測解析賦能，而一較寬FOV可將較短範圍的深度感測賦能。該MEMS裝置亦可藉由將一或更多影像擷取裝置、感測器、孔徑、或其任何組合的移動賦能以控制該FOV之光學中心。例如，該感測器基線位置可被加寬來最佳化遠端深度解析線性之深度線性，而該感測器基線位置可被縮小來最佳化近範圍深度線性之深度感知。

圖3是一具有一MEMS裝置304之一感測器302的繪圖300。該感測器302可為一影像擷取裝置之一構件。某些實施例中，該感測器302包括用以擷取影像資訊、深度資訊、或其任何組合之一孔徑。該MEMS裝置304可與該感測器302接觸使得該MEMS裝置304可於一整個X-Y平面上移動該感測器302。因此，如箭頭306A、箭頭306B、與箭頭306C、以及箭頭306D所指出，該MEMS裝置304可用來在四種不同方向上移動該感測器。

某些實施例中，一深度感測模組可合併一MEMS裝置304來快速顫動該感測器302以模擬該人類眼睛掃視移動。此方式中，針對該影像感測器之光二極體胞元累積光線的時間期間，該影像之解析可在子光二極體胞元粒度上提供。這是因為多個偏置影像可在各種不同的偏置位置提供一單一光胞元資料。包括該影像感測器之顫動的一影像深度解析可增加該影像之深度解析。該顫動機構能夠以該光二極體大小之一部分來顫動該感測器。

例如，該MEMS裝置304可用來以該感測器胞元大小的一部分數量，諸如每一胞元大小維度1微米來顫動一 感測器302。該MEMS裝置304可在該影像平面上顫動該感測器302以類似人類眼睛掃視移動來增加該深度解析。某些實施例中，該感測器與該影像擷取裝置之一透鏡可一起移動。此外，某些實施例中，該感測器可與該透鏡移動。某些實施例中，該透鏡靜止時，該感測器可在該透鏡下方移動。

某些實施例中，可設計或選擇該MEMS裝置之可變掃視顫動型樣，形成一可規畫掃視顫動系統。使用影像顫動取得之偏置影像可特別在一序列中被擷取，而之後一起整合至一單一、高解析影像。

圖4是一三個顫動格柵之繪圖。該等顫動格柵包括一顫動格柵402、一顫動格柵404、與一顫動格柵406。該顫動格柵402為一三乘三格柵，其包括可集中在該三乘三格柵之一中心點附近的一顫動型樣。該顫動型樣可以順序的次序在該格柵邊緣附近行進直到在該中心停止。同樣地，該顫動格柵404包括可集中在一三乘三格柵之一中心點附近的一顫動型樣。然而，該顫動型樣可以順序的次序從右行進至左、至右橫跨該顫動格柵404直到在該格柵之右下角停止。該顫動格柵402與該顫動格柵404兩者中使用一格柵，其中該格柵之總大小為該影像感測器光胞元大小之一部分。藉由顫動而取得光胞元之一部分的不同視野，該深度解析可增加。

相較於該顫動格柵402與該顫動格柵404，顫動格柵406使用一甚至更佳的格柵解析。該等粗線408代表該感 測器影像胞元大小。某些實施例中，該感測器影像胞元大小為每一胞元之1微米。該等細線410代表由於一顫動區間擷取之光胞元大小的一部分。

圖5是一該顫動移動橫跨一格柵的繪圖500。該格柵502可為如參照圖4說明之一顫動格柵406。每一顫動形成一擷取的偏置影像504。特別是，每一影像504A、504B、504C、504D、504E、504F、504G、504、與504I為彼此偏置。每一顫動影像504A-504I用來計算參考數字506之一最後影像。結果是，該最後影像能夠使用九個不同的影像來計算每一顫動影像之中心的解析。該影像位在或接近該等顫動影像之邊緣的區域可具有少至一影像多至九個不同影像來計算該影像之解析。相較於使用一固定的感測器位置，藉由使用顫動可取得一較高解析影像。該個別的顫動影像可一起整合至該較高解析影像，而於一實施例中，可用來增加深度解析。

圖6是一顯示沿一基線軌602之MEMS控制感測器的圖形。如上所述，除了顫動該等感測器之外，該等感測器亦可沿一基線軌移動。此方式中，設置有該等感測器之深度感測為適應性深度感測。參考數字600A中，該感測器604與該感測器606可沿該基線軌602向左或向右移動以便調整該感測器604之中心與該感測器606之中心間的一基線608。參考數字600B中，該感測器602與該感測器606兩者已使用該基線軌602移至右側以調整該基線608。某些實施例中，該MEMS裝置可用來實體地改變該感測器上之孔徑 區域。該MEMS裝置可透過堵塞該感測器之一部分來改變該孔徑位置。

圖7是一繪示根據兩感測器間之基線中的改變之視域與孔徑改變的圖形。參考數字704之矩形代表起因於該基線706與該感測器606，該感測器604之一孔徑感測的一區域。該感測器604具有一視域708，而該感測器606具有一視域710。由於該基線706，該感測器604於參考數字712具有一孔徑，而感測器606於參考數字714具有一孔徑。某些實施例中，由於該基線之長度，該FOV之光學中心可針對該一或更多感測器之每一個來改變，其針對該一或更多感測器之每一個來依序改變該孔徑之位置。某些實施例中，由於一或更多感測器間之重疊FOV，該FOV之光學中心與該孔徑可改變位置。某些實施例中，由於一MEMS裝置改變該孔徑，故該孔徑可改變。該MEMS裝置可堵塞該感測器之一部分以調整該孔徑。此外，某些實施例中，多個MEMS裝置可用來調整該孔徑與該光學中心。

同樣地，該感測器604之孔徑720的寬度為該基線722、與該感測器604之一視域724、與該感測器606之一視域726的一結果。由於該基線722之長度，該FOV之光學中心會針對該感測器604與該感測器606之每一個而改變，其針對該感測器604與該感測器606之每一個而依序改變該孔徑之位置。特別是，感測器604具有在中間參考數字728之一孔徑，而感測器606具有在中間參考數字730之一孔徑。因此，某些實施例中，該等感測器604與606可賦能該立體 深度領域解析中之適應性改變。實施例中，該立體深度領域中之適應性改變可提供該深度領域中之近場準確性以及該深度領域中之遠場準確性。

某些實施例中，可變的快門遮罩可賦能一深度感測器來擷取所需的一深度圖與影像。亦可有各種不同的外型，諸如矩形、多邊形、圓形與橢圓形。遮罩可以軟體來具體化以組合該遮罩中之正確維度、或者遮罩可以可改變該感測器上之一孔徑遮罩區的MEMS裝置來具體化。一可變的快門遮罩允許省電以及節省深度圖大小。

圖8是一行動裝置800之一繪圖。該行動裝置包括一感測器802、一感測器804與一基線軌806。該基線軌806可用來改變該感測器802與該感測器804間之基線808的長度。雖然該感測器802、該感測器804、與該基線軌806繪示位在該裝置之一“面向前”位置，但該感測器802、該感測器804、與該基線軌806可在該裝置800的任何位置。

圖9是一用於適應性深度感測之一方法的程序流程圖。方塊902中，可調整一或多個感測器之間的一基線。方塊904中，使用該等一或多個感測器的每一個來擷取一或多個偏置影像。方塊906中，該等一或多個影像可組合為一單一影像。方塊908中，一適應性深度領域可使用來自該影像之深度資訊來計算。

使用該目前說明之技術，深度感測可包括一裝置中之可變感測位置以賦能適應性深度感測。該深度平面可根據每一應用之需求來改變時，使用深度之應用可接取更 多資訊，其形成一增強使用者經驗。此外，藉由改變該深度領域，即使該深度領域中，該解析仍可被正常化，其可賦能增加局部化深度領域解析與線性。以每一應用為基礎，適應性深度感測亦可賦能深度解析與準確性，其賦能最佳化來支援近與遠深度使用的情況。此外，一單一立體系統可用來建立一較寬範圍的立體深度解析，其形成降低成本與增加應用適合性，因為該相同的深度感測器可提供可縮放深度來支援具有於該深度領域上改變之需求的一較寬範圍使用情況。

圖10是一用以提供適應性深度感測之一示範系統1000的方塊圖。相同的編號項目如參照圖1的說明。某些實施例中，該系統1000為一媒體系統。此外，該系統1000可併入一個人電腦(PC)、膝上型電腦、超膝上型電腦、平板電腦、觸控板、可攜式電腦、手持電腦、掌上型電腦、個人數位助理(PDA)、行動電話、組合式行動電話/PDA、電視、智慧型裝置(例如，智慧型手機、智慧型平板或智慧型電視)、行動網際網路裝置(MID)、傳訊裝置、資料通訊裝置、等等。

各種不同實施例中，該系統1000包含耦合至一顯示器1004之一平台1002。該平台1002可從一內容裝置，諸如(多個)內容服務裝置1006或(多個)內容遞送裝置1008、或其他類似的內容來源來接收內容。包括一或更多導航特徵之一導航控制器1010可用來與，例如，該平台1002及/或該顯示器1004互動。該等每一構件將於下文中更詳細說明。

該平台1002可包括一晶片組1012、一中央處理單元(CPU)102、一記憶體裝置104、一儲存裝置124、一圖形子系統1014、應用程式126、以及一無線電1016的任何組合。該晶片組1012可在該CPU 102、該記憶體裝置104、該儲存裝置124、該圖形子系統1014、該應用程式126、以及該無線電1014之間提供內部通訊。例如，該晶片組1012可包括能夠提供與該儲存裝置124內部通訊之一儲存配接器(未顯示)。

該CPU 102可作為複雜指令集電腦(CISC)或精簡指令集電腦(RISC)處理器、x86指令集相容處理器、多核心、或任何其他處理器或中央處理單元(CPU)來予以執行。某些實施例中，該CPU 102包括(多個)雙核心處理器、(多個)雙核心行動處理器、等等。

該記憶體裝置104可作為一依電性記憶體裝置，諸如，但不侷限於一隨機存取記憶體(RAM)、動態隨機存取記憶體(DRAM)、或靜態RAM(SRAM)來予以執行。該儲存裝置124可作為一非依電性記憶體裝置，諸如，但不侷限於一磁碟機、光碟機、磁帶機、一內部儲存裝置、一附接儲存裝置、快取記憶體、電池備份SDRAM(同步DRAM)、及/或一網路可存取儲存裝置來予以執行。某些實施例中，該儲存裝置124例如，包括多個硬碟時，可包括針對有價值的數位媒體來增加該儲存效能增強保護的技術。

該圖形子系統1014可針對顯示器來執行諸如靜止或視訊之影像處理。該圖形子系統1014可包括一圖形處 理單元(GPU)，諸如，例如，該GPU 108、或一視覺處理單元(VPU)。一類比或數位介面可用來通訊地耦合該圖形子系統1014與該顯示器1004。例如，該介面可為一高定義多媒體介面、顯示埠、無線HDMI、及/或無線HD適用技術的任何一個。該圖形子系統1014可整合至該CPU 102或該晶片組1012。或者，該圖形子系統1014可為通訊地耦合至該晶片組1012之一單獨卡。

本文說明之該圖形及/或視訊處理技術可以各種不同的硬體架構來執行。例如，圖形及/或視訊功能可整合在該晶片組1012中。或者，可使用一分離的圖形及/或視訊處理器。如另一實施例中，該圖形及/或視訊功能可由一通用處理器，包括一多核心處理器來執行。於一另一實施例中，該等功能可於一消費者電子裝置中執行。

該無線電1016可包括能夠使用各種不同適當的無線通訊技術來發送與接收信號之一或更多無線電。該類技術可包含橫跨一或更多無線網路之通訊。示範的無線網路包括無線區域網路(WLAN)、無線個人區域網路(WPAN)、無線都會區域網路(WMAN)、蜂巢式網路、衛星網路、等等。橫跨該類網路之通訊中，該無線電1016可根據一或更多可應用的任何版本之標準來操作。

該顯示器1004可包括任何電視類型的監視器或顯示器。例如，該顯示器1004可包括一電腦顯示螢幕、觸控螢幕顯示器、視訊監視器、電視、等等。該顯示器1004可為數位及/或類比。某些實施例中，該顯示器1004為一全 像顯示器。此外，該顯示器1004可為可接收一視覺投影之一透明表面。該類投影可運輸各種不同型式的資訊、影像、物件、等等。例如，該類投影可為一行動擴增實境(MAR)應用之一視覺覆蓋。一或更多應用程式126的控制下，該平台1002可在該顯示器1004上顯示一使用者介面1018。

該(等)內容服務裝置1006可由任何國家、國際、或獨立的服務來主導，而因此，可經由，例如，該網際網路來存取該平台1002。該(等)內容服務裝置1006可耦合至該平台1002及/或至該顯示器1004。該平台1002及/或該(等)內容服務裝置1006可耦合至一網路130來傳達(例如，傳送及/或接收)往返該網路130之媒體資訊。該(等)內容遞送裝置1008亦可耦合至該平台1002及/或至該顯示器1004。

該(等)內容服務裝置1006可包括一有線電視盒、個人電腦、網路、電話、或能夠遞送數位資訊之網際網路賦能裝置。此外，該(等)內容服務裝置1006可包括能夠在內容提供者與該平台1002或該顯示器1004之間，經由該網路130或間接單向或雙向地傳達內容之任何其他類似的裝置。應體認該內容可經由該網路130來單向及/或雙向地傳達往返該系統1000與一內容提供者之任何一個構件。內容之範例可包括任何媒體資訊，其包括，例如，視訊、音樂、醫療與遊戲資訊、等等。

該(等)內容服務裝置1006可接收諸如有線電視規畫之內容，包括媒體資訊、數位資訊、或其他內容。內容提供者之範例可包括任何有線或衛星電視或無線電或網 際網路內容提供者、等等。

某些實施例中，該平台1002可從該導航控制器1010接收控制信號，其包括一或更多導航特徵。該導航控制器1010之導航特徵可用來與，例如，該使用者介面1018互動。該導航控制器1010可為一指向裝置，其可為允許一使用者將空間(例如，連續與多維度)資料輸入至一電腦之一電腦硬體構件(特別是人類介面裝置)。諸如圖形使用者介面(GUI)、以及電視與監視器之許多系統可允許該使用者使用實體手勢來控制與提供資料至該電腦或電視。實體手勢包括但不侷限於臉部表情、臉部移動、各種不同的四肢移動、身體移動、身體語言或其任何組合。該類實體手勢可被辨識並轉譯為命令或指令。

該導航控制器1010之導航特徵的移動可藉由該顯示器1004上顯示之一指向器、游標、聚焦環、或其他視覺指示器的移動而在該顯示器1004上回應。例如，該應用程式126控制下，位於該導航控制器1010之導航特徵可對映至該使用者介面1018上顯示之虛擬導航特徵。某些實施例中，該導航控制器1010可以不是一分離的構件，而是，可整合至該平台1002及/或該顯示器1004。

該系統1000可包括例如，賦能時，含有初始開機後，可使使用者接觸一按鈕後立即開啟與關閉該平台1002的技術之驅動器(未顯示)。該平台“關閉”時，程式邏輯可允許該平台1002將內容串流至媒體配接器或其他的(多個)內容服務裝置1006或(多個)內容遞送裝置1008。此外，該晶 片組1012可包括，例如，環繞音響聲頻之硬體及/或軟體支援5.1以及/或者環繞音響聲頻之高畫質7.1。該等驅動器可包括針對整合圖形平台之一圖形驅動器。某些實施例中，該圖形驅動器包括一快速周邊構件互連(PCIe)圖形卡。

各種不同實施例中，該系統1000顯示之任何一或更多構件可被整合。例如，該平台1002與該內容服務裝置1006可被整合；該平台1002與該(等)內容遞送裝置1008可被整合；或者，該平台1002、該(等)內容服務裝置1006、與該(等)內容遞送裝置1008可被整合。某些實施例中，該平台1002與該顯示器1004為一整合單元。例如，該顯示器1004與該(等)內容服務裝置1006可被整合，或者該顯示器1004與該(等)內容遞送裝置1008可被整合。

該系統1000可作為一無線系統或一有線系統來予以執行。作為一無線系統來予以執行時，該系統1000可包括適合於一無線共享媒體上通訊之構件與介面，諸如一或更多天線、發送器、接收器、收發器、放大器、濾波器、控制邏輯、等等。無線共享媒體之一範例可包括諸如該RF頻譜之一無線頻譜的一部分。作為一有線系統來予以執行時，該系統1000可包括適合於一有線共享媒體上通訊之構件與介面，諸如輸入/輸出(I/O)配接器、將該I/O配接器與一對應的有線通訊媒體、一網路介面卡(NIC)、磁碟控制器、視訊控制器、音訊控制器、等等連接之實體連接器。有線通訊媒體之範例包括一電線、纜線、金屬引線、印刷電路板(PCB)、底板、開關結構、半導體材料、雙絞線電線、同 軸纜線、光纖、等等。

該平台1002可建立一或更多邏輯或實體通道來傳達資訊。該資訊可包括媒體資訊與控制資訊。媒體資訊可參照為代表針對一使用者的內容之任何資料。內容之範例可包括，例如，來自一語音會話、視訊會議、串流視訊、電子郵件(email)訊息、語音郵件訊息、文數字符號、圖形、影像、視訊、文字、等等之資料。來自一語音會話之資料可為，例如，話音資訊、安靜週期、背景雜音、舒適雜音、音調、等等。控制資訊可參照為代表針對一自動化系統的命令、指令或控制字元之任何資料。例如，控制資訊可用來將媒體資訊安排路由經過一系統、或指導一節點以一預定方式來處理該媒體資訊。然而，該等實施例並不侷限於圖10中顯示或說明之該等元件或該脈絡。

圖11是一圖10之系統1000可得以具體化的一小型式因素裝置1100之示意圖。相同的編號項目如參照圖10的說明。某些實施例中，例如，該裝置1100可作為具有無線功能之一行動計算裝置來予以執行。一行動計算裝置可參照為具有一處理系統與一行動電源或供應器，諸如，例如，一或更多電池之任何裝置。

如上所述，一行動計算裝置之範例可包括一個人電腦(PC)、膝上型電腦、超膝上型電腦、平板電腦、觸控板、可攜式電腦、手持電腦、掌上型電腦、個人數位助理(PDA)、行動電話、組合式行動電話/PDA、電視、智慧型裝置(例如，智慧型手機、智慧型平板或智慧型電視)、行動 網際網路裝置(MID)、傳訊裝置、資料通訊裝置、等等。

一行動計算裝置之一範例亦可包括安排來由一個人穿戴的一電腦，諸如一手腕電腦、手指電腦、手環電腦、眼鏡電腦、帶夾電腦、手臂電腦、鞋電腦、衣物電腦、或任何其他適合類型的可穿戴電腦。例如，該行動計算裝置可作為能夠執行電腦應用程式、以及語音通訊及/或資料通訊之一智慧型手機來予以執行。雖然某些實施例可藉由範例以作為一智慧型手機來予以執行之一行動計算裝置來說明，但可體認其他實施例亦可使用其他的無線行動計算裝置來執行。

如圖11所示，該裝置1100可包括一外殼1102、一顯示器1104、一輸入/輸出(I/O)裝置1106、以及一天線1108。該裝置1100亦可包括導航特徵1110。該顯示器1104可包括任何適當的顯示單元以顯示適合一行動計算裝置之資訊。該I/O裝置1106可包括任何適當的I/O裝置以便將資訊輸入至一行動計算裝置。例如，該I/O裝置1106可包括一文數字鍵盤、一數字小鍵盤、一觸控板、輸入鍵、按鈕、開關、搖桿開關、麥克風、揚聲器、一語音辨識裝置與軟體、等等。資訊亦可藉由麥克風來輸入至該裝置1100。該類資訊可由一語音辨識裝置來數位化。

某些實施例中，該小型式因素裝置1100為一平板裝置。某些實施例中，該平板裝置包括一影像擷取機構，而該影像擷取機構為一相機、立體相機、紅外線感測器、等等。該影像擷取裝置可用來擷取影像資訊、深度資訊、 或其任何組合。該平板裝置亦可包括一或更多感測器。例如，該等感測器可為一深度感測器、一影像感測器、一紅外線感測器、一X光光子計數感測器或其任何組合。該等影像感測器可包括電荷耦合裝置(CCD)影像感測器、互補金氧半導體(CMOS)影像感測器、晶載系統(SOC)影像感測器、具有光靈敏薄膜電晶體之影像感測器、或其任何組合。某些實施例中，該小型式因素裝置1100為一相機。

此外，某些實施例中，本技術可使用，諸如電視面板與電腦螢幕之顯示器。亦可使用任何大小的顯示器。某些實施例中，一顯示器可用來呈現包括適應性深度感測之影像與視訊。再者，某些實施例中，該顯示器為一三維度顯示器。某些實施例中，該顯示器包括使用適應性深度感測來擷取影像之一影像擷取裝置。某些實施例中，一影像裝置可使用適應性深度感測來擷取影像或視訊，包括顫動一或更多感測器以及調整該等感測器間之一基線軌，而之後即時呈現該影像或視訊至一使用者。

再者，實施例中，該計算裝置100或該系統1000可包括一列印引擎。該列印引擎可將一影像送至一列印裝置。該影像可包括來自一適應性深度感測模組之一深度表示法。該列印裝置可包括印表機、傳真機、以及可使用一列印物件模組來列印該結果影像之其他列印裝置。某些實施例中，該列印引擎可將一適應性深度表示法橫跨該網路132送至該列印裝置136。某些實施例中，該列印裝置包括用於適應性深度感測之一或更多感測器與一基線軌。

圖12是一顯示可儲存用以適應性深度感測之編碼的有形、非暫態電腦可讀媒體1200之方塊圖。該有形、非暫態電腦可讀媒體1200可在一電腦匯流排1204上由一處理器1202來存取。此外，該有形、非暫態電腦可讀媒體1200可包括組配來導引該處理器1202執行本文所述之方法的編碼。

如圖12所指出，本文所述之各種不同軟體構件可儲存在一或更多有形、非暫態電腦可讀媒體1200中。例如，一基線模組1206可組配來修改一或更多感測器間之一基線。某些實施例中，該基線模組亦可顫動該一或更多感測器。一擷取模組1208可組配來使用該一或更多感測器的每一個以取得一或更多偏置影像。一適應性深度感測模組1210可將該一或更多影像組合至一單一影像。此外，某些實施例中，該適應性深度感測模組可使用來自該影像之深度資訊來產生一適應性深度領域。

圖12之方塊圖並不意欲指出該有形、非暫態電腦可讀媒體1200係包括圖12所示之所有構件。此外，根據該特定實施態樣之細節，該有形、非暫態電腦可讀媒體1200可包括圖12未顯示之任何數量的額外構件。

範例1

本文說明一種裝置。該裝置包括一或更多感測器，其中該等感測器由一基線軌來耦合、以及一控制器裝置，其沿該基線軌來移動該一或更多感測器，使得該基線軌用來調整該一或更多感測器之每一個間的一基線。

該控制器可以用來調整該一或更多感測器之每一個的視域之方法，沿該基線軌來調整該一或更多感測器之每一個間的基線。該控制器亦可以用來調整該一或更多感測器之每一個的孔徑之方法，沿該基線軌來調整該一或更多感測器之每一個間的基線。該控制器可為微機電系統。此外，該控制器可為一線性馬達。該控制器可以用來消除該一或更多感測器之每一個的視域中之堵塞的方法，沿該基線軌來調整該一或更多感測器之每一個間的基線。該控制器可相關該一或更多感測器之每一個的一孔徑來顫動該一或更多感測器之每一個。該顫動為可變的掃視顫動。一深度領域之深度解析可根據該一或更多感測器間之基線來調整。該等感測器可為一影像感測器、一深度感測器、或其任何組合。該裝置為一平板裝置、一相機或一顯示器。該一或更多感測器可擷取影像或視訊資料，其中該影像資料包括深度資訊，並將該影像或視訊資料呈現在一顯示器上。

範例2

本文說明一種系統。該系統包括一組配來執行儲存的指令之中央處理單元(CPU)、一儲存指令之儲存裝置，該儲存裝置包含處理器可執行碼。該等處理器可執行碼由該CPU執行時，可組配來從一或更多感測器取得偏置影像，其中該等感測器耦合至一基線軌、以及將該等偏置影像組合至一單一影像，其中該影像之深度解析係根據該等感測器間沿該基線軌之一基線距離來適應。

該系統可使用該基線軌來改變該一或更多感測器之一基線。該系統可包含包括該一或更多感測器之一影像擷取裝置。此外，該系統可顫動該一或更多感測器。該顫動可為可變的掃視顫動。

範例3

本文說明一種方法。該方法包括調整一或更多感測器間之一基線、使用該一或更多感測器之每一個來擷取一或更多偏置影像、將該一或更多影像組合至一單一影像、以及使用來自該影像之深度資訊來計算一適應性深度領域。

該一或更多感測器可受顫動來取得子胞元深度資訊。該等感測器可使用可變的掃視顫動來顫動。一顫動程式可受選擇來取得偏置影像之一型樣，而該一或更多感測器根據該顫動程式來顫動。該基線可加寬來擷取遠端深度解析線性。該基線可縮小來擷取近端深度解析線性。

範例4

本文說明一種有形、非暫態、電腦可讀媒體。該電腦可讀媒體包括編碼來導引一處理器來修改一或更多感測器間之一基線、使用該一或更多感測器之每一個來取得一或更多偏置影像、將該一或更多影像組合至一單一影像、以及使用來自該影像之深度資訊來產生一適應性深度領域。該一或更多感測器可顫動來取得子胞元深度資訊。

應了解上述範例中之細節可用在一或更多實施例中的任何地方。例如，上述計算裝置之所有隨選特徵亦 可相關本文說明之該等方法或該電腦可讀媒體的任一個來執行。再者，雖然本文已使用流程圖及/或狀態圖來說明實施例，但本發明並不侷限於本文之該等圖形或對應說明。例如，流程不需移經每一繪示方塊或狀態、或以本文繪示與說明之實際相同順序來進行。

本發明並不侷限在本文所列之特定細節中。實際上，具有本揭示內容之優點的業界熟於此技者可體認在本發明之範疇中，上述說明與圖式可具有許多其他變化型態。因此，下列請求項包括其任何修訂可用來定義本發明之範疇。

600‧‧‧繪圖

600A、600B‧‧‧參考數字

602‧‧‧基線軌

604、606‧‧‧感測器

608‧‧‧基線

Claims (26)

1. 一種裝置，其包含：一或多個感測器，其中該等感測器由一基線軌來耦合；一控制器裝置，其用以沿著該基線軌來移動該等一或多個感測器，使得該基線軌用來調整該等一或多個感測器之每一個之間的一基線。
2. 如請求項1之裝置，其中該控制器以用來調整該等一或多個感測器之每一個的視域之方式，而沿著該基線軌來調整該等一或多個感測器之每一個之間的該基線。
3. 如請求項1之裝置，其中該控制器以用來調整該等一或多個感測器之每一個的孔徑之方式，而沿著該基線軌來調整該等一或多個感測器之每一個之間的該基線。
4. 如請求項1之裝置，其中該控制器為微機電系統。
5. 如請求項1之裝置，其中該控制器為一線性馬達。
6. 如請求項1之裝置，其中該控制器以用來消除該等一或多個感測器之每一個的視域中之堵塞的方式，而沿該基線軌來調整該等一或多個感測器之每一個之間的該基線。
7. 如請求項1之裝置，其中該控制器用來相關該等一或多個感測器之每一個的一孔徑來顫動該等一或多個感測器之每一個。
8. 如請求項7之裝置，其中該顫動為可變的掃視顫動。
9. 如請求項1之裝置，其中一深度領域之深度解析可根據該等一或多個感測器之間的該基線來調整。
10. 如請求項1之裝置，其中該等感測器為一影像感測器、一深度感測器、或其等之任何組合。
11. 如請求項1之裝置，其中該裝置為一平板裝置。
12. 如請求項1之裝置，其中該裝置為一相機。
13. 如請求項1之裝置，其中該裝置為一顯示器。
14. 如請求項1之裝置，其中該等一或多個感測器擷取影像或視訊資料，並將該影像或視訊資料呈現在一顯示器上，其中該影像資料包括深度資訊。
15. 一種系統，包含有：組配來執行儲存的指令的一中央處理單元(CPU)；儲存指令的一儲存裝置，該儲存裝置包含處理器可執行碼，當該處理器可執行碼由該CPU執行時，可組配來執行下列步驟：從一或多個感測器取得偏置影像，其中該等感測器耦合至一基線軌；以及將該等偏置影像組合為一單一影像，其中該影像之深度解析係根據該等感測器之間沿著該基線軌之一基線距離來適應。
16. 如請求項15之系統，其中該系統係使用該基線軌來改變該等一或多個感測器的一基線。
17. 如請求項15之系統，其更包含包括該等一或多個感測器的一影像擷取裝置。
18. 如請求項15之系統，其中該系統係用來顫動該等一或多個感測器。
19. 如請求項15之系統，其中該顫動為可變的掃視顫動。
20. 一種方法，包含下列步驟：調整一或多個感測器之間的一基線；使用該等一或多個感測器之每一個來擷取一或多個偏置影像；將該等一或多個影像組合為一單一影像；以及使用來自該影像之深度資訊來計算一適應性深度領域。
21. 如請求項20之方法，該等一或多個感測器被顫動來取得子胞元深度資訊。
22. 如請求項21之方法，其中係使用可變的掃視顫動來顫動該等感測器。
23. 如請求項20之方法，其中一顫動程式被選擇來取得偏置影像之一型樣，且該等一或多個感測器根據該顫動程式而被顫動。
24. 如請求項20之方法，其中該基線被加寬來擷取遠端深度解析線性。
25. 一種有形、非暫態、電腦可讀媒體，其包含用以導引一處理器來執行下列操作的碼：修改一或多個感測器之間的一基線；使用該等一或多個感測器之每一個來取得一或多個偏置影像； 將該等一或多個影像組合為一單一影像；以及使用來自該影像之深度資訊來產生一適應性深度領域。
26. 如請求項25之電腦可讀媒體，其中該等一或多個感測器被顫動來取得子胞元深度資訊。