TW201227603A - Map converting method, map converting apparatus, and computer program product for map conversion - Google Patents
Map converting method, map converting apparatus, and computer program product for map conversion Download PDFInfo
- Publication number
- TW201227603A TW201227603A TW100132454A TW100132454A TW201227603A TW 201227603 A TW201227603 A TW 201227603A TW 100132454 A TW100132454 A TW 100132454A TW 100132454 A TW100132454 A TW 100132454A TW 201227603 A TW201227603 A TW 201227603A
- Authority
- TW
- Taiwan
- Prior art keywords
- depth
- image
- map
- pixel
- conversion
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000006243 chemical reaction Methods 0.000 title claims description 104
- 238000004590 computer program Methods 0.000 title claims description 5
- 230000001186 cumulative effect Effects 0.000 claims description 36
- 238000012886 linear function Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 22
- 238000012545 processing Methods 0.000 description 10
- 238000002156 mixing Methods 0.000 description 6
- 230000008447 perception Effects 0.000 description 5
- 230000009466 transformation Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000001010 compromised effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Analysis (AREA)
- Controls And Circuits For Display Device (AREA)
Description
201227603 六、發明說明: 【發明所屬之技術領域】 在此敘述之實施例係普遍地關於一種 種圖轉換設備、及用於圖轉換之程式產品 【先前技術】 傳統上,顯示裝置(此後稱“3D顯月 展出,其顯示代表深度的三維影像(此孩 ,此係藉由使用包含具有兩個視角間之視 立體影像,以及附有說明了該影像之各個 度圖的影像。可被再生於3D顯示裝置上 .比後稱“深度範圍”)係隨裝置不同而變化 3D顯示裝置之影像(此後稱“輸入影像” 不同於該影像所輸出至的3 D顯示裝置的 ;且因此,輸入影像之深度範圍需要被轉 於用以顯示該3D影像之輸出3D顯示裝 如果影像被顯示於3D顯示裝置而無施行 ,影像的前或背面可能變模糊,或者影像 足。轉換深度範圍之方法包含連續地校正 ,使得想要的視差量可被達成。 然而,藉由傳統技術之某些深度範圍 後之深度係過度地被減低,使得輸出及顯 置上之影像可能看起來平坦。 圖轉換方法.、一 ^裝置”)已被發 t稱“3D影像”) 差的兩個影像的 像素之深度的深 的深度之範圍( 。此外,輸入至 )之深度範圍係 可再生深度範圍 換(校正)至適 置的深度範圍。 深度範圍之轉換 可能顯得深度不 深度範圍之方法 轉換方法,轉換 不於3 D顯示裝 -5- 201227603 1J 容 內 明 發 根據之一實施例,圖轉換方法包含:計算在一第一圖 中之深度的現存頻率,該第一圖對應於一影像之至少一影 像區域,且該第一圖之各個像素代表對應於該影像區域之 一像素的深度;以及藉由使用該現存頻率,第一轉換該第 一圖成爲一第二圖,該第二圖代表各個像素在一第一範圍 中的一深度。 圖轉換方法、圖轉換設備、及用於圖轉換之電腦程式 產品的各種實施例將在下面參照所附圖式詳細地說明。 相關申請案之交叉參照:此申請案係根據且主張 2010年12月22日所申請之日本專利申請案2010-286657 號的優先權利益;在此藉由參照將其整個內容倂入。 【實施方式】 第一實施例 當接收到包含兩個影像(其中視差被產生於兩個視角 間)的立體影像、包含三個或更多影像(其中視差被產生 於三個或更多視角間)之多視差影像、或與深度圖相關聯 之一影像(深度圖代表影像區域的各個像素的深度,影像 區域包含該影像之部分像素),根據本實施例之圖轉換設 備1轉換深度圖成爲適於目標3D顯示裝置之深度圖,使 得藉由使用這些影像來代表深度的3D影像可以被顯示於 3D顯示裝置上。雖然深度圖並不關聯於立體影像或多視 差影像,不同視角影像之關聯係藉由立體匹配技術來判定 •6· 201227603 ,且深度圖藉此產生。相似地,當二維表示的影像將被顯 示作爲三維顯示且深度圖被分別地產生以用於該影像且相 關聯於該影像,該影像與深度圖可被輸入至圖轉換設備1 。在下面敘述中,假設了預先與深度圖相關聯之影像將被 _入,但本實施例並不限於此。 作爲深度圖轉換方法,可考慮圖1中所示之線性轉換 。其爲深度圖轉換方法,使用線性函數來將輸入影像之深 度範圍轉換成爲且適合於輸出之3D顯示裝置的深度範圍 內。在此圖中,水平軸代表輸入影像之各個像素的深度( 輸入深度),且垂直軸代表輸出影像之裝置中的各個像素 的深度(輸出深度)。其說明輸入影像之深度範圍snSx Ssx被轉換成爲輸出之深度範圍dnSygdy。然而,可能 的,線性轉換導致下面問題。例如,給定一影像,其中大 的物體出現在前面,且背景部分地出現在後面。代表深度 値之現存頻率(頻率)的頻率曲線(histogram)被例示 於圖2之圖的水平軸下面的部分。在此圖中,三維空間中 之前面的深度係例示於曲線圖之左邊,且三維空間中之後 面的深度係例示於右邊。在此範例中,具有大深度的物體 出現在三維空間之前面;而具有某些數量之深度的背景部 分地出現在後面。此輸入影像之整個深度範圍現在被讀取 ,以被壓縮成藉由線性轉換可在輸出3D顯示裝置上再生 的深度範圍。在輸出3D顯示裝置中之深度的現存頻率被 例示於圖2之垂直軸的左邊。從此曲線圖可看出,在前面 的物體的深度被過度壓縮,使得當其被顯示於3D顯示裝 -7- 201227603 置上時,前面物體的深度將看起來平坦。亦即,自然的深 度範圍是如此的大,以致於當其被適合成且再生於受限的 深度範圍中時,物體的深度傾向於被平坦化。換句話說, 取決於深度圖轉換方法,物體的深度的感覺可被折衷。根 據本實施例,圖轉換設備1藉由使用代表累計深度頻率的 累計頻率曲線來轉換輸入影像之深度圖成爲適合於輸出裝 置之深度範圍內的深度圖,使得深度的絕佳感覺可被獲得 於再生的深度範圍中。當施行深度圖轉換時,如圖3所示 ’當現存頻率較高時,圖轉換設備1將原始像素之各個像 素的深度轉換成爲變得較大的一配置範圍中之一深度;而 當現存頻率較低時,裝置將該深度轉換成爲變得較小的一 配置範圍中之一深度。以此方式,物體被防止平坦化。用 以實現此深度圖轉換的結構係詳細敘述於下面。 首先’解釋了根據本實施例之圖轉換設備1的硬體結 構。根據本實施例之圖轉換設備1包含:控制器(例如中 央處理單元(CPU )),其控制整個裝置;主要儲存器( 例如唯讀記憶體(ROM )與隨機存取記憶體(RAM )), 其儲存於其中各種類型的資料與程式;輔助儲存器(例如 硬碟驅動器(HDD )與光碟(CD)),其儲存於其中各 種類型的資料與程式;及匯流排,其連接這些單元至彼此 。此裝置具有一般電腦的硬體結構。此外,圖轉換設備! 可個別地連接至上述的3D顯示裝置、操作輸入單元(例 如接收使用者所輸入之指令的鍵盤或滑鼠)、及通訊介面 (其控制與外部裝置之通訊’有線或無線的)。與上述深
-8 - 201227603 度圖相關聯之影像被儲存作爲代表各個像素之像素値的影 像資料於輔助儲存器中(例如HDD),連同深度圖一起 被儲存。此外,圖轉換設備1可包含接收電波之接收單元 ,使得電波所載有之影像資料可被儲存於主要儲存器與輔 助儲存器中,作爲與深度圖相關聯之影像的影像資料。 之後,具有此硬體結構之圖轉換設備1的功能結構將 參照圖4來解釋。圖轉換設備1包含輸入單元11、計算 器12、第一轉換器13、及輸出單元14»當圖轉換設備1 的CPU施行儲存於主要儲存器與輔助儲存器中的程式時 ,這些單元被實現。圖轉換設備1可另包含連接至輸出單 元的視差影像產生單元,或可被連接至屬於不同影像 處理裝置的視差影像產生單元,雖然這些單元未示於圖式 中。視差影像產生單元產生多個影像,當從不同視角觀看 時,多個影像會產生視差(此後稱“視差影像”)。 輸入單元1 1接收與影像相關聯之深度圖的輸入。深 度圖代表用於各個像素的影像區域(包含影像之像素的部 分)之深度,且在此假設深度之値(此後稱“深度値”)本 身針對各個像素被表示。包含影像之像素之部分的影像區 域可包含影像之所有像素,或可爲某個單元區域(例如區 塊)’或特定區域,其代表影像之物體(例如實體物體或 人)。 計算器12使用輸入單元11所接收之深度圖來計算深 度圖所代表之深度値的現存頻率。根據本實施例,例如, 計算器12計算了累計頻率曲線,其代表深度圖中所示之 -9 - 201227603 深度値的累計現存頻率。計算累計頻率曲線的具體方法將 在之後敘述於操作的敘述中。 第一轉換器1 3例如使用計算器1 2所計算之累計頻率 曲線來轉換輸入單元11所接收之深度圖成爲代表適合於 目標3D顯示裝置之深度範圍內的深度値的深度圖。目標 3D顯示裝置之深度範圍應預先被第一轉換器13獲得。轉 換深度圖的具體方法將在之後敘述於操作的敘述中。 輸出單元14輸出第一轉換器13所轉換的深度圖。輸 出單元14可把它輸出,到視差影像產生單元,舉例來說。 當藉由適宜地施行影像處理於對應於由輸入單元11所接 收之深度圖的影像所獲得的結果影像與輸出單元1 4所輸 出的深度圖被輸入到視差影像產生單元時,視差影像產生 單元之後產生基於那之上的視差影像。當因此產生的視差 影像被輸出到3 D顯示裝置時,視差影像被顯示作爲在3 D 顯示裝置上的3D影像。 之後,根據本實施例之圖轉換設備1所施行的圖轉換 處理之程序係參照圖5來解釋。當藉由輸入單元11之操 作而接收到與影像相關聯的深度圖(步驟S1),圖轉換 設備1藉由計算器12之操作而藉由使用深度圖來計算累 計頻率曲線(步驟S 2 )。更具體地,計算器1 2首先例如 計算說明了表示於深度圖中之深度値的現存頻率的頻率曲 線。在此,X表示影像中之像素的位置(像素位置), z(X)表示深度圖上之像素的深度値;且深度値的可能範圍 (深度範圍)係判定爲OS z(x)s 25 5。然而’深度範圍不 201227603 限於此。目標3D顯示裝置之深度範圍係在dmin與dmax之 間。在像素位置X之深度値z(x)的整數形式爲ζ; (0$ 25 5) ; Zi的現存頻率爲h(Zi);且影像中之像素的數目爲N 。之後,計算器12初始h(Zi)至0,且藉由式(1)來計算 頻率曲線。 ο 符號—係表示右邊代入左邊。式(1)表示:ι/N加 上h(Zi)爲Zi的現存頻率的値,Zi爲深度値的整數形式。 計算器1 2根據式(1 )且參照影像區域中之所有像素的深 度値來計算i的各個値的現存頻率h(Zi),其中〇$i$255 。從式(Ο針對i的各個値所計算的現存頻率h(Zi)的頻 率曲線係爲正規化的頻率曲線,其中,Zi的現存頻率的値 被影像區域中之像素的數目所正規化。換句話說,在正規 化的頻率曲線中,表示於深度圖上的深度値的現存頻率被 正規化,使得深度値的發生機率被獲得。針對i的各個値 ,計算器12將代表I (其爲深度値的整數形式)値之頻 率的頻率曲線轉換成爲代表z i値之現存頻率的累計數量 (此後稱“累計頻率”)的累計頻率曲線。在此,當h(Zi) 的累計頻率爲c(i)且c(_〗)= 0時,計算器12針對i的各個 値從式(2)計算累計頻率c(i),其中〇各255。 c(i) c(i - 1) + 啦) {2) 〇 針對i的各個値從式(2)所計算的累計頻率c(i)係 被說明於累計頻率曲線中。圖6爲範例的累計頻率曲線。 -11 - 201227603 在此頻率曲線中,水平軸代表輸入影像之深度値(輸入深 度),且垂直軸代表對應於深度値的現存頻率。在此範例 中,表示了針對i的各個値對應於h(Zi)在〇與1之間的範 圍中所累計的累計頻率c(i)。如在此頻率曲線中所示,當 對應於水平軸之h(Zi)値增加時,對應於h(Zi)値的垂直軸 之C(i)値的範圍會增加;而當h(Zi)値減小時,對應於 h(z〇値之c(i)値會減小。換句話說,對應於具有高現存頻 率之輸入影像的深度的輸出裝置中的深度之範圍會變大; 而對應於具有低現存頻率之輸入影像的深度的輸出裝置中 的深度之範圍會變小。 藉由第一轉換器13的操作,圖轉換設備1藉由使用 在步驟S2所獲得的累計頻率曲線針對各個像素來將在步 驟S1所接收的深度圖轉換成爲說明了在目標3D顯示裝 置之深度範圍(第一範圍)中之深度値的深度圖(步驟 S3)。更具體地,給定z’(x)表示目標裝置之深度圖上的 深度値;且[z(x)]表示深度値z(x)之整數形式。爲了獲 得深度値z(x)之整數形式,可採用任何整數函數。在此, 第一轉換器13從式(3)針對各個像素位置X將深度値 z(x)轉換成爲深度値z’(x)。 2' (x) = (dmax - c( [z(x)] ) + dmin ⑶ 因爲c (i)的最小値c m j „不總是〇 ’第一轉換器1 3可 根據式(4 )針對各個像素位置x將深度値z (x)轉換成爲 深度値ζ’(χ)。 -12- 201227603 W =(心-《in WD + (1 + C— ). _⑷。 當第一轉換器1 3針對影像中之所有像素完成了轉換 深度値z(x)成爲深度値ζ’(χ),針對各個像素之在步驟S1 所接收的深度圖至說明了深度値ζ’(χ)的深度圖的轉換係 已完成。 圖7爲示意圖,用以說明根據累計頻率曲線將輸入影 像之深度範圍(第二範圍)轉換成爲輸出裝置之深度範圍 (第一範圍)的結果。此範例說明了 :當輸入影像之深度 之現存頻率較高時,輸入影像之深度被轉換成爲在輸出裝 置中變得較大的一配置範圍之一深度;而當輸入影像之深 度之現存頻率較低時,該深度被轉換成爲在輸出裝置中變 得較小的一配置範圍之一深度。 解釋回到圖5。第一轉換器13輸出在步驟S3所轉換 的深度圖(步驟S4 )。在此所輸出之深度圖被例如輸入 至視差影像產生單元;且此深度圖被與藉由適宜地施行影 像處理於對應於在步驟S1所接收之深度圖的影像所獲得 的影像一起用來產生及輸出視差影像於3D顯示裝置上。 之後,視差影像被顯示在3D顯示裝置上,作爲3D影像 〇 以此方式,爲了深度圖(深度圖代表影像區域的各個 像素的深度,影像區域包含影像之像素之部分),針對各 個像素,計算代表深度之累計現存頻率的累計頻率曲線; 且以讓深度適合於輸出裝置之深度範圍內的此種方式來藉 由使用此頻率曲線,將深度圖轉換。因此,出現在影像中 -13- 201227603 之物體的深度可用大量的層級的大小來轉換,而大小的層 級的數量對於小深度空間可減少。輸入影像之整個深度範 圍可藉此適合於輸出裝置之深度範圍中,且同時,物體的 深度可被維持。因此,藉由上述結構,當3D影像被顯示 時,深度圖可以以此方式被轉換,以實現可再生深度範圍 內之絕佳深度感覺。 第二實施例 之後,解釋了根據第二實施例之圖轉換方法、圖轉換 設備、及用於圖轉換的電腦程式產品。相同的參考符號可 用於在敘述中相同於第一實施例的部分,或者其解釋可被 省略。 根據第一實施例之圖轉換設備1採用了累計頻率曲線 ,使得輸入影像之深度圖被轉換成爲適合於輸出裝置之深 度範圍中的深度圖,同時,出現在影像中之物體的深度感 覺可被維持,此無法藉由使用線性轉換的傳統技術達成。 然而,根據採用累計頻率曲線的轉換’已經藉由線性轉換 來維持的全部深度的大小感覺可能會遺失。此是因爲深度 圖僅僅根據深度頻率被轉換;且影像之像素的全部深度傾 向被壓縮。根據本實施例之圖轉換設備2結合了基本轉換 (例如線性轉換)與使用累計頻率曲線之轉換(如第一實 施例中所解釋的),以轉換輸入影像之深度圖成爲適合於 輸出裝置之深度範圍內的深度圖。 圖8爲示意圖,用以說明根據本實施例之圖轉換設備 -14- 201227603 2的功能結構。除了輸入單元11、計算器12、第一轉換 器13、及輸出單元14,圖轉換設備2另包含偵測單元15 、第二轉換器16'及結合單元17。當圖轉換設備2的 CPU施行儲存於主要儲存器或輔助儲存器中的各種程式時 ,這些單元被實現。 偵測單元1 5偵測由輸入單元1 i所接收之深度圖所代 表的深度値的範圍。第二轉換器1 6使用偵測單元1 5所偵 測的範圍,且藉由基本轉換(其中由輸入單元11所接收 之深度圖所代表的全部深度被平均地轉換)將深度圖轉換 成爲代表目標3D顯示裝置之深度範圍內的深度値的深度 圖。 結合單元17藉由使用調合常數α (OSaSl)來結 合第一轉換器13所轉換之深度圖與第二轉換器16所轉換 之深度圖’且藉此將輸入單元11所接收之深度圖轉換成 爲代表目標3D顯示裝置之深度範圍內的深度値的深度圖 。調合常數α的値可由設計者預先決定,或者可透過操作 輸入單元而由使用者適當地決定與輸入。 之後’藉由根據本實施例之圖轉換設備2所施行的圖 轉換處理之程序係參照圖9來敘述。步驟S 1至S4之操作 係相同於第一實施例。在步驟S1之後,除了步驟S 2之操 作’圖轉換設備2施行步驟S〗〇之操作。在步驟s 1 〇,藉 由偵測單元1 5之操作,圖轉換設備2偵測在步驟s 1所接 收之深度圖所代表的深度値的範圍。更具體地,偵測單元 1 5藉由參照深度圖所代表的所有深度値來偵測最小値 -15- 201227603 zmin與最大値zmax,且藉此偵測最小値Zmin與最大値zmax 之間的範圍。 在步驟S 1 1,使用在步驟S 1 0偵測到的範圍,藉由第 二轉換器16之操作,根據基本轉換,圖轉換設備2針對 各個像素將在步驟S1所接收之深度圖轉換成爲代表目標 3D顯示裝置之深度範圍內的深度値的深度圖。基本轉換 可爲如圖1所示的線性轉換。更具體地,根據式(5), 第二轉換器16針對各個像素位置X而將深度値z(x)轉換 成爲深度値z”(x)。以如同第一實施例之相同方式,z(x) 係爲所接收深度圖所代表的深度値,且ζ”(χ)係爲輸出裝 置之深度圖所代表的深度値。 , (χ) = 1^...- (z(x) - zmin) + dmin (5) ^max Zmin
O 除此以外,基本轉換可爲如圖1 〇所示的伽瑪( gamma )轉換。在此情況中,根據式(6 ),第二轉換器 1 6針對各個像素位置X而將深度値z (X)轉換成爲深度値 Z,,(x)。 ' (X) = (^max - Cimin) —^~ ^ (6) V^max ~ ^min > 〇 此外,基本轉換可爲如圖11所示的逆伽瑪轉換。在 此情況中,根據式(7 ),第二轉換器1 6針對各個像素位 置X而將深度値Z(x)轉換成爲深度値Z”(x)。 (χ) = (dmax - dmin) z(x) z min / min (7) -16- 201227603 第二轉換器16所採用之轉換公式不限於上述,且任 何轉換公式都可被採用,只要全部深度可以在基本轉換中 被平均地轉換。 在步驟S12,藉由結合單元17之操作,圖轉換設備2 將在步驟S 1 1針對各個像素位置X所轉換的深度値z,,( X) 乘以1 - α ’且在步驟s 1 3,圖轉換設備2將在步驟S3所 轉換的深度値ζ’(χ)乘以0!。在步驟S14,根據式(8), 圖轉換設備2結合深度値ζ,,(χ)與深度値ζ’(χ),以獲得深 度値 ζ”’(χ)。 ζ’ ’ ’(X) = (Χ2’(X) + (1 - α)ζ,’(X) (8) 〇 圖12爲示意圖,用以說明使用累計頻率曲線之轉換 '基本轉換、與從該結合所獲得之轉換(當α =0.5)。深 度値ζ”’(X)係從這個圖式中所示之調合函數獲得,其爲使 用累計頻率曲線之轉換與基本轉換的結合。在此,當調合 常數α增加,使用累計頻率曲線之轉換的比率變較大;而 當調合常數α減小,基本轉換的比率變較大。代表深度値 z”’(x)(針對各個像素從此調合函數獲得)之深度圖係作 爲從輸入影像之深度圖被轉換成爲適合於目標3D顯示裝 置的最終深度圖。換句話說,圖轉換設備2將在步驟S i 所接收之深度圖轉換成爲代表針對各個像素藉由結合在步 驟S3藉由使用累計頻率曲線所轉換之深度値與在步驟 S 11藉由基本轉換所轉換之深度値而獲得的深度値的深度 圖。以此方式,圖轉換設備2針對各個像素結合了藉由使 用累計頻率曲線所轉換之深度圖與藉由基本轉換所轉換之 -17- 201227603 深度圖,且藉此將輸入影像之深度圖轉換成爲目標3D顯 示裝置之深度圖。 之後,在步驟S4,圖轉換設備2輸出在步驟S14所 轉換之深度圖。 藉由上述結構,輸入影像之全部深度範圍可適合於輸 出裝置之深度範圍,且出現在影像中之物體的深度可被維 持。此外,全部深度之大小的感覺亦可被維持。因此,上 述結構可實現用於3D影像之顯示的深度圖轉換,以提供 可再生深度範圍內之絕佳深度感覺的方式。 修改型 本發明不限於上述之實施例,且其結構性構件在實行 時可被修改而無偏離範圍。此外,藉由適當地結合上述實 施例中所揭露之結構性構件,可提供各種實施例。例如, 實施例之一些結構性構件可被省略。不同實施例之結構性 構件可被適當地結合。此外,可做出各種修改,如下所示 〇 根據上述之實施例,實行於影像處理裝置上之各種程 式可被儲存於連接至網路(例如網際網路)的電腦中,且 可藉由網路的方式被下載。此外,各種程式可以用可安裝 或可執行檔案的形式被儲存於電腦可讀取紀錄媒體(例如 CD-ROM、軟碟(FD) 、CD-R、與多功能數位碟片(DVD )),且可被提供作爲電腦程式產品。 根據上述之實施例,頻率曲線被採用來表示深度現存 -18- 201227603 頻率;且採用了累計頻率曲線,其藉由此頻率曲線之使用 而代表深度之累計現存頻率。然而’深度之現存頻率與其 累計現存頻率不限於此。 當施行圖轉換處理於影像的所有像素’根據上述實施 '列之圖轉換設備1與2可取得各個區塊或各個特定區域之 深度圖,以施行圖轉換處理。 根據上述之實施例,深度圖代表影像區域(包含影像 之像素之部分)之深度値,但深度圖不限於此。深度圖可 指示用於影像區域(包含影像之像素之部分)之深度的各 個像素的視差。深度値與視差建立了 一對一的對應。爲了 此原因,圖轉換設備1與2以如同上述實施例之相同方式 針對各個像素計算了深度圖的累計頻率曲線,其代表影像 區域(包含影像之像素之部分)之深度的視差;而且,藉 由使用此累計頻率曲線,圖轉換設備1與2將深度圖轉換 成爲適於目標3D顯示裝置之深度圖,使得深度圖轉換可 以獲得在可再生深度範圍內之絕佳深度感覺。 根據第二實施例,基本轉換不限於上述範例,只要輸 入影像之深度圖所代表之全部深度可被平均地轉換。 雖然已敘述某些實施例’這些實施例僅以範例之方式 來呈現,且不打算限制本發明之範圍。確實,在此所敘述 之新穎實施例可用各種其他形式來實施;此外,在此所敘 述之實施例之形式中的各種省略、替代與改變可被作出而 無偏離本發明之精神。所附申請專利範圍與其均等物係打 算涵蓋將落入本發明之精神與範圍內的此種形式或修改。 -19- 201227603 【圖式簡單說明】 圖1係爲示意圖,用以說明用於深度圖轉換之線性轉 換的範例; 圖2係爲示意圖,用以解釋使用線性轉換的深度圖轉 換; 圖3係爲示意圖,用以解釋根據第一實施例之深度圖 轉換; 圖4係爲示意圖,用以說明圖轉換設備之功能結構& 範例; 圖5係爲圖轉換處理之程序的流程圖; 圖6係爲示意圖,用以說明累計頻率曲線的範例; 圖7係爲示意圖,用以解釋使用累計頻率曲線的深度 圖轉換; 圖8係爲示意圖,用以說明根據第二實施例之圖轉換 設備之功能結構的範例; 圖9係爲圖轉換處理之程序的流程圖; 圖10係爲示意圖,用以說明用於深度圖轉換之伽瑪 轉換的範例; 圖1 1係爲示意圖,用以說明用於深度圖轉換之逆伽 瑪轉換的範例;.及 圖12係爲示意圖,用以說明累計頻率曲線轉換與基 本轉換之結合的範例。 -20- 201227603 【主要元件 1、2 : 1 1 :輸 12 :計 13 :第 14 :輸 1 5 ··偵 16 :第 1 7 :結 S 1、S2 符號說明】 圖轉換設備 入單元 算器 一轉換器 出單元 測單元 二轉換器 合單元 、S3、S4、S 1 0 ' Sll、S 12 > S13、S14 :步驟 -21 -
Claims (1)
- 201227603 七、申請專利範圍: 1. 一種圖轉換方法,包含: 計算在一第一圖中之深度的現存頻率,該第一圖對應 於一影像之至少一影像區域,且該第一圖之各個像素代表 對應於該影像區域之一像素的深度;以及 藉由使用該現存頻率,第一轉換該第一圖成爲一第二 圖,該第二圖代表各個像素在一第一範圍中之一深度。 2. 根據申請專利範圍第1項之方法,其中,在該第 一轉換中, 當該現存頻率較高時,該第一圖所代表之各個像素的 該深度係被轉換成爲在該第二圖中變得較大的一配置範圍 之一深度’且當該現存頻率較低時,被轉換成爲在該第二 圖中變得較小的一配置範圍之一深度。 3 .根據申請專利範圍第1項之方法,其中, 該計算包含計算一累計頻率曲線,其代表該第一圖之 該等深度的累計現存頻率;及 該第一轉換包含藉由使用該累計頻率曲線來轉換該第 一圖成爲該第二圖。 4·根據申請專利範圍第1項之方法,其中, 該計算包含: 藉由使用一特定轉換函數,第二轉換該第一圖成 爲一第三圖’該第三圖代表各個像素在該第一範圍中之該 深度:及 針對各個像素結合該第二圖與該第三圖,以轉換 -22- 201227603 該第一圖成爲一第四圖,該第四圖代表各個像素在該第一 範圍中之該深度。 5. 根據申請專利範圍第4項之方法,其中, 該第二轉換使用一線性函數,以獲得該第三圖。 6. 根據申請專利範圍第1項之方法,其中, 該計算包含根據一第二範圍之一深度値,計算該第一 圖之該現存頻率,其代表該影像區域之各個像素的~深度 〇 7-根據申請專利範圍第1項之方法,其中, 該計算包含根據一第二範圍之一視差,計算該第一圖 之該現存頻率,其代表該影像區域之各個像素的一深度。 8. —種圖轉換設備,包含: 計算器,配置成計算在一第一圖中之深度的現存頻率 ,該第一圖對應於一影像之至少一影像區域,且該第一圖 之各個像素代表對應於該影像區域之一像素的深度;以及 轉換器,配置成藉由使用該現存頻率,轉換該第一圖 成爲一第二圖,該第二圖代表各個像素在一第一範圍中之 -一深度。 9. —種電腦程式產品,包含電腦可讀取媒體,該電 腦可讀取媒體包括用於圖轉換之程式化指令,其中當該等 指令被電腦執行時,致使該電腦實行: 計算在一第一圖中之深度的現存頻率,該第~圖對應 於一影像之至少一影像區域’且該第一圖之各個像素代表 對應於該影像區域之一像素的深度;以及 -23- 201227603 藉由使用該現存頻率,轉換該第一圖成爲一第二圖, 該第二圖代表各個像素在一第一範圍中之一深度。 -24-
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010286657A JP5242667B2 (ja) | 2010-12-22 | 2010-12-22 | マップ変換方法、マップ変換装置及びマップ変換プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201227603A true TW201227603A (en) | 2012-07-01 |
| TWI485646B TWI485646B (zh) | 2015-05-21 |
Family
ID=46316090
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW100132454A TWI485646B (zh) | 2010-12-22 | 2011-09-08 | 圖轉換方法、圖轉換設備、及用於圖轉換的電腦程式產品 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US9154764B2 (zh) |
| JP (1) | JP5242667B2 (zh) |
| CN (1) | CN102547322B (zh) |
| TW (1) | TWI485646B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014083949A1 (ja) * | 2012-11-29 | 2014-06-05 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2774378B8 (en) * | 2011-11-01 | 2015-11-18 | Koninklijke Philips N.V. | Saliency based disparity mapping |
| US9672609B1 (en) * | 2011-11-11 | 2017-06-06 | Edge 3 Technologies, Inc. | Method and apparatus for improved depth-map estimation |
| WO2013094635A1 (ja) * | 2011-12-19 | 2013-06-27 | シャープ株式会社 | 画像処理装置、撮像装置および表示装置 |
| US9137519B1 (en) | 2012-01-04 | 2015-09-15 | Google Inc. | Generation of a stereo video from a mono video |
| US9098911B2 (en) * | 2012-11-01 | 2015-08-04 | Google Inc. | Depth map generation from a monoscopic image based on combined depth cues |
| BR112015025077A2 (pt) * | 2013-04-05 | 2017-07-18 | Dolby Laboratories Licensing Corp | método de redirecionamento de dados de sinal de vídeo tridimensional para uso em um dispositivo de exibição tridimensional alvo, sistema para redirecionar um sinal de vídeo tridimensional para uso em um dispositivo de exibição tridimensional alvo, dispositivo de exibição tridimensional, supra-sistema, programa de computador para redirecionar um sinal de vídeo tridimensional, e, produto de programa de computador |
| JP6415179B2 (ja) | 2014-08-20 | 2018-10-31 | キヤノン株式会社 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
| JP6585938B2 (ja) * | 2015-06-23 | 2019-10-02 | 日本放送協会 | 立体像奥行き変換装置およびそのプログラム |
| EP3395066B1 (en) * | 2015-12-25 | 2022-08-03 | BOE Technology Group Co., Ltd. | Depth map generation apparatus, method and non-transitory computer-readable medium therefor |
| US10776992B2 (en) * | 2017-07-05 | 2020-09-15 | Qualcomm Incorporated | Asynchronous time warp with depth data |
| US11386527B2 (en) | 2018-01-30 | 2022-07-12 | Sony Corporation | Image processor and imaging processing method |
| JP6626551B2 (ja) * | 2018-10-03 | 2019-12-25 | キヤノン株式会社 | 画像処理装置、画像処理方法、および撮像装置並びにその制御方法 |
| WO2021252892A1 (en) * | 2020-06-12 | 2021-12-16 | Fyr, Inc. | Systems and methods for producing a light field from a depth map |
| WO2022018869A1 (ja) * | 2020-07-22 | 2022-01-27 | 日本電信電話株式会社 | マッピング関数調整装置、マッピング関数調整方法およびプログラム |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE69621778T2 (de) | 1995-12-19 | 2003-03-13 | Koninklijke Philips Electronics N.V., Eindhoven | Tiefenabhängige parallaktische pixelverschiebung |
| JP4036599B2 (ja) | 2000-04-11 | 2008-01-23 | 三洋電機株式会社 | 2次元映像を3次元映像に変換する方法 |
| EP1591963B1 (en) * | 2004-04-29 | 2008-07-09 | Mitsubishi Electric Information Technology Centre Europe B.V. | Adaptive quantisation of a depth map |
| JP2006031171A (ja) * | 2004-07-13 | 2006-02-02 | Nippon Telegr & Teleph Corp <Ntt> | 擬似的3次元データ生成方法、装置、プログラム、および記録媒体 |
| JP4214529B2 (ja) * | 2004-12-28 | 2009-01-28 | 日本ビクター株式会社 | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム |
| DE102005034597A1 (de) * | 2005-07-25 | 2007-02-08 | Robert Bosch Gmbh | Verfahren und Anordnung zur Erzeugung einer Tiefenkarte |
| US8787654B2 (en) * | 2008-05-12 | 2014-07-22 | Thomson Licensing | System and method for measuring potential eyestrain of stereoscopic motion pictures |
| US10043304B2 (en) | 2008-09-25 | 2018-08-07 | Koninklijke Philips N.V. | Three dimensional image data processing |
| JP4909378B2 (ja) * | 2009-06-02 | 2012-04-04 | キヤノン株式会社 | 画像処理装置及びその制御方法、コンピュータプログラム |
-
2010
- 2010-12-22 JP JP2010286657A patent/JP5242667B2/ja not_active Expired - Fee Related
-
2011
- 2011-09-07 US US13/227,210 patent/US9154764B2/en not_active Expired - Fee Related
- 2011-09-08 TW TW100132454A patent/TWI485646B/zh not_active IP Right Cessation
- 2011-09-09 CN CN201110266121.7A patent/CN102547322B/zh not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014083949A1 (ja) * | 2012-11-29 | 2014-06-05 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| TWI485646B (zh) | 2015-05-21 |
| US20120162200A1 (en) | 2012-06-28 |
| US9154764B2 (en) | 2015-10-06 |
| CN102547322B (zh) | 2015-04-01 |
| JP2012134881A (ja) | 2012-07-12 |
| JP5242667B2 (ja) | 2013-07-24 |
| CN102547322A (zh) | 2012-07-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TW201227603A (en) | Map converting method, map converting apparatus, and computer program product for map conversion | |
| AU2008204084B2 (en) | Method and apparatus for generating stereoscopic image from two-dimensional image by using mesh map | |
| CN102164299B (zh) | 图像处理装置、图像处理方法及重现装置 | |
| CN102187680B (zh) | 用于确定图像序列的二维或三维显示模式的方法和设备 | |
| CN103202026B (zh) | 图像转换设备及使用其的显示设备和方法 | |
| JP6147275B2 (ja) | 立体画像処理装置、立体画像処理方法、及びプログラム | |
| JP2012019513A (ja) | 2d画像を3d画像に変換するための方法および装置 | |
| CN103518372B (zh) | 图像处理装置、图像处理方法和程序 | |
| US20130051659A1 (en) | Stereoscopic image processing device and stereoscopic image processing method | |
| CN104081765B (zh) | 图像处理设备及其图像处理方法 | |
| CN105589670A (zh) | 显示装置及其显示方法 | |
| CN102905141A (zh) | 二维转三维转换装置及其方法 | |
| JP5307953B1 (ja) | 立体画像処理装置、立体画像処理方法、および立体画像処理プログラム | |
| EP2980752B1 (en) | Image processing device, image processing system, image processing method, and image processing program | |
| JP2011211536A5 (zh) | ||
| JPWO2013128765A1 (ja) | 画像処理装置、画像処理方法およびコンピュータプログラム | |
| JP2014016792A (ja) | 画像処理装置および方法、並びにプログラム | |
| JP5254297B2 (ja) | 画像処理装置 | |
| CN115937291A (zh) | 一种双目图像的生成方法、装置、电子设备及存储介质 | |
| CN102447926B (zh) | 一种无摄像机标定参数的三维图像变换方法 | |
| JP2012090094A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| JP2015142260A (ja) | 画像処理装置 | |
| JP2014219724A5 (zh) | ||
| JP2020184721A (ja) | 3d映像の奥行き制御装置及びプログラム | |
| JPWO2013128847A1 (ja) | 視差量調整装置、3次元画像生成装置、および視差量調整方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | Annulment or lapse of patent due to non-payment of fees |