[go: up one dir, main page]

TW201220817A - Camera system and image-shooting method with guide for taking stereo photo and method for automatically adjusting stereo photo - Google Patents

Camera system and image-shooting method with guide for taking stereo photo and method for automatically adjusting stereo photo Download PDF

Info

Publication number
TW201220817A
TW201220817A TW099137492A TW99137492A TW201220817A TW 201220817 A TW201220817 A TW 201220817A TW 099137492 A TW099137492 A TW 099137492A TW 99137492 A TW99137492 A TW 99137492A TW 201220817 A TW201220817 A TW 201220817A
Authority
TW
Taiwan
Prior art keywords
image
images
view
information
unit
Prior art date
Application number
TW099137492A
Other languages
English (en)
Other versions
TWI433530B (zh
Inventor
Chung-Wei Lin
Wen-Chao Chen
Original Assignee
Ind Tech Res Inst
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ind Tech Res Inst filed Critical Ind Tech Res Inst
Priority to TW099137492A priority Critical patent/TWI433530B/zh
Priority to US12/973,908 priority patent/US20120105599A1/en
Publication of TW201220817A publication Critical patent/TW201220817A/zh
Application granted granted Critical
Publication of TWI433530B publication Critical patent/TWI433530B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/211—Image signal generators using stereoscopic image cameras using a single 2D image sensor using temporal multiplexing
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

201220817
P51990039TW 35013twf.doc/I 六、發明說明： 【發明所屬之技術領域】 本發明疋有關於一種立體影像攝影技術，且特別是具 有立體影像攝影引導的攝影技術。 八 【先前技術】 要呈現立體影像的方式有多種方式可以達成，其中較 • 為簡單的方式是藉由具有視差(Para!lax)的兩張相同物件的 影像分別由左眼與右眼接收’藉由人體視覺的功能而產生 立體影像的效果。換句話說，此兩張影像是對應左眼與右 眼觀視相同物件的結果。因此要攝影可以產生立體影像的 二張具有視差的2D影像，需要在不同視角下攝影相同物 件，如果二張的視差不足或過多則立體效果會降低，甚至 失敗。 隨著立體影像的硬體播放設備普及化，一般消費大眾 已經可由非研究性質的管道購買立體影像的播放設備，但 市場上相對應的立體攝影設備仍缺乏。又或者技術門檻過 高導致一般消費大眾無法輕易取得立體内容。一般要取得 立體影像必須擁有特殊的設備，例如雙鏡頭的攝影機，或 疋結合雙攝影機。如此造成要攝影立體相片必須使用特殊 設備’使用上限制多。 傳統立體影像的品質決定於攝影時的取像品質及人 工後製調整，並沒有參考相機本身提供的資訊。對使用者 除了不方便以外也造成立體感品質的下降。隨著電子光學
201220817 P51990039TW 35013twf.doc/I 巧術的提升與數位相機的普及，數位相機已承载足夠的運 算處理能力來及時處理多元的攝影需求。 【發明内容】 本發明提供具有立體影像攝影引導的攝影系統與方 法^及自動立體影像調整方法，藉由對使用者的引導功能 使知方便藉由數仅相機拍取用以組合成立體影像的2D影 像。 v ,根據一實施例提出一種具有立體影像攝影引導的攝 影系，’包括-取像單元、—資訊單元、—處理單元、一 導引單元、以及一影像儲存單元。 取像單元可以在—位置對—目標場景攝影對應的一 二訊單元分別紀錄在該位置攝影該目標場景的 -攝〜條件資siL ’以及攝影的該視角影像。處 析後估計下一次該取像單元要攝影該 目⑽景的-縣條件，直職财—預定數 此視 角影像。X，當完成該預定數量該些視角影 = 單元對該些視㈣像做—立㈣像校正處理。n 單元，的該攝影條件轉換成—導料使 該立體影像校正處理的該些視角=辟W，儲存經過 根據-實施例提出具有立體影像攝 法，用於-攝影系統。攝影系統以相同一鏡=攝= 法包括··選定—編賴卜顯示單元，=== 201220817
P51990039TW 35013twf.doc/I 訊;依照該引導資訊移動該鏡頭到多個引導位置以對一目 標場景取得一組影像，其中該組影像是不同視角的至少二 個視角影像;對該至少二個視角影像做立體視覺影像校正. 輸出校正後的該至少二張視角影像，同時也輪出對應的一’ 攝影資訊。 又根據一實施例提出一種立體影像自動調整方法，使 用於一相機之中，包含取得一第一視角影像與一第二視角 # 影像;分別對該第一視角影像與該第二視角影像分析出一 組特徵點;取得分別對應該第一視角影像與該第二視角影 像，一相機資訊;根據該相機資訊，對該組特徵點給予權重; ，行影像轉正料，是據給予權重後的該崎徵點，旋轉 :亥，視肖景彡像與該第二視肖景彡像的至少其—以達到轉正; 進打影像平移步驟，是依照給予權重後的該組特徵點的座 標將轉正後_第—視角影像與該第 二視角影像做一適當 平移’以調整視差效果;以及輸出-調整後第-視角影像與 —調整後第二視角影像。 ♦又根據-實施例提出一種具有立體影像拍攝引導的 影系統’包括—鏡頭具有單—光軸。又一影像感光元 」錄由該鏡頭取得的至少二張視角影像，至少包括一第 衫像與-第二影像。—導引單元提供—引導資訊使該鏡 一艮據Ϊ第一影像移動到-預期位置以取得該第二影像。 ^隱單元紀錄該影像感光元件所取得的該第—影像與該 ^二影像’以及攝影時的-相機資訊…處理電路單元連 、、、。到該鏡頭，該影像感光元件，該導引單元，以及該記憶 ς 201220817
m咖j9TW 35013twfd〇c/I 電路單元包含-影像處理演算法模組， 為讓本發明之上述特徵和優點能更明顯易懂，下文 舉實施例，並配合所_式作詳細說明如下。 、 【實施方式】 增加攝但是不 項可以成為-般數位相機的基本：:一== 模式引導使用者移動相機進行攝影，辅以 供的攝影資訊，在單一 A如攙咖2 佳的立體影像。。械内元成調整魏直接輸出較 以下舉一些實施例來說明本發明，但是本發明不僅限 於所舉的實施例。X，所舉的實施例之間有可叫當社人限 本發明提出的攝料統設置立體影像攝影的引導資 訊，允許彳^者移動贿當的位置攝料有足夠視差的二 影像。接著藉峰影的f彡像與資鋪影像做輕， 較佳調整與輸出的立體影像。 圖1A繪不依據本發明一實施例，攝影系統方塊示竟 圖。參閱圖1A，具有立體影像攝影引導的攝影系統^ 包括一鏡頭52、—影像感光猶54、-顯示單元56、一 記憶單元58以及一處理電路單元6〇。鏡頭52具有單一光 軸。換句話說’本實施例可以藉由具相同光軸鏡頭之攝影 系統’藉由引導取得具有視差的二個影像。感光元件Μ 201220817
P51990039TW 35013twf.d〇c/I 取得$鏡ΐ 5一2 f:象的-第-影像與-第二影像。 顯不早兀56顯示第一影 办像 一影像後，顯示一引導資句，3丨‘、_—景>像，且於取得第 置以取得第二影像β記憶5 ，碩2移動到一預期位 所取得的第-影像與第二4、、錢該影侃光元件54 處理電路單元60連 可以包含一影像處理演箕法埴 慝電路早兀6〇
影引導。引導的操作包括异由去二執5==取” 利:影:i 雜用於钟笪I特徵點群。此特徵點 ::Γ:ΐ 調整第一影像與第二影像的至少 立體影像。在另—實施例中，處理電路 早疋60可連結到鏡頭52，以提供其引導資訊，引導鏡頭 52進灯移動。在另—實施例中，處理電路單元⑽可連社 到顯示單元56 ’以提供其引導資訊於顯示單元％，顯示^ 引導資訊，引導使用者移動鏡頭52。 ' 就引導使用者進行立體攝影的功能而言，其可以使在 攝影立體影像時，保持符合立體影像的攝影，而讓後續立 體影像處理時能降低錯誤機率。 上述的架構也可由功能單元做方式來表示。圖1B繪 示依據本發明一實施例，攝影系統功能單元示意圖。參閱 圖1B，立體影像攝影引導的攝影系統，包括一取像^元 70、一資訊單元72、一處理單元74、一導引單元76、一 影像儲存單元78,其中一顯示單元更可以用來顯示攝影的 201220817
P51990039TW 35013twf.doc/I 影像及導引的資訊。 取像早兀7〇可以在一位置對一目標場景攝影對應的 一視角影像。取像單元7〇可以包括—鏡頭&、一影像感 Μ等元件° f訊單元72分別紀錄在—位置攝影目 杯场,?、的一攝影條件資訊，以及所攝影的視角影像。這些 ^訊例如可以儲存在記憶單元％中。處理單元％與資訊 ^ _72^接’接收所儲存攝影條料訊，經分析後估計取 次要攝影目標場景的一攝影條件。攝影條件 角2 =二移動位置或距離等，以能產生相對於其他視 ^像有賴的視差。要攝影的影像數量為至少二張的數 ^像而攝影導引會繼續直到攝影有—預定數量的多個視角 旦“金f理t Μ更會當完成取得該預定數量的該些視角 ^後，更對該些視肖影御卜立體f彡像校正處理，其會 如後面的描述。導引單元％會根據處理 _ 導引資訊使取像單元7。依據= 訊移動至下-攝影位置來取得下—視角影像。導二 單元8〇、56來顯示。顯示單元8〇、5:也 :以：來Τ覽各個處理階段的視角影像。在另一實 t姑處理料74巾可整合該料單元％，即處理單元％ 根據所估計的攝影條件轉換成該導引資訊。 〜像健存皁X 78中，而任取其中二張，當作左眼與右眼影 201220817 P51990039TW 35013twf.doc/I 像，都可以構成一立體視覺影像。一般而言，依照攝影裝 置的規格’其可以輸出二張視角影像或是更多的視角影像 而允許多個觀視者觀視立體視覺影像，且也允許移動觀視 位置。 圖2繪示依據本發明一實施例，一種具有立體影像攝 影引導的攝影方法流程示意圖。參閱圖2,具有立體影像 攝影引導賴影方法是祕攝影系統的處理方式。攝影系 統具有單一光軸的一鏡頭。在步驟sl〇〇，先選定攝影模 式。、在選擇模式下’例如使用者選擇在3D攝影下的攝影 模式，主要是依照攝影場景設定對相機進行參數上的設 定。例如人物、風景、特寫…等，不同的設定，會擷取不 同的特徵在影像中的座標位置。 在步驟S102 ’在選定模式後，觸發攝影可以依照相機 麵不同而有不同種類_發方式，修以觸控螢幕、按 金t觸發。 在步驟S104，其進行顯示與引導的功用。要有立體的 果，左眼與右眼所相的影像特徵要—致且有足夠 / Ί。因此’任意的二張影像不會構成良好的立體影像。 “：二一張影像後藉由一顯示單元，提供-引導 資。此引導貝訊例如是估計出所需要移動量 置。於本實施例，例如要先攝影一張影像 、 然而如果是連拍賴式，則只要移動所丨導的基礎。 而後續從多張不同視角的影像中選擇二::離， 右眼影像即可。 浪作為做左眼與 9
201220817 F5iyyw39TW 35013twf.doc/I 又，要正確的估計移動距以及後續的影像校正處理， 在步驟S110也提供相機的攝影資訊。攝影資訊例如是攝 ’衫相機硬體本身提供的資訊，又或是未來可能提供的硬體 資訊，可以提供用來進行立體影像攝影的引導資訊，例如 測距資訊(紅外線/連動測距/數位測距）、鏡頭對焦點在影 像中的相對座標、陀螺儀位置資訊…等。 在步驟S106，使用者依照引導資訊移動相機到引導的 立置。步驟S108檢視是否符合移動提示。如果不符合就 =到步驟_移動相機。如果相機到達提示的 就到步:SU2攝影-張影像，聯存攝影的攝影資訊。
SlfM 二^14 *果還需要繼續取得影像’就回到步驟 量的一I且L傻^訊繼續取得影像直到達到所要的影像數 要步驟S116由這-組影財依照需 輸出。*su8將對應視角影像的攝影資訊也一併 用以組合成-立體影像。〜 眼_至少其一， 移動攝影:二機制特為了能引導使用者水平 上，並提供使用者移動方向^徵點將顯示於顯示螢幕 動量後，相機即進行二’’待使用者符合正確移 订資枓的紀錄。而正確移動量的計算， 201220817
P51990039TW 35013twf.d〇cA 可來自於下列實施方法。 圖3繪示依據本發明一實施例引向及移動的機立 圖。圖3(a)例如是當作參考的視角影像的内容，_ 如疋另一個後續被校正的另一個視角影像。使用相機 時，在® 3⑻中近物與遠物投影在相機上的特徵點分別^ Pnear與Pfar，兩者的座標差值為Δρ。使用者移動二圍
3(b)的畫面上的新位置為pnear,與pfar，，而座標差值 △P’。使用者移動的位置必須符合以下算式： (2) δρ·=|ρ_._Ρ/^ X拍攝相片解析度 (3) |ΔΡ - ΔΡ，μ O.m V顯示器觀賞距離 顯示鎌寬 在此所表示的即是移動相機時，前後景必須達到的 _ 。當移動相機而符合此值時，即是符合移動距離， 可擷取第二張影像。顯示器橫寬與觀賞距離相除之值，可 以設定為固定值，例如是4 〇。 如果相機具有附加攝影外的硬體，例如陀螺儀、水平 偵測^則可使用硬體資訊計算移動距離。藉由測距所得到 的目巧距離，配合相機攝影焦距、景深等資訊，計算相機 應該符合的移動量，並以此移動量配合陀螺儀所計算的相 機位移’提供伽者是否繼續移動相機的參考依據。 圖4繪示依據本發明一實施例，藉由距離的引導機制 11
201220817 P51990039TW 35013twf.doc/I 示意圖。參閱圖4，由於相機100具有外掛的測距功能以 偵測一景像102的景深AL，以決定移動距離。其移$距 離△(!可參考下列算式： (4) — X(^max X-^min)/(^roax f = ’ k為投影影像上容忍視差量，對於35mm的片幅可 没定為定值1.2mm，Lmax與Lmin代表景深^乙可見 f為相機焦距。 ε ’ 換句話說，引導的方式可以依不同的方式達成其主 要是引導相機的鏡頭移動到適當的距離，攝拔 3D視覺的影像。 U以構成 =於立體影像所需要的是至少2張以上具有不同視 ^，能夠造成視差(paraUax)的影像，因此，未處理 資料必須能夠提供不同視角的影像。此外，數 ==資訊量，來提升影像處理的精準度以及立 對於未處理的影像資料，由於本系統採用的 錄影像可以兩種格式紀錄：靜止影像(細〇)、動 )。靜止影像(photo)可以依照相機本身需求的 ^ *"aw' ^ /乍為未處理影像轉，則必織取多張， 以 。動態影像(vide。)主要是紀錄影像序列，資料格式^端 12 201220817
P51990039TW 35013twf.doc/I 看相機處理規格，例如*.inpeg4、*.mjpeg、'm〇v，在後續 的影像處理中，由影像序列中擷取至少2張影像進行立體 影像的處理。 對於攝影模式的資訊，可以由使用者自行決定，在操 作方式上可以使用轉盤機構，或是使用觸控螢幕的觸控點 ^做為選擇。攝影模式的選取主要控制影像擷取時，對焦 資訊、特徵資訊、曝光資訊…等。此類資訊依照使用者選 φ 擇，而攝影提示將會依照使用者選取的攝影模式而不同。 為了後續立體影像資訊擷取所需，必須紀錄使用者選 擇的模式以下的攝影資訊，如解析度、位元深度、焦距、 曝光時間、曝光程式、攝影時間…等。此外另外紀錄立體 調整時可能使用到的資訊，如臉部偵測時的臉部位置，對 焦物的對焦測距、錄影紀錄的取像頻率(φ3)…等有助於後 續自動立體調整的硬體參數。 依照使用者選擇攝影模式的不同，相機會進行不同的 攝影引導’同時留下攝影時的資訊(例如人像攝影，保留人 • 臉對焦焦距 '臉部座標位置…等），利用模式的不同，可以 對輸入影像進行影像特徵的紀錄。圖5繪示依據本發明一 實施例，人像攝影模式的偵測示意圖。參閱圖5，對於相 ，110在人像攝影模式下，其藉由相機110的攝影資訊所 提供的人112的臉部114進行偵測座標位置，可以計算兩 張影像間相同人臉在攝影時相機應該移動的距離。藉由此 距離可以擷取較佳的未處理影像。另外為了後續立^調整 與輸出，將針對人臉特徵擷取座標位置，同時紀錄於攝影 a 13
201220817 P51990039TW 35013twf.doc/I 資訊中以待後續調整與輸出所用。 又例如是對遠距離的風景攝影模式，針對遠距離物件 必須有較大的移動量才能達到立體的效果，但是大幅的移 動量會致使近景產生較大的撼㈣致不適，因此在攝影 時應針對遠近於晝面分配的比例，紀錄特徵點位置，於攝 影資訊中以待後續調整與輸出所用。 另外對於特寫物件在攝影時實景深較淺，略有移動量 達収夠的立體視差，但容易因為使用者過多的移 特：二^過多而造成立體效果降低’因此應針對近景 錄舰驗置，於㈣資对崎後續調 整與輸出所用。 ^下描述影像的後續校正。由於使用者對相機的移動 影像的歪斜’軸在前述的引導攝影程序已經針對 二σ影場景對使用者攝影，但仍不足以到達—個可輸出 0 :質的立體影像。本系統在自動調整與輸出立體影像 ’將會擷取影像特徵，並用以調整兩張不同視角的 影像至品質較高的狀態。 ，6繪讀據本發明—實施例，立體影像自動調整流 。參閱圖6，於步驟_ ,其取得例如由圖2所 你原始多個視角影像。於步驟㈣，其對這些多個視 斜ΐ/ί析出一組特徵點。於步驟S212，其取得分別對應 兮^夕個視角影像的—相機資訊。於步驟S2()4，其根據 資訊以及攝影模式，例如是人像歧景物的不同， 〜且特徵點奸權重^於步驟通，從這些多個視角影 201220817
P51990039TW 35013twf.doc/I ^取二-為參考視角影像，進行其他視角影像的轉正 序，其是根據給予權重後的該組特徵點，旋轉要被校正 視角影像以達到轉正❶於步驟幻〇8，其進行影像平击 是依驗予權重後㈣轉徵關座標將轉正後的 校正視角影像做—適當平移，_整視差效果。又 $ S214，其在步驟隨完成特徵權重的處理後，也會重 新到新的特徵點座標以供步驟纖的平移使用。 ΓΓί輸出校正後的至少二張視角影像。也就是說，1依 …、相機輸出需求的-視角影像數量，而在包括參考視 像與被校正的視角影像的^視角影像中，輸出至少一^ 分的視角影像。 # 以下更細部描述。圖7繪示依據本發明一實施 取特徵點的鋪示意圖。触特徵點主要是針對參 影像與不同視角的被校正視角影像，擷取物件在空間中相 同位置在不|5]f彡像平面上投射對應的座標位置可以 如 SURF(Speeded Up R〇bust Feat刪）、幻二 eeale_lnvai:iant feature transf〇rm)等特徵點比對演算方法 對左右影像計算特徵相對應的座標位置。 、 對於權重的考量，由於特徵點會因域影内容的不同 :有數量上的不同，因此必須令特徵盡可能平均分佈於 像的各個輯，而錢巾於特定區域。此外，為了能使得 影像在執行非線性調整時，能夠針對攝影模式中的 因此模式所挑選的區域，會加強特徵於 15 201220817
P51990039TW 35013twf.doc/I 接著關於轉正的機制，由於攝影機在攝影的過程中有 位置的改變與移動，所以攝影機的外參數（6χίΓίηΑ parameter)將會改變，所以必須計算攝影機在不同位置上的 基^轉換矩陣(Fundamental Matrix)，由於是使用相同鏡頭 進行攝影’因此在内參數(intrinsic parame㈣的部分可以不 執行。利用基本轉換矩陣對左右影像進行轉正㈣迅加㈣ 後，可以得到非線性校正後的左右影像，可進行 調整程序。 圖叫示依據本發明—實關，原始攝影未轉正的二 張2D影像示意圖。圖9输示依據本發明一實施例，經轉 正後的二張2D影像示意圖。參閱圖8，當把未轉正的二張 合t一起時’由於使用者不具有完美的移動操作 月、而。其一張影像之間會有旋轉偏移。參閱圖9， 張為基準，另―張就可以藉轉正程序旋轉使二 張疋在相同的水平角度。 娜ίίί述調整視差。當左右影像轉正後，仍會有視差 像r水平移動的調整，此方法可== ^ 、會依照攝影時所紀錄的資訊，提供轉正後 的移動值。做法例如：利用攝影== ^像中1有式時’或影像經人臉_計算後結果顯示 即針對影像中人臉位置特徵點群座標進 值蝇“最’讓所有人臉位置的視差絕對 和為最小。當為其他攝影模式時，即針對左右影像的 201220817
P51990039TW 35013twf.doc/I 下方四分之一區域進行特徵點偵測，平均視差值'的計算 如下： (5) ^neg = Disparity. Η... 0.25* Η. img
其。中指數咖貞咖特徵賴數，&為影像高度，卸^為 編號第個特徵點的視差值，X為編號第4轉徵點的影像 γ座標。當計算di平均視差值4後，即將右影像往左位移 4相素’讓調整後的平均視差值4為〇。 由圖9所完成轉正的資料有偏移來看，有些次要物件 的視差量會太大，造成觀看3D影像時的不適。圖1〇繪示 依據本發明—實施例，經調整視差後的二張2D影像示意 圖。參閱圖10,經過視差調整後的二張21)影像會有較適 當的視差。 至於輸出的立體影像格式，可以一般顯示元件可接受 的規格輸出’無須特別限定。 雖然本發明已以實施例揭露如上，然其並非用以限定 本發明’任何所屬技術領域中具有通常知識者，在不脫離 本發明之精神和範圍内，當可作些許之更動與潤飾，故本 發明之保護範圍當視後附之申請專利範圍所界定者為準。 【圖式簡單說明】 圖1A繪示依據本發明一實施例，攝影系統方塊示意 圖。 圖繪示依據本發明一實施例，攝影系統功能單元 17 201220817 P51990039TW 35013twf.doc/I 示意圖。 圖2繪示依據本發明一實施例，一種具有立體影像攝 影引導的攝影方法流程示意圖。 圖3繪示依據本發明一實施例引向及移動的機制示意 圖。 圖4繪示依據本發明一實施例，藉由距離的引導機制 示意圖。 圖5繪示依據本發明一實施例，人像攝影模式的债測 示意圖。 圖6繪示依據本發明一實施例，立體影像自動調整流 程示意圖。 圖7繪示依據本發明一實施例，擷取特徵點的機制示 意圖。 圖8繪示依據本發明一實施例，原始攝影未轉正的二 張2D影像示意圖。 圖9繪示依據本發明一實施例，經轉正後的二張2D 影像示意圖。 圖10繪示依據本發明一實施例，經調整視差後的二 張2D影像示意圖。 【主要元件符號說明】 50 :攝影系統 52 :鏡頭 54:影像感光元件 201220817
P51990039TW 35013twf.doc/I 56 :顯示單元 58 :記憶單元 60 :處理電路單元 100 :相機 102:景像 110:相機 112 :人
114:臉部 S100-S118 :步驟

Claims (1)

  1. 201220817 P51990039TW 35013twf.doc/I 七、申請專利範圍： 1. 一種具有立體影像攝影引導的攝影系統，包括： 一取像單元’可以在一位置對一目標場景攝影對應的 一視角影像； 一資訊單元’分別紀錄在該位置攝影該目標場景的一 攝影條件資訊，以及攝影的該視角影像； 一處理單元，接收該攝影條件資訊經分析後估計下一 次該取像單元要攝影該目標場景的一攝影條件，直到攝影 有一預定數量的該些視角影像，其中當完成該預定數量該 些視角影像後，該處理單元對該些視角影像做一立體影像 校正處理； 導引卓元，將該處理单元估計的該攝影條件轉換成 一導引資訊以導引該取像單元移動至該位置；以及 一影像儲存單元，儲存經過該立體影像校正處理的該 些視角影像。 ”人 2.如申請專利範圍第1項所述之立體影像攝影弓丨導 的攝影系統，其巾該預定數量的該些視角影像是分別對應 不同視角，其中取該些視角影像的任二張會構成立體視^ 影像攝影弓丨導 置資訊以及取 3.如申請專利範圍第1項所述之立體 的攝影系統，其中該攝影條件資訊包括該位 像單元焦距。 /如曱清專利範圍第▲ 7厂"心心正餿影像攝影 的攝影系統，更包括一顯示單元，其中該導引單元的 201220817 P51990039TW 35013twf.doc/I 引資訊藉由該顯示單元顯示，以導引該使用者。 5. —種具有立體影像攝影引導的攝影方法，用於一攝 影系統，該攝影系統以相同一鏡頭取像，包括： 選定一攝影模式； 藉由一顯示單元，提供一引導資訊； 依照該引導資訊移動該鏡頭到多個引導位置以對—目 標場景取得一組影像，其中該組影像是不同視角的至少二 鲁 個視角影像； 一 對》亥至少一個視角影像做立體視覺影像校正；以及 輸出校正後的該至少二張視角影像，同時也輸出對 的一攝影資訊。 ‘ 6·如申請專利範圍第5項所述之立體影像攝影引導 的攝影方法，更包括藉由該攝影系統的—處理電路單元中 的一影像處理演算法模組，提供該引導資訊以及輸出校正 後的該至少二張視角影像。 ^如ψ請專職圍帛6賴狀立體祕攝影料 • 影方法，其中根據不同的攝影模式，提供不同的該引 導貝訊，以引導該鏡頭組在該預期位置取得影像。 =如申凊專利範圍第6項所述之立體影像攝影引導 的攝影方法，其中該處理電路單元同時分析得到該至少二 張視角影像的多個特徵點。 一 祕ϋ、申請專利範圍第6項所述之立體影像攝影引導 傻中的一ί其中所提供的該引導資訊是根據對應該組影 >考衫像的一相機資訊所估計而提供的該預期位 21 201220817 P51990039TW 35013twf.doc/I 置 ίο. 的攝二==所=影像_導 括： 一個視角影像的該步驟包 決定一組特徵點資訊； 根據該組特徵點資訊將以一參 要被校正的-被校正視角影像轉正;以及"，·.、/’對 將該被校正視角影像平移。 卜種立體影像自_整方法，使用於—相機之 至少取得一第一視角影像與一第二視角影像 組特：對該第一視角影像與該第二視角影像分析出- 的-相取Γί；對顧第—視角影像與該第二視角眼影像 根f該相機資訊，__徵點給予權重； ^像轉正程序’是據給予權重後的該組特徵點， 轉正5 Λ視肖树無第二視肖影像的至少其-以達到 66广姆ϋ〜像平移步驟’是依照給予權重後的該組特徵點 、尚术>!轉正後的該第—視角影像與該第二視角影像做一 適當平移，以調整視差效果；以及 輸出-調整後第—視角影像與—調整後第二視角影 像0 22 201220817 P51990039TW 35013twf.doc/I =·如中請專利範圍第u項所述之立體影像自動 整方法，取得的該第—視角f彡像與該第 : 靜態影像或者動駐彡像。 來自 之：申請專利範圍第u項所述之立體影像自 徵匹配演算Γ讀出該_徵關計料徵方法是採用特 整方Γ.，t申二項所述之立體影像自動調 置資訊。 疋參考該相機所提供的―對焦位 整方公，==·利範圍第11項所述之立體影像自動調 以決定是;判斷轉正前後的差異程度， 轉正。$確使該第-視角影像與該第二視角影像之間 16拉-種具有立體影像拍攝料的攝㈣統 一鏡頭，具有單一光軸； i括. ‘張視角 衫像感光7L件，紀錄由該鏡頭取得的至少 衫象二至少包括—第—影像與—第二影像 影 像與紀錄該影像感光元件所取得的該第 一〜一〜像，以及攝影時的一相機資訊；以及 路單電連結到該記憶單元’其中該處理電 該鏡頭二Γ;=法模組’計算出一引導資訊使 像。_第—4移動到-職位置以取得該第二影 17. 如申請專利範圍帛16項所述之立 體影像拍攝引 23 201220817 P51990039TW 35013twf.doc/I 導的攝影祕，更包括-齡單元，峨示 18·如申請專利範圍第16項所述之立體影攝 導的攝影祕，其中該處理電路料更包括-校 對該些視角影像做校正，該校正處理包括：权慝理 取該些視角影像的其一當作一參考視 當作是要被校正的一被校正視角影像； ~象，其他的 分析決定該些視角影像的一特徵點群 對被選取的每一張該被校正視角 。影像計算出-校正參數而校轉參= 依照需要輸出的-視角影像數量 影像與該被校正視角影像其中的至少在該參考視角 24
TW099137492A 2010-11-01 2010-11-01 具有立體影像攝影引導的攝影系統與方法及自動調整方法 TWI433530B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW099137492A TWI433530B (zh) 2010-11-01 2010-11-01 具有立體影像攝影引導的攝影系統與方法及自動調整方法
US12/973,908 US20120105599A1 (en) 2010-11-01 2010-12-21 Camera system and image-shooting method with guide for taking stereo images and method for adjusting stereo images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW099137492A TWI433530B (zh) 2010-11-01 2010-11-01 具有立體影像攝影引導的攝影系統與方法及自動調整方法

Publications (2)

Publication Number Publication Date
TW201220817A true TW201220817A (en) 2012-05-16
TWI433530B TWI433530B (zh) 2014-04-01

Family

ID=45996271

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099137492A TWI433530B (zh) 2010-11-01 2010-11-01 具有立體影像攝影引導的攝影系統與方法及自動調整方法

Country Status (2)

Country Link
US (1) US20120105599A1 (zh)
TW (1) TWI433530B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104284177A (zh) * 2014-10-28 2015-01-14 天津大学 会聚立体图像视差控制方法
CN104849953A (zh) * 2014-02-19 2015-08-19 大昱光电股份有限公司 立体影像产生方法及立体影像摄像装置
TWI497188B (zh) * 2014-02-14 2015-08-21 Dayu Optoelectronics Co Ltd 立體影像產生方法及立體影像攝像裝置

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100091094A1 (en) * 2008-10-14 2010-04-15 Marek Sekowski Mechanism for Directing a Three-Dimensional Camera System
WO2012096163A1 (ja) * 2011-01-13 2012-07-19 パナソニック株式会社 画像処理装置、画像処理方法、及びそのプログラム
US10133950B2 (en) * 2011-03-04 2018-11-20 Qualcomm Incorporated Dynamic template tracking
US8897502B2 (en) * 2011-04-29 2014-11-25 Aptina Imaging Corporation Calibration for stereoscopic capture system
JP2013046209A (ja) * 2011-08-24 2013-03-04 Sony Corp 画像処理装置、および、画像処理装置の制御方法ならびに当該方法をコンピュータに実行させるためのプログラム
US9413941B2 (en) * 2011-12-20 2016-08-09 Motorola Solutions, Inc. Methods and apparatus to compensate for overshoot of a desired field of vision by a remotely-controlled image capture device
KR101694969B1 (ko) * 2012-10-29 2017-01-10 한국전자통신연구원 카메라 캘리브레이션 방법 및 장치
US20150326847A1 (en) * 2012-11-30 2015-11-12 Thomson Licensing Method and system for capturing a 3d image using single camera
JP6465566B2 (ja) * 2013-08-21 2019-02-06 キヤノン株式会社 撮像装置及び撮像方法
CN103996215A (zh) * 2013-11-05 2014-08-20 深圳市云立方信息科技有限公司 一种实现虚拟视图转立体视图的方法及装置
EP3496387A1 (en) * 2017-12-05 2019-06-12 Koninklijke Philips N.V. Apparatus and method of image capture
CN108600633A (zh) * 2018-05-21 2018-09-28 珠海格力电器股份有限公司 一种拍摄角度确定方法、装置、终端及可读存储介质
CN110008849A (zh) * 2019-03-13 2019-07-12 北京小马智行科技有限公司 信号灯的识别方法、装置、存储介质和处理器
CN110324531B (zh) * 2019-05-24 2021-09-14 创新先进技术有限公司 图像采集引导方法以及装置
CN111340737B (zh) * 2020-03-23 2023-08-18 北京迈格威科技有限公司 图像矫正方法、装置和电子系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6631208B1 (en) * 1998-05-29 2003-10-07 Fuji Photo Film Co., Ltd. Image processing method
US6852974B2 (en) * 2001-03-06 2005-02-08 Topcon Corporation Electron beam device and method for stereoscopic measurements
JP2003244727A (ja) * 2002-02-13 2003-08-29 Pentax Corp ステレオ画像撮像装置
JP4354256B2 (ja) * 2002-12-11 2009-10-28 富士フイルム株式会社 画像出力装置、画像出力プログラム、サーバ装置、および画像出力システム
US20090010507A1 (en) * 2007-07-02 2009-01-08 Zheng Jason Geng System and method for generating a 3d model of anatomical structure using a plurality of 2d images
CN101415114B (zh) * 2007-10-17 2010-08-25 华为终端有限公司 视频编解码方法和装置以及视频编解码器
JP5491073B2 (ja) * 2009-05-22 2014-05-14 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US20110013034A1 (en) * 2009-07-15 2011-01-20 Mediatek Inc. Method for operating digital camera and digital camera using the same
US8897541B2 (en) * 2009-09-14 2014-11-25 Trimble Navigation Limited Accurate digitization of a georeferenced image

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI497188B (zh) * 2014-02-14 2015-08-21 Dayu Optoelectronics Co Ltd 立體影像產生方法及立體影像攝像裝置
CN104849953A (zh) * 2014-02-19 2015-08-19 大昱光电股份有限公司 立体影像产生方法及立体影像摄像装置
CN104284177A (zh) * 2014-10-28 2015-01-14 天津大学 会聚立体图像视差控制方法

Also Published As

Publication number Publication date
TWI433530B (zh) 2014-04-01
US20120105599A1 (en) 2012-05-03

Similar Documents

Publication Publication Date Title
TW201220817A (en) Camera system and image-shooting method with guide for taking stereo photo and method for automatically adjusting stereo photo
EP2328125B1 (en) Image splicing method and device
CN107666606B (zh) 双目全景图像获取方法及装置
TWI544448B (zh) 影像處理方法以及影像處理裝置
JP5127787B2 (ja) 複眼撮影装置及びその制御方法
JP5814692B2 (ja) 撮像装置及びその制御方法、プログラム
JP5467993B2 (ja) 画像処理装置、複眼デジタルカメラ、及びプログラム
JP7584901B2 (ja) 電子機器およびその制御方法
CN109922255A (zh) 用于生成实时深度图的双相机系统
WO2015192547A1 (zh) 一种基于移动终端的三维照片拍摄方法及移动终端
WO2022100668A1 (zh) 温度测量方法、装置、系统、存储介质及程序产品
CN102959942B (zh) 立体观看用图像拍摄装置及其控制方法
US8896670B2 (en) Image processing device, image processing method, and program
CN104853080B (zh) 图像处理装置
JP2016504828A (ja) 単一のカメラを用いて３ｄ画像を取り込む方法およびシステム
CN108282650B (zh) 一种裸眼立体显示方法、装置、系统及存储介质
JPH09305796A (ja) 画像情報処理装置
JP5555046B2 (ja) 画像入力装置、画像入力方法及び画像入力プログラム
JP6257260B2 (ja) 撮像装置及びその制御方法
CN103238340B (zh) 摄影装置及方法
KR101275127B1 (ko) 초점 가변 액체 렌즈를 이용한 3차원 이미지 촬영장치 및 방법
TW201531744A (zh) 影像處理裝置
CN102478756B (zh) 用来拍摄立体影片的方法与装置
TW201413368A (zh) 依據物距值及兩眼間距值對焦之立體取像裝置及其方法、程式產品、紀錄媒體與取像對位方法
CN102447829A (zh) 拍摄参数设置方法及系统