TWI542941B - 用於照相機中之分佈式影像處理以使在拼接影像中之假影最小化之方法及設備 - Google Patents
用於照相機中之分佈式影像處理以使在拼接影像中之假影最小化之方法及設備 Download PDFInfo
- Publication number
- TWI542941B TWI542941B TW103121093A TW103121093A TWI542941B TW I542941 B TWI542941 B TW I542941B TW 103121093 A TW103121093 A TW 103121093A TW 103121093 A TW103121093 A TW 103121093A TW I542941 B TWI542941 B TW I542941B
- Authority
- TW
- Taiwan
- Prior art keywords
- image processing
- camera
- image
- processing parameters
- parameters
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims description 89
- 238000000034 method Methods 0.000 title claims description 39
- 239000002131 composite material Substances 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 15
- 238000012937 correction Methods 0.000 claims description 12
- 239000011159 matrix material Substances 0.000 claims description 12
- 230000015572 biosynthetic process Effects 0.000 description 6
- 238000003786 synthesis reaction Methods 0.000 description 6
- 238000012935 Averaging Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Television Image Signal Generators (AREA)
Description
本發明是有關於一種用於照相機中之分佈式影像處理以使在拼接影像中之假影最小化之方法及設備。
多數的電子照相機包含適合於決定適當的白平衡或色彩調整、參數及適合於執行一影像之一自動白平衡之韌體。
在某些習知系統中,用於擷取影像(打算為拼接成全景或360度環繞影像,或與常使用於電影院中之格式相容之寬廣格式影像所用)之一個群組之照相機之每台照相機,係已被允許個別地決定其色彩平衡及/或曝光控制參數。一旦每台照相機已確認這些參數,它們就會在這些影像被傳送至主機系統之前,於那台照相機被應用至由那台照相機所拍攝之影像。當這個發生時,在由每台照相機所決定之色彩平衡及/或曝光控制參數之間的差異,會導致拼接影像中之看得見的假影-特別於個別的照相機影像被拼接且大型均勻色彩的物體或背景相交那些邊界之邊界。舉例而言,如果藍天背景係由每台照相機利用不同的色彩平衡及/或曝光參數被處理,則一條具有不同顏色深淺或亮度之天空之拼接線可變成看得見。
如果為待被拼接之每台照相機影像在主機上執行色彩、亮度及對比之額外修正,則可能需要主機上之實質上的處理時間。
一種用於協調調整一由一第一照相機所擷取之第一影像及一由一第二照相機所擷取之第二影像之方法包含:從第一影像決定一第一組統計影像處理參數及從第二影像決定一第二組統計影像處理參數;將第一組統計影像處理參數傳送至一主體(master),主體並非第一照相機;將至少第一與第二組統計處理參數合併成一組合或複合組之參數;從組合組之統計決定一組調整參
數;將此組之合成參數從主體傳送至第一照相機;及使用第一照相機之一處理器以將此組之合成參數應用至第一影像以及第二照相機之一處理器,以將此組之合成參數應用至第二影像。
一種設備具有至少兩個照相機之配置以用於實施上述之方法。
在另一實施例中,一種用於產生拼接影像之設備包含一第一及一第二照相機,每台照相機具有:一處理器;一記憶體系統,耦接至處理器,記憶體系統包含一韌體記憶體;一通訊次系統,耦接至處理器;以及一協調及影像調整韌體,位在韌體記憶體中。上述之協調韌體具有機器可讀取的指令以用於將從一由照相機所擷取之影像導出的影像處理參數傳送至一主體,以及接收供影像之調整用之一組參數。影像調整韌體具有機器可讀取的指令以用於執行色彩平衡調整、對比調整及亮度調整之至少一者。
A‧‧‧最小亮度點/最小像素值
B‧‧‧全影像最大像素值
100‧‧‧照相機/照相機系統
102‧‧‧透鏡系統
104‧‧‧影像感測器
106‧‧‧曝光控制電子設備
108‧‧‧機電膜片
110‧‧‧處理器
112‧‧‧韌體記憶體
114‧‧‧記憶體/記憶體系統
116‧‧‧RAM記憶體
118‧‧‧非揮發性記憶體
120‧‧‧顯示器
122‧‧‧控制裝置
124‧‧‧通訊次系統
148‧‧‧多照相機系統
150、152、154‧‧‧照相機
156‧‧‧主機系統
158‧‧‧合成或馬賽克影像
170‧‧‧協調韌體
172‧‧‧協調碼
176‧‧‧色彩及對比調整韌體
200‧‧‧方法
202至222‧‧‧步驟
300‧‧‧直方圖
302‧‧‧實線
304‧‧‧虛線
306‧‧‧最大亮度點
308‧‧‧最大亮度點/數值
310‧‧‧最小亮度點
312‧‧‧低強度像素/最小亮度點
圖1係為適合於可拼接影像之協調擷取之電子照相機之方塊圖。
圖2係為擷取適合用於拼接之影像之多照相機系統之方塊圖。
圖3係為用以分佈處理給個別的照相機及用以協調適合拼接之擷取的影像之自動白平衡及對比和亮度調整之方法之流程圖。
圖4係顯示於不同照相機中之兩個擷取的影像之直方圖。
一種照相機100(圖1)包含一透鏡系統102,其將任何取像拍攝物之一影像聚焦在一影像感測器104上,影像感測器104係被設計成用於擷取拍攝物之一電子影像。在許多照相機中,影像感測器104及/或透鏡系統102係設有一曝光控制設備,其大致包含曝光控制電子設備106,且可包含可調式電子(adjustable electronic)及機械式(mechanical)快門(shutters)之一者或兩者兼具,且可進一步包含一種用以調整由感測器所接收之光的機電膜片(electromechanical diagram)108。每台照相機通常亦具有至少一處理器110以用於指引其操作並在一耦接至處理器110之記憶體系統114中的一韌體記憶體112之韌體的控制之下執行影像處理。在許多照相機中之記憶體系統114亦包含一隨機儲存記憶體(RAM memory)116,及可移除的及/或固定的非揮發性記憶體118,隨機儲存記憶體116用於儲存暫時資訊,例如未壓縮的及局部壓縮的影
像、原始照相機影像及在色彩、亮度及對比修正期間所產生之中間影像,而非揮發性記憶體118(FLASH或可消除程式化唯讀(EPROM)記憶體)用於儲存壓縮影像。照相機亦常(但不一定)具有一顯示器120,其可使用作為一取景器以用於顯示影像並用以提供選單功能並伴隨控制裝置122之一個或多個按鈕及開關以供與一使用者互動。照相機亦常具有耦接至它們的處理器110之通訊次系統124(例如一介面),用以提供影像給一主機處理器或用以連接至一印表機以供列印影像。照相機100之某些或所有組件可以整合在一單一"SOC"照相機系統晶片上且包含感測器104、具有電子快門之曝光控制電子設備106、處理器110、通訊次系統124以及記憶體系統114之多個部分。
在各種實施例中,通訊次系統124係為一USB介面,在其他實施例中係為一有線網路介面,例如10/100 BASE-T乙太網路,在其他實施例係為一種與一通訊協定(例如習知技藝已知的那些協定,包含藍芽,802.11G或802.11N)相容之數位無線收發器(digital wireless transceiver),而在其他實施例中係為一紅外線光學收發器(infrared optical transceiver)。
多數照相機在韌體記憶體112中包含韌體,用於決定一最佳曝光,並據此用以使用曝光控制電子設備106以調整曝光一包含有效的快門速度(effective shutter speed)。
當期望一場景之寬闊的最終影像(例如全景、360度環繞影像或與常使用於電影院中之寬廣格式相容之影像)時,一種具有至少一第一與第二或更多較窄格式照相機150、152、154之系統148(圖2)可用於從不同角度拍攝場景(如圖1所示),以使由每對之照相機150、152及152、154所擷取之影像重疊。如從每台照相機150、152、154看到的場景之影像,接著藉由使用每台照相機之通訊次系統124而被讀取至一具拼接常式之主機處理器156,並被"拼接"以做成一結合由每一台照相機所取像之場景之部分之合成或馬賽克影像158來提供一場景之寬闊的最終影像。
圖3顯示一種適合用於拼接之擷取的影像之協調自動白平衡及對比和亮度調整之分散式處理的方法200。方法200從建立在兩台以上的照相機100與在某些實施例中的一主機(host)之間的通訊開始(202)。這些通訊係由一設置在每台照相機韌體記憶體112中之協調韌體170及一在主機中之協調韌體之機器可讀取的指令所控制。照相機之間的通訊係藉由使用每台照相機之通
訊次系統124且一主機是否顯示上述主機之相容的通訊介面(如果出現一主機的話)而實現。若主機顯示,則此主機被決定為一主體。於一實施例中,若主機在影像處理期間不顯示,例如在影像被儲存於照相機中以供後來下載至一主機中,所有照相機中的一特定照相機係被指定為主體(master)。
一旦建立通訊,照相機及主機(若主機顯示)之時脈就會被同步化(204),俾能使影像可在每台照相機中同時被擷取。
一影像接著被每台照相機所擷取(206),且存在照相機中之一局部組(local set)之統計係由照相機中之每個影像所決定(208)。在所決定之統計之間係為一強度之直方圖,例如可有用於亮度及對比之自動調整以最佳化儲存影像中的動態範圍。又所決定的係為適合使用在自動白平衡之統計,譬如在一自動白平衡至一畫面的平均灰度之系統中的統計,這可包含所有紅色通道值之平均值及總和、所有藍色通道值之平均值及總和、以及所有綠色通道值之平均值及總和。在一特定實施例中,此統計包含所有紅色通道值之直方圖、所有藍色通道值之單獨直方圖以及所有綠色通道值之直方圖。
每台照相機接著使用這些統計,以決定一組局部組(set of local)參數以供影像處理,包含亮度及對比之自動調整以最佳化儲存影像中的動態範圍(209),而在一實施例中係用於白平衡。在一特定實施例中,用於亮度及對比之調整的參數包含一用於每個顏色通道之偏移及比例因子,而每個顏色通道係從那顏色通道之像素強度的直方圖所決定,偏移及比例因子藉由應用下述公式可被應用至像素強度以最佳化數位影像動態範圍:
強度(最佳化)=數值(像素)*比例因子-偏移。(方程式1)。
在一替代實施例中,上述的偏移及比例因子係藉由應用下述公式被應用至像素強度,以最佳化數位影像動態範圍。
強度(最佳化)=(數值[值](像素)-偏移)*比例因子。(方程式2)
在一實施例中,用於每個通道之比例因子及偏移係被調整以使比例因子及偏移之應用亦將執行一白平衡。
影像或每個影像之每個色彩平面之比例因子及偏移,係被提供於調整影像或色彩影像平面,以允許影像之重建及顯示。
在一特定實施例中,每台照相機藉由統計地分析所有紅色、綠色及藍色通道值之平均值及總和來決定一色溫。這個色溫係可用以作為一自動白平衡參數以供影像處理。
在另一個特定實施例中,在每台照相機中產生一個3 x 3色彩校正矩陣(color correction matrix),當上述矩陣之交叉相乘係藉由已決定用於每個像素之3個值向量(紅色、綠色、藍色)時,上述3 x 3矩陣所具有之數個元素係被決定而造成一白平衡影像。在一特定實施例中,上述之3 x 3矩陣係為一對角矩陣,其具有用於紅色、綠色及藍色通道之簡單的縮放值作為項目(terms);在其他實施例中,矩陣具有額外的項目以允許校正照相機之彩色濾光片的缺陷。
照相機接著決定其是否係處於一獨立或一多照相機合作模式(210)。如果沒有其他照相機或主機與照相機通訊,則獨立模式係被照相機所使用,而當存在有用以擷取一場景之部分以供拼接之至少一另一台照相機或一與照相機通訊之主機時,則合作模式係被使用。
在合作模式中,用於影像處理之每個參數之局部組係接著在協調韌體170之控制之下操作,從每台照相機被傳輸至主體照相機或至主機(如果出現一主機的話)(211)。在決定一色溫之實施例中,上述之色溫係在參數之中被傳輸至主體或主機。同樣地,在決定一個3 x 3色彩校正矩陣之實施例中,色彩校正矩陣係在參數之中被傳輸至主體或主機。
分別在協調韌體170或協調碼172之控制之下操作的主體或主機,接著決定是否其中的多照相機系統148(圖2)是在一慣用的照相機模式(dominant-camera mode)下,或在一全影像模式下操作(212)。如果此系統是在慣用的照相機模式下,則主體或主機藉由一特定慣用的照相機選擇那些送給它做影像處理之參數,以作為已決定之參數組以用於影像處理(213)。在一特定實施例中,慣用的照相機係為一種3照相機全景多照相機系統148之中心照相機150(圖2)。
如果多照相機系統148係在全影像模式下(212),則主體或主機並未處理來自每台照相機之組之統計,而是處理局部組之參數以供影像處理,用以決定合成組之參數以供用於調整影像使用之影像處理(214)。在各種實施例中,合成參數包含場景寬廣曝光調整參數、對比&亮度或直方圖延伸參數、以及自動白平衡參數之一個或多個。於系統中之每台照相機決定一色溫,
而合成參數包含一由平均從照相機所接收之色溫所決定之平均色溫。在系統中之每台照相機決定一個3 x 3色彩校正矩陣,而上述之合成參數包含一合成的色彩校正矩陣。在一特定實施例中,合成的色彩校正矩陣之每個項目係由平均從照相機所接收之每個色彩校正矩陣中的對應項目而被決定。
已決定之參數組係接著被傳輸(216)至正觀看場景之多照相機系統148之所有照相機150、152、154,而在慣用的照相機模式下,上述已決定之參數組係選自於由照相機至主體照相機或主機(213)所提供之參數,而在全影像模式下,已決定之參數組係為已決定之合成參數(214)。每台照相機之協調韌體170包含指令以用於接收這些由主體照相機或主機所傳輸之調整參數以作為接收參數。
如果照相機係在獨立模式下(210),則在色彩及對比調整韌體176之控制之下操作之照相機之處理器110應用(218)已決定的局部組之參數(209)以調整影像。在合作模式下,在色彩及對比調整韌體176之控制之下操作之照相機之處理器110應用上述所接收到的參數以調整由那台照相機所擷取之影像。在執行調整韌體中176,處理器調整用於曝光,對比和亮度以及白平衡之影像,以在RAM記憶體116中形成一預處理影像。在數個實施例中,預處理之影像亦可被壓縮。
在擷取影像期間時主機並未連接至照相機之實施例中,預處理影像係被儲存(219)在記憶體114中,直到主機係連接至照相機且影像可被傳輸至主機的狀態為止。在特別實施例中,預處理影像係被儲存(219)在非揮發性記憶體118中。
來自每台照相機之預處理影像係接著被傳輸(220)至主機,然後執行拼接(222),包含將個別的照相機影像合併至一拼接影像。
當可獲得比在一光感測器原始所擷取來得更少的位元來儲存或壓縮一影像中之像素之每個強度值時,理想上是可偏移並縮放(或延伸)那些強度值,俾能使可得到的位元之全動態範圍避免解析度之不必要的損失。
在一實施例中,在每台照相機中所產生之統計包含每個像素之亮度位準之一直方圖。在一特定實施例中,在每台照相機中所產生並傳輸至主體之參數係從一紅色、綠色及藍色顏色通道之亮度之單獨直方圖導出。一個顏色通道之一例子直方圖300係顯示於圖4中,其中實線302表示在一共同場景
(common scene)之一同時影像對之一第一照相機影像中的那個顏色通道之一直方圖,而虛線304表示同時影像對之一第二照相機影像中的那個顏色通道之一直方圖。第一影像之最大亮度點306可不同於第二影像之最大亮度點308;同樣地,第一影像之最小亮度點310可不同於第二影像之最小亮度點312。
在一特定實施例中,為了使用在一用於儲存影像之記憶體中可得到的整個動態範圍,主體藉由檢驗那個場景之所有局部影像處理參數,來決定一整個場景之最小亮度點A。舉例而言(非用以限制本發明),在一實施例中,依據上述方程式2,於此每個局部組之參數包含一比例因子及偏移以用於處理,且於此強度(最佳化)對一最低強度像素312(圖4)而言是零,最低強度像素312之數值(像素)係為偏移(Offset)。同樣地,由那台照相機中之一最大像素之一數值308所決定之一局部組之參數提供一全範圍儲存的強度(強度(全範圍)),最大的像素值可被決定為:
強度(全範圍)/比例因子+偏移=數值(最大像素)。(方程式3)
全影像最大像素值B及最小像素值A(圖4)係利用比較從每台照相機送出至主體或主機之局部參數取出之最大及最小像素值之數值所決定,且全影像比例因子及偏移由全影像最大像素值B及最小像素值A所決定(215)。
一旦全影像最大像素值B及最小像素值A被決定,就可決定用於處理如被前述系統之所有照相機所觀看的整個場景之一組合或合成組之影像處理參數,致使可得到的儲存之最大的動態範圍可被使用。在一實施例中,這係藉由決定一等同於A之合成偏移與一等同於一全範圍數值除以B及A之差異的比例因子而完成。
在其他一實施例中,利用影像特定之用途係最終以一感知編碼演算法壓縮影像,且對數尺度參數(而非如在此之前所討論之非線性尺度參數)係被決定。
在典型的實施例中,合成影像處理參數係從利用此系統之照相機所決定之每組之局部影像處理參數衍生,且合成參數係與局部參數不同,而局部參數是相同的。
在一特定實施例中,組合或合成影像處理參數之一個或多個參數,係藉由平均來自此系統之一照相機所決定之每組參數之對應的參數而導
出。舉例而言(非用以限制),於本實施例中,一紅色色彩平衡調整參數係由平均來自此系統之每台照相機之紅色色彩平衡調整參數所決定。這個平均過程確保合成影像處理參數係從多組之局部影像處理參數導出,且除非局部參數是相同的,否則合成影像處理參數相異於局部參數。
在上述影像係被傳輸至主機以用於最後拼接之前,這些已決定之尺度參數係在調整參數中從主體被傳輸至每台照相機,且被每台照相機所使用以調整上述之影像。
特徵的組合
一種方法A,用於協調調整由至少一第一及一第二照相機所擷取之影像,該些影像適合在一主機上拼接,該方法包含:以該第一照相機擷取一第一影像,並以該第二照相機擷取一第二影像;從該第一影像決定一第一組影像處理參數;從該第二影像決定一第二組影像處理參數;決定一主體,如果該第一照相機能與該主機通訊,則該主體包含該主機,而如果該第一照相機無法與該主機通訊,則該主體包含該第二照相機;將該第一組影像處理參數傳送至該主體;從至少該第一與第二組之影像處理參數決定一組合成影像處理參數,該合成影像處理參數係從該第一與第二組之影像處理參數兩者導出,且該合成影像處理與該第一與第二組之影像處理參數兩者不同,除非該第一與第二組是相同的;將該組之組合影像處理參數傳送至該第一照相機;使用該第一照相機之一處理器,以將該合成影像處理參數應用至該第一影像,以形成一第一預處理影像;及使用該第二照相機之一處理器,以將該合成影像處理參數應用至該第二影像,以形成一第二預處理影像。
一種方法AA,包括方法A且更包含:將該第一與第二預處理影像傳送至該主機;以及在該主機上執行該第一與第二預處理影像之拼接,以形成一拼接影像。
一種方法AB,包括方法A或AA,其中該第一組參數係從統計導出,該統計包含從該第一影像導出之至少一直方圖。
一種方法AC,包括方法AB,其中該第一組參數包含數個從該至少一直方圖決定之動態範圍尺度參數。
一種方法AD,包括方法A、AA、AB或AC,其中該些參數包含數個色彩平衡調整參數。
一種方法ADA,包括方法AD,其中該些參數包含一色彩校正矩陣。
一種方法ADB,包括方法AD,其中該些參數包含一色溫。
一種設備B,用以產生拼接影像,包含:一第一與一第二照相機,每台照相機更包含:一處理器;一記憶體系統,耦接至該處理器,該記憶體系統包含一韌體記憶體;一通訊次系統,耦接至該處理器;一協調韌體及一影像調整韌體,位在該韌體記憶體中,該協調韌體包含數個機器可讀取的指令,用於將從一由該照相機所擷取之影像導出的一第一組影像處理參數傳送至一主體,及接收來自該主體之一組影像處理參數,每台照相機的影像調整韌體包含機器可讀取的指令,用於使用該組影像處理參數以執行色彩平衡調整、對比調整及亮度調整之至少一者。
一種設備BA,包括設備B,其中從影像導出之該影像處理參數係從統計導出,該統計包含從該影像導出之一直方圖。
一種設備BB,包括設備B或BA,其中該影像處理參數包含色彩平衡調整參數。
一種設備BC,包括設備B、BA或BB,其中該第一與第二照相機之每一個之該協調韌體更包含數個機器可讀取的指令,用於決定該第一與第二照相機之一主體照相機,以及在該已決定的主體照相機中,接收來自另一個照相機而非該主體照相機之一第二組影像處理參數,從該第一組影像處理參數與該第二組影像處理參數決定一複合組之參數,並將該些合成參數傳送至另一個照相機。
一種設備BD,包括設備B、BA、BB或BC,其中該協調韌體更包含數個機器可讀取的指令,被設計成用於決定該系統是否在一慣用的照相機模式,而如果該系統係在一慣用的照相機模式,則提供由該慣用的照相機所提供之一組參數給該系統之其他照相機,以代替該些合成參數。
一種設備BE,包括設備B、BA、BB、BC或BD,其中該些合成參數包含數個色彩平衡調整參數。
一種設備BEA,包括設備BE,其中該些合成參數包含一色彩校正矩陣。
一種設備BEB,包括設備BE,其中該些合成參數包含一色溫。
一種設備BF,包括設備B、BA、BB、BC、BD或BE,更包含一具有主機協調韌體之主機,而該主機協調韌體包含數個機器可讀取的指令,用於:接收來自該第一照相機之該第一組影像處理參數與來自該第二照相機之一第二組影像處理參數,從該第一與第二組之影像處理參數決定一複合組之影像處理參數,並將關於該影像之調整之該些參數傳送至該第一與第二照相機。
在不背離於此之揭露書之範疇之下,可在上述方法及系統中做出某些改變,意圖將包含於上述說明中或顯示於附圖之所有物質解釋成例示的且非在限制意義中。熟習本項技藝者應明白如於此所說明的影像縮放及色彩平衡,可能利用與所顯示的相當的方法被建構、連接、配置及/或結合。
200‧‧‧方法
202至222‧‧‧步驟
Claims (19)
- 一種用於協調調整由一第一及一第二照相機所擷取之影像之方法,該些影像適合在一主機(host)上拼接,該方法包含:以該第一照相機擷取一第一影像,並以該第二照相機擷取一第二影像;從該第一影像決定一第一組影像處理參數;從該第二影像決定一第二組影像處理參數;決定一主體(master),若該第一照相機能與該主機通訊,則該主體包含該主機,而若該第一照相機無法與該主機通訊,則該主體包含該第二照相機;將該第一組影像處理參數傳送至該主體;從至少該第一與第二組之影像處理參數決定一組合成影像處理參數,該合成影像處理參數係從該第一與第二組之影像處理參數兩者導出,且該合成影像處理參數與該第一與第二組之影像處理參數兩者不同,除非該第一與第二組是相同的;將該組之合成影像處理參數傳送至該第一照相機;使用該第一照相機之一處理器,以將該合成影像處理參數應用至該第一影像,以形成一第一預處理影像;及使用該第二照相機之一處理器,以將該合成影像處理參數應用至該第二影像,以形成一第二預處理影像。
- 如申請專利範圍第1項所述之方法,更包含:將該第一與第二預處理影像傳送至該主機;以及在該主機上執行該第一與第二預處理影像之拼接,以形成一拼接影像。
- 如申請專利範圍第1項所述之方法,其中該第一組影像處理參數係從統計導出,該統計包含從該第一影像導出之至少一直方圖。
- 如申請專利範圍第3項所述之方法,其中該第一組影像處理參數包含數個從 該至少一直方圖決定之動態範圍尺度參數。
- 如申請專利範圍第4項所述之方法,其中該些合成影像處理參數包含數個色彩平衡調整參數。
- 如申請專利範圍第5項所述之方法,其中該些合成影像處理參數包含一色彩校正矩陣。
- 如申請專利範圍第5項所述之方法,其中該些合成影像處理參數包含一色溫。
- 如申請專利範圍第5項所述之方法,更包含:將該第一與第二預處理影像傳送至該主機;以及在該主機上執行該第一與第二預處理影像之拼接,以形成一拼接影像。
- 如申請專利範圍第1項所述之方法,其中該些合成影像處理參數包含數個色彩平衡調整參數。
- 一種產生拼接影像之設備,包含:一第一與一第二照相機,每台照相機更包含:一處理器;一記憶體系統,耦接至該處理器,該記憶體系統包含一韌體記憶體;一通訊次系統,耦接至該處理器;一協調韌體,位在該韌體記憶體中,該協調韌體包含數個機器可讀取的指令,用於:將從一由該照相機所擷取之影像導出的一第一組影像處理參數傳送至一主體,及接收來自該主體之一組影像處理參數;及一影像調整韌體,位在該韌體記憶體中,該影像調整韌體包含數個機器可讀取的指令,用於使用該些影像處理參數以執行色彩平衡調整、對比調整及亮度調整之至少一者。
- 如申請專利範圍第10項所述之設備,其中該第一組影像處理參數包含數個從一直方圖導出的參數,該直方圖係從該影像導出。
- 如申請專利範圍第10項所述之設備,其中該些影像處理參數包含數個色彩平衡調整參數。
- 如申請專利範圍第10項所述之設備,其中該第一與第二照相機之每一個之該協調韌體更包含數個機器可讀取的指令,用於:決定該第一與第二照相機之一主體照相機,在該已決定的主體照相機中,接收來自另一個照相機而非該主體照相機之一第二組影像處理參數,從該第一組影像處理參數與該第二組影像處理參數決定一合成組之參數,並將該些合成參數傳送至另一個照相機以作為影像處理參數。
- 如申請專利範圍第13項所述之設備,其中該第一組影像處理參數包含數個從一直方圖導出的參數,該直方圖是從該影像導出。
- 如申請專利範圍第13項所述之設備,其中該合成組之參數、該第一組影像處理參數及該第二組影像處理參數包含數個色彩平衡調整參數。
- 如申請專利範圍第13項所述之設備,其中該協調韌體更包含數個機器可讀取的指令,被設計成用於決定該設備是否在一慣用的照相機模式,而如果該設備係在一慣用的照相機模式,則提供由該慣用的照相機所提供之一組參數給該系統之其他照相機,以取代該些合成參數。
- 如申請專利範圍第10項所述之設備,更包含一主機,其具有一主機協調韌體,而該主機協調韌體包含數個機器可讀取的指令,用於:接收來自該第一照相機之該第一組影像處理參數與來自該第二照相機之一第二組影像處理參數,從該第一與第二組之影像處理參數決定一合成組之影像處理參數,並將關於該影像之調整之該些合成組之影像處理參數傳送至該第 一與第二照相機。
- 如申請專利範圍第17項所述之設備,其中該第一組影像處理參數包含數個從一直方圖導出的參數,該直方圖是從該影像導出。
- 如申請專利範圍第18項所述之設備,其中該些合成組之影像處理參數包含數個色彩平衡調整參數。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US13/926,678 US9438794B2 (en) | 2013-06-25 | 2013-06-25 | Method and apparatus for distributed image processing in cameras for minimizing artifacts in stitched images |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201518849A TW201518849A (zh) | 2015-05-16 |
| TWI542941B true TWI542941B (zh) | 2016-07-21 |
Family
ID=52110584
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW103121093A TWI542941B (zh) | 2013-06-25 | 2014-06-18 | 用於照相機中之分佈式影像處理以使在拼接影像中之假影最小化之方法及設備 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9438794B2 (zh) |
| CN (1) | CN104253948B (zh) |
| TW (1) | TWI542941B (zh) |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9741117B2 (en) * | 2014-12-22 | 2017-08-22 | Motorola Mobility Llc | Multiple camera apparatus and method for synchronized auto white balance |
| US20160227100A1 (en) * | 2015-01-29 | 2016-08-04 | Qualcomm Incorporated | Dual camera systems and methods for rapid 3a convergence and high dynamic range exposure metering |
| US10536633B2 (en) * | 2015-02-06 | 2020-01-14 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device, imaging system and imaging apparatus including the same, and image processing method |
| US10122980B2 (en) * | 2015-03-02 | 2018-11-06 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium |
| CN109863754B (zh) * | 2016-06-07 | 2021-12-28 | 维斯比特股份有限公司 | 用于直播流化的虚拟现实360度视频相机系统 |
| WO2018045571A1 (zh) * | 2016-09-09 | 2018-03-15 | 深圳市大疆创新科技有限公司 | 图像编码方法及系统 |
| JP7059522B2 (ja) * | 2017-06-09 | 2022-04-26 | ソニーグループ株式会社 | 制御装置、制御方法、プログラム及び撮像システム |
| DE102017218072A1 (de) * | 2017-10-11 | 2019-04-11 | Robert Bosch Gmbh | Verfahren zum Aufnehmen eines Bildes |
| TWI633384B (zh) * | 2017-11-08 | 2018-08-21 | 欣普羅光電股份有限公司 | 動態環景影像參數調整系統及其方法 |
| CN107846532B (zh) * | 2017-12-12 | 2020-05-12 | 天地伟业技术有限公司 | 一种基于最小二乘法的自动色彩校正方法 |
| CN108377345B (zh) * | 2018-04-11 | 2020-04-03 | 浙江大华技术股份有限公司 | 一种曝光参数值确定方法、装置、多目摄像机及存储介质 |
| US10682955B1 (en) | 2018-12-03 | 2020-06-16 | Beijing Voyager Technology Co., Ltd. | Multicamera system for autonomous driving vehicles |
| CN110378961A (zh) * | 2019-09-11 | 2019-10-25 | 图谱未来(南京)人工智能研究院有限公司 | 模型的优化方法、关键点检测方法、装置及存储介质 |
| KR102912492B1 (ko) * | 2019-10-16 | 2026-01-15 | 현대자동차주식회사 | 차량 및 차량의 제어방법 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5323204A (en) * | 1992-11-03 | 1994-06-21 | Eastman Kodak Company | Automatic optimization of photographic exposure parameters for non-standard display sizes and/or different focal length photographing modes through determination and utilization of extra system speed |
| US5633678A (en) * | 1995-12-20 | 1997-05-27 | Eastman Kodak Company | Electronic still camera for capturing and categorizing images |
| US20030133008A1 (en) * | 1999-02-02 | 2003-07-17 | Stanley W. Stephenson | Wearable panoramic imager |
| US7590290B2 (en) * | 2004-07-21 | 2009-09-15 | Canon Kabushiki Kaisha | Fail safe image processing apparatus |
| EP1648181A1 (en) * | 2004-10-12 | 2006-04-19 | Dialog Semiconductor GmbH | A multiple frame grabber |
| US20070046787A1 (en) * | 2005-08-30 | 2007-03-01 | Micron Technology, Inc. | Chrominance filter for white balance statistics |
| US7903871B2 (en) * | 2007-04-05 | 2011-03-08 | Arecont Vision, Llc. | System and method for image processing of multi-sensor network cameras |
| CN101146231A (zh) * | 2007-07-03 | 2008-03-19 | 浙江大学 | 根据多视角视频流生成全景视频的方法 |
| US8339456B2 (en) * | 2008-05-15 | 2012-12-25 | Sri International | Apparatus for intelligent and autonomous video content generation and streaming |
| US8842190B2 (en) * | 2008-08-29 | 2014-09-23 | Adobe Systems Incorporated | Method and apparatus for determining sensor format factors from image metadata |
| US8194993B1 (en) * | 2008-08-29 | 2012-06-05 | Adobe Systems Incorporated | Method and apparatus for matching image metadata to a profile database to determine image processing parameters |
| US8724007B2 (en) * | 2008-08-29 | 2014-05-13 | Adobe Systems Incorporated | Metadata-driven method and apparatus for multi-image processing |
| US8340453B1 (en) * | 2008-08-29 | 2012-12-25 | Adobe Systems Incorporated | Metadata-driven method and apparatus for constraining solution space in image processing techniques |
| CN102342099A (zh) * | 2009-05-29 | 2012-02-01 | (株)荣国电子 | 智能型监控摄像装置及采用该装置的影像监控系统 |
| CN102118558B (zh) | 2009-12-30 | 2012-12-05 | 华晶科技股份有限公司 | 全周影像的摄像参数的调整方法 |
| CN101866482B (zh) * | 2010-06-21 | 2012-02-15 | 清华大学 | 基于摄像设备自标定技术的全景图拼接方法和装置 |
| US9332239B2 (en) * | 2012-05-31 | 2016-05-03 | Apple Inc. | Systems and methods for RGB image processing |
| CN103856727B (zh) * | 2014-03-24 | 2017-01-25 | 北京工业大学 | 一种多路实时视频拼接处理系统 |
-
2013
- 2013-06-25 US US13/926,678 patent/US9438794B2/en active Active
-
2014
- 2014-06-18 TW TW103121093A patent/TWI542941B/zh active
- 2014-06-25 CN CN201410299335.8A patent/CN104253948B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US9438794B2 (en) | 2016-09-06 |
| TW201518849A (zh) | 2015-05-16 |
| CN104253948B (zh) | 2018-02-06 |
| HK1199997A1 (zh) | 2015-07-24 |
| US20140375759A1 (en) | 2014-12-25 |
| CN104253948A (zh) | 2014-12-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI542941B (zh) | 用於照相機中之分佈式影像處理以使在拼接影像中之假影最小化之方法及設備 | |
| CN108353125B (zh) | 彩色滤波阵列缩放器 | |
| US9264689B2 (en) | Systems and methods for color compensation in multi-view video | |
| US8300086B2 (en) | Image processing for supporting a stereoscopic presentation | |
| US6995791B2 (en) | Automatic white balance for digital imaging | |
| AU2008348644B8 (en) | Method and apparatus for multi-spectral imaging | |
| CN107925751A (zh) | 用于多视点降噪和高动态范围的系统和方法 | |
| JP5457845B2 (ja) | 色特性補正装置およびカメラ | |
| CN105323474A (zh) | 摄像设备及其控制方法 | |
| JP6361931B2 (ja) | 画像処理装置及びこれを備えた撮像システムならびに画像処理方法 | |
| CN108881701A (zh) | 拍摄方法、摄像头、终端设备及计算机可读存储介质 | |
| JP6887853B2 (ja) | 撮像装置、その制御方法、プログラム | |
| WO2020261816A1 (ja) | 送信装置、受信装置及び伝送システム | |
| US20130215288A1 (en) | Image capturing apparatus provided with a function of combining a plurality of captured images | |
| US9769391B2 (en) | Imaging device including light modulation element that varies between high and low transmittance for each segment | |
| JP2023136450A (ja) | 画像補正装置、撮像システム、制御方法、並びにプログラム | |
| JP2018186514A (ja) | 画像処理装置及びこれを備えた撮像システムならびに画像処理方法 | |
| CN103385005B (zh) | 立体图像处理装置以及立体图像处理方法 | |
| US9912873B2 (en) | Image pickup apparatus equipped with display section and method of controlling the same | |
| JP7123568B2 (ja) | 画像処理装置、その制御方法及びプログラム | |
| KR20150125246A (ko) | 다시점 카메라에 대한 촬영 설정값을 조절하는 방법 및 다시점 카메라에 대한 촬영 설정값을 조절하는 장치 | |
| JP6492452B2 (ja) | 制御システム、撮像装置、制御方法およびプログラム | |
| JP5952573B2 (ja) | 画像処理装置およびその制御方法 | |
| KR101925370B1 (ko) | 영상 투영 장치에 대한 색 보정 장치 및 방법 | |
| HK1199997B (zh) | 用於照相机中的分布式影像处理以使在缝合影像中的伪影最小化的方法及设备 |