TW201428675A - 影像產生系統與影像產生方法 - Google Patents
影像產生系統與影像產生方法 Download PDFInfo
- Publication number
- TW201428675A TW201428675A TW102100621A TW102100621A TW201428675A TW 201428675 A TW201428675 A TW 201428675A TW 102100621 A TW102100621 A TW 102100621A TW 102100621 A TW102100621 A TW 102100621A TW 201428675 A TW201428675 A TW 201428675A
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- output
- capturing device
- image capturing
- images
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000008054 signal transmission Effects 0.000 claims abstract description 31
- 230000010354 integration Effects 0.000 description 28
- 230000005540 biological transmission Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本發明揭露一種影像產生系統與影像產生方法,用以整合複數個由不同影像擷取裝置所產生的圖像,進而產生輸出圖像。在本發明的影像產生系統與影像產生方法中,該些影像擷取裝置利用分時的概念共用訊號傳輸介面來傳送圖像資料與同步訊號,因此可降低訊號傳輸介面的複雜度。
Description
本發明係關於影像處理,尤指一種整合多個影像擷取裝置所產生之圖像的影像產生系統與影像產生方法。
具有多重影像擷取裝置的影像產生系統可在不同角度、位置、或距離,對相同或不同場景進行影像擷取,提供豐富而完整的影像資訊。這樣的影像產生系統需要後端電路將不同影像擷取裝置所產生的圖像進行整合,產生符合使用者需求的輸出畫面。
在習知技術中,每個影像擷取裝置分別透過各自的訊號傳輸介面,傳送圖像資料以及同步訊號至後端電路,後端電路再根據同步訊號來整合圖像資料,產生輸出畫面。關於這樣的架構請參考第1圖所示的影像產生系統。在影像產生系統100中,後端電路130負責將影像擷取裝置110與120所產生的圖像A與B進行整合,產生輸出畫面。影像擷取裝置110與120同時透過個別的專屬訊號傳輸介面115與125來傳送同步訊號與圖像資料。以訊號傳輸介面115為例,其包含有垂直同步訊號線VSYNC1、水平同步訊號線HSYNC1、畫素時脈訊號線PXCLK1以及畫素資料訊號線PXD1。同樣的,訊號傳輸介面125也具有類似的訊號線配置。
然而,在這樣的訊號傳輸方式中,所需的訊號傳輸介面數量會隨著影像擷取裝置的數量而增加。同樣的,後端電路130的輸入接腳數量也隨著訊號傳輸介面的數量而增加。而且,由於不同影像擷取裝置產生的訊號同時被傳送至後端電路130,故後端電路130需要緩衝記憶體來暫存所接收的圖像資料,並對圖像資料進行重新排列與組合。因此,影像產生系統100的電路複雜度將隨著影像擷取裝置的數量而大幅提升,且後端電路130需要一定運算能力與緩衝記憶體容量。
為了解決習知技術中,影像產生系統的電路複雜度過高的問題,本發明採用匯流排的傳輸架構,分時地共用訊號傳輸介面,並藉由同步訊號來控制影像擷取裝置的訊號輸出時機,使得後端電路可以不需緩衝記憶體的配置。另外,透過事先安排圖像資料的傳輸順序,本發明的整合電路不需對圖像進行重新整合與重組,而是在接收的同時即時輸出,同樣可得到各種型樣的輸出圖像。
本發明之一實施例提供一種影像產生系統,其包含:複數個影像擷取裝置以及一整合電路。該些影像擷取裝置,用產生複數張圖像以及對應與該些圖像之複數個同步訊號。該整合電路耦接於該些影像擷取裝置,並依據該些圖像來產生複數張輸出圖像,以及依據該些同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號。其中該些影像擷取裝置包含一第一影像擷取裝置與一第二影像擷取
裝置;以及當該整合電路正在接收該第一影像擷取裝置所產生之至少一第一圖像之圖像資料時,該整合電路不會同時接收該第二影像擷取裝置所產生之至少一第二圖像之圖像資料。
本發明之另一實施例提供一種影像產生方法,該方法包含:利用複數個影像擷取裝置,產生複數張圖像,以及對應與該些圖像之複數個同步訊號;依據該些圖像來產生複數張輸出圖像;以及依據該些同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號。其中,該些影像擷取裝置包含一第一影像擷取裝置與一第二影像擷取裝置;以及正在接收該第一影像擷取裝置所產生之至少一第一圖像的圖像資料時,不會同時接收該第二影像擷取裝置所產生之至少一第二圖像的圖像資料。
透過以上實施例,本發明有效解決習知技術中影像產生系統的資料傳輸介面過於複雜,以及對後端電路的運算能力與緩衝記憶體容量要求過高的問題。
本發明的影像產生系統與影像產生方法將藉由以下的實施例與圖式來解釋。這些實施例包含有基於本發明廣義概念所為的變化與推廣,然而,這些圖式與實施例所揭露的內容不應當視為本發明的限制。此外,不同圖式中具有相同標號的元件或符號應被視為具有類似的涵義、功能或運作模式。
請參考第2圖,該圖繪示本發明影像產生系統之一實施例的架構示意圖。如圖所示,影像產生系統200包含:複數個影像擷取裝置210_1~210_N,以及整合電路220。影像擷取裝置210_1~210_N用以產生複數張圖像Frame_1i~Frame_Ni以及對應與該些圖像之複數個同步訊號。整合電路220耦接於影像擷取裝置210_1~210_N,並依據影像擷取裝置210_1~210_N所產生之圖像Frame_1i~Frame_Ni來產生複數張輸出圖像Frame_Oi。再者,整合電路220亦依據影像擷取裝置210_1~210_N所產生之同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號。其中,第一影像擷取裝置210_1產生複數張第一圖像Frame_1i,以及第二影像擷取裝置210_2產生複數張第二圖像Frame_2i。當整合電路220正在接收第一圖像Frame_1i中之圖像Frame_11的圖像資料(完整或部分)時,不會同時接收圖像Frame_21的圖像資料。如此一來,整合電路220中並不需設置額外的緩衝記憶體或是增加原有的緩衝記憶體的容量來暫存圖像Frame_1i~Frame_Ni,而是藉由妥善安排每個影像擷取裝置對訊號傳輸介面的使用時序,接收圖像資料與同步訊號來產生輸出圖像Frame_Oi以及相對應的輸出同步訊號。
請參考第3A圖,該圖繪示用於本發明影像產生系統中之一種產生輸出圖像的方式,其中,影像擷取裝置210_1所產生之複數張第一圖像Frame_1i作為輸出圖像Frame_Oi中之奇數張輸出圖像Frame_O1、Frame_O3、Frame_O5等,而影像擷取裝置210_2所產生
之複數張第二圖像Frame_2i則作為輸出圖像Frame_Oi中之偶數張輸出圖像Frame_O2、Frame_O4、Frame_O6等。第3B圖則繪示在第3A圖的輸出圖像產生方式中,影像擷取裝置210_1所產生之同步訊號VSYNC1以及HSYNC1與影像擷取裝置210_2所產生之同步訊號VSYNC2以及HSYNC2間的時序關係。由於整合電路220會在完整接收影像擷取裝置210_1產生的圖像Frame_1i後,才開始接收影像擷取裝置210_2產生的圖像Frame_2i後,故同步訊號VSYNC1以及HSYNC1與同步訊號VSYNC2以及HSYNC2,不會有水平/重直同步脈衝重疊。第3C圖繪示輸出圖像Frame_Oi所對應的輸出同步訊號VSYNCO以及HSYNCO,整合電路220將圖像Frame_1i作為奇數張輸出圖像Frame_O1、Frame_O3、Frame_O5以及將圖像Frame_2i作為偶數張輸出圖像Frame_O2、Frame_O4、Frame_O6,因此整合電路220在輸出垂直同步訊號VSYNCO以及輸出水平同步訊號HSYNCO會以其中的水平/重直同步脈衝長度等於同步訊號VSYNC1以及HSYNC1與同步訊號VSYNC2以及HSYNC2的水平/重直同步脈衝長度為基礎,來產生同步訊號VSYNCO以及同步訊號HSYNCO。另外,在此例中,輸出圖像Frame_Oi、圖像Frame_1i以及圖像Frame_2i三者具有相同的寬高尺寸。
請參考第4A圖,該圖繪示用於本發明影像產生系統中之一種產生輸出圖像的方式。其中,影像擷取裝置210_1所產生之Frame_1i作為輸出圖像Frame_Oi之上半部分,而影像擷取裝置210_2所產生之Frame_2i則作為輸出圖像Frame_Oi之下半部分。第4B圖則繪示
在第4A圖的輸出圖像產生方式中,影像擷取裝置210_1所產生之同步訊號VSYNC1以及HSYNC1與影像擷取裝置210_2所產生同步訊號VSYNC2以及HSYNC2間的時序關係。由於整合電路220會在完整接收影像擷取裝置210_1產生的圖像Frame_1i後,才開始接收影像擷取裝置210_2產生的圖像Frame_2i後,並且在接收圖像Frame_1i的同時將其輸出作為Frame_Oi的上半部分,以及在接收圖像Frame_2i的同時將其輸出作為Frame_Oi的下半部分。故同步訊號VSYNC1以及HSYNC1與同步訊號VSYNC2以及HSYNC2,不會有同步脈衝重疊,但是輸出圖像Frame_Oi的垂直同步訊號VSYNCO的同步脈衝寬度將等於圖像Frame_1i與Frame_2i的垂直同步訊號VSYNC1與VSYNC2的同步脈衝寬度之和。第4C圖繪示輸出圖像Frame_Oi的垂直同步訊號VSYNCO與水平同步訊號HSYNCO。其中,輸出圖像Frame_Oi之水平同步訊號HSYNCO的同步脈衝寬度等於圖像Frame_1i或者是圖像Frame_2i的水平同步訊號的同步脈衝寬度。整合電路220在產生輸出圖像Frame_Oi之上半部分所對應之水平同步訊號HSYNCO係參考圖像Frame_1i之水平同步訊號HSYNC1,以及產生輸出圖像Frame_Oi之下半部分所對應之水平同步訊號HSYNCO係參考圖像Frame_2i之水平同步訊號HSYNC2。再者,整合電路220依據圖像Frame_1i之垂直同步訊號VSYNC1的同步脈衝的起始時間以及圖像Frame_2i之垂直同步訊號VSYNC2的同步脈衝的結束時間來產生輸出圖像Frame_Oi之垂直同步訊號VSYNCO的同步脈衝,以此類推。在此例中,輸出圖像Frame_Oi的高度等於圖像Frame_1i以及圖像Frame_2i的高度和,但三者的寬
度則一致。
請參考第5A圖,該圖繪示用於本發明影像產生系統中之一種產生輸出圖像的方式。其中,影像擷取裝置210_1所產生之圖像Frame_1i用來作為輸出圖像Frame_Oi之左半部分,而影像擷取裝置210_2所產生之Frame_2i則作為輸出圖像Frame_Oi之右半部分,細節如下。整合電路220在接收影像擷取裝置210_1產生的圖像Frame_1i的一條掃描線後,接著接收影像擷取裝置210_2產生的圖像Frame_2i的一條掃描線,依此順序輪替接收。並且,整合電路220在接收圖像Frame_1i之掃描線的同時將其輸出作為Frame_Oi的一條掃描線的左半部分,以及在接收圖像Frame_2i之掃描線的同時將其輸出作為Frame_Oi的一條掃描線的右半部分,並按此方式逐一輸出Frame_Oi的每一掃描線。第5B圖繪示在第5A圖的輸出圖像產生方式中,影像擷取裝置210_1所產生之同步訊號VSYNC1以及HSYNC1與影像擷取裝置210_2所產生同步訊號VSYNC2以及HSYNC2間的時序關係。由於本例中,影像擷取裝置210_1與影像擷取裝置210_2是以掃描線為單位,每次輸出部分的圖像資料至整合電路220,故垂直同步訊號VSYNC1與垂直同步訊號VSYNC2的同步脈衝有部分重疊。第5C圖繪示輸出圖像Frame_Oi的垂直同步訊號VSYNCO與水平同步訊號HSYNCO。其中,輸出圖像Frame_Oi之一掃描線所對應之水平同步脈衝係根據圖像Frame_1i之一掃描線所對應之水平同步脈衝的起始時間點,以及圖像Frame_2i之一掃描線所對應之水平同步脈衝的結束時間點所共同決
定,也就是輸出圖像Frame_Oi的水平同步脈衝的寬度等於圖像Frame_1i的水平同步脈衝寬度加上圖像Frame_2i的水平同步脈衝。另外,輸出圖像Frame_Oi之垂直同步脈衝係根據圖像Frame_11之垂直同步脈衝的起始時間點,以及圖像Frame_21之垂直同步脈衝的結束時間點所決定。在此例中,輸出圖像Frame_Oi的寬度等於圖像Frame_1i以及圖像Frame_2i的寬度和,而三者的高度則一致。
請參考第6A圖,該圖繪示用於本發明影像產生系統中之一種產生輸出圖像的方式。其中,影像擷取裝置210_1所產生之圖像Frame_1i的掃描線用來作為輸出圖像Frame_Oi中之奇數掃描線,而影像擷取裝置210_2所產生之圖像Frame_2i的掃描線則用來作為輸出圖像Frame_Oi中之偶數掃描線,細節如下。整合電路220在接收影像擷取裝置210_1產生的圖像Frame_1i的一條掃描線後,會將其即時輸出作為Frame_Oi的一條掃描線,接著,整合電路220接收影像擷取裝置210_2產生的圖像Frame_2i的一條掃描線,並將其即時輸出作為Frame_Oi的次一條掃描線,依此順序循環,逐一輸出Frame_Oi的每一掃描線。第6B圖繪示在第6A圖的輸出圖像產生方式中,影像擷取裝置210_1所產生之同步訊號VSYNC1以及HSYNC1與影像擷取裝置210_2所產生同步訊號VSYNC2以及HSYNC2間的時序關係。由於本例中,影像擷取裝置210_1與影像擷取裝置210_2是以掃描線為單位,每次輸出部分的圖像資料至整合電路220,故垂直同步訊號VSYNC1與垂直同步訊號VSYNC2的同步脈衝有部分重疊。第6C圖繪示輸出圖像Frame_Oi的垂直同
步訊號VSYNCO與水平同步訊號HSYNCO。其中,輸出圖像Frame_Oi之一掃描線所對應之水平同步脈衝係根據圖像Frame_1i之一掃描線所對應之水平同步脈衝或者是圖像Frame_2i之一掃描線所對應之水平同步脈衝所決定,換言之,三者有相同的寬度,且輸出圖像Frame_Oi之每一奇數掃描線對應之水平同步脈衝基於圖像Frame_1i中之掃描線所對應之水平同步脈衝訊號而產生,而輸出圖像Frame_Oi之每一偶數掃描線對應之水平同步脈衝基於圖像Frame_2i中之掃描線所對應之水平同步脈衝訊號而產生。另外,輸出圖像Frame_Oi之垂直同步訊號VSYNCO的同步脈衝係根據圖像Frame_1i之垂直同步訊號VSYNC1的同步脈衝的起始時間點,以及圖像Frame_2i之垂直同步訊號HSYNC2的同步脈衝的結束時間點所決定。在此例中,輸出圖像Frame_Oi的寬度與圖像Frame_1i以及圖像Frame_2i一致,而輸出圖像Frame_Oi的高度則為圖像Frame_1i的高度以及圖像Frame_2i的高度之和。
請注意,儘管上述說明僅提及如何將兩個影像擷取裝置所產生的圖像進行整合,然此非本發明的限制。熟習技藝者應可將上述所教示的輸出圖像整合方式進一步推廣至多個影像擷取裝置的應用上。舉例來說,在第4A圖所示的範例中,整合電路220可將第一影像擷取裝置210_1所產生的圖像Frame_1i作為輸出圖像Frame_Oi的上半部分,將第二影像擷取裝置210_2所產生的圖像Frame_2i作為輸出圖像Frame_Oi的中間部分,而將第三影像擷取裝置210_3所產生的圖像Frame_3i作為輸出圖像Frame_Oi的下半部分,並且分別根據
圖像Frame_1i、圖像Frame_2i、圖像Frame_3i所對應的同步訊號來產生輸出圖像Frame_Oi所對應的同步訊號。基於以上說明所為之變化以及衍生推廣,均落於本發明之範疇內。另外,不同實施例所示的輸出圖像產生方式也可合併運用,例如:同時採用第4A圖與第5A圖所示的方式,來得到具有九宮格型樣的輸出圖像。
為了能在精簡訊號傳輸介面設計的前提下,產生以上各種的輸出圖像以及對應的同步訊號,本發明提供了多種匯流排的架構以及相關控制方式,進而達到共用訊號傳輸介面以及降低對整合電路性能需求的目的。
首先,請參考第7圖,該圖繪示本發明影像產生系統之一實施匯流排控制架構。如圖所示,影像產生系統300包含有影像擷取裝置310_1與影像擷取裝置310_2、以及整合電路320。影像擷取裝置310_1與影像擷取裝置310_2、以及整合電路320之間具有匯流排330。匯流排330包含有傳送同步訊號的訊號線VSYNC、HSYNC、PXCLK以及傳送畫素資料(亦即,圖像資料)的N位元的訊號線PXD。影像擷取裝置310_1與影像擷取裝置310_2透過匯流排330傳輸同步訊號、畫素資料與畫素時脈等訊號至整合電路320。舉例來說,影像擷取裝置310_1可透過訊號線VSYNC、HSYNC傳送水平與垂直同步訊號,透過訊號線PXCLK傳送用以同步的畫素時脈,以及透過訊號線PXD傳送對應於Frame_1i之畫素資料至整合電路320。於此架構中,影像擷取裝置310_1作為一主控裝置,負責決定
匯流排330的使用權,當影像擷取裝置310_1結束匯流排320的使用時,將傳送一控制訊號S_sync至影像擷取裝置310_2,令影像擷取裝置310_2開始透過匯流排330傳送同步訊號VSYNC2與HSYNC2,以及對應於Frame_2i之畫素時脈與畫素資料至整合電路320。依據影像擷取裝置310_2的操作特性,可預先設計影像擷取裝置310_1的等待時間,該等待時間的長度等於影像擷取裝置310_2利用匯流排330進行一次傳輸所需的時間。當該等待時間結束後,影像擷取裝置310_1可進行次一傳輸。以上架構可適用於第3A~6A圖中任何的輸出圖像產生方式,熟習技藝者應可藉由下面的範例獲得了解,並將其推廣。舉例來說,當此架構應用在第5A圖的範例中,影像擷取裝置310_1在傳送完Frame_1i之一特定掃描線的畫素資料、畫素時脈以及對應的同步訊號後,便發出控制訊號S_sync至影像擷取裝置310_2,令影像擷取裝置310_2開始透過匯流排330傳送Frame_2i之一特定掃描線的畫素資料、畫素時脈以及對應的同步訊號。在預定的等待時間結束後,影像擷取裝置310_1繪開始進行下一條掃描線的畫素資料、畫素時脈以及對應的同步訊號的傳送,反複循環至完整的圖像資料傳輸完畢。若是影像產生系統300包含有超過兩個以上的影像擷取裝置時,可參考第8圖所示的範例。其中,影像產生系統300同樣透過作為主控裝置的影像擷取裝置310_1來發出控制訊號S_sync至影像擷取裝置310_2~310_4,決定匯流排330的使用權。
請參考第9圖,該圖繪示本發明影像產生系統之一實施匯流排控
制架構。如圖所示,本發明影像產生系統400包含有影像擷取裝置410_1與影像擷取裝置410_2、以及整合電路420。在此架構中,影像產生系統400包含有匯流排430_1與430_2,其分別具有傳送同步訊號的訊號線VSYNC、HSYNC、PXCLK以及傳送畫素資料的N位元的訊號線PXD。並且,影像擷取裝置410_2透過匯流排430_2傳送同步訊號、畫素資料與畫素時脈等資料至影像擷取裝置410_1,而影像擷取裝置410_1則透過匯流排430_1傳送同步訊號、畫素資料與畫素時脈等資料至整合電路420。在此架構中,採用菊花鏈(daisy chain)的訊號傳輸設計,因此可避免匯流排共用時可能引發的問題。此外,影像擷取裝置410_1透過控制訊號S_sync來決定影像擷取裝置410_2何時可利用匯流排430_2傳送同步訊號、畫素資料與畫素時脈等資料至影像擷取裝置410_1,這是為了避免當影像擷取裝置410_1在傳送圖像Frame_1i至整合電路420時,影像擷取裝置410_2同時傳送圖像Frame_2i至影像擷取裝置410_1。而當影像擷取裝置410_1接收到影像擷取裝置410_2透過匯流排430_2所傳送的時脈訊號、畫素資料以及畫素時脈後,即時透過匯流排430_1將這些訊號傳送至整合電路420,故影像擷取裝置410_1內部並不需要緩衝記憶體來儲存畫素資料。此架構可進一步衍生至包含有超過兩個以上的影像擷取裝置的影像產生系統,可參考第10圖所示的範例。其中,影像擷取裝置410_1~410_4之間具有匯流排430_1~430_4透過菊花鏈式的訊號傳輸模式來將同步訊號、畫素時脈以及畫素資料傳送至整合電路420,而影像擷取裝置410_1發出控制訊號S_sync至影像擷取裝置410_2~410_4,決定訊號傳送的時
機。同樣的,第3A圖~第6A圖中所示的各種型樣的輸出圖像以及衍生的變化圖像,均可透過上述架構來產生。
首先,請參考第11圖,該圖繪示本發明影像產生系統之一實施匯流排控制架構。如圖所示,影像產生系統500包含有影像擷取裝置510_1與影像擷取裝置510_2、以及整合電路520。影像擷取裝置510_1與影像擷取裝置510_2、以及整合電路520之間具有匯流排530。匯流排530包含有傳送同步訊號的訊號線VSYNC、HSYNC、PXCLK以及傳送畫素資料的N位元的訊號線PXD。影像擷取裝置510_1與影像擷取裝置510_2透過匯流排530傳輸同步訊號、畫素資料與畫素時脈等資料至整合電路520。此架構與上述架構不同之處在於,匯流排530的使用權是由整合電路520來決定,整合電路520透過匯流排330中的訊號線VSYNC來傳送控制訊號至影像擷取裝置510_1與影像擷取裝置510_2,決定哪個影像擷取裝置可以利用匯流排530來傳輸同步訊號(如:HSYNC1、HSYNC2)、畫素資料與畫素時脈等資料至整合電路520,並且整合電路520將逕行產生輸出垂直同步訊號VSYNCO,換言之,整合電路520預先決定好垂直同步的時機,並在發出控制訊號後,依序接收以及輸出圖像Frame_1i與Frame_2i,產生輸出圖像Frame_Oi。此架構的優點在於不用額外的接腳與訊號線來傳送上述的控制訊號S_sync。同樣的,第3A圖~第6A圖中所示的各種型樣的輸出圖像以及衍生的變化圖像,均可透過上述架構來產生。
本發明之另一實施例提供一種影像產生方法,請參考第12圖所示的流程圖。該方法包含:步驟610:利用複數個影像擷取裝置,產生複數張圖像,以及對應與該些圖像之複數個同步訊號;步驟620:依據該些圖像來產生複數張輸出圖像;以及步驟630:依據該些同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號。其中,該些影像擷取裝置包含一第一影像擷取裝置與一第二影像擷取裝置;以及正在接收該第一影像擷取裝置所產生之至少一第一圖像的圖像資料時,不會同時接收該第二影像擷取裝置所產生之至少一第二圖像的圖像資料。
由於以上的諸多實施例與圖式已詳細解釋關於本發明影像產生方法的原理、操作細節,甚至是衍生變化,故在此不對本發明影像產生方法另作贅述。
以上文中所提及之「一實施例」代表針對該實施例所描述之特定特徵、結構或者是特性係包含於本發明之至少一實施方式中。再者,文中不同段落中所出現之「一實施例」並非代表相同的實施例。因此,儘管以上對於不同實施例描述時,分別提及了不同的結構特徵
或是方法性的動作,但應當注意的是,這些不同特徵可透過適當的修改而同時實現於同一特定實施方式中。
綜上所述,本發明的影像產生系統與影像產生方法,藉由共用訊號傳輸介面的技巧以及同步訊號的妥善控制,大幅降低了具備多重影像擷取裝置的視訊系統中的訊號傳輸介面複雜度以及對後端整合電路的性能要求。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100、200、300、400、500‧‧‧影像產生系統
110、120、210_1~210_N、310_1~310_4、410_1~410_4、510_1、510_2‧‧‧影像擷取裝置
115、125‧‧‧資料傳輸介面
130‧‧‧後端電路
220、320、420、520‧‧‧整合電路
330、430_1、430_2、430_3、430_4、530‧‧‧匯流排
第1圖為習知的影像產生系統。
第2圖為本發明影像產生系統之一實施例的架構示意圖。
第3A~3C圖解釋本發明中一種產生輸出圖像與同步訊號的方式。
第4A~4C圖解釋本發明中另一種產生輸出圖像與同步訊號的方式。
第5A~5C圖解釋本發明中又一種產生輸出圖像與同步訊號的方式。
第6A~6C圖解釋本發明中再一種產生輸出圖像與同步訊號的方式。
第7圖為本發明影像產生系統中之訊號傳輸架構的第一實施例。
第8圖為本發明影像產生系統中之訊號傳輸架構的第二實施例。
第9圖為本發明影像產生系統中之訊號傳輸架構的第三實施例。
第10圖為本發明影像產生系統中之訊號傳輸架構的第四實施例。
第11圖為本發明影像產生系統中之訊號傳輸架構的第五實施例。
第12圖為本發明影像產生方法之一實施例的流程圖。
200‧‧‧影像產生系統
210_1~210_N‧‧‧影像擷取裝置
220‧‧‧整合電路
Claims (28)
- 一種影像產生系統,包含:複數個影像擷取裝置,產生複數張圖像以及對應與該些圖像之複數個同步訊號;以及一整合電路,耦接於該些影像擷取裝置,依據該些圖像來產生複數張輸出圖像,以及依據該些同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號;其中該些影像擷取裝置包含一第一影像擷取裝置與一第二影像擷取裝置;以及當該整合電路正在接收該第一影像擷取裝置所產生之至少一第一圖像的圖像資料時,該整合電路不會同時接收該第二影像擷取裝置所產生之至少一第二圖像的圖像資料。
- 如申請專利範圍第1項所述之影像產生系統,其中該些輸出圖像中之一第一輸出圖像係為該第一圖像,以及該些輸出圖像中之一第二輸出圖像係為該第二圖像。
- 如申請專利範圍第2項所述之影像產生系統,其中對應該第一輸出圖像之一輸出同步訊號係基於對應於該第一圖像之一第一同步訊號所產生,以及對應該第二輸出圖像之一輸出同步訊號係基於對應於該第二圖像之一第一同步訊號所產生。
- 如申請專利範圍第1項所述之影像產生系統,其中該些輸出圖像中之一輸出圖像係由該第一圖像以及該第二圖像所組成。
- 如申請專利範圍第4項所述之影像產生系統,其中對應於該輸出圖像的一垂直同步訊號係基於對應於該第一圖像的一垂直同步訊號,以及對應於該第二圖像的的一垂直同步訊號所產生。
- 如申請專利範圍第4項所述之影像產生系統,其中該輸出圖像之一上半部分係由該第一圖像所構成,以及該輸出圖像之一下半部分係由該第二圖像所構成。
- 如申請專利範圍第6項所述之影像產生系統,其中對應於該輸出圖像的複數個水平同步訊號係分別基於對應於該第一圖像的複數個水平同步訊號,以及對應於該第二圖像的複數個水平同步訊號所產生。
- 如申請專利範圍第4項所述之影像產生系統,其中該輸出圖像之一左半部分係由該第一圖像所構成,以及該輸出圖像之一右半部分係由該複數張第二圖像中之一特定圖像所構成。
- 如申請專利範圍第8項所述之影像產生系統,其中對應於該輸出圖像的一水平同步訊號係基於對應於該第一圖像的一水平同步訊號,以及對應於該第二圖像的一水平同步訊號所產生。
- 如申請專利範圍第4項所述之影像產生系統,其中該輸出圖像 中之複數條奇數掃描線係由該第一圖像中之所有掃描線所構成,以及該輸出圖像中之複數條偶數掃瞄線係由該第二圖像中之所有掃描線所構成。
- 如申請專利範圍第10項所述之影像產生系統,其中對應每一奇數掃描線之一水平同步訊號係基於該第一圖像中之一掃描線所對應之一水平同步訊號而產生,以及對應每一偶數掃描線之一水平同步訊號係基於該第二圖像中之一掃描線所對應之一水平同步訊號所產生。
- 如申請專利範圍第1項所述之影像產生系統,另包含:一匯流排,耦接於該些影像擷取裝置與該整合電路之間,用以進行訊號傳輸。
- 如申請專利範圍第12項所述之影像產生系統,其中該第一影像擷取裝置傳送一控制訊號至該第二影像擷取裝置,進而決定該第二影像擷取裝置何時可利用該匯流排進行與該整合電路之間的訊號傳輸。
- 如申請專利範圍第12項所述之影像產生系統,其中該整合電路傳送一控制訊號分別至該第一影像擷取裝置以及該第二影像擷取裝置,進而分別決定該第一影像擷取裝置以及該第二影像擷取裝置何時可利用該匯流排進行與該整合電路之間的訊號傳 輸。
- 如申請專利範圍第1項所述之影像產生系統,另包含:一第一匯流排,耦接於該第一影像擷取裝置與該整合電路之間,用以進行訊號傳輸;以及一第二匯流排,耦接於該第二影像擷取裝置與該第一影像擷取裝置之間,用以於該第一影像擷取裝置與該第二影像擷取裝置之間進行訊號傳輸。
- 如申請專利範圍第15項所述之影像產生系統,其中該第一影像擷取裝置傳送一控制訊號至該第二影像擷取裝置,決定該第二影像擷取裝置何時可透過該第二匯流排進行與該第一影像擷取裝置之間的訊號傳輸;以及該第一影像擷取裝置利用該第一匯流排來傳送由該第二匯流排所接收之訊號至該整合電路。
- 如申請專利範圍第16項所述之影像產生系統,其中該些影像擷取裝置另包含有一第三影像擷取裝置,以及該影像產生系統另包含:一第三匯流排,耦接於該第二影像擷取裝置與該第三影像擷取裝置之間:其中該第一影像擷取裝置傳送一控制訊號至該第三影像擷取裝置,決定該第三影像擷取裝置何時可透過該第三匯流排進行與該第二影像擷取裝置之間的訊號傳輸;以及該第二影像擷取裝 置利用該第二匯流排來傳送由該第三匯流排所接收之訊號至該第一影像擷取裝置利用。
- 一種影像產生方法,包含:利用複數個影像擷取裝置,產生複數張圖像以及對應與該些圖像之複數個同步訊號;接收該些圖像並依據該些圖像來產生複數張輸出圖像;以及依據該些同步訊號來產生對應於該些輸出圖像的複數個輸出同步訊號;其中該些影像擷取裝置包含一第一影像擷取裝置與一第二影像擷取裝置;以及正在接收該第一影像擷取裝置所產生之至少一第一圖像的圖像資料時,不會同時接收該第二影像擷取裝置所產生之至少一第二圖像的圖像資料。
- 如申請專利範圍第18項所述之影像產生方法,其中依據該些圖像來產生該些輸出圖像的步驟包含;將該第一圖像作為該些輸出圖像中之一第一輸出圖像;以及將該第二圖像作為該些輸出圖像中之一第二輸出圖像。
- 如申請專利範圍第19項所述之影像產生方法,其中依據該些同步訊號來產生對應於該些輸出圖像的該些輸出同步訊號的步驟包含:依據對應於該第一圖像之一第一同步訊號產生對應該第一輸出 圖像之一輸出同步訊號;以及依據對應於該第二圖像之一第二同步訊號產生對應該第二輸出圖像之一輸出同步訊號。
- 如申請專利範圍第18項所述之影像產生方法,其中依據該些圖像來產生該些輸出圖像的步驟包含:依據該第一圖像以及該第二圖像來組成該些輸出圖像中之一輸出圖像。
- 如申請專利範圍第21項所述之影像產生方法,其中依據該些同步訊號來產生對應於該些輸出圖像的該些輸出同步訊號的步驟包含:依據對應於該第一圖像的一垂直同步訊號,以及對應於該第二圖像的一垂直同步訊號來產生對應於該輸出圖像的一垂直同步訊號。
- 如申請專利範圍第21項所述之影像產生方法,其中依據該第一圖像以及該第二圖像來組成該些輸出圖像中之該輸出圖像的步驟包含:利用該第一圖像構成該輸出圖像之一上半部分,以及利用該第二圖像構成該輸出圖像之一下半部分。
- 如申請專利範圍第23項所述之影像產生方法,其中依據該些同 步訊號來產生對應於該些輸出圖像的該些輸出同步訊號的步驟包含:分別依據對應於該第一圖像的複數個水平同步訊號,以及對應於該第二圖像的複數個水平同步訊號,產生對應於該輸出圖像的複數個水平同步訊號。
- 如申請專利範圍第21項所述之影像產生方法,其中依據該第一圖像以及該第二圖像來組成該些輸出圖像中之該輸出圖像的步驟包含:利用該第一圖像構成該輸出圖像之一左半部分,以及利用該第二圖像構成該輸出圖像之一右半部分。
- 如申請專利範圍第25項所述之影像產生方法,其中依據該些同步訊號來產生對應於該些輸出圖像的該些輸出同步訊號的步驟包含:依據對應於該第一圖像的一水平同步訊號,以及對應於該第二圖像的一水平同步訊號,產生對應於該輸出圖像的一水平同步訊號。
- 如申請專利範圍第21項所述之影像產生方法,其中依據該第一圖像以及該第二圖像來組成該些輸出圖像中之該輸出圖像的步驟包含:利用該第一圖像中之所有掃描線構成該輸出圖像中之複數條奇 數掃描線;以及利用該第二圖像中之所有掃描線構成該輸出圖像中之複數條偶數掃描線;。
- 如申請專利範圍第27項所述之影像產生方法,其中依據該些同步訊號來產生對應於該些輸出圖像的該些輸出同步訊號的步驟包含:依據該第一圖像中之每一掃描線所對應之一水平同步訊號產生對應奇數掃描線之一水平同步訊號,以及依據該第二圖像中之每一掃描線所對應之一水平同步訊號產生對應偶數掃描線之一水平同步訊號。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW102100621A TW201428675A (zh) | 2013-01-08 | 2013-01-08 | 影像產生系統與影像產生方法 |
| US13/925,840 US9210449B2 (en) | 2013-01-08 | 2013-06-25 | Video generating system with multiple image sensors and related method thereof |
| US14/703,869 US9456147B2 (en) | 2013-01-08 | 2015-05-04 | Video generating system with multiple image sensors and related method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW102100621A TW201428675A (zh) | 2013-01-08 | 2013-01-08 | 影像產生系統與影像產生方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| TW201428675A true TW201428675A (zh) | 2014-07-16 |
Family
ID=51060684
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW102100621A TW201428675A (zh) | 2013-01-08 | 2013-01-08 | 影像產生系統與影像產生方法 |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US9210449B2 (zh) |
| TW (1) | TW201428675A (zh) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9906715B2 (en) * | 2015-07-08 | 2018-02-27 | Htc Corporation | Electronic device and method for increasing a frame rate of a plurality of pictures photographed by an electronic device |
| GB2550372B (en) | 2016-05-17 | 2022-01-19 | Nctech Ltd | Imaging system having multiple imaging sensors and an associated method of operation |
| KR102385844B1 (ko) | 2017-09-15 | 2022-04-14 | 삼성전자 주식회사 | 제 1 이미지 센서에서 제공된 신호를 이용하여 제 2 이미지 센서에서 데이터를 획득하는 방법 및 전자 장치 |
| US10582137B1 (en) | 2018-09-26 | 2020-03-03 | Zoox, Inc. | Multi-sensor data capture synchronizaiton |
| US11451688B2 (en) * | 2018-09-26 | 2022-09-20 | Zoox, Inc. | Image scan line timestamping |
| CN109167937B (zh) * | 2018-11-05 | 2022-10-14 | 北京达佳互联信息技术有限公司 | 视频发布方法、装置、终端及存储介质 |
| US11032460B2 (en) | 2019-01-18 | 2021-06-08 | Cista System Corp. | Image sensor with image receiver and automatic image combining |
| KR102679016B1 (ko) * | 2019-01-23 | 2024-06-28 | 에스케이하이닉스 주식회사 | 이미지 센서 칩, 전자 장치 및 이미지 센서 칩의 동작 방법 |
| KR102771181B1 (ko) * | 2019-07-12 | 2025-02-24 | 삼성전자 주식회사 | 이미지 센서 및 이미지 센서를 포함하는 전자 장치 |
| US20220121854A1 (en) * | 2020-10-20 | 2022-04-21 | Illinois Tool Works Inc. | Systems and methods for generating video files of digital x-ray imaging |
| JP7449898B2 (ja) * | 2021-05-10 | 2024-03-14 | 株式会社モリタ製作所 | 撮像装置、眼球運動データ処理システム、および制御方法 |
| US11995012B2 (en) * | 2022-03-15 | 2024-05-28 | Samsung Electronics Co., Ltd. | High speed interface for multi image sensor device |
| US20250097572A1 (en) * | 2023-09-15 | 2025-03-20 | Datalogic Ip Tech S.R.L. | Image sensor with chain-capability for multi-camera application |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0669753A3 (en) | 1994-02-28 | 1995-12-20 | Minolta Co Ltd | Image reproduction device. |
| US6762794B1 (en) | 1997-12-03 | 2004-07-13 | Canon Kabushiki Kaisha | Image pick-up apparatus for stereoscope |
| KR100656589B1 (ko) | 2006-03-28 | 2006-12-13 | 삼성전자주식회사 | 분할 촬영 영상의 표시 및 편집이 가능한 휴대용 단말기 및그 방법 |
| RU2568309C2 (ru) | 2010-02-09 | 2015-11-20 | Конинклейке Филипс Электроникс Н.В. | Обнаружение формата трехмерного видео |
| US8711238B2 (en) | 2011-02-01 | 2014-04-29 | Aptina Imaging Corporation | Systems and methods for synchronizing and controlling multiple image sensors |
| KR101699367B1 (ko) * | 2012-05-16 | 2017-02-14 | 한국전자통신연구원 | 3dtv 다중화 방법 및 그 장치 |
-
2013
- 2013-01-08 TW TW102100621A patent/TW201428675A/zh unknown
- 2013-06-25 US US13/925,840 patent/US9210449B2/en active Active
-
2015
- 2015-05-04 US US14/703,869 patent/US9456147B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US20150237267A1 (en) | 2015-08-20 |
| US9210449B2 (en) | 2015-12-08 |
| US20140192213A1 (en) | 2014-07-10 |
| US9456147B2 (en) | 2016-09-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TW201428675A (zh) | 影像產生系統與影像產生方法 | |
| US10049642B2 (en) | Sending frames using adjustable vertical blanking intervals | |
| JP6422946B2 (ja) | ビデオデータを表示するための装置および方法 | |
| CN103236241B (zh) | 一种显示面板驱动方法、驱动装置及显示器件 | |
| CN103021378B (zh) | 一种多屏拼接显示装置和方法 | |
| CN104871127B (zh) | 显示器间的差分等待时间的自动化测量 | |
| US20150138038A1 (en) | Multi-screen display system and image signal correcting method for the same | |
| CN112995735A (zh) | 分布式视频显示系统、控制装置及控制方法 | |
| CN103647918A (zh) | 一种视频同步化的方法及装置 | |
| JP2016502126A (ja) | ビデオ画像処理方法及び装置 | |
| CN110460784B (zh) | 显示通道的切换方法及模块、显示驱动装置、显示设备 | |
| WO2013042264A1 (ja) | 映像処理装置および映像処理方法 | |
| US9288418B2 (en) | Video signal transmitter apparatus and receiver apparatus using uncompressed transmission system of video signal | |
| CN110225316B (zh) | 一种软硬协同的多路视频处理装置及系统 | |
| CN109410894B (zh) | 生成差分输出信号的方法及模块、显示装置 | |
| JP5998579B2 (ja) | マルチディスプレイシステムの映像表示装置、方法及びプログラム | |
| US9886935B2 (en) | Method and system for driving display panel | |
| CN119788835B (zh) | 基于fpga的立体图像显示系统及方法 | |
| JP2015096920A (ja) | 画像処理装置および画像処理システムの制御方法 | |
| JP2007041258A (ja) | 画像表示装置およびタイミングコントローラ | |
| JP6423013B2 (ja) | ジェスチャ認識のための画像マトリクスを生成するためのモジュール、システムおよび方法 | |
| TWI507937B (zh) | 觸控偵測方法及其裝置 | |
| JP2009177331A (ja) | 画像信号転送システム、方法及び該転送システムを具備する撮像装置 | |
| JP6027739B2 (ja) | 映像処理装置、映像処理方法、映像処理システムおよびプログラム | |
| CN115412651A (zh) | 视频处理装置、视频处理方法和显示系统 |