TWI513300B - 用以提供影像資料之系統及其方法 - Google Patents
用以提供影像資料之系統及其方法 Download PDFInfo
- Publication number
- TWI513300B TWI513300B TW099119587A TW99119587A TWI513300B TW I513300 B TWI513300 B TW I513300B TW 099119587 A TW099119587 A TW 099119587A TW 99119587 A TW99119587 A TW 99119587A TW I513300 B TWI513300 B TW I513300B
- Authority
- TW
- Taiwan
- Prior art keywords
- video
- line
- image data
- information
- providing
- Prior art date
Links
- 238000000034 method Methods 0.000 title description 9
- 239000000872 buffer Substances 0.000 claims description 43
- 239000003086 colorant Substances 0.000 claims description 2
- 239000013078 crystal Substances 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 2
- 230000014759 maintenance of location Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 108091008695 photoreceptors Proteins 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/42—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Image Input (AREA)
- Television Systems (AREA)
Description
本發明係有關於影像資料,特定而言係有關於用以提供影像資料之系統及其方法。
影像感測器係可用以產生靜止或視訊影像之電子積體電路。固態影像感測器可為例如電荷耦合元件(charge coupled device,CCD)類型或互補式金屬氧化物半導體(complementary metal oxide semiconductor,CMOS)類型。每一類型之影像感測器均包含一二維畫素陣列,其中每一畫素為將入射之光子轉換成電流信號之半導體元件。影像感測器之應用包含行動電話、數位相機與攝錄影機、網路攝影機、汽車及醫療儀器以及保全攝影機。
用於汽車、醫療及監視相機之影像感測器一般係為小型、低電壓、低功率消耗之感測器,其支援類比複合視訊輸出且能直接與卡式視訊錄放影機(video cassette recorder,VCR)、電視或螢幕接合。當談到類比視訊通訊,可注意到世界上之不同區域係採用不同之視訊/電視標準。因此以特定地區為目標之產品必需符合當地之標準。現今二最常見之視訊標準一般係稱為NTSC(National Television System Committee,美國國家電視標準委員會)及PAL(Phase Alternating Line,逐行倒相)。NTSC係使用每秒29.97張圖框(frame)之更新率(refresh rate),每一圖框(frame)由525條掃描線(scan lines)組成,其中僅480條係排列成可見光柵(visible raster)並攜帶有圖像內容。其餘之掃描線係於垂直遮沒間隔(vertical blanking interval)內,且可用於同步、閉路字幕(closed captioning)及其他非影像資訊。另一方面,PAL係使用每秒25張圖框(frame)之更新率(refresh rate)及每一圖框共有625條掃描線,其中576條係專用於圖像內容。若干應用可使用低解析版之NTSC及PAL,例如在NTSC中僅使用240條可見線,及在PAL中僅使用288條可見線。線時間(line time)係為經分配用以顯示每一掃描線之時間,對於NTSC而言上述線時間係為1/(29.97*525)秒。每一線時間(line time)包含一般用於同步之水平遮沒間隔(horizontal blanking interval)以及經分配用以顯示影像之每一畫素之時間。第三常見之類比視訊標準,即按順序傳送色彩並儲存(Sequential Color With Memory)(譯自法文S quentiel couleur m moire
(SECAM)),一般係用於例如法國及俄羅斯,其類似PAL亦使用每秒25張圖框(frame)之更新率(即50個圖場)及每一圖框有625條掃描線。
一種用以提供影像資料之系統,上述系統係在第一模式根據第一視訊規格以及在第二模式根據第二視訊規格提供上述影像資料,上述第一視訊規格具有第一數量之線之影像資料,上述第二視訊規格具有第二數量之線之影像資料,上述第二數量係大於上述第一數量,上述系統具有視訊感測器,其具有畫素陣列,上述畫素陣列具有第三數量之線之畫素。於至少一實施例中,上述第一數量及第三數量係相等。於另一實施例中,上述第三數量係為第一數量之二分之一。
上述系統亦具有視訊編碼器,用以接收數位視訊資訊及提供視訊輸出,以及線緩衝器,其儲存對應於至少一條線之畫素之資訊,上述資訊來自於上述視訊感測器。一系統控制器係予以提供,用以控制上述系統之操作,上述控制器於上述第二模式中在每一第N條法線之後散置一額外線,用以增加提供至上述視訊編碼器之一數量之線之影像資料,以符合上述第二視訊規格。
從上述視訊感測器之若干條線之畫素而得之數位視訊資訊係提供至法線中之視訊編碼器,上述數位視訊資訊可儲存於線緩衝器內,而從上述視訊感測器之至少一條線之畫素而得之數位視訊資訊係從線緩衝器接收且係在每一額外線期間提供至上述視訊編碼器。
於一特定實施例中,上述N為5,上述第一視訊規格係NTSC(National Television System Committee,美國國家電視標準委員會),而第二視訊規格係PAL(Phase Alternating Line,逐行倒相)或SECAM(Squentiel couleurmmoire,按順序傳送色彩並儲存)。
於一特定實施例中,在每一額外線期間提供至上述視訊編碼器之數位視訊資訊係複製一先前線。於一替代實施例中,在每一額外線期間提供至上述視訊編碼器之數位視訊資訊係藉由在儲存於列緩衝器內之一先前線及一隨後線之畫素資料之間進行插補而得。
一替代之彩色系統係與前五個段落中敘述者不同,其中提供至上述視訊編碼器之每一條線之畫素資料包含從二條或以上之線之畫素陣列取得之色彩資訊。於此實施例中,在額外線期間提供至上述視訊編碼器之視訊資訊係從儲存於列緩衝器內之二條或以上之線之畫素陣列資訊取得。
本發明將以下述實施例及其觀點結合系統、工具及方法加以敘述並說明,此類敘述僅用以說明而非用以限制本發明之申請專利範圍。於若干實施例中,說明了一或多個與上述系統及方法有關之限制條件,而其他實施例則係針對其他改善。
儘管不同標準在圖框率及可見掃描線之數量上並不一致,感測器製造業者仍亟欲發展可相容於30張圖框、60個圖場之NTSC標準以及25張圖框、50個圖場之PAL或SECAM標準之單一影像感測器產品。此樣產品可使用於保全攝影機、小型手持固態攝錄影機、網路攝影機、視訊玩具及其他具有視訊攝影機功能之高容量、低成本元件。此樣影像感測器使製造業者能以單一產品鎖定廣大之消費者市場。藉由例如將二個獨立產生所要求之時鐘頻率之晶體振盪器(crystal oscillator)整合至感測器晶片內,或將頻率合成積體電路(frequency synthesis integrated circuit)與單一常見之參考晶體振盪器整合至感測器晶片內,可達到支援二個不同畫素及圖框率。
例如藉由利用具有PAL之圖框解析度之影像感測器並將結果影像切割至NTSC之圖框解析度,則可實施支援不同數量之可見掃描線(亦稱為圖框解析度)。此方法之主要缺點係為其成本:較大之PAL尺寸畫素陣列一般係轉變成較大之感測器面積,其導致與另一方面支援NTSC圖框解析度所需要者相比較為昂貴之影像感測器及產品。
根據此處所揭露之實施例,利用具有對應至NTSC圖框解析度之畫素陣列解析度之單一畫素陣列,而非對應至PAL圖框解析度之畫素陣列解析度,可支援二模式操作。相較於傳統之PAL尺寸感測器,利用此影像感測器所節省之面積係約為25%。經結合適當之處理,結果感測器可操作於NTSC或PAL模式中,每一模式係產生適用於各別標準之類比視訊。
當影像感測器操作於NTSC模式中時,影像資料係連續地從畫素陣列一行行讀出。影像資料接著係由數位影像處理器所處理,編碼成NTSC視訊格式並輸出。為操作於PAL模式,除上述步驟外,影像資料可從較小解析度之畫素陣列升級(upscaled)至較大輸出解析度。當可使用不同之升級演算法時,應瞭解者為傳統之序列畫素讀出架構會使畫素陣列輸出之較低資料率與感測器輸出之升級資料率之間產生不一致。一般需要額外的線緩衝器或複雜之鎖相迴路(phase lock loop,PLL)電路,以調和資料率之不匹配。然而,此些方法均會增加成本及/或系統之複雜性。取而代之,此處所揭露之實施例可利用非傳統之畫素讀出架構。
於第一圖中,係概要性顯示影像感測器系統之一示範實施例。畫素陣列102可為感光元件(即畫素),例如電荷耦合元件(CCD)或互補式金屬氧化物半導體(CMOS)感光器元件之二維陣列,其產生與入射光或其他光學輻射之強度成比例之影像資料104(由箭頭所表示)。來自於一列(row)中之所有畫素之影像資料104可同時被讀出,且接著儲存於一行(column)取樣及保留緩衝器106中,以作為儲存影像資料108(由箭頭所表示)。一列選擇模組112係控制畫素列被讀出之順序。如圖所示,列選擇模組112可提供一每第五線控制(every-fifth-line control)輸出113,或一個別的計數器115可予以提供以提供一每第五線控制(every-fifth-line control)輸出113,以供數位影像處理器之使用,其使用將敘述於後。應瞭解者為,可利用其他架構及結構從畫素陣列102讀出畫素資料。儲存影像資料108可接著連續傳送至類比數位轉換器(analog-to-digital converter,ADC)110,在其中上述儲存影像資料108係轉換至數位定義域(digital domain)中,以作為數位影像資料114(由箭頭所表示)。
繼續參照第一圖,經類比數位轉換器110之後,數位影像資料114係通過包含一內部線緩衝器(internal line buffer)或線緩衝器118之數位影像處理器116。數位影像處理器116係緩衝內部線緩衝器118內之一或多個列,於若干實施例中至少二列,之數位影像資料114,而內部線緩衝器118內之數位影像資料係儲存影像資料。然而,內部線緩衝器118係太小以致於無法保留一完整之圖場或圖框,且於典型之實施例中其具有能保留八條線或更少,或少於九條線之畫素資料或數位影像資料之容量。因此,內部線緩衝器118為一線緩衝器而非圖場緩衝器(field buffer)或圖框緩衝器(frame buffer)。數位影像處理器116可在數位影像資料114上進行若干影像處理演算法,以實施分析、色彩處理、影像品質強化或其他特定應用之任務,藉此產生經處理數位影像資料120。於若干實施例中,色彩成像係藉由使一濾色器(color filter)元件陣列以已知圖案堆積於畫素陣列上而實施;一常見三色濾色器元件圖案係鋪設於四個畫素一組之畫素陣列,其中二個畫素共享一個濾色器顏色例如綠色,而其餘二個畫素每一者具有一個別的濾色器顏色例如紅及藍。於具有此類型之色彩感測器之實施例中,用以取得色度(chroma)資訊之數位處理係由數位影像處理器116基於來自於目前列及至少一個前一列或後一列之數位影像資料114之畫素資料而實施,上述數位影像資料114係儲存於內部線緩衝器118內。於具有此類型之色彩感測器之實施例中,用以取得強度(intensity)資訊之數位處理一般係利用色度資訊及目前列之畫素資料而實施。色度及強度資訊均以經處理數位影像資料120提供至視訊編碼器122。
仍參照第一圖,來自於數位影像處理器116之經處理數位影像資料120係輸出至視訊編碼器122。視訊編碼器122將經處理數位影像資料120轉換成標準相容數位資料124(由箭頭所表示),上述標準相容數位資料124之格式係與影像感測器系統100當時操作所用之視訊標準相容。由於視訊編碼器122從數位影像處理器116所接收之經處理數位影像資料120係構成「圖像內容」或「可見光柵(visible raster)」(於視訊標準之內容內),故視訊編碼器122所接收之畫素列之數量應匹配或超過影像感測器系統100操作所用之視訊標準所指定之可見光柵中線之數量。一旦視訊編碼器122將經處理數位影像資料120格式化成標準相容數位資料124,上述資料遂由數位類比轉換器(digital-to-analog converter,DAC)126轉換回類比定義域(analog domain),上述數位類比轉換器126係將標準相容數位資料124轉換成標準相容類比資料128,標準相容類比資料128係予以傳送出以作為影像感測器系統100之輸出。影像感測器系統100係操作於控制器130之控制之下,上述控制器130提供控制信號以操作系統,為保持圖式清晰控制信號並未圖示於第一圖。用於影像感測器系統100包含視訊編碼器122之參考時序(reference timing)係由點時鐘參考(dot-clock clock reference)132所提供,上述點時鐘參考132於一實施例中包含一對或以上之晶體振盪器,上述晶體振盪器之其中一者係在適合每一支援視訊標準之頻率下操作。點時鐘參考132一般係提供具有與標準相容數位資料124之畫素被提供至數位類比轉換器126之速率相等之頻率之信號,而其他系統時序信號係從點時鐘參考132所取得。於一替代實施例中,點時鐘參考132係將鎖相迴路(phase locked loop,PLL)及除頻器(frequency divider)與參考振盪器合併;於此實施例中,除頻器係加以重新編程以將鎖相迴路鎖定至適合於每一支援視訊標準之頻率。
於一實施例中,畫素陣列102可具有480列,而影像感測器可設置成在控制器130之控制之下,以操作於二個不同模式:PAL/SECAM及NTSC。
參照第二圖並結合第一圖,其根據一實施例說明一示範之畫素陣列讀出順序200。畫素陣列讀出順序200係開始於判斷210,於其中影像感測器系統100之操作模式係予以決定。若判斷210之答案係為「是」,則影像感測器系統100係操作於NTSC模式,且畫素陣列讀出順序200繼續至步驟220。於步驟220中,為提供與NTSC標準相容之影像資料,列選擇模組112使所有畫素陣列之列從第1號列至第480號列被連續讀出,或著於一具有較不昂貴之320乘240之畫素陣列之替代實施例中,從第1號列至第240號列被連續讀出;此讀出係以60張圖場之基礎實施。
當資料從畫素陣列102讀出時,來自於畫素陣列之每一列資料係儲存於先進先出(first in first out,FIFO)之內部線或列緩衝器118,其一般具有能儲存至少二條線之資料之容量。當資料從畫素陣列102讀出至內部線緩衝器118內時,先前之列資料及先前之後(next-previous)之列資料係從內部線緩衝器118讀出,且用於色彩處理及其他此領域所熟知之數位影像處理,以提供經校正之紅、藍及綠色之經處理數位影像資料120至視訊編碼器122。因此,每一經處理且提供至視訊編碼器之法線(normal lines)係從畫素陣列中二個相繼列之畫素取得,上述畫素陣列具有濾色器元件設置於其上。
於若干單色實施例中,不需要來自先前列之資料以解析色彩,故用於儲存先前之後(next-previous)之線資料之線緩衝器儲存空間可予以消除。
當畫素陣列從內部線緩衝器118讀出時,對應至偶數列之影像資料係提供至偶數號圖場中之視訊編碼器122,對應至奇數列之影像資料係提供至奇數號圖場中之視訊編碼器122,以提供NTSC視訊之領域所熟知之交錯(interlacing)。
應注意者為,每第五線控制輸出113在NTSC模式中係予以忽略或隱藏。
仍參照第二圖,若判斷210之答案係為「否」,則影像感測器系統100係操作於PAL或SECAM模式,且列選擇模組112指定與NTSC模式不同之讀出順序。於此情況,畫素陣列讀出順序200繼續至步驟230,於其中五個列係連續被讀出。每第五線控制輸出113接著啟動,並保持在一段線時間(line time)內有效,以插入另外一條線。於步驟240中,畫素陣列讀出順序200接著暫停一段線時間,讀出一列通常會需要花一段線時間。於步驟245中,列資料係保留在內部線緩衝器118內,且另一條線之視訊編碼器122之影像資料係在一段線時間內藉由從內部線緩衝器118讀取儲存資料而取得,於其中此五列之最後一列係有效地從內部線緩衝器118複製而讀出。之後,進行判斷250,其係有關於是否已到達圖框之最末(即第480列)。若判斷250之答案係為「是」,則畫素陣列讀出順序200繼續至步驟260,於其中圖框讀出係完成,且垂直遮沒間隔(如PAL、NTSC及SECAM標準中所熟知)係提供於視訊編碼器122中。若判斷250之答案係為「否」,則畫素陣列讀出順序200回到步驟230,直到步驟250決定圖框中之最末列已被讀出。
於一替代實施例中,行取樣及保留緩衝器106係能儲存並重讀一列畫素,資料可從行取樣及保留緩衝器106而非內部線緩衝器118重新讀取,以提供經處理數位影像資料120中之一列畫素資料之複製。於此類型之實施例中,為具有四畫素濾色器圖案之感測器提供正確之色彩處理,內部線緩衝器118內之先前列資料並未更新,直到從行取樣及保留緩衝器106進行第二次讀取。
參照第三圖並結合第一圖,其根據一實施例進一步說明在二個不同操作模式中之讀出順序之比對300。如比對300所示,NTSC讀出順序310係較PAL讀出順序320為短。NTSC讀出順序310僅為所有列之連續讀出。相較之下,PAL讀出順序320係每一個第五線被讀出兩次,例如線322被讀出第二次以作為線324,其造成讀取共480/5*6=576條線,其完全匹配PAL可見光柵之尺寸。
於一實施例中,當影像感測器系統100操作於PAL或SECAM模式時,除傳統之影像處理例行程序外,數位影像處理器116亦可於影像資料上實施一垂直插補演算法(vertical interpolation algorithm)以提供經改善之額外線資料,以減少或完全消除因讀出階段(即讀取每一第五線兩次)中之列複製而可能出現之視覺人造物(visual artifacts)。雖內部線緩衝器118內之儲存影像資料通常對於此操作係為足夠,應瞭解者為內部線緩衝器118內之記憶體之額外畫素列可予以提供以強化插補所需之額外影像處理。在垂直插補演算法重寫內部線緩衝器118內儲存之複製列之原始資料之應用中,數位影像處理器116將依序以插補資料填滿該些對應之線。
於一實施插補之實施例中,線性插補(linear interpolation)係予以實施於一第五線之畫素例如線322以及跟隨上述第五線之第二條線之畫素例如線326之間,以產生用於顯示之線324,用以代替單純複製第五條線。於其他實施例中係利用其他之插補演算法例如二次配適(quadratic fit)。
於一替代實施例中,畫素陣列102之圖框解析度係為240列,其對應NTSC標準之一非經插補版本,且影像感測器系統100係以與先前實施例所述者相類似之方法操作。藉由於讀出階段複製每一第五列,此實施例之感測器管線(pipeline)中列之總數係為240/5*6=288,其匹配PAL標準之對應非經插補版本之尺寸。
此處之概念可予以擴張以實施能支援具有不同數量之可見掃描線之二或以上之其他視訊標準之影像感測器。於一實施例中,畫素陣列102中列之數量可設定為等於視訊標準之可見掃描線數量,其最小可見掃描線數量為N。當影像感測器系統100操作於具有不同之可見掃描線數量M(其中M不等於N)之標準時,列選擇模組112將在每一第(N/(M-N))個列重複其功能。另則,可利用另一讀出順序,其造成M個列被讀取。
水平解析度,其為一列中之畫素數量,亦可隨不同標準而改變。於若干實施例中,藉由利用具有與支援標準相匹配之水平解析度之畫素陣列102,上述支援標準具有最大水平解析度,且當操作於其他標準時利用數位影像處理器116水平地減少取樣(down-sample)每一列,此差異可獲得調整。於另一實施例中,畫素陣列102可加以選擇以匹配具有最小水平解析度之標準,且當操作於其他標準時數位影像處理器116可水平地升級(up-scale)每一列。於又另一實施例中,數位影像處理器116並不改變(即升級或減少取樣)列之水平解析度以匹配標準規格。於此實施例中,由於標準相容類比資料128係為類比,故標準相容類比資料128之接收端上之裝置(例如電視機、卡式視訊錄放影機(VCR)或螢幕)一般將會顯示或錄製類比資料而不進行重新取樣(resampling)。接收類比資料之數位裝置例如視訊擷取卡一般將對列資料自動進行過度取樣(over-sample)或取樣不足(under-sample),藉此有效地將標準相容類比資料128升級(up-scale)或降級(down-scale)成接收端上之操作視訊標準所設定之解析度。
雖此處揭露之實例係敘述支援特定視訊標準(即PAL及NTSC)及特定圖框尺寸之影像感測器,此領域具通常知識之技藝者應得以領會,此處所敘述及請求保護之程序可應用至支援其他標準例如SECAM及其他圖框尺寸例如四分之一通用影像傳輸格式(Quarter Common Intermediate Format,QCIF)、通用影像傳輸格式(Common Intermediate Format,CIF)、彩色圖形配接器(Color Graphics Adapter,CGA)、四分之一視訊圖形陣列(Quarter Video Graphics Array,QVGA)、視訊圖形陣列(Video Graphics Array,VGA)、高級擴展圖形陣列(Super Extended Graphics Array,SXGA)、寬屏擴展圖形陣列(Wide Extended Graphics Array,WXGA)、超級擴展圖形陣列(Ultra Extended Graphics Array,UXGA)、寬屏超級擴展圖形陣列(Widescreen Ultra Extended Graphics Array,WUXGA)、720p格式、1080p格式或任何其他標準或非標準之圖框尺寸之影像感測器。
凡熟悉此領域之技藝者,在不脫離本專利精神或範圍內,可對此處所述之影像感測器系統作更動或潤飾。應注意者為,上述敘述及後附圖式所示之內容係用以說明本發明而非用以限定本發明所主張之專利權利範圍。下述申請專利範圍意欲涵蓋此處所述之所有廣義及特定特徵以及本方法及系統之範圍中之所有敘述,其在語言上可能會被視為落入其中。
100...影像感測器系統
102...畫素陣列
104...影像資料
106...行取樣及保留緩衝器
108...儲存影像資料
110...類比數位轉換器
112...列選擇模組
113...每第五線控制輸出
114...數位影像資料
115...計數器
116...數位影像處理器
118...內部線緩衝器(線緩衝器)
120...經處理數位影像資料
122...視訊編碼器
124...標準相容數位資料
126...數位類比轉換器
128...標準相容類比資料
130...控制器
132...點時鐘參考
200...畫素陣列讀出順序
210、250...判斷
220、230、240、245、260...步驟
300...比對
310...NTSC讀出順序
320...PAL讀出順序
322、324、326...線
第一圖係根據一實施例顯示示範之影像感測器系統之方塊示意圖。
第二圖係根據一實施例顯示讀出順序之流程圖。
第三圖係根據一實施例進一步顯示第二圖之讀出順序之方塊示意圖。
100...影像感測器系統
102...畫素陣列
104...影像資料
106...行取樣及保留緩衝器
108...儲存影像資料
110...類比數位轉換器
112...列選擇模組
113...每第五線控制輸出
114...數位影像資料
115...計數器
116...數位影像處理器
118...內部線緩衝器(線緩衝器)
120...經處理數位影像資料
122...視訊編碼器
124...標準相容數位資料
126...數位類比轉換器
128...標準相容類比資料
130...控制器
132...點時鐘參考
Claims (8)
- 一種用以提供影像資料之系統,該系統係在一第一模式根據一第一視訊規格以及在一第二模式根據一第二視訊規格提供該影像資料,該第一視訊規格具有一第一數量之線之影像資料,該第二視訊規格具有一第二數量之線之影像資料,該第二數量係大於該第一數量,該系統包含:一視訊感測器,其具有一畫素陣列,該畫素陣列具有一第三數量之線之畫素;一視訊編碼器,用以接收數位視訊資訊及提供一視訊輸出;一線緩衝器,其儲存對應於至少一條線之畫素之資訊,該資訊來自於該視訊感測器;以及一控制器,其控制該系統之操作,該控制器於該第二模式中在每一第N條法線之後散置一額外線,用以增加提供至該視訊編碼器之一數量之線之影像資料,以符合該第二視訊規格,其中N為整數;其中該影像資料之水平解析度不變。
- 如請求項1所述之用以提供影像資料之系統,其中該第三數量係等於該第一數量。
- 如請求項1所述之用以提供影像資料之系統,其中該第三數量係等於該第一數量之二分之一。
- 如請求項1所述之用以提供影像資料之系統,其中該N為5,該第一視訊規格係NTSC(National Television System Committee,美國國家電視標準委員會)視訊規格,該第二視訊規格係選自下列組成的群組:PAL(Phase Alternating Line,逐行倒相)以及SECAM(Séquentiel couleur à mémoire ,按順序傳送色彩並儲存)。
- 如請求項1所述之用以提供影像資料之系統,其中在每一額外線期間提供至該視訊編碼器之該數位視訊資訊係複製一先前線。
- 一種用以提供彩色影像資料之系統,該系統係在一第一模式根據一第一視訊規格以及在一第二模式根據一第二視訊規格提供該彩色影像資料,該第一視訊規格具有一第一數量之線之影像資料,該第二視訊規格具有一第二數量之線之影像資料,該第二數量係大於該第一數量,該系統包含:一視訊感測器,其具有一畫素陣列,該畫素陣列具有一第三數量之線之畫素;一視訊編碼器,用以接收彩色數位視訊資訊及提供一視訊輸出;一線緩衝器,其儲存對應於至少一第一線及一第二線之畫素之資訊,該資訊來自於該視訊感測器;以及 一控制器,其控制該系統之操作,該控制器於該第二模式中在每一第N條法線之後散置一額外線,用以增加提供至該視訊編碼器之一數量之線之影像資料,以符合該第二視訊規格,其中N為整數,其中該彩色數位視訊資訊具有從至少一條線之畫素而得之強度資訊以及從至少二條線之畫素而得之色度資訊,該彩色數位視訊資訊係提供至法線中之該視訊編碼器,從該視訊感測器之至少二條線之畫素而得之該彩色數位視訊資訊係從該線緩衝器接收且係在每一額外線期間提供至該視訊編碼器。
- 如請求項6所述之用以提供彩色影像資料之系統,其中在每一額外線期間提供至該視訊編碼器之該彩色數位視訊資訊係為經儲存之視訊資訊。
- 如請求項7所述之用以提供彩色影像資料之系統,其中在每一額外線期間提供至該視訊編碼器之該彩色數位視訊資訊係從該經儲存之視訊資訊之至少二條線之畫素加以插補。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US21918309P | 2009-06-22 | 2009-06-22 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201114259A TW201114259A (en) | 2011-04-16 |
| TWI513300B true TWI513300B (zh) | 2015-12-11 |
Family
ID=43429741
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW099119587A TWI513300B (zh) | 2009-06-22 | 2010-06-15 | 用以提供影像資料之系統及其方法 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US9215385B2 (zh) |
| CN (1) | CN102461157B (zh) |
| TW (1) | TWI513300B (zh) |
| WO (1) | WO2011005413A2 (zh) |
Families Citing this family (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112911252B (zh) | 2012-11-28 | 2023-07-04 | 核心光电有限公司 | 多孔径成像系统 |
| US9508014B2 (en) | 2013-05-06 | 2016-11-29 | Magna Electronics Inc. | Vehicular multi-camera vision system |
| CN109040552B (zh) | 2013-06-13 | 2021-06-22 | 核心光电有限公司 | 双孔径变焦数字摄影机 |
| WO2015001440A1 (en) | 2013-07-04 | 2015-01-08 | Corephotonics Ltd. | Miniature telephoto lens assembly |
| CN108718376B (zh) | 2013-08-01 | 2020-08-14 | 核心光电有限公司 | 具有自动聚焦的纤薄多孔径成像系统及其使用方法 |
| CN103763556B (zh) * | 2014-01-29 | 2018-03-06 | 广东威创视讯科技股份有限公司 | 视频图像编解码装置及其方法、传输系统及其方法 |
| US9392188B2 (en) | 2014-08-10 | 2016-07-12 | Corephotonics Ltd. | Zoom dual-aperture camera with folded lens |
| WO2016108093A1 (en) | 2015-01-03 | 2016-07-07 | Corephotonics Ltd. | Miniature telephoto lens module and a camera utilizing such a lens module |
| US10015384B2 (en) | 2015-04-02 | 2018-07-03 | Corephotonics Ltd. | Dual voice coil motor structure in a dual-optical module camera |
| CN112394467B (zh) | 2015-04-16 | 2023-06-09 | 核心光电有限公司 | 紧凑型折叠式相机中的自动对焦和光学图像稳定 |
| CN110687655B (zh) | 2015-05-28 | 2022-10-21 | 核心光电有限公司 | 用于双孔径数字照相机中的光学图像稳定和自动对焦的双向刚度 |
| CN112672022B (zh) | 2015-08-13 | 2022-08-02 | 核心光电有限公司 | 视频支持和切换/无切换动态控制的双孔径变焦摄影机 |
| KR102143730B1 (ko) | 2015-09-06 | 2020-08-12 | 코어포토닉스 리미티드 | 소형의 접이식 카메라의 롤 보정에 의한 자동 초점 및 광학식 손떨림 방지 |
| WO2017115179A1 (en) | 2015-12-29 | 2017-07-06 | Corephotonics Ltd. | Dual-aperture zoom digital camera with automatic adjustable tele field of view |
| US11277558B2 (en) | 2016-02-01 | 2022-03-15 | Magna Electronics Inc. | Vehicle vision system with master-slave camera configuration |
| EP3758356B1 (en) | 2016-05-30 | 2021-10-20 | Corephotonics Ltd. | Actuator |
| KR101939958B1 (ko) | 2016-06-19 | 2019-01-17 | 코어포토닉스 리미티드 | 듀얼 애퍼처 카메라 시스템에서의 프레임 동기화 |
| US10845565B2 (en) | 2016-07-07 | 2020-11-24 | Corephotonics Ltd. | Linear ball guided voice coil motor for folded optic |
| WO2018007951A1 (en) | 2016-07-07 | 2018-01-11 | Corephotonics Ltd. | Dual-camera system with improved video smooth transition by image blending |
| KR102269547B1 (ko) | 2016-12-28 | 2021-06-25 | 코어포토닉스 리미티드 | 확장된 광-폴딩-요소 스캐닝 범위를 갖는 폴디드 카메라 구조 |
| EP4145206A1 (en) | 2017-01-12 | 2023-03-08 | Corephotonics Ltd. | Compact folded camera |
| KR102211704B1 (ko) | 2017-02-23 | 2021-02-03 | 코어포토닉스 리미티드 | 폴디드 카메라 렌즈 설계 |
| EP4357832B1 (en) | 2017-03-15 | 2025-12-24 | Corephotonics Ltd. | Camera with panoramic scanning range |
| US10904512B2 (en) | 2017-09-06 | 2021-01-26 | Corephotonics Ltd. | Combined stereoscopic and phase detection depth mapping in a dual aperture camera |
| US10951834B2 (en) | 2017-10-03 | 2021-03-16 | Corephotonics Ltd. | Synthetically enlarged camera aperture |
| KR102104761B1 (ko) | 2017-11-23 | 2020-04-27 | 코어포토닉스 리미티드 | 컴팩트 폴디드 카메라 구조 |
| CN114609746A (zh) | 2018-02-05 | 2022-06-10 | 核心光电有限公司 | 折叠摄像装置 |
| CN113467031B (zh) | 2018-02-12 | 2023-07-14 | 核心光电有限公司 | 具有光学图像稳定化的折叠摄像机、数字摄像机及方法 |
| US10694168B2 (en) | 2018-04-22 | 2020-06-23 | Corephotonics Ltd. | System and method for mitigating or preventing eye damage from structured light IR/NIR projector systems |
| US11268829B2 (en) | 2018-04-23 | 2022-03-08 | Corephotonics Ltd | Optical-path folding-element with an extended two degree of freedom rotation range |
| KR20210003856A (ko) | 2018-07-04 | 2021-01-12 | 코어포토닉스 리미티드 | 자동차 또는 감시 애플리케이션을 위한 스캐닝 광학 경로 폴딩 요소들을 구비하는 카메라 |
| WO2020031005A1 (en) | 2018-08-04 | 2020-02-13 | Corephotonics Ltd. | Switchable continuous display information system above camera |
| WO2020039302A1 (en) | 2018-08-22 | 2020-02-27 | Corephotonics Ltd. | Two-state zoom folded camera |
| US11287081B2 (en) | 2019-01-07 | 2022-03-29 | Corephotonics Ltd. | Rotation mechanism with sliding joint |
| CN111971956B (zh) | 2019-03-09 | 2021-12-03 | 核心光电有限公司 | 用于动态立体校准的方法及系统 |
| CN121309748A (zh) | 2019-07-31 | 2026-01-09 | 核心光电有限公司 | 在相机摇摄或运动中创建背景模糊的方法 |
| US11659135B2 (en) | 2019-10-30 | 2023-05-23 | Corephotonics Ltd. | Slow or fast motion video using depth information |
| US11770618B2 (en) | 2019-12-09 | 2023-09-26 | Corephotonics Ltd. | Systems and methods for obtaining a smart panoramic image |
| US11949976B2 (en) | 2019-12-09 | 2024-04-02 | Corephotonics Ltd. | Systems and methods for obtaining a smart panoramic image |
| WO2021165764A1 (en) | 2020-02-22 | 2021-08-26 | Corephotonics Ltd. | Split screen feature for macro photography |
| WO2021220080A1 (en) | 2020-04-26 | 2021-11-04 | Corephotonics Ltd. | Temperature control for hall bar sensor correction |
| KR20240096759A (ko) | 2020-05-17 | 2024-06-26 | 코어포토닉스 리미티드 | 전체 시야 레퍼런스 이미지 존재 하의 이미지 스티칭 |
| KR102617779B1 (ko) | 2020-05-30 | 2023-12-22 | 코어포토닉스 리미티드 | 슈퍼 매크로 이미지를 얻기 위한 시스템 및 방법 |
| CN119583939A (zh) | 2020-07-15 | 2025-03-07 | 核心光电有限公司 | 移动电子装置 |
| US11637977B2 (en) | 2020-07-15 | 2023-04-25 | Corephotonics Ltd. | Image sensors and sensing methods to obtain time-of-flight and phase detection information |
| KR102778426B1 (ko) | 2020-07-31 | 2025-03-06 | 코어포토닉스 리미티드 | 큰 스트로크 선형 위치 감지를 위한 홀 센서-자석 구조 |
| WO2022034402A1 (en) | 2020-08-12 | 2022-02-17 | Corephotonics Ltd. | Optical image stabilization in a scanning folded camera |
| CN120166282A (zh) | 2020-12-26 | 2025-06-17 | 核心光电有限公司 | 移动装置 |
| TWI888016B (zh) | 2021-03-11 | 2025-06-21 | 以色列商核心光電有限公司 | 彈出式照相機系統 |
| KR20240025049A (ko) | 2021-06-08 | 2024-02-26 | 코어포토닉스 리미티드 | 슈퍼-매크로 이미지의 초점면을 틸팅하기 위한 시스템 및 카메라 |
| WO2023002371A1 (en) | 2021-07-21 | 2023-01-26 | Corephotonics Ltd. | Pop-out mobile cameras and actuators |
| CN121115373A (zh) | 2022-03-24 | 2025-12-12 | 核心光电有限公司 | 薄型紧凑透镜光学图像稳定 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1717929A (zh) * | 2002-11-25 | 2006-01-04 | 卡西欧计算机株式会社 | 图像信号产生单元、数码相机以及图像信号产生方法 |
| US20070025644A1 (en) * | 2005-07-28 | 2007-02-01 | Etron Technology, Inc. | Two stage interpolation apparatus and method for up-scaling an image on display device |
| TW200820756A (en) * | 2006-10-27 | 2008-05-01 | Mediatek Inc | Method and apparatuses for adjusting digital video signals |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| ATE55019T1 (de) * | 1980-04-11 | 1990-08-15 | Ampex | System zur raeumlichen transformation von bildern. |
| JPH0787405A (ja) * | 1993-09-14 | 1995-03-31 | Sony Corp | 撮像装置 |
| US5739867A (en) | 1997-02-24 | 1998-04-14 | Paradise Electronics, Inc. | Method and apparatus for upscaling an image in both horizontal and vertical directions |
| JP4069339B2 (ja) * | 1998-10-16 | 2008-04-02 | ソニー株式会社 | 信号変換装置および信号変換方法 |
| US7379105B1 (en) | 2002-06-18 | 2008-05-27 | Pixim, Inc. | Multi-standard video image capture device using a single CMOS image sensor |
| WO2004086748A2 (en) * | 2003-03-20 | 2004-10-07 | Covi Technologies Inc. | Systems and methods for multi-resolution image processing |
| JP3962928B2 (ja) * | 2003-05-12 | 2007-08-22 | ソニー株式会社 | 画像データの変換方法および変換回路と、撮像装置 |
| JP2005006078A (ja) | 2003-06-12 | 2005-01-06 | Sharp Corp | 撮像装置 |
-
2010
- 2010-06-11 CN CN201080027261.2A patent/CN102461157B/zh active Active
- 2010-06-11 WO PCT/US2010/038381 patent/WO2011005413A2/en not_active Ceased
- 2010-06-11 US US13/380,391 patent/US9215385B2/en active Active
- 2010-06-15 TW TW099119587A patent/TWI513300B/zh active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1717929A (zh) * | 2002-11-25 | 2006-01-04 | 卡西欧计算机株式会社 | 图像信号产生单元、数码相机以及图像信号产生方法 |
| US20070025644A1 (en) * | 2005-07-28 | 2007-02-01 | Etron Technology, Inc. | Two stage interpolation apparatus and method for up-scaling an image on display device |
| TW200820756A (en) * | 2006-10-27 | 2008-05-01 | Mediatek Inc | Method and apparatuses for adjusting digital video signals |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2011005413A2 (en) | 2011-01-13 |
| WO2011005413A3 (en) | 2011-04-07 |
| CN102461157B (zh) | 2016-01-20 |
| CN102461157A (zh) | 2012-05-16 |
| US9215385B2 (en) | 2015-12-15 |
| TW201114259A (en) | 2011-04-16 |
| US20120194735A1 (en) | 2012-08-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI513300B (zh) | 用以提供影像資料之系統及其方法 | |
| US7787023B2 (en) | Video signal processing apparatus | |
| US8982248B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and program | |
| JP6948810B2 (ja) | 画像処理システム | |
| US6480230B1 (en) | Image processing of video signal for display | |
| US7411617B2 (en) | Image processing apparatus, image processing method, recording medium, and program | |
| US20060038914A1 (en) | Image pickup apparatus with function of adjusting incident light quantity | |
| US20050190270A1 (en) | Method and apparatus for processing image signal | |
| US20190006400A1 (en) | Image sensing device and image sensing method | |
| US7583280B2 (en) | Image display device | |
| US20100123808A1 (en) | Picture signal processing circuit, signal processing method, imaging apparatus, display device, and camera system | |
| JP4788381B2 (ja) | 映像出力装置およびこれを備えるデジタルカメラ | |
| JPH08317295A (ja) | デジタル画像記録装置およびデジタル画像再生装置 | |
| JP3846860B2 (ja) | 撮像装置および撮像方法 | |
| JP2000115694A (ja) | 画像データ記録方法、画像データ記録装置、画像データ再生方法、画像データ再生装置、情報記録媒体及びコンピュータ読み取り可能な記録媒体 | |
| US8145029B2 (en) | Apparatus and method for interlace scanning video signal frequency multiplication | |
| JP4016473B2 (ja) | 撮像方法及び撮像装置 | |
| JP2000115693A (ja) | 画像データ記録方法、画像データ記録装置、画像データ再生方法、画像データ再生装置、情報記録媒体及びコンピュータ読み取り可能な記録媒体 | |
| JPH11191859A (ja) | 撮像装置 | |
| JP3777723B2 (ja) | 電子スチルカメラ | |
| JP4261666B2 (ja) | 画像処理装置 | |
| TW416251B (en) | LCD digital displaying method for image compression system | |
| JP2000278677A (ja) | 電子内視鏡装置 | |
| JP2001008229A (ja) | カラー撮像画像伝送表示装置 | |
| JPH09186920A (ja) | 画像入力装置 |