JP2002112277A - 固体撮像装置およびその信号処理方法 - Google Patents
固体撮像装置およびその信号処理方法Info
- Publication number
- JP2002112277A JP2002112277A JP2000298565A JP2000298565A JP2002112277A JP 2002112277 A JP2002112277 A JP 2002112277A JP 2000298565 A JP2000298565 A JP 2000298565A JP 2000298565 A JP2000298565 A JP 2000298565A JP 2002112277 A JP2002112277 A JP 2002112277A
- Authority
- JP
- Japan
- Prior art keywords
- output
- signal
- solid
- output level
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims description 13
- 238000003384 imaging method Methods 0.000 claims description 107
- 238000009826 distribution Methods 0.000 claims description 73
- 238000006243 chemical reaction Methods 0.000 claims description 33
- 238000000034 method Methods 0.000 claims description 22
- 230000002194 synthesizing effect Effects 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims description 4
- 238000013075 data extraction Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 18
- 230000007547 defect Effects 0.000 description 17
- FHYNZKLNCPUNEU-UHFFFAOYSA-N 4-[(3,4-dihydroxyphenyl)methyl]-3-[(4-hydroxyphenyl)methyl]oxolan-2-one Chemical compound C1=CC(O)=CC=C1CC1C(=O)OCC1CC1=CC=C(O)C(O)=C1 FHYNZKLNCPUNEU-UHFFFAOYSA-N 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 102100021337 Gap junction alpha-1 protein Human genes 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 229910001385 heavy metal Inorganic materials 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000000206 photolithography Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000008646 thermal stress Effects 0.000 description 1
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
(57)【要約】
【課題】本発明は、白バランス、黒バランス、そして、
カラーバランスのとれた画像を再生するための電気信号
を出力することができる固体撮像装置を提供することを
目的とする。 【解決手段】画像データ抽出器において、固体撮像素子
42から出力される映像信号より、RGB信号が選択出
力されると、画像処理器44a〜44cにおいて、RG
B信号それぞれのデータ量が割付処理される。このよう
に割付処理されたRGB信号が、画像合成器45で1つ
の映像信号に合成して出力されることで、カラーバラン
スのとれた映像信号が出力される。
カラーバランスのとれた画像を再生するための電気信号
を出力することができる固体撮像装置を提供することを
目的とする。 【解決手段】画像データ抽出器において、固体撮像素子
42から出力される映像信号より、RGB信号が選択出
力されると、画像処理器44a〜44cにおいて、RG
B信号それぞれのデータ量が割付処理される。このよう
に割付処理されたRGB信号が、画像合成器45で1つ
の映像信号に合成して出力されることで、カラーバラン
スのとれた映像信号が出力される。
Description
【0001】
【発明の属する技術分野】本発明は、入射光量に対して
自然対数的に変換した電気信号を出力する固体撮像素子
を有する固体撮像装置に関する。
自然対数的に変換した電気信号を出力する固体撮像素子
を有する固体撮像装置に関する。
【0002】
【従来の技術】本出願人は、ダイナミックレンジを広く
するために、入射した光量に応じた光電流を発生しうる
感光手段と、光電流を入力するMOSトランジスタと、
このMOSトランジスタをサブスレッショルド電流が流
れうる状態にバイアスするバイアス手段とが備えられる
ことによって、入射光量に対して自然対数的に変換され
た電気信号を出力することができる固体撮像素子を提案
した(特開平3−192764号公報参照)。このよう
な固体撮像素子を備えた固体撮像装置は、固体撮像素子
が広いダイナミックレンジを有しているため、その輝度
範囲の広い輝度分布を有する被写体を撮像することがで
きる。
するために、入射した光量に応じた光電流を発生しうる
感光手段と、光電流を入力するMOSトランジスタと、
このMOSトランジスタをサブスレッショルド電流が流
れうる状態にバイアスするバイアス手段とが備えられる
ことによって、入射光量に対して自然対数的に変換され
た電気信号を出力することができる固体撮像素子を提案
した(特開平3−192764号公報参照)。このよう
な固体撮像素子を備えた固体撮像装置は、固体撮像素子
が広いダイナミックレンジを有しているため、その輝度
範囲の広い輝度分布を有する被写体を撮像することがで
きる。
【0003】
【発明が解決しようとする課題】しかしながら、このよ
うに対数変換動作を行う固体撮像素子のダイナミックレ
ンジが6桁と広いので、図12のように、この固体撮像
素子101と、赤外線カットフィルタ100と、画像処
理器102とからなる固体撮像装置において、画像処理
器102の出力ダイナミックレンジに比べて、通常最大
4桁程度の被写体の輝度範囲におけるダイナミックレン
ジが狭くなる。そのため、固体撮像素子101で撮像さ
れたとき、被写体の輝度分布のヒストグラムが固体撮像
素子101のダイナミックレンジの一部に偏った状態と
なる。
うに対数変換動作を行う固体撮像素子のダイナミックレ
ンジが6桁と広いので、図12のように、この固体撮像
素子101と、赤外線カットフィルタ100と、画像処
理器102とからなる固体撮像装置において、画像処理
器102の出力ダイナミックレンジに比べて、通常最大
4桁程度の被写体の輝度範囲におけるダイナミックレン
ジが狭くなる。そのため、固体撮像素子101で撮像さ
れたとき、被写体の輝度分布のヒストグラムが固体撮像
素子101のダイナミックレンジの一部に偏った状態と
なる。
【0004】よって、画像処理器102の出力ダイナミ
ックレンジにおいて、データが無い部分が発生する。即
ち、被写体のダイナミックレンジにおいて最高輝度とな
る値が、画像処理器102の出力ダイナミックレンジに
おいて最大値をとらず、薄い灰色として再生されたり、
又、被写体のダイナミックレンジにおいて最低輝度とな
る値が、画像処理器102の出力ダイナミックレンジに
おいて最小値をとらず、濃い灰色として再生される。こ
のため、カラーの撮像装置では、カラーバランスがとれ
なくなる恐れがあった。
ックレンジにおいて、データが無い部分が発生する。即
ち、被写体のダイナミックレンジにおいて最高輝度とな
る値が、画像処理器102の出力ダイナミックレンジに
おいて最大値をとらず、薄い灰色として再生されたり、
又、被写体のダイナミックレンジにおいて最低輝度とな
る値が、画像処理器102の出力ダイナミックレンジに
おいて最小値をとらず、濃い灰色として再生される。こ
のため、カラーの撮像装置では、カラーバランスがとれ
なくなる恐れがあった。
【0005】又、固体撮像素子の生産中におけるパーテ
ィクル付着やフォトリソグラフィー工程でのパターン不
良などにより、固体撮像素子内の一部の画素に備えられ
たダイオードなどの光電変換素子が動作せず、このよう
な画素からは常に黒く見えた状態となる電気信号が出力
される。このような画素は、黒キズと呼ばれる。又、固
体撮像素子の生産中における重金属汚染や熱ストレスな
どによる結晶欠陥によって、固体撮像素子内の一部の画
素に備えられたダイオードなどの光電変換素子のリーク
電流が大きくなり、このような画素からは常に白く見え
た状態となる電気信号が出力される。このような画素
は、白キズと呼ばれる。このように黒キズの画素や白キ
ズの画素が存在するため、黒バランスや白バランスがと
れないコントラストの良くない画像が再生される。この
ため、カラーの撮像装置では、やはりカラーバランスが
とれなくなる恐れがあった。
ィクル付着やフォトリソグラフィー工程でのパターン不
良などにより、固体撮像素子内の一部の画素に備えられ
たダイオードなどの光電変換素子が動作せず、このよう
な画素からは常に黒く見えた状態となる電気信号が出力
される。このような画素は、黒キズと呼ばれる。又、固
体撮像素子の生産中における重金属汚染や熱ストレスな
どによる結晶欠陥によって、固体撮像素子内の一部の画
素に備えられたダイオードなどの光電変換素子のリーク
電流が大きくなり、このような画素からは常に白く見え
た状態となる電気信号が出力される。このような画素
は、白キズと呼ばれる。このように黒キズの画素や白キ
ズの画素が存在するため、黒バランスや白バランスがと
れないコントラストの良くない画像が再生される。この
ため、カラーの撮像装置では、やはりカラーバランスが
とれなくなる恐れがあった。
【0006】このような問題を鑑みて、本発明は、白バ
ランス、黒バランス、そして、カラーバランスのとれた
画像を再生するための電気信号を出力することができる
固体撮像装置を提供することを目的とする。
ランス、黒バランス、そして、カラーバランスのとれた
画像を再生するための電気信号を出力することができる
固体撮像装置を提供することを目的とする。
【0007】
【課題を解決するための手段】上記目的を達成するため
に、請求項1に記載の固体撮像装置は、複数の画素及び
複数の色フィルタを備え入射光量に対して自然対数的に
変化する複数種類の色信号を発生する固体撮像素子を備
えた固体撮像装置において、各色信号の出力レベルに対
する頻度を表す出力分布を求める出力分布計測手段と、
該出力分布計測手段で求められた出力分布において頻度
が第1所定値以上となる出力レベルの最小値と頻度が第
2所定値以上となる出力レベルの最大値とを検知する出
力レベル検知手段と、前記最小値がその最小値より小さ
い第1出力レベルに、前記最大値がその最大値より大き
い第2出力レベルにそれぞれ割り付けられた新たな出力
分布となるように各色信号の変換を行う第1変換手段
と、を備えたことを特徴とする。
に、請求項1に記載の固体撮像装置は、複数の画素及び
複数の色フィルタを備え入射光量に対して自然対数的に
変化する複数種類の色信号を発生する固体撮像素子を備
えた固体撮像装置において、各色信号の出力レベルに対
する頻度を表す出力分布を求める出力分布計測手段と、
該出力分布計測手段で求められた出力分布において頻度
が第1所定値以上となる出力レベルの最小値と頻度が第
2所定値以上となる出力レベルの最大値とを検知する出
力レベル検知手段と、前記最小値がその最小値より小さ
い第1出力レベルに、前記最大値がその最大値より大き
い第2出力レベルにそれぞれ割り付けられた新たな出力
分布となるように各色信号の変換を行う第1変換手段
と、を備えたことを特徴とする。
【0008】このような固体撮像装置において、例え
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、輝度値を表すデータ
量(出力レベル)に対する画素数(頻度)を表すヒスト
グラム(出力分布)を求める。そして、その画素数が第
1所定値以上となるデータ量の最小値とその画素数が第
2所定値以上となる最大値が、RGB信号のそれぞれに
ついて検知される。そして、検知されたデータ量の最小
値を固体撮像装置の出力側のダイナミックレンジにおけ
る最小値となる第1出力レベルに、又、検知されたデー
タ量の最大値を固体撮像装置の出力側のダイナミックレ
ンジにおける最大値となる第2出力レベルに、それぞれ
割り付ける。このようにして、被写体を撮像して得られ
るRGB信号のダイナミックレンジと固体撮像装置の出
力側のダイナミックレンジとを一致させることで、カラ
ーバランス処理を行う。
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、輝度値を表すデータ
量(出力レベル)に対する画素数(頻度)を表すヒスト
グラム(出力分布)を求める。そして、その画素数が第
1所定値以上となるデータ量の最小値とその画素数が第
2所定値以上となる最大値が、RGB信号のそれぞれに
ついて検知される。そして、検知されたデータ量の最小
値を固体撮像装置の出力側のダイナミックレンジにおけ
る最小値となる第1出力レベルに、又、検知されたデー
タ量の最大値を固体撮像装置の出力側のダイナミックレ
ンジにおける最大値となる第2出力レベルに、それぞれ
割り付ける。このようにして、被写体を撮像して得られ
るRGB信号のダイナミックレンジと固体撮像装置の出
力側のダイナミックレンジとを一致させることで、カラ
ーバランス処理を行う。
【0009】請求項2に記載の固体撮像装置は、請求項
1に記載の固体撮像装置において、前記第1変換手段か
ら出力される各色信号の出力分布において、前記第1出
力レベル近傍でその頻度が第3所定値より小さい低頻度
領域が所定の範囲を越えて存在するとき、該低頻度領域
における最大出力レベルより大きい出力領域の最小値
が、その最小値より小さい第3出力レベルに割り付けら
れた新たな出力分布となるように各色信号を変換する処
理、及び、前記第2出力レベル近傍でその頻度が第4所
定値より小さい低頻度領域が所定の範囲を越えて存在す
るとき、該低頻度領域における最小出力レベルより小さ
い出力領域の最大値が、その最大値より大きい第4出力
レベルに割り付けられた新たな出力分布となるように各
色信号を変換する処理のうち少なくとも一方を行う第2
変換手段を、さらに備えたことを特徴とする。
1に記載の固体撮像装置において、前記第1変換手段か
ら出力される各色信号の出力分布において、前記第1出
力レベル近傍でその頻度が第3所定値より小さい低頻度
領域が所定の範囲を越えて存在するとき、該低頻度領域
における最大出力レベルより大きい出力領域の最小値
が、その最小値より小さい第3出力レベルに割り付けら
れた新たな出力分布となるように各色信号を変換する処
理、及び、前記第2出力レベル近傍でその頻度が第4所
定値より小さい低頻度領域が所定の範囲を越えて存在す
るとき、該低頻度領域における最小出力レベルより小さ
い出力領域の最大値が、その最大値より大きい第4出力
レベルに割り付けられた新たな出力分布となるように各
色信号を変換する処理のうち少なくとも一方を行う第2
変換手段を、さらに備えたことを特徴とする。
【0010】このような固体撮像装置において、例え
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、輝度値を表すデータ
量に対する画素数を表すヒストグラムを求めて、その画
素数が第1所定値以上となるデータ量の最小値とその画
素数が第2所定値以上となるデータ量の最大値が、RG
B信号のそれぞれについて検知される。そして、検知さ
れたデータ量の最小値を固体撮像装置の出力側のダイナ
ミックレンジにおける最小値となる第1出力レベルに、
又、検知されたデータ量の最大値を固体撮像装置の出力
側のダイナミックレンジにおける最大値となる第2出力
レベルに、それぞれ割り付けることで、カラーバランス
処理を行う。
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、輝度値を表すデータ
量に対する画素数を表すヒストグラムを求めて、その画
素数が第1所定値以上となるデータ量の最小値とその画
素数が第2所定値以上となるデータ量の最大値が、RG
B信号のそれぞれについて検知される。そして、検知さ
れたデータ量の最小値を固体撮像装置の出力側のダイナ
ミックレンジにおける最小値となる第1出力レベルに、
又、検知されたデータ量の最大値を固体撮像装置の出力
側のダイナミックレンジにおける最大値となる第2出力
レベルに、それぞれ割り付けることで、カラーバランス
処理を行う。
【0011】このように割り付けられたRGB信号のデ
ータ量において、前記第1出力レベル近傍で、その画素
数が第3所定値より少ないデータ量の領域となる低頻度
領域が所定の範囲を超えて存在するとき、この低頻度領
域より大きいデータ量で、且つ、第3所定値を超えるデ
ータ量の最小値を第3出力レベルに割り付ける。又、前
記第2出力レベル近傍で、その画素数が第4所定値より
少ないデータ量の領域となる低頻度領域が所定の範囲を
超えて存在するとき、この低頻度領域より小さいデータ
量で、且つ、第4所定値を超えるデータ量の最大値を第
4出力レベルに割り付ける。このように、RGB信号そ
れぞれについて、再度、割付処理を行うことで、黒バラ
ンス処理及び白バランス処理を行う。
ータ量において、前記第1出力レベル近傍で、その画素
数が第3所定値より少ないデータ量の領域となる低頻度
領域が所定の範囲を超えて存在するとき、この低頻度領
域より大きいデータ量で、且つ、第3所定値を超えるデ
ータ量の最小値を第3出力レベルに割り付ける。又、前
記第2出力レベル近傍で、その画素数が第4所定値より
少ないデータ量の領域となる低頻度領域が所定の範囲を
超えて存在するとき、この低頻度領域より小さいデータ
量で、且つ、第4所定値を超えるデータ量の最大値を第
4出力レベルに割り付ける。このように、RGB信号そ
れぞれについて、再度、割付処理を行うことで、黒バラ
ンス処理及び白バランス処理を行う。
【0012】請求項3に記載の固体撮像装置は、請求項
2に記載の固体撮像装置において、前記第3及び第4所
定値が、前記各色信号毎に総画素数の0.1〜1%の画
素数に相当する値であることを特徴とする。
2に記載の固体撮像装置において、前記第3及び第4所
定値が、前記各色信号毎に総画素数の0.1〜1%の画
素数に相当する値であることを特徴とする。
【0013】請求項4に記載の固体撮像装置は、請求項
2又は請求項3の固体撮像装置において、前記第1変換
手段が前記第2変換手段を兼ねることを特徴とする。
2又は請求項3の固体撮像装置において、前記第1変換
手段が前記第2変換手段を兼ねることを特徴とする。
【0014】請求項5に記載の固体撮像装置は、請求項
1〜請求項3のいずれかに記載の固体撮像装置におい
て、前記第1所定値と前記第2所定値とが等しいことを
特徴とする。
1〜請求項3のいずれかに記載の固体撮像装置におい
て、前記第1所定値と前記第2所定値とが等しいことを
特徴とする。
【0015】請求項6に記載の固体撮像装置は、請求項
1〜請求項5のいずれかに記載の固体撮像装置におい
て、前記第1又は第2変換手段より出力される各色信号
を一つの映像信号に合成する画像合成手段をさらに備え
たことを特徴とする。
1〜請求項5のいずれかに記載の固体撮像装置におい
て、前記第1又は第2変換手段より出力される各色信号
を一つの映像信号に合成する画像合成手段をさらに備え
たことを特徴とする。
【0016】請求項7に記載の固体撮像装置は、請求項
1〜請求項6のいずれかに記載の固体撮像装置におい
て、前記第1又は第2変換手段から出力される各色信号
を一つの映像信号に合成する画像合成手段と、前記映像
信号に対して、いずれかの色信号の出力分布において、
前記第1出力レベル近傍でその頻度が第3所定値より小
さい低頻度領域が所定の範囲を越えて存在するとき、該
低頻度領域における最大出力レベルより大きい出力領域
の最小値が、その最小値より小さい第3出力レベルに割
り付けられた新たな出力分布となるように各色信号を変
換する処理、及び、いずれかの色信号の前記第2出力レ
ベル近傍でその頻度が第4所定値より小さい低頻度領域
が所定の範囲を越えて存在するとき、該低頻度領域にお
ける最小出力レベルより小さい出力領域の最大値が、そ
の最大値より大きい第4出力レベルに割り付けられた新
たな出力分布となるように各色信号を変換する処理のう
ち、少なくとも一方の処理を行う第3変換手段と、をさ
らに備えたことを特徴とする。
1〜請求項6のいずれかに記載の固体撮像装置におい
て、前記第1又は第2変換手段から出力される各色信号
を一つの映像信号に合成する画像合成手段と、前記映像
信号に対して、いずれかの色信号の出力分布において、
前記第1出力レベル近傍でその頻度が第3所定値より小
さい低頻度領域が所定の範囲を越えて存在するとき、該
低頻度領域における最大出力レベルより大きい出力領域
の最小値が、その最小値より小さい第3出力レベルに割
り付けられた新たな出力分布となるように各色信号を変
換する処理、及び、いずれかの色信号の前記第2出力レ
ベル近傍でその頻度が第4所定値より小さい低頻度領域
が所定の範囲を越えて存在するとき、該低頻度領域にお
ける最小出力レベルより小さい出力領域の最大値が、そ
の最大値より大きい第4出力レベルに割り付けられた新
たな出力分布となるように各色信号を変換する処理のう
ち、少なくとも一方の処理を行う第3変換手段と、をさ
らに備えたことを特徴とする。
【0017】このような固体撮像装置において、例え
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、上述したカラーバラ
ンス処理や黒バランス処理や白バランス処理が行われ
る。そして、このように各処理が施されたRGB信号
が、画像合成器で映像信号に合成される。そして、この
映像信号に対して、再度、割付処理を行うことで、黒バ
ランス処理及び白バランス処理を行う。
ば、固体撮像素子が赤色、緑色、青色のカラーフィルタ
を有し、RGB信号を出力する場合、まず、R信号、G
信号、B信号のそれぞれについて、上述したカラーバラ
ンス処理や黒バランス処理や白バランス処理が行われ
る。そして、このように各処理が施されたRGB信号
が、画像合成器で映像信号に合成される。そして、この
映像信号に対して、再度、割付処理を行うことで、黒バ
ランス処理及び白バランス処理を行う。
【0018】請求項8に記載の固体撮像装置は、請求項
7に記載の固体撮像装置において、前記第3及び第4所
定値が、前記固体撮像素子の総画素数の0.1〜1%の
画素数に相当する値であることを特徴とする。
7に記載の固体撮像装置において、前記第3及び第4所
定値が、前記固体撮像素子の総画素数の0.1〜1%の
画素数に相当する値であることを特徴とする。
【0019】請求項9に記載の固体撮像装置は、請求項
7に記載の固体撮像装置において、前記第1及び第2所
定値が、前記各色信号毎に、総画素数の0.1〜1%の
画素数に相当する値であることを特徴とする。
7に記載の固体撮像装置において、前記第1及び第2所
定値が、前記各色信号毎に、総画素数の0.1〜1%の
画素数に相当する値であることを特徴とする。
【0020】請求項10に記載の信号処理方法は、複数
の画素及び複数の色フィルタを備え入射光量に対して自
然対数的に変化する複数種類の色信号を発生する固体撮
像素子の信号処理方法であって、各色信号の出力に対す
る頻度を表す出力分布を求める段階、該出力分布におい
て頻度が第1所定値以上となる出力レベルの最小値を検
知する段階、前記出力分布において頻度が第2所定値以
上となる出力レベルの最大値を検知する段階、及び、前
記出力の最小値が、その最小値より小さい第1出力レベ
ルに割り付けられ、前記出力の最大値が、その最大値よ
り大きい第2出力レベルに割り付けられた新たな出力分
布となるように各色信号を変換する段階、を含むことを
特徴とする
の画素及び複数の色フィルタを備え入射光量に対して自
然対数的に変化する複数種類の色信号を発生する固体撮
像素子の信号処理方法であって、各色信号の出力に対す
る頻度を表す出力分布を求める段階、該出力分布におい
て頻度が第1所定値以上となる出力レベルの最小値を検
知する段階、前記出力分布において頻度が第2所定値以
上となる出力レベルの最大値を検知する段階、及び、前
記出力の最小値が、その最小値より小さい第1出力レベ
ルに割り付けられ、前記出力の最大値が、その最大値よ
り大きい第2出力レベルに割り付けられた新たな出力分
布となるように各色信号を変換する段階、を含むことを
特徴とする
【0021】このような信号処理方法において、例え
ば、赤色、緑色、青色のカラーフィルタを有する固体撮
像素子からRGB信号を出力する場合、まず、R信号、
G信号、B信号のそれぞれについて、輝度値を表すデー
タ量(出力レベル)に対する画素数(頻度)を表すヒス
トグラム(出力分布)を求める。そして、その画素数が
第1所定値以上となるデータ量の最小値とその画素数が
第2所定値以上となる最大値が、RGB信号のそれぞれ
について検知される。そして、検知されたデータ量の最
小値を固体撮像装置の出力側のダイナミックレンジにお
ける最小値となる第1出力レベルに、又、検知されたデ
ータ量の最大値を固体撮像装置の出力側のダイナミック
レンジにおける最大値となる第2出力レベルに、それぞ
れ割り付ける。このようにして、被写体を撮像して得ら
れるRGB信号のダイナミックレンジと固体撮像装置の
出力側のダイナミックレンジとを一致させることで、カ
ラーバランス処理を行う。
ば、赤色、緑色、青色のカラーフィルタを有する固体撮
像素子からRGB信号を出力する場合、まず、R信号、
G信号、B信号のそれぞれについて、輝度値を表すデー
タ量(出力レベル)に対する画素数(頻度)を表すヒス
トグラム(出力分布)を求める。そして、その画素数が
第1所定値以上となるデータ量の最小値とその画素数が
第2所定値以上となる最大値が、RGB信号のそれぞれ
について検知される。そして、検知されたデータ量の最
小値を固体撮像装置の出力側のダイナミックレンジにお
ける最小値となる第1出力レベルに、又、検知されたデ
ータ量の最大値を固体撮像装置の出力側のダイナミック
レンジにおける最大値となる第2出力レベルに、それぞ
れ割り付ける。このようにして、被写体を撮像して得ら
れるRGB信号のダイナミックレンジと固体撮像装置の
出力側のダイナミックレンジとを一致させることで、カ
ラーバランス処理を行う。
【0022】請求項11に記載の信号処理方法は、請求
項10に記載の信号処理方法において、前記変換を行っ
た各色信号の出力分布において、前記第1出力レベル近
傍でその頻度が第3所定値より小さい低頻度領域が所定
の範囲を越えて存在するとき、該低頻度領域における最
大出力より大きい出力領域の最小値が、その最小値より
小さい第3出力レベルに割り付けられた新たな出力分布
となるように各色信号を変換する段階、及び、前記変換
を行った各色信号の出力分布において、前記第2出力レ
ベル近傍でその頻度が第4所定値より小さい低頻度領域
が所定の範囲を越えて存在するとき、該低頻度領域にお
ける最小出力より小さい出力領域の最大値が、その最大
値より大きい第4出力レベルに割り付けられた新たな出
力分布となるように各色信号を変換する段階のうち、少
なくとも一方の段階をさらに含むことを特徴とする。
項10に記載の信号処理方法において、前記変換を行っ
た各色信号の出力分布において、前記第1出力レベル近
傍でその頻度が第3所定値より小さい低頻度領域が所定
の範囲を越えて存在するとき、該低頻度領域における最
大出力より大きい出力領域の最小値が、その最小値より
小さい第3出力レベルに割り付けられた新たな出力分布
となるように各色信号を変換する段階、及び、前記変換
を行った各色信号の出力分布において、前記第2出力レ
ベル近傍でその頻度が第4所定値より小さい低頻度領域
が所定の範囲を越えて存在するとき、該低頻度領域にお
ける最小出力より小さい出力領域の最大値が、その最大
値より大きい第4出力レベルに割り付けられた新たな出
力分布となるように各色信号を変換する段階のうち、少
なくとも一方の段階をさらに含むことを特徴とする。
【0023】このような画像処理方法において、上述の
ように割り付けられたRGB信号のデータ量に対して、
前記第1出力レベル近傍で、その画素数が第3所定値よ
り少ないデータ量の領域となる低頻度領域が所定の範囲
を超えて存在するとき、この低頻度領域より大きいデー
タ量で、且つ、第3所定値を超えるデータ量の最小値を
第3出力レベルに割り付ける。又、前記第2出力レベル
近傍で、その画素数が第4所定値より少ないデータ量の
領域となる低頻度領域が所定の範囲を超えて存在すると
き、この低頻度領域より小さいデータ量で、且つ、第4
所定値を超えるデータ量の最大値を第4出力レベルに割
り付ける。このように、RGB信号それぞれについて、
再度、割付処理を行うことで、黒バランス処理及び白バ
ランス処理を行う。
ように割り付けられたRGB信号のデータ量に対して、
前記第1出力レベル近傍で、その画素数が第3所定値よ
り少ないデータ量の領域となる低頻度領域が所定の範囲
を超えて存在するとき、この低頻度領域より大きいデー
タ量で、且つ、第3所定値を超えるデータ量の最小値を
第3出力レベルに割り付ける。又、前記第2出力レベル
近傍で、その画素数が第4所定値より少ないデータ量の
領域となる低頻度領域が所定の範囲を超えて存在すると
き、この低頻度領域より小さいデータ量で、且つ、第4
所定値を超えるデータ量の最大値を第4出力レベルに割
り付ける。このように、RGB信号それぞれについて、
再度、割付処理を行うことで、黒バランス処理及び白バ
ランス処理を行う。
【0024】請求項12に記載の信号処理方法は、請求
項10又は請求項11に記載の信号処理方法において、
前記各段階を経て得られた各色信号を一つの映像信号に
合成する段階をさらに含むことを特徴とする。
項10又は請求項11に記載の信号処理方法において、
前記各段階を経て得られた各色信号を一つの映像信号に
合成する段階をさらに含むことを特徴とする。
【0025】請求項13に記載の信号処理方法は、請求
項11に記載の信号処理方法において、前記各段階を経
て得られた各色信号を一つの映像信号に合成する段階を
含むとともに、前記映像信号の出力分布において、前記
第1出力レベル近傍でその頻度が第3所定値より小さい
低頻度領域が所定の範囲を越えて存在するとき、該低頻
度領域における最大出力より大きい出力領域の最小値
が、その最小値より小さい第3出力レベルに割り付けら
れた新たな出力分布となるように各色信号を変換する段
階、及び、前記映像信号の出力分布において、前記第2
出力レベル近傍でその頻度が第4所定値より小さい低頻
度領域が所定の範囲を越えて存在するとき、該低頻度領
域における最小出力より小さい出力領域の最大値が、そ
の最大値より大きい第4出力レベルに割り付けられた新
たな出力分布となるように各色信号を変換する段階のう
ち、少なくとも一方の段階をさらに含むことを特徴とす
る。
項11に記載の信号処理方法において、前記各段階を経
て得られた各色信号を一つの映像信号に合成する段階を
含むとともに、前記映像信号の出力分布において、前記
第1出力レベル近傍でその頻度が第3所定値より小さい
低頻度領域が所定の範囲を越えて存在するとき、該低頻
度領域における最大出力より大きい出力領域の最小値
が、その最小値より小さい第3出力レベルに割り付けら
れた新たな出力分布となるように各色信号を変換する段
階、及び、前記映像信号の出力分布において、前記第2
出力レベル近傍でその頻度が第4所定値より小さい低頻
度領域が所定の範囲を越えて存在するとき、該低頻度領
域における最小出力より小さい出力領域の最大値が、そ
の最大値より大きい第4出力レベルに割り付けられた新
たな出力分布となるように各色信号を変換する段階のう
ち、少なくとも一方の段階をさらに含むことを特徴とす
る。
【0026】このような信号処理方法において、上述し
たように、まず、R信号、G信号、B信号のそれぞれに
ついて、上述したカラーバランス処理や黒バランス処理
や白バランス処理が行われる。そして、このように各処
理が施されたRGB信号が、映像信号に合成される。そ
して、この映像信号に対して、再度、割付処理を行うこ
とで、黒バランス処理及び白バランス処理を行う。
たように、まず、R信号、G信号、B信号のそれぞれに
ついて、上述したカラーバランス処理や黒バランス処理
や白バランス処理が行われる。そして、このように各処
理が施されたRGB信号が、映像信号に合成される。そ
して、この映像信号に対して、再度、割付処理を行うこ
とで、黒バランス処理及び白バランス処理を行う。
【0027】
【発明の実施の形態】本発明の実施形態について、以下
に説明する。まず、最初に、以下に説明する各実施形態
の固体撮像装置に設けられる固体撮像素子の一例につい
て説明する。
に説明する。まず、最初に、以下に説明する各実施形態
の固体撮像装置に設けられる固体撮像素子の一例につい
て説明する。
【0028】<固体撮像素子> 1.固体撮像素子の構成 図1は本発明の固体撮像装置の二次元のMOS型固体撮
像素子の一部の構成を概略的に示している。同図におい
て、G11〜Gmnは行列配置(マトリクス配置)された
画素を示している。2は垂直走査回路であり、行(ライ
ン)4−1、4−2、・・・、4−nを順次走査してい
く。3は水平走査回路であり、画素から出力信号線6−
1、6−2、・・・、6−mに導出された光電変換信号
を画素ごとに水平方向に順次読み出す。5は電源ライン
である。各画素に対し、上記ライン4−1、4−2・・
・、4−nや出力信号線6−1、6−2・・・、6−
m、電源ライン5だけでなく、他のライン(例えば、ク
ロックラインやバイアス供給ライン等)も接続される
が、図1ではこれらについて省略する。
像素子の一部の構成を概略的に示している。同図におい
て、G11〜Gmnは行列配置(マトリクス配置)された
画素を示している。2は垂直走査回路であり、行(ライ
ン)4−1、4−2、・・・、4−nを順次走査してい
く。3は水平走査回路であり、画素から出力信号線6−
1、6−2、・・・、6−mに導出された光電変換信号
を画素ごとに水平方向に順次読み出す。5は電源ライン
である。各画素に対し、上記ライン4−1、4−2・・
・、4−nや出力信号線6−1、6−2・・・、6−
m、電源ライン5だけでなく、他のライン(例えば、ク
ロックラインやバイアス供給ライン等)も接続される
が、図1ではこれらについて省略する。
【0029】出力信号線6−1、6−2、・・・、6−
mごとにNチャネルのMOSトランジスタQ1、Q2が
図示の如く1組ずつ設けられている。出力信号線6−1
を例にとって説明すると、MOSトランジスタQ1のゲ
ートは直流電圧線7に接続され、ドレインは出力信号線
6−1に接続され、ソースは直流電圧VPS’のライン8
に接続されている。一方、MOSトランジスタQ2のド
レインは出力信号線6−1に接続され、ソースは最終的
な信号線9に接続され、ゲートは水平走査回路3に接続
されている。
mごとにNチャネルのMOSトランジスタQ1、Q2が
図示の如く1組ずつ設けられている。出力信号線6−1
を例にとって説明すると、MOSトランジスタQ1のゲ
ートは直流電圧線7に接続され、ドレインは出力信号線
6−1に接続され、ソースは直流電圧VPS’のライン8
に接続されている。一方、MOSトランジスタQ2のド
レインは出力信号線6−1に接続され、ソースは最終的
な信号線9に接続され、ゲートは水平走査回路3に接続
されている。
【0030】画素G11〜Gmnには、後述するように、
それらの画素で発生した光電荷に基づく信号を出力する
NチャネルのMOSトランジスタT2が設けられてい
る。MOSトランジスタT2と上記MOSトランジスタ
Q1との接続関係は図2(a)のようになる。ここで、
MOSトランジスタQ1のソースに接続される直流電圧
VPS’と、MOSトランジスタT2のドレインに接続さ
れる直流電圧VPD’との関係はVPD’>VPS’であり、
直流電圧VPS’は例えばグランド電圧(接地)である。
この回路構成は上段のMOSトランジスタT2のゲート
に信号が入力され、下段のMOSトランジスタQ1のゲ
ートには直流電圧DCが常時印加される。このため下段
のMOSトランジスタQ1は抵抗又は定電流源と等価で
あり、図2(a)の回路はソースフォロワ型の増幅回路
となっている。この場合、MOSトランジスタT2から
増幅出力されるのは電流であると考えてよい。
それらの画素で発生した光電荷に基づく信号を出力する
NチャネルのMOSトランジスタT2が設けられてい
る。MOSトランジスタT2と上記MOSトランジスタ
Q1との接続関係は図2(a)のようになる。ここで、
MOSトランジスタQ1のソースに接続される直流電圧
VPS’と、MOSトランジスタT2のドレインに接続さ
れる直流電圧VPD’との関係はVPD’>VPS’であり、
直流電圧VPS’は例えばグランド電圧(接地)である。
この回路構成は上段のMOSトランジスタT2のゲート
に信号が入力され、下段のMOSトランジスタQ1のゲ
ートには直流電圧DCが常時印加される。このため下段
のMOSトランジスタQ1は抵抗又は定電流源と等価で
あり、図2(a)の回路はソースフォロワ型の増幅回路
となっている。この場合、MOSトランジスタT2から
増幅出力されるのは電流であると考えてよい。
【0031】MOSトランジスタQ2は水平走査回路3
によって制御され、スイッチ素子として動作する。尚、
後述するように各画素内にはスイッチ用のNチャネルの
MOSトランジスタT3も設けられている。このMOS
トランジスタT3も含めて表わすと、図2(a)の回路
は正確には図2(b)のようになる。即ち、MOSトラ
ンジスタT3がMOSトランジスタQ1とMOSトラン
ジスタT2との間に挿入されている。ここで、MOSト
ランジスタT3は行の選択を行うものであり、トランジ
スタQ2は列の選択を行うものである。
によって制御され、スイッチ素子として動作する。尚、
後述するように各画素内にはスイッチ用のNチャネルの
MOSトランジスタT3も設けられている。このMOS
トランジスタT3も含めて表わすと、図2(a)の回路
は正確には図2(b)のようになる。即ち、MOSトラ
ンジスタT3がMOSトランジスタQ1とMOSトラン
ジスタT2との間に挿入されている。ここで、MOSト
ランジスタT3は行の選択を行うものであり、トランジ
スタQ2は列の選択を行うものである。
【0032】図2のように構成することにより信号のゲ
インを大きく出力することができる。従って、画素がダ
イナミックレンジ拡大のために感光素子から発生する光
電流を自然対数的に変換しているような場合は、そのま
までは出力信号が小さいが、本増幅回路により充分大き
な信号に増幅されるため、後続の信号処理回路(図示せ
ず)での処理が容易になる。
インを大きく出力することができる。従って、画素がダ
イナミックレンジ拡大のために感光素子から発生する光
電流を自然対数的に変換しているような場合は、そのま
までは出力信号が小さいが、本増幅回路により充分大き
な信号に増幅されるため、後続の信号処理回路(図示せ
ず)での処理が容易になる。
【0033】2.画素構成の第1例 図1に示した固体撮像素子の各画素に適用される第1例
について、図面を参照して説明する。図3は、本実施形
態に使用する固体撮像装置に設けられた画素の構成を示
す回路図である。
について、図面を参照して説明する。図3は、本実施形
態に使用する固体撮像装置に設けられた画素の構成を示
す回路図である。
【0034】図3において、pnフォトダイオードPD
が感光部(光電変換部)を形成している。そのフォトダ
イオードPDのアノードはMOSトランジスタT1のド
レインとゲート、及びMOSトランジスタT2のゲート
に接続されている。MOSトランジスタT2のソースは
行選択用のMOSトランジスタのT3のドレインに接続
されている。MOSトランジスタのソースは出力信号線
6(この出力信号線6は図1の6−1、6−2、・・
・、6−mに対応する)へ接続されている。尚、MOS
トランジスタT1〜T3は、NチャネルのMOSトラン
ジスタでバックゲートが接地されている。
が感光部(光電変換部)を形成している。そのフォトダ
イオードPDのアノードはMOSトランジスタT1のド
レインとゲート、及びMOSトランジスタT2のゲート
に接続されている。MOSトランジスタT2のソースは
行選択用のMOSトランジスタのT3のドレインに接続
されている。MOSトランジスタのソースは出力信号線
6(この出力信号線6は図1の6−1、6−2、・・
・、6−mに対応する)へ接続されている。尚、MOS
トランジスタT1〜T3は、NチャネルのMOSトラン
ジスタでバックゲートが接地されている。
【0035】又、フォトダイオードPDのカソードには
直流電圧VPDが印加されるようになっている。一方、M
OSトランジスタT1のソースには直流電圧VPSが印加
される。MOSトランジスタT2のドレインには直流電
圧VPDが入力される。又、MOSトランジスタT3のゲ
ートには信号φVが入力される。尚、本例において、直
流電圧VPS,VPDによって、MOSトランジスタT1,
T2がサブスレッショルド領域で動作するようにバイア
スされる。このように構成される固体撮像素子は、入射
光量に対して自然対数的に変換された電気信号を出力す
る。この固体撮像素子の光電変換動作について、以下に
説明する。
直流電圧VPDが印加されるようになっている。一方、M
OSトランジスタT1のソースには直流電圧VPSが印加
される。MOSトランジスタT2のドレインには直流電
圧VPDが入力される。又、MOSトランジスタT3のゲ
ートには信号φVが入力される。尚、本例において、直
流電圧VPS,VPDによって、MOSトランジスタT1,
T2がサブスレッショルド領域で動作するようにバイア
スされる。このように構成される固体撮像素子は、入射
光量に対して自然対数的に変換された電気信号を出力す
る。この固体撮像素子の光電変換動作について、以下に
説明する。
【0036】図3の回路において、フォトダイオードP
Dに光が入射すると光電流が発生し、MOSトランジス
タのサブスレッショルド特性により、前記光電流を自然
対数的に変換した値の電圧がMOSトランジスタT1,
T2のゲートに発生する。よって、前記光電流に対して
自然対数的に比例した値のドレイン電流がMOSトラン
ジスタT2を流れようとする。次に、MOSトランジス
タT3のゲートにパルス信号φVを与えて、MOSトラ
ンジスタT3をONにすると、前記光電流に対して自然
対数的に比例した値のドレイン電流が、MOSトランジ
スタT3を通して出力信号線6に導出される。
Dに光が入射すると光電流が発生し、MOSトランジス
タのサブスレッショルド特性により、前記光電流を自然
対数的に変換した値の電圧がMOSトランジスタT1,
T2のゲートに発生する。よって、前記光電流に対して
自然対数的に比例した値のドレイン電流がMOSトラン
ジスタT2を流れようとする。次に、MOSトランジス
タT3のゲートにパルス信号φVを与えて、MOSトラ
ンジスタT3をONにすると、前記光電流に対して自然
対数的に比例した値のドレイン電流が、MOSトランジ
スタT3を通して出力信号線6に導出される。
【0037】このとき、MOSトランジスタT2及びM
OSトランジスタQ1(図2)の導通時抵抗とそれらを
流れる電流によって決まるMOSトランジスタQ1のド
レイン電圧が、信号として出力信号線6に現れる。この
ようにして信号が読み出された後、MOSトランジスタ
T3がOFFになる。このような動作を所定の時間間隔
で繰り返すことにより、刻々と変化する被写体像を広い
ダイナミックレンジで連続的に撮像することができる。
OSトランジスタQ1(図2)の導通時抵抗とそれらを
流れる電流によって決まるMOSトランジスタQ1のド
レイン電圧が、信号として出力信号線6に現れる。この
ようにして信号が読み出された後、MOSトランジスタ
T3がOFFになる。このような動作を所定の時間間隔
で繰り返すことにより、刻々と変化する被写体像を広い
ダイナミックレンジで連続的に撮像することができる。
【0038】尚、この固体撮像素子内に設けられた画素
の構成について、図3の構成の画素に限定されるもので
なく、例えば、MOSトランジスタT2の後段に積分回
路や増幅回路を有するような構成や、極性が逆になるP
チャネルのMOSトランジスタを用いた回路構成のもの
などでも構わない。
の構成について、図3の構成の画素に限定されるもので
なく、例えば、MOSトランジスタT2の後段に積分回
路や増幅回路を有するような構成や、極性が逆になるP
チャネルのMOSトランジスタを用いた回路構成のもの
などでも構わない。
【0039】このように構成される固体撮像素子は、以
下で説明する各実施形態において、共通のものとなる。
よって、以下に、このような構成の固体撮像素子を有す
る固体撮像装置の実施形態について説明する。
下で説明する各実施形態において、共通のものとなる。
よって、以下に、このような構成の固体撮像素子を有す
る固体撮像装置の実施形態について説明する。
【0040】このように構成される固体撮像素子10の
各画素G11〜Gmnの光電変換部分には、赤色、緑色、青
色の3原色のいずれかのカラーフィルタが設けられる。
このように赤色、緑色、青色のカラーフィルタが設けら
れた画素より、それぞれ、R信号、G信号、B信号が出
力される。
各画素G11〜Gmnの光電変換部分には、赤色、緑色、青
色の3原色のいずれかのカラーフィルタが設けられる。
このように赤色、緑色、青色のカラーフィルタが設けら
れた画素より、それぞれ、R信号、G信号、B信号が出
力される。
【0041】<第1の実施形態>本発明の第1の実施形
態について、図面を参照して説明する。図4は、本実施
形態の固体撮像装置の構成を示すブロック図である。
態について、図面を参照して説明する。図4は、本実施
形態の固体撮像装置の構成を示すブロック図である。
【0042】図4に示す固体撮像装置は、赤外線の入射
を防ぐ赤外線カットフィルタ41と、固体撮像素子42
と、固体撮像素子42から送出される電気信号をRGB
の各色信号毎に選別する画像データ抽出器43と、画像
データ抽出器43で抽出されたR信号、G信号、B信号
がそれぞれ入力される画像処理器44a,44b,44
cと、画像処理器44a,44b,44cで処理された
RGB信号を合成して画像再生用の映像信号を生成する
画像合成器45とを有する。
を防ぐ赤外線カットフィルタ41と、固体撮像素子42
と、固体撮像素子42から送出される電気信号をRGB
の各色信号毎に選別する画像データ抽出器43と、画像
データ抽出器43で抽出されたR信号、G信号、B信号
がそれぞれ入力される画像処理器44a,44b,44
cと、画像処理器44a,44b,44cで処理された
RGB信号を合成して画像再生用の映像信号を生成する
画像合成器45とを有する。
【0043】画像データ抽出器43には、固体撮像素子
42より出力されるR信号、G信号及びB信号よりなる
映像信号が入力される。又、この画像データ抽出器43
は、固体撮像素子42より出力されるR信号、G信号及
びB信号に同期したクロックが与えられ、R信号、G信
号、B信号をそれぞれ選択して出力する。このように画
像データ抽出器43より選択出力されたR信号、G信号
及びB信号は、それぞれ、画像処理器44a,44b,
44cに送出される。
42より出力されるR信号、G信号及びB信号よりなる
映像信号が入力される。又、この画像データ抽出器43
は、固体撮像素子42より出力されるR信号、G信号及
びB信号に同期したクロックが与えられ、R信号、G信
号、B信号をそれぞれ選択して出力する。このように画
像データ抽出器43より選択出力されたR信号、G信号
及びB信号は、それぞれ、画像処理器44a,44b,
44cに送出される。
【0044】図5は、画像処理器44aの内部構成を示
すブロック図である。図5に示すように、画像処理器4
4aは、R信号について輝度値毎の画素数を表すヒスト
グラム(輝度分布に相当する)を計測する輝度分布計測
部51と、該ヒストグラムにおいて所定の頻度を与える
ときの出力レベルを検知するレベル検知部52と、レベ
ル検知部52の検知結果に基づいてヒストグラムの再配
列を行うための演算部53とを有している。尚、画像処
理器44b,44cについても、画像処理器44aと同
様、図5のような構成となり、画像処理器44bはG信
号について、画像処理器44bはB信号について、それ
ぞれ処理を施す。
すブロック図である。図5に示すように、画像処理器4
4aは、R信号について輝度値毎の画素数を表すヒスト
グラム(輝度分布に相当する)を計測する輝度分布計測
部51と、該ヒストグラムにおいて所定の頻度を与える
ときの出力レベルを検知するレベル検知部52と、レベ
ル検知部52の検知結果に基づいてヒストグラムの再配
列を行うための演算部53とを有している。尚、画像処
理器44b,44cについても、画像処理器44aと同
様、図5のような構成となり、画像処理器44bはG信
号について、画像処理器44bはB信号について、それ
ぞれ処理を施す。
【0045】この画像処理器44a,44b,44cで
は、画像データ抽出器43より送出されるR信号、G信
号、B信号それぞれについて、輝度値毎の画素数を表す
ヒストグラム(輝度分布に相当する)を求めて、それぞ
れのヒストグラムに基づいてデータ量の変換を行う。即
ち、固体撮像装置の出力側のダイナミックレンジをDm
〜DMとすると、求めたヒストグラムにおいて、その画
素数が所定の画素数x1を超える輝度値であって最低と
なる映像信号のデータ量がDmに割り付けられるととも
に、その画素数が所定の画素数x2を超える輝度値であ
って最高となる映像信号のデータ量がDMに割り付けら
れた新たなヒストグラムとなるようにデータの変換を行
う。尚、この所定の画素数x1,x2は、RGB信号そ
れぞれについて、ヒストグラムを求めるために使用され
る全画素数に対して0.1〜1%の割合となる画素数で
ある。画素数x1,x2は同じ値でも良いし、異なる値
でも良い。同じ値であれば処理が簡単になり、異なる値
であればヒストグラムの形状に応じた適切な処理を行う
ことが可能となる。図7では両者が同じ値である(xと
する)ものとしている。
は、画像データ抽出器43より送出されるR信号、G信
号、B信号それぞれについて、輝度値毎の画素数を表す
ヒストグラム(輝度分布に相当する)を求めて、それぞ
れのヒストグラムに基づいてデータ量の変換を行う。即
ち、固体撮像装置の出力側のダイナミックレンジをDm
〜DMとすると、求めたヒストグラムにおいて、その画
素数が所定の画素数x1を超える輝度値であって最低と
なる映像信号のデータ量がDmに割り付けられるととも
に、その画素数が所定の画素数x2を超える輝度値であ
って最高となる映像信号のデータ量がDMに割り付けら
れた新たなヒストグラムとなるようにデータの変換を行
う。尚、この所定の画素数x1,x2は、RGB信号そ
れぞれについて、ヒストグラムを求めるために使用され
る全画素数に対して0.1〜1%の割合となる画素数で
ある。画素数x1,x2は同じ値でも良いし、異なる値
でも良い。同じ値であれば処理が簡単になり、異なる値
であればヒストグラムの形状に応じた適切な処理を行う
ことが可能となる。図7では両者が同じ値である(xと
する)ものとしている。
【0046】例えば、図7(a)のようなヒストグラム
を描くR信号が、画像処理器44aに入力されたとき、
所定の画素数xを超える本来の輝度分布(Da〜Db)
が認識される。そして、画像処理器44aに入力される
際Da〜Dbの範囲に存在していたR信号の輝度分布
が、図7(b)のようにDm〜DMの範囲の輝度分布に
割り付けられるようにデータが変換される。このように
して割り付けられたR信号が画像合成器45に送出され
る。データ変換は、上記の実効的な輝度分布領域(Da
〜Dbの領域)が、Dm〜DMの範囲に拡大されるよう
に適宜データを補間しながら行えばよい。
を描くR信号が、画像処理器44aに入力されたとき、
所定の画素数xを超える本来の輝度分布(Da〜Db)
が認識される。そして、画像処理器44aに入力される
際Da〜Dbの範囲に存在していたR信号の輝度分布
が、図7(b)のようにDm〜DMの範囲の輝度分布に
割り付けられるようにデータが変換される。このように
して割り付けられたR信号が画像合成器45に送出され
る。データ変換は、上記の実効的な輝度分布領域(Da
〜Dbの領域)が、Dm〜DMの範囲に拡大されるよう
に適宜データを補間しながら行えばよい。
【0047】即ち、図7(a)のようなヒストグラムを
描くとき、所定の画素数x以下となる輝度値を表す、D
aより小さいデータ量の分布及びDbより大きいデータ
量の分布が除去される。所定の画素数x以下となる輝度
値を表す分布が除去されたヒストグラムを被写体のR信
号におけるヒストグラムと見なし、図7(b)のよう
に、その最小値及び最大値がそれぞれDm、DMとなる
ように、そのヒストグラムを表す輝度範囲におけるR信
号のデータ量の割付を行う。上記の処理を画像処理器4
4b,44cにおいても行う(図6参照)。
描くとき、所定の画素数x以下となる輝度値を表す、D
aより小さいデータ量の分布及びDbより大きいデータ
量の分布が除去される。所定の画素数x以下となる輝度
値を表す分布が除去されたヒストグラムを被写体のR信
号におけるヒストグラムと見なし、図7(b)のよう
に、その最小値及び最大値がそれぞれDm、DMとなる
ように、そのヒストグラムを表す輝度範囲におけるR信
号のデータ量の割付を行う。上記の処理を画像処理器4
4b,44cにおいても行う(図6参照)。
【0048】このように、画像処理器44a,44b,
44cにおいて、R信号、G信号、及びB信号それぞれ
の被写体の輝度範囲にほぼ相当する実効的な輝度範囲
が、固体撮像装置の出力側のダイナミックレンジと一致
するように、上述したようなR信号、G信号、及びB信
号それぞれのデータ変換が行われると、画像合成器45
に出力される。このとき、データ変換による割付によっ
て各色信号の実効的な輝度範囲が互いに一致させられる
ため、カラーバランスのとれた信号となる。そして、画
像合成器45では、画像処理器44a,44b,44c
のそれぞれから出力されるR信号、G信号、及びB信号
を合成して、1枚のカラー画像を再生するための1つの
映像信号を生成する(図6参照)。
44cにおいて、R信号、G信号、及びB信号それぞれ
の被写体の輝度範囲にほぼ相当する実効的な輝度範囲
が、固体撮像装置の出力側のダイナミックレンジと一致
するように、上述したようなR信号、G信号、及びB信
号それぞれのデータ変換が行われると、画像合成器45
に出力される。このとき、データ変換による割付によっ
て各色信号の実効的な輝度範囲が互いに一致させられる
ため、カラーバランスのとれた信号となる。そして、画
像合成器45では、画像処理器44a,44b,44c
のそれぞれから出力されるR信号、G信号、及びB信号
を合成して、1枚のカラー画像を再生するための1つの
映像信号を生成する(図6参照)。
【0049】このような画像処理器44a〜44cでの
RGB信号のデータ量の割付処理は、例えば、数フィー
ルド又は数フレームに一度行い、処理を行わないフィー
ルド又はフレームでは、前回割付処理を行ったフィール
ド又はフレームと同様の割付処理を行う。これは、動画
の撮像を行った場合、被写体の輝度分布が急激に変化
し、1/60秒単位でデータ量の割り付ける範囲を修正
する必要性のある状況がまれであるためである。
RGB信号のデータ量の割付処理は、例えば、数フィー
ルド又は数フレームに一度行い、処理を行わないフィー
ルド又はフレームでは、前回割付処理を行ったフィール
ド又はフレームと同様の割付処理を行う。これは、動画
の撮像を行った場合、被写体の輝度分布が急激に変化
し、1/60秒単位でデータ量の割り付ける範囲を修正
する必要性のある状況がまれであるためである。
【0050】<第2の実施形態>本発明の第2の実施形
態について、図面を参照して説明する。図8は、本実施
形態の固体撮像装置の構成を示すブロック図である。
尚、本実施形態の固体撮像装置において、図4の固体撮
像装置と同一の目的で使用する部分については同一の符
号を付すとともに、その詳細な説明は省略する。
態について、図面を参照して説明する。図8は、本実施
形態の固体撮像装置の構成を示すブロック図である。
尚、本実施形態の固体撮像装置において、図4の固体撮
像装置と同一の目的で使用する部分については同一の符
号を付すとともに、その詳細な説明は省略する。
【0051】図8に示す固体撮像装置は、第1の実施形
態(図4)の固体撮像装置における画像処理器44a〜
44cの代わりに、画像処理器44x〜44zが設けら
れる。図9は、画像処理器44xの内部構成を示すブロ
ック図である。図9に示すように、画像処理器44x
は、図5で説明したのと同様に、輝度分布計測部51
と、レベル検知部52と、演算部53とを有している。
更に、演算部53によるデータ変換後のデータに基づく
新たなヒストグラムについて再度出力レベルの検知を行
うように、演算部53の出力が輝度分布計測部51にフ
ィードバックされるように構成されている。尚、画像処
理器44y,44zについても、画像処理器44xと同
様、図9のような構成となり、画像処理器44yはG信
号について、画像処理器44zはB信号について、それ
ぞれ処理を施す。
態(図4)の固体撮像装置における画像処理器44a〜
44cの代わりに、画像処理器44x〜44zが設けら
れる。図9は、画像処理器44xの内部構成を示すブロ
ック図である。図9に示すように、画像処理器44x
は、図5で説明したのと同様に、輝度分布計測部51
と、レベル検知部52と、演算部53とを有している。
更に、演算部53によるデータ変換後のデータに基づく
新たなヒストグラムについて再度出力レベルの検知を行
うように、演算部53の出力が輝度分布計測部51にフ
ィードバックされるように構成されている。尚、画像処
理器44y,44zについても、画像処理器44xと同
様、図9のような構成となり、画像処理器44yはG信
号について、画像処理器44zはB信号について、それ
ぞれ処理を施す。
【0052】このように構成される固体撮像装置の動作
について、以下に説明する。まず、画像データ抽出器4
3には、固体撮像素子42より出力されるR信号、G信
号及びB信号よりなる映像信号が入力され、R信号、G
信号、B信号をそれぞれ選択して画像処理器44x,4
4y,44zに出力する。
について、以下に説明する。まず、画像データ抽出器4
3には、固体撮像素子42より出力されるR信号、G信
号及びB信号よりなる映像信号が入力され、R信号、G
信号、B信号をそれぞれ選択して画像処理器44x,4
4y,44zに出力する。
【0053】画像処理器44x,44y,44zでは、
まず、画像データ抽出器43より送出されるR信号、G
信号、B信号それぞれについて、第1の実施形態と同様
に、輝度値毎の画素数を表すヒストグラムを求めて、そ
れぞれのヒストグラムに基づいて1度目のデータ量の割
付を行う。
まず、画像データ抽出器43より送出されるR信号、G
信号、B信号それぞれについて、第1の実施形態と同様
に、輝度値毎の画素数を表すヒストグラムを求めて、そ
れぞれのヒストグラムに基づいて1度目のデータ量の割
付を行う。
【0054】1度目の割付が行われる際、例えば、高輝
度部分に白キズの画素からの出力を有する図7(a)の
ようなヒストグラムを描くR信号が、画像処理器44x
に入力されたとき、この白キズの画素数が所定の画素数
x以下であれば、白キズによる分布より低輝度側にある
各輝度値において所定の画素数xを超える本来の輝度分
布が認識される。そして、画像処理器44xに入力され
る際Da〜Dbの範囲に存在していたR信号の輝度分布
を、図7(b)のようにDm〜DMの範囲の輝度分布に
割り付ける。
度部分に白キズの画素からの出力を有する図7(a)の
ようなヒストグラムを描くR信号が、画像処理器44x
に入力されたとき、この白キズの画素数が所定の画素数
x以下であれば、白キズによる分布より低輝度側にある
各輝度値において所定の画素数xを超える本来の輝度分
布が認識される。そして、画像処理器44xに入力され
る際Da〜Dbの範囲に存在していたR信号の輝度分布
を、図7(b)のようにDm〜DMの範囲の輝度分布に
割り付ける。
【0055】即ち、図7(a)のようなヒストグラムを
描くとき、所定の画素数x以下となる輝度値を表す、D
aより小さいデータ量の分布及びDbより大きいデータ
量の分布が除去される。所定の画素数x以下となる輝度
値を表す分布が除去されたヒストグラムを被写体のR信
号におけるヒストグラムと見なし、図7(b)のよう
に、その最小値及び最大値がそれぞれDm、DMとなる
ように、そのヒストグラムを表す輝度範囲におけるR信
号の1度目のデータ量の割付を行う。このような1度目
の割付が、RGB信号それぞれに対して、画像処理器4
4x〜44zにて施される。
描くとき、所定の画素数x以下となる輝度値を表す、D
aより小さいデータ量の分布及びDbより大きいデータ
量の分布が除去される。所定の画素数x以下となる輝度
値を表す分布が除去されたヒストグラムを被写体のR信
号におけるヒストグラムと見なし、図7(b)のよう
に、その最小値及び最大値がそれぞれDm、DMとなる
ように、そのヒストグラムを表す輝度範囲におけるR信
号の1度目のデータ量の割付を行う。このような1度目
の割付が、RGB信号それぞれに対して、画像処理器4
4x〜44zにて施される。
【0056】しかしながら、図10(a)のように、こ
の白キズの画素数が所定の画素数x以上である場合、こ
の白キズによる分布を含む輝度分布が被写体の輝度分布
として認識される。そのため、1度目の割付を施したと
き、白キズの画素から出力されるR信号のデータ量に相
当するDcが、図10(b)のようにデータ量DMに割
り付けられる。よって、画像処理器44xに入力される
際Da〜Dcの範囲に存在していたR信号の輝度分布
が、1度目の割付によって、図10(b)のようにDm
〜DMの範囲の輝度分布に割り付けられる。
の白キズの画素数が所定の画素数x以上である場合、こ
の白キズによる分布を含む輝度分布が被写体の輝度分布
として認識される。そのため、1度目の割付を施したと
き、白キズの画素から出力されるR信号のデータ量に相
当するDcが、図10(b)のようにデータ量DMに割
り付けられる。よって、画像処理器44xに入力される
際Da〜Dcの範囲に存在していたR信号の輝度分布
が、1度目の割付によって、図10(b)のようにDm
〜DMの範囲の輝度分布に割り付けられる。
【0057】このように、白キズの画素又は黒キズの画
素が所定の画素数より多いとき、画像処理器44x〜4
4zにおいて処理されたRGB信号のダイナミックレン
ジにおいて、白キズの画素からの信号のデータ量が最大
値に、又は、黒キズの画素からの信号のデータ量が最小
値に割り付けられる。よって、1度目の割付終了後、無
効なデータ量となる領域を有したダイナミックレンジの
信号として、RGB信号が2つの分布に分かれたヒスト
グラムを形成することがある。
素が所定の画素数より多いとき、画像処理器44x〜4
4zにおいて処理されたRGB信号のダイナミックレン
ジにおいて、白キズの画素からの信号のデータ量が最大
値に、又は、黒キズの画素からの信号のデータ量が最小
値に割り付けられる。よって、1度目の割付終了後、無
効なデータ量となる領域を有したダイナミックレンジの
信号として、RGB信号が2つの分布に分かれたヒスト
グラムを形成することがある。
【0058】そこで、本実施形態においては、2度目の
割付を行うことにより、この問題を回避している。例え
ば、R信号が、図10(b)のように、最大のデータ量
DM近傍において、無効なデータ量となる領域DAを有
する場合、最大のデータ量DMよりデータ量の小さい領
域Dm〜Dbの間に形成されるヒストグラムが実際の被
写体より得られるヒストグラムである。
割付を行うことにより、この問題を回避している。例え
ば、R信号が、図10(b)のように、最大のデータ量
DM近傍において、無効なデータ量となる領域DAを有
する場合、最大のデータ量DMよりデータ量の小さい領
域Dm〜Dbの間に形成されるヒストグラムが実際の被
写体より得られるヒストグラムである。
【0059】そこで、このように実際の被写体より得ら
れるRGB信号のヒストグラムのダイナミックレンジ
と、固体撮像装置の出力側のダイナミックレンジを一致
させるために、画像処理器44x〜44zにおいて、R
GB信号それぞれの無効なデータ量となる領域が除去さ
れる。そして、この無効なデータ量となる領域が除去さ
れたヒストグラムの最小のデータ量と最大のデータ量と
がそれぞれ、データ量Dm,DMに対応するように、R
GB信号の2度目のデータ量の割付が施される。即ち、
図10(b)の無効なデータ量となる領域が除去された
ヒストグラムの最小のデータ量Dm及び最大のデータ量
Dbがそれぞれ、図10(c)のように、データ量D
m,DMとなるように、データ量の割付が施される。
れるRGB信号のヒストグラムのダイナミックレンジ
と、固体撮像装置の出力側のダイナミックレンジを一致
させるために、画像処理器44x〜44zにおいて、R
GB信号それぞれの無効なデータ量となる領域が除去さ
れる。そして、この無効なデータ量となる領域が除去さ
れたヒストグラムの最小のデータ量と最大のデータ量と
がそれぞれ、データ量Dm,DMに対応するように、R
GB信号の2度目のデータ量の割付が施される。即ち、
図10(b)の無効なデータ量となる領域が除去された
ヒストグラムの最小のデータ量Dm及び最大のデータ量
Dbがそれぞれ、図10(c)のように、データ量D
m,DMとなるように、データ量の割付が施される。
【0060】このとき、1度目の割付が施されたRGB
信号によって生成されるそれぞれのヒストグラムにおい
て、最小のデータ量となる位置から所定のデータ量分離
れた位置までに、所定の画素数x以下となるデータ量が
所定の範囲以上続く無効なデータ量となる領域が存在す
る場合、この無効なデータ量となる領域よりもデータ量
が大きい領域において、所定の画素数xを超えるデータ
量の最小値を最小のデータ量Dmに割り付ける。又、1
度目の割付が施されたRGB信号によって生成されるそ
れぞれのヒストグラムにおいて、最大のデータ量となる
位置から所定のデータ量分離れた位置までに、所定の画
素数x以下となるデータ量が所定の範囲以上続く無効な
データ量となる領域が存在する場合、この無効なデータ
量となる領域よりもデータ量が小さい領域において、所
定の画素数xを超えるデータ量の最大値を最大のデータ
量DMに割り付ける。尚、この所定の画素数xは、映像
信号について、ヒストグラムを求めるために使用される
全画素数に対して0.1〜1%の割合となる画素数であ
る。
信号によって生成されるそれぞれのヒストグラムにおい
て、最小のデータ量となる位置から所定のデータ量分離
れた位置までに、所定の画素数x以下となるデータ量が
所定の範囲以上続く無効なデータ量となる領域が存在す
る場合、この無効なデータ量となる領域よりもデータ量
が大きい領域において、所定の画素数xを超えるデータ
量の最小値を最小のデータ量Dmに割り付ける。又、1
度目の割付が施されたRGB信号によって生成されるそ
れぞれのヒストグラムにおいて、最大のデータ量となる
位置から所定のデータ量分離れた位置までに、所定の画
素数x以下となるデータ量が所定の範囲以上続く無効な
データ量となる領域が存在する場合、この無効なデータ
量となる領域よりもデータ量が小さい領域において、所
定の画素数xを超えるデータ量の最大値を最大のデータ
量DMに割り付ける。尚、この所定の画素数xは、映像
信号について、ヒストグラムを求めるために使用される
全画素数に対して0.1〜1%の割合となる画素数であ
る。
【0061】このようにして、画像処理器44x〜44
zにおいて、RGB信号それぞれのダイナミックレンジ
が、固体撮像装置の出力側のダイナミックレンジと一致
するように、RGB信号に対して2度のデータ変換を施
すことによって、RGB信号の階調が調整されて、カラ
ーバランス、白バランス及び黒バランスが施されると、
画像合成器45に送出される。そして、画像合成器45
では、画像処理器44x〜44zのそれぞれから出力さ
れるRGB信号を合成して、1枚のカラー画像を再生す
るための1つの映像信号を生成する。
zにおいて、RGB信号それぞれのダイナミックレンジ
が、固体撮像装置の出力側のダイナミックレンジと一致
するように、RGB信号に対して2度のデータ変換を施
すことによって、RGB信号の階調が調整されて、カラ
ーバランス、白バランス及び黒バランスが施されると、
画像合成器45に送出される。そして、画像合成器45
では、画像処理器44x〜44zのそれぞれから出力さ
れるRGB信号を合成して、1枚のカラー画像を再生す
るための1つの映像信号を生成する。
【0062】このような画像処理器44x〜44zでの
RGB信号のデータ量の割付処理は、第1の実施形態と
同様に、数フィールド又は数フレームに一度行うことが
できる。
RGB信号のデータ量の割付処理は、第1の実施形態と
同様に、数フィールド又は数フレームに一度行うことが
できる。
【0063】<第3の実施形態>本発明の第3の実施形
態について、図面を参照して説明する。図11は、本実
施形態の固体撮像装置の構成を示すブロック図である。
尚、本実施形態の固体撮像装置において、図4の固体撮
像装置と同一の目的で使用する部分については同一の符
号を付すとともに、その詳細な説明は省略する。
態について、図面を参照して説明する。図11は、本実
施形態の固体撮像装置の構成を示すブロック図である。
尚、本実施形態の固体撮像装置において、図4の固体撮
像装置と同一の目的で使用する部分については同一の符
号を付すとともに、その詳細な説明は省略する。
【0064】図11に示す固体撮像装置は、画像合成器
45より出力される映像信号のダイナミックレンジの調
整を行う画像調整器46が更に設けられる。このように
構成される固体撮像装置の動作について、以下に説明す
る。まず、画像データ抽出器43には、固体撮像素子4
2より出力されるR信号、G信号及びB信号よりなる映
像信号が入力され、R信号、G信号、B信号をそれぞれ
選択して画像処理器44a,44b,44cに出力す
る。
45より出力される映像信号のダイナミックレンジの調
整を行う画像調整器46が更に設けられる。このように
構成される固体撮像装置の動作について、以下に説明す
る。まず、画像データ抽出器43には、固体撮像素子4
2より出力されるR信号、G信号及びB信号よりなる映
像信号が入力され、R信号、G信号、B信号をそれぞれ
選択して画像処理器44a,44b,44cに出力す
る。
【0065】画像処理器44a,44b,44cでは、
第1の実施形態(図4)と同様に、画像データ抽出器4
3より送出されるR信号、G信号、B信号それぞれにつ
いて、輝度値毎の画素数を表すヒストグラムを求めて、
それぞれのヒストグラムに基づいてデータ量の割付を行
う。このように割り付けられたRGB信号が画像合成器
45に送出され、1枚のカラー画像を再生するための1
つの映像信号が生成される。このようにして、それぞれ
のダイナミックレンジが固体撮像装置のダイナミックレ
ンジと一致するように画像処理器44a,44b,44
cで割付処理が施されたRGB信号より、1つの映像信
号が生成される。
第1の実施形態(図4)と同様に、画像データ抽出器4
3より送出されるR信号、G信号、B信号それぞれにつ
いて、輝度値毎の画素数を表すヒストグラムを求めて、
それぞれのヒストグラムに基づいてデータ量の割付を行
う。このように割り付けられたRGB信号が画像合成器
45に送出され、1枚のカラー画像を再生するための1
つの映像信号が生成される。このようにして、それぞれ
のダイナミックレンジが固体撮像装置のダイナミックレ
ンジと一致するように画像処理器44a,44b,44
cで割付処理が施されたRGB信号より、1つの映像信
号が生成される。
【0066】しかしながら、画像合成後も図10で説明
したのと同様の問題が残ることがある。即ち、白キズの
画素や黒キズの画素が所定の画素数より多いとき、画像
合成器45からの出力においても無効なデータとなる領
域を含んだ信号となる場合がある。そこで、本実施形態
においては、画像合成器45から出力信号に対して2度
目のデータ変換を行っている。尚、2度目のデータ変換
は、第2の実施形態で説明したものと同様であるので、
詳細な説明は省略する。
したのと同様の問題が残ることがある。即ち、白キズの
画素や黒キズの画素が所定の画素数より多いとき、画像
合成器45からの出力においても無効なデータとなる領
域を含んだ信号となる場合がある。そこで、本実施形態
においては、画像合成器45から出力信号に対して2度
目のデータ変換を行っている。尚、2度目のデータ変換
は、第2の実施形態で説明したものと同様であるので、
詳細な説明は省略する。
【0067】このようにして、画像処理器44a〜44
cでカラーバランスが施されたRGB信号が、画像合成
器45で1つの映像信号に合成された後、画像調整器4
6で再度割り付けられることによって映像信号の階調が
調整されて、白バランス及び黒バランスが施される。こ
のような画像処理器44a〜44cでのRGB信号のデ
ータ量の割付処理及び画像調整器46での映像信号のデ
ータ量の割付処理は、第1の実施形態と同様に、数フィ
ールド又は数フレームに一度行うことができる。
cでカラーバランスが施されたRGB信号が、画像合成
器45で1つの映像信号に合成された後、画像調整器4
6で再度割り付けられることによって映像信号の階調が
調整されて、白バランス及び黒バランスが施される。こ
のような画像処理器44a〜44cでのRGB信号のデ
ータ量の割付処理及び画像調整器46での映像信号のデ
ータ量の割付処理は、第1の実施形態と同様に、数フィ
ールド又は数フレームに一度行うことができる。
【0068】尚、本実施形態において、画像処理器にお
いて第1の実施形態のようなデータ量の割付が施された
RGB信号を、画像合成器で合成した後、合成された映
像信号を画像調整器において再びデータ量の割付を行う
ようにしたが、画像処理器において第2の実施形態のよ
うな2度のデータ量の割付が施されたRGB信号を、画
像合成器で合成した後、合成された映像信号を画像調整
器において再びデータ量の割付を行うようにしても構わ
ない。
いて第1の実施形態のようなデータ量の割付が施された
RGB信号を、画像合成器で合成した後、合成された映
像信号を画像調整器において再びデータ量の割付を行う
ようにしたが、画像処理器において第2の実施形態のよ
うな2度のデータ量の割付が施されたRGB信号を、画
像合成器で合成した後、合成された映像信号を画像調整
器において再びデータ量の割付を行うようにしても構わ
ない。
【0069】
【発明の効果】本発明によると、固体撮像素子より出力
される色信号の種類毎に、各色信号の実効的な出力分布
領域を固体撮像装置の出力側のダイナミックレンジと一
致させるとともに、各色信号の実効的な出力分布領域を
互いに一致させることができるので、簡単にカラーバラ
ンスをとることができる。又、固体撮像素子より出力さ
れる信号のデータ量に対して、2度以上、割付処理を行
うことによって、白バランス、黒バランス、及びカラー
バランスのとれた映像信号を生成することができるた
め、この映像信号に基づいて、コントラストの良い高精
細な画像を再生することができる。
される色信号の種類毎に、各色信号の実効的な出力分布
領域を固体撮像装置の出力側のダイナミックレンジと一
致させるとともに、各色信号の実効的な出力分布領域を
互いに一致させることができるので、簡単にカラーバラ
ンスをとることができる。又、固体撮像素子より出力さ
れる信号のデータ量に対して、2度以上、割付処理を行
うことによって、白バランス、黒バランス、及びカラー
バランスのとれた映像信号を生成することができるた
め、この映像信号に基づいて、コントラストの良い高精
細な画像を再生することができる。
【図1】本発明の固体撮像装置に備えられた固体撮像素
子の内部構成の一例を示すブロック回路図。
子の内部構成の一例を示すブロック回路図。
【図2】図1の固体撮像素子の一部を示す図。
【図3】図1の固体撮像素子内に設けられた画素の内部
構成の一例を示す回路図。
構成の一例を示す回路図。
【図4】第1の実施形態の固体撮像装置の内部構成を示
すブロック図。
すブロック図。
【図5】図4の固体撮像装置内の画像処理器の内部構成
を示すブロック図。
を示すブロック図。
【図6】処理動作を説明するためのRGB信号のヒスト
グラムの一例を示す図。
グラムの一例を示す図。
【図7】R信号のヒストグラムの一例を示す図。
【図8】第2の実施形態の固体撮像装置の内部構成を示
すブロック図。
すブロック図。
【図9】図8の固体撮像装置内の画像処理器の内部構成
を示すブロック図。
を示すブロック図。
【図10】R信号のヒストグラムの一例を示す図。
【図11】第3の実施形態の固体撮像装置の内部構成を
示すブロック図。
示すブロック図。
【図12】従来の固体撮像装置の内部構成を示すブロッ
ク図。
ク図。
41 赤外線カットフィルタ 42 固体撮像素子 43 画像データ抽出器 44a〜44c,44x〜44z 画像処理器 45 画像合成器 46 画像調整器
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C024 CX43 EX52 GX03 GY01 HX12 HX20 HX40 5C065 AA01 BB01 BB02 BB03 CC01 DD01 EE05 EE06 GG10 GG16 5C066 AA01 CA07 EA15 EA17 EF03 GA01 KD07 KE02 KM02
Claims (13)
- 【請求項1】 複数の画素及び複数の色フィルタを備え
入射光量に対して自然対数的に変化する複数種類の色信
号を発生する固体撮像素子を備えた固体撮像装置におい
て、 各色信号の出力レベルに対する頻度を表す出力分布を求
める出力分布計測手段と、 該出力分布計測手段で求められた出力分布において頻度
が第1所定値以上となる出力レベルの最小値と頻度が第
2所定値以上となる出力レベルの最大値とを検知する出
力レベル検知手段と、 前記最小値がその最小値より小さい第1出力レベルに、
前記最大値がその最大値より大きい第2出力レベルにそ
れぞれ割り付けられた新たな出力分布となるように各色
信号の変換を行う第1変換手段と、 を備えたことを特徴とする固体撮像装置。 - 【請求項2】 前記第1変換手段から出力される各色信
号の出力分布において、前記第1出力レベル近傍でその
頻度が第3所定値より小さい低頻度領域が所定の範囲を
越えて存在するとき、該低頻度領域における最大出力レ
ベルより大きい出力領域の最小値が、その最小値より小
さい第3出力レベルに割り付けられた新たな出力分布と
なるように各色信号を変換する処理、及び、前記第2出
力レベル近傍でその頻度が第4所定値より小さい低頻度
領域が所定の範囲を越えて存在するとき、該低頻度領域
における最小出力レベルより小さい出力領域の最大値
が、その最大値より大きい第4出力レベルに割り付けら
れた新たな出力分布となるように各色信号を変換する処
理のうち少なくとも一方を行う第2変換手段を、 さらに備えたことを特徴とする請求項1に記載の固体撮
像装置。 - 【請求項3】 前記第3及び第4所定値が、前記各色信
号毎に総画素数の0.1〜1%の画素数に相当する値で
あることを特徴とする請求項2に記載の固体撮像装置。 - 【請求項4】 前記第1変換手段が前記第2変換手段を
兼ねることを特徴とする請求項2又は請求項3の固体撮
像装置。 - 【請求項5】 前記第1所定値と前記第2所定値とが等
しいことを特徴とする請求項1〜請求項4のいずれかに
記載の固体撮像装置。 - 【請求項6】 前記第1又は第2変換手段より出力され
る各色信号を一つの映像信号に合成する画像合成手段を
さらに備えたことを特徴とする請求項1〜請求項5のい
ずれかに記載の固体撮像装置。 - 【請求項7】 前記第1又は第2変換手段から出力され
る各色信号を一つの映像信号に合成する画像合成手段
と、 前記映像信号に対して、いずれかの色信号の出力分布に
おいて、前記第1出力レベル近傍でその頻度が第3所定
値より小さい低頻度領域が所定の範囲を越えて存在する
とき、該低頻度領域における最大出力レベルより大きい
出力領域の最小値が、その最小値より小さい第3出力レ
ベルに割り付けられた新たな出力分布となるように各色
信号を変換する処理、及び、いずれかの色信号の前記第
2出力レベル近傍でその頻度が第4所定値より小さい低
頻度領域が所定の範囲を越えて存在するとき、該低頻度
領域における最小出力レベルより小さい出力領域の最大
値が、その最大値より大きい第4出力レベルに割り付け
られた新たな出力分布となるように各色信号を変換する
処理のうち、少なくとも一方の処理を行う第3変換手段
と、 をさらに備えたことを特徴とする請求項1〜請求項6の
いずれかに記載の固体撮像装置。 - 【請求項8】 前記第3及び第4所定値が、前記固体撮
像素子の総画素数の0.1〜1%の画素数に相当する値
であることを特徴とする請求項7の固体撮像装置。 - 【請求項9】 前記第1及び第2所定値が、前記各色信
号毎に、総画素数の0.1〜1%の画素数に相当する値
であることを特徴とする請求項7の撮像装置。 - 【請求項10】 複数の画素及び複数の色フィルタを備
え入射光量に対して自然対数的に変化する複数種類の色
信号を発生する固体撮像素子の信号処理方法であって、 各色信号の出力に対する頻度を表す出力分布を求める段
階、 該出力分布において頻度が第1所定値以上となる出力レ
ベルの最小値を検知する段階、 前記出力分布において頻度が第2所定値以上となる出力
レベルの最大値を検する段階、及び、 前記出力の最小値が、その最小値より小さい第1出力レ
ベルに割り付けられ、前記出力の最大値が、その最大値
より大きい第2出力レベルに割り付けられた新たな出力
分布となるように各色信号を変換する段階、 を含むことを特徴とする信号処理方法。 - 【請求項11】 前記変換を行った各色信号の出力分布
において、前記第1出力レベル近傍でその頻度が第3所
定値より小さい低頻度領域が所定の範囲を越えて存在す
るとき、該低頻度領域における最大出力より大きい出力
領域の最小値が、その最小値より小さい第3出力レベル
に割り付けられた新たな出力分布となるように各色信号
を変換する段階、及び、前記変換を行った各色信号の出
力分布において、前記第2出力レベル近傍でその頻度が
第4所定値より小さい低頻度領域が所定の範囲を越えて
存在するとき、該低頻度領域における最小出力より小さ
い出力領域の最大値が、その最大値より大きい第4出力
レベルに割り付けられた新たな出力分布となるように各
色信号を変換する段階のうち、少なくとも一方の段階を
さらに含むことを特徴とする請求項10に記載の信号処
理方法。 - 【請求項12】 前記各段階を経て得られた各色信号を
一つの映像信号に合成する段階をさらに含むことを特徴
とする請求項10又は請求項11に記載の信号処理方
法。 - 【請求項13】 前記各段階を経て得られた各色信号を
一つの映像信号に合成する段階を含むとともに、 前記映像信号の出力分布において、前記第1出力レベル
近傍でその頻度が第3所定値より小さい低頻度領域が所
定の範囲を越えて存在するとき、該低頻度領域における
最大出力より大きい出力領域の最小値が、その最小値よ
り小さい第3出力レベルに割り付けられた新たな出力分
布となるように各色信号を変換する段階、及び、前記映
像信号の出力分布において、前記第2出力レベル近傍で
その頻度が第4所定値より小さい低頻度領域が所定の範
囲を越えて存在するとき、該低頻度領域における最小出
力より小さい出力領域の最大値が、その最大値より大き
い第4出力レベルに割り付けられた新たな出力分布とな
るように各色信号を変換する段階のうち、少なくとも一
方の段階をさらに含むことを特徴とする請求項11に記
載の信号処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000298565A JP2002112277A (ja) | 2000-09-29 | 2000-09-29 | 固体撮像装置およびその信号処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000298565A JP2002112277A (ja) | 2000-09-29 | 2000-09-29 | 固体撮像装置およびその信号処理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002112277A true JP2002112277A (ja) | 2002-04-12 |
Family
ID=18780507
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000298565A Pending JP2002112277A (ja) | 2000-09-29 | 2000-09-29 | 固体撮像装置およびその信号処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002112277A (ja) |
-
2000
- 2000-09-29 JP JP2000298565A patent/JP2002112277A/ja active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6096243B2 (ja) | 画像データの処理方法およびシステム | |
| CN111432099B (zh) | 图像传感器、处理系统及方法、电子设备和存储介质 | |
| JP4161295B2 (ja) | 画像センサのダイナミックレンジを拡大するカラー画像撮像システム | |
| JP4374745B2 (ja) | 固体撮像装置 | |
| JP3988457B2 (ja) | 撮像装置及び固体撮像素子の信号処理方法 | |
| US8111298B2 (en) | Imaging circuit and image pickup device | |
| TW200803537A (en) | Method and apparatus providing automatic color blancing for digital imaging systems | |
| US20150256800A1 (en) | Signal processing device, signal processing method, and signal processing program | |
| US8675087B2 (en) | Image pickup apparatus and control method for correcting data output from pixels of an image pickup element | |
| US20030184673A1 (en) | Automatic exposure control for digital imaging | |
| KR100680471B1 (ko) | 보색 컬러 필터를 채택한 SoC 카메라 시스템 | |
| US20070285529A1 (en) | Image input device, imaging module and solid-state imaging apparatus | |
| JP2008199403A (ja) | 撮像装置、撮像方法および集積回路 | |
| JP2002223392A (ja) | 固体撮像装置 | |
| JP2002112277A (ja) | 固体撮像装置およびその信号処理方法 | |
| JP4320720B2 (ja) | 撮像装置 | |
| JP4479429B2 (ja) | 撮像装置 | |
| JP2009290795A (ja) | 画像処理装置、画像処理方法、画像処理プログラム、記録媒体、および電子情報機器 | |
| JP2005086630A (ja) | 撮像装置 | |
| JP7457568B2 (ja) | 撮像装置 | |
| TWI536765B (zh) | 具有透明濾波器像素之成像系統 | |
| KR100769553B1 (ko) | 색상 편차 보상 장치, 보상 방법 및 이를 이용한 이미지프로세서 | |
| JP2007096424A (ja) | 撮像装置 | |
| JP2025159721A (ja) | 画像キャプチャ方法および装置 | |
| TWI601427B (zh) | 具有透明濾波器像素之成像系統 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20050613 |