JP2018169162A - 固体撮像装置 - Google Patents
固体撮像装置 Download PDFInfo
- Publication number
- JP2018169162A JP2018169162A JP2017064142A JP2017064142A JP2018169162A JP 2018169162 A JP2018169162 A JP 2018169162A JP 2017064142 A JP2017064142 A JP 2017064142A JP 2017064142 A JP2017064142 A JP 2017064142A JP 2018169162 A JP2018169162 A JP 2018169162A
- Authority
- JP
- Japan
- Prior art keywords
- circuit
- signal
- light
- distance
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
- G01C3/06—Use of electric means to obtain final indication
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/10—Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4861—Circuits for detection, sampling, integration or read-out
- G01S7/4863—Detector arrays, e.g. charge-transfer gates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/487—Extracting wanted echo signals, e.g. pulse detection
- G01S7/4873—Extracting wanted echo signals, e.g. pulse detection by deriving and controlling a threshold value
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
- H04N25/771—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising storage means other than floating diffusion
-
- H—ELECTRICITY
- H10—SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
- H10F—INORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
- H10F39/00—Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
- H10F39/10—Integrated devices
- H10F39/12—Image sensors
- H10F39/18—Complementary metal-oxide-semiconductor [CMOS] image sensors; Photodiode array image sensors
-
- H—ELECTRICITY
- H10—SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
- H10F—INORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
- H10F39/00—Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
- H10F39/80—Constructional details of image sensors
- H10F39/803—Pixels having integrated switching, control, storage or amplification elements
- H10F39/8037—Pixels having integrated switching, control, storage or amplification elements the integrated elements comprising a transistor
-
- H—ELECTRICITY
- H10—SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
- H10F—INORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
- H10F39/00—Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
- H10F39/80—Constructional details of image sensors
- H10F39/813—Electronic components shared by multiple pixels, e.g. one amplifier shared by two pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Measurement Of Optical Distance (AREA)
Abstract
【課題】測定可能距離レンジが広く、強い背景光の環境下においても距離測定が可能な固体撮像装置を小面積で実現する。【解決手段】固体撮像装置10は、二次元的に配列された複数の画素を有している。各画素100は、所定の露光時間内に前記受光素子に到達した入射光を検知する受光回路110と、受光回路110からの受光信号に基づいて入射光の到達回数を計数するカウンタ回路120と、カウンタ回路120のカウント値に応じた比較信号を出力する比較回路130と、比較回路130からの比較信号がオン状態のとき、時間信号を距離信号として記憶する記憶回路140とを備え、受光回路110、カウンタ回路120、比較回路130及び記憶回路140に使用されるトランジスタがすべて同じ導電型である。【選択図】図3
Description
本発明は、距離情報の取得が可能に構成された固体撮像装置に関するものである。
従来、固体撮像装置は、画像を高感度、高精細に撮像することに注力されてきたが、それに加えて固体撮像装置からの距離情報も取得できる機能を併せ持つものも近年登場してきた。画像に距離情報が加われば固体撮像装置の撮影対象の3次元的な情報が感知できることになる。例えば、人物を撮影すれば、しぐさ(ジェスチャー)を3次元的に検知できるので、様々な機器の入力装置として使用できる。さらに例示すると、自動車に搭載すれば自車の周囲に存在する物体・人物との距離を認識できるので衝突防止や自動運転などに応用できる。
固体撮像装置から物体までの距離測定に使用される数々の方法の中に、光を固体撮像装置付近から物体に向けて照射されてから、物体により反射し固体撮像装置に帰還するまでの時間を測定するTOF(Time Of Flight)法がある。複眼方式などの他の方法と比較すれば、固体撮像装置の他に光源が必要になることが短所である。一方、光源を強くすれば、遠方の物体までの距離を高分解能で測定できることが長所である。固体撮像装置にTOF法を適用して3次元的な情報を得る方法としては、例えば特許文献1に掲載された技術がある。
特許文献1では、投射光(光パルス信号)が物体で反射した光と、投射光をOFFにした状態で得られた背景光との差分を求め、複数のトランスファーゲートによる上記差分の位相差を用いて3次元的な情報を得ている。以下の説明において、このような方法をパルス位相法と呼ぶことにする。
しかしながら、パルス位相法に、以下の問題点があることを発明者らは気づいた。
第1の問題点として、パルス位相法は、ダイナミックレンジが小さいということがある。言い換えると、パルス位相法は、測定可能な距離のレンジが小さい。受信光の強度は、物体までの距離の二乗に比例する。例えば、距離1mの物体からの受信光と、それと同じ物体で距離100mの場合の受信光との強度比は10000:1になる。ところが、固体撮像装置の単一画素の飽和電子数は通常10000程度なので、距離100mが検知可能な光学条件に設定した場合、距離1mの物体からの受信光は飽和してしまい、パルスの位相情報が失われることになる。背景光が強い場合、さらに飽和しやすくなる。
第2の問題点として、パルス位相法は、強い背景光に対する耐性が低いということがある。以下、具体的に説明する。例えば、特許文献1の図4に記載された駆動シーケンスにおいて、投射光のパルス幅は、距離測定レンジに応じて決定される。例えば、距離測定レンジが100mの場合であれば、投射光のパルス幅として667ナノ秒が必要であり、これを小さくすることはできない。一方、背景光成分の信号は投射光のパルス幅に比例して増加し、そのノイズである光ショットノイズは背景光成分の平方根に比例する。したがって、物体で反射した光信号に対して背景光成分の信号がほぼ等しくなる場合がある。この場合、上記光ショットノイズが極めて大きくなり、十分な精度をもって距離を測定できない。
本発明はかかる点に鑑みてなされたもので、その目的は、測定可能距離レンジが広く、かつ、強い背景光の環境下においても距離測定が可能な固体撮像装置を小面積で実現することにある。
本発明の一態様に係る固体撮像装置は、複数の画素が二次元的に配列された固体撮像装置であって、前記各画素は、受光素子を有し、所定の露光時間内に前記受光素子に到達した入射光の有無に応じて変化する受光信号を出力する受光回路と、前記受光信号に基づいて入射光の到達回数を計数し、カウント値として出力するカウンタ回路と、閾値設定信号を受け、当該閾値設定信号に基づいて前記カウント値に応じた閾値を設定するとともに、前記カウント値が当該閾値よりも大きい場合にオン状態となる比較信号を出力する比較回路と、前記比較回路及び前記カウンタ回路による距離測定期間に対応する時間信号を受け、前記比較信号がオン状態のとき、当該時間信号を距離信号として記憶する記憶回路とを備え、前記受光回路、前記カウンタ回路、前記比較回路及び前記記憶回路に使用されるトランジスタがすべて同じ導電型であることを特徴とする。
この構成によれば、測定可能距離レンジが広く、かつ、強い背景光の環境下においても距離測定が可能な固体撮像装置を実現することができる。また、受光回路、カウンタ回路、比較回路及び記憶回路に使用されるトランジスタがすべて第1導電型であるため、第1導電型と異なる導電型のトランジスタのためのウェルを形成する必要がなくなり、画素の回路面積を小さくすることができる。
本発明に係る固体撮像装置によれば、測定可能距離レンジが広く、かつ、強い背景光の環境下においても距離測定ができる。また、そのような固体撮像装置を小面積で実現することができる。
以下、本実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものでは全くない。例えば、具体的なブロック構成や回路構成を開示し、それを参照しながら説明するが、開示した構成はあくまでも一例であり、これに限られるわけではない。
<第1の実施形態>
−固体撮像装置の構成−
図1は、本実施の形態にかかる固体撮像装置を含む距離測定装置の構成を示す概略図である。図1に示すように、距離測定装置1は、固体撮像装置10と、信号処理装置20と、計算機30と、光源40とを備えている。
−固体撮像装置の構成−
図1は、本実施の形態にかかる固体撮像装置を含む距離測定装置の構成を示す概略図である。図1に示すように、距離測定装置1は、固体撮像装置10と、信号処理装置20と、計算機30と、光源40とを備えている。
固体撮像装置10は、画素領域12と、垂直シフトレジスタ13と、画素駆動回路14と、CDS(Correlated Double Sampling)回路15と、水平シフトレジスタ16と、出力回路17とを備えている。
画素領域12には、図2および図3に示す画素100が二次元的に配列されている。
垂直シフトレジスタ13は、画素領域12内のある特定の行の画素100を選択する。この機能は主に、ある特定の画素100から、その画素で取得された距離信号を順に出力するために使用される。
画素駆動回路14は、全ての画素100を同時に制御するために使用される。
CDS回路15は、画素100からの出力である距離信号に含まれるオフセット成分を除去するための回路である。なお、このオフセット成分は、各画素100で異なる値となる場合がある。
水平シフトレジスタ16は、画素100からの出力のうちで外部に取り出すものを列方向に、順に選択するための回路である。
出力回路17は、垂直シフトレジスタ13および水平シフトレジスタ16によって選択された画素100から出力された距離信号を出力する。なお、垂直シフトレジスタ13および水平シフトレジスタ16が、出力する信号を必要に応じて増幅するようにしてもよい。なお、本実施形態では、固体撮像装置10が4つの出力回路17を搭載している例を示しているが、これに限定されない。例えば、固体撮像装置10の出力回路17の数が、3つ以下または5つ以上であってもよい。
信号処理装置20は、アナログフロントエンド21と、ロジック・メモリ22とを備えている。
アナログフロントエンド21は、固体撮像装置10の出力回路17から出力された信号であるアナログ出力信号をデジタル出力信号に変換する。また、必要に応じて出力信号の順序を入れ替えて、ロジック・メモリ22に出力する。なお、出力回路17からの出力信号がデジタル信号である場合には、AD変換の機能は不要である。その場合、アナログフロントエンド21は、信号処理装置20から省いてもよいが、出力信号の順序を入れ替える機能が必要な場合には必要である。信号処理装置20から出力された距離信号は、計算機30に入力される。
計算機30は、例えばコンピュータであり、信号処理装置20から受けた距離信号に基づいて、固体撮像装置10の周囲の三次元情報を構成する。
光源40は、三次元情報を得たい箇所に光を投射する。光源40には、必要に応じて光を拡散することにより三次元情報を得たい箇所全体に光を照射する機構が内蔵されている。光源40からは、時間方向にパルス状の光(以下、単にパルス光という)が出力される。パルス光の出力時刻や幅は、信号処理装置20によって制御される。また、信号処理装置20は、光源40の制御と同期させて固体撮像装置10を制御する。固体撮像装置10は、信号処理装置20からの制御信号にしたがって、画素駆動回路14等を介して自機に搭載されている画素100を制御する。
−画素の構成−
図2は、本実施形態にかかる固体撮像装置10に搭載する画素100の構成を示すブロック図であり、図3は、同回路図である。なお、以下に説明する各種の信号について、“ON”とはトランジスタをオン制御する信号(ここではハイレベルの信号)のことをいい、“OFF”とはトランジスタをオフ制御する信号(ここではローレベルの信号)であることをいう。また、“ONする”とはハイレベルの電圧値の信号を印加することをいい、“OFFする”とはローレベルの電圧値の信号を印加することをいう。
図2は、本実施形態にかかる固体撮像装置10に搭載する画素100の構成を示すブロック図であり、図3は、同回路図である。なお、以下に説明する各種の信号について、“ON”とはトランジスタをオン制御する信号(ここではハイレベルの信号)のことをいい、“OFF”とはトランジスタをオフ制御する信号(ここではローレベルの信号)であることをいう。また、“ONする”とはハイレベルの電圧値の信号を印加することをいい、“OFFする”とはローレベルの電圧値の信号を印加することをいう。
図2に示すように、各画素100は、入射光を受ける受光回路110と、カウンタ回路120と、比較回路130と、記憶回路140との4つのブロックによって構成されている。以下、4つのブロックのそれぞれについて、図3を参照しながら具体的な構成および機能を説明する。なお、ここで説明する具体的な構成は、一例を示したものであり、画素100の構成は、ここに記載したものに限定されない。例えば、同じような機能を有する他の構成であっても、本実施形態と同様の作用効果が得られる。
受光回路110は、所定の露光時間内に受光素子111に到達した入射光の有無に応じて変化する受光信号をカウンタ回路に出力する機能を有する。具体的には、受光回路110は、受光素子111と、第1導電型としてのN型のトランスファゲートトランジスタ112と、N型のリセットトランジスタ114とを有している。受光素子111は、例えばフォトダイオードである。そして、受光素子111とトランスファゲートトランジスタ112とが直列接続されて1組の受光部113を構成しており、複数の受光部113がグランドと受光回路110の出力との間に並列接続されている。リセットトランジスタ114は、ソースが受光回路110の出力を介して、カウンタ回路120の入力に接続されている。また、リセットトランジスタ114のドレインは、電源に接続され、ゲートにはハイアクティブのリセット信号RSTが与えられている。また、各トランスファゲートトランジスタ112のゲート端子には、露光信号TRNが与えられている。
なお、受光回路110から出力される受光信号は、入射光の有無に応じて変化する2値化された信号であることが望ましく、以下の説明では受光信号が2値であるものとして説明する。ただし、受光信号は、入射光の強弱に応じて変化するような信号であってもよい。この場合、例えば、回路的に定めた所定の閾値に対する大小で2値として扱えばよい。さらに、受光回路110は、画素駆動回路14から出力された露光信号に応じて、光電変換を行う時間を任意に設定することができる。なお、受光素子111が入射光を受光した場合を“受光信号がある”と呼ぶ一方で、受光していない場合を“受光信号がない”と呼ぶことにする。なお、受光回路110は、リセット機能が付加されていない構成、すなわち、リセットトランジスタ114が設けられていない構成であってもよい。この場合、具体的な図示は省略するが、受光回路110には、受光信号を出力すると同時もしくは十分短い時間内に、回路内の電気信号をリセットする機能が付加されているのが望ましい。
カウンタ回路120は、受光回路の出力とグランドとの間に接続された電荷蓄積コンデンサ121と、入出力間に設けられたカウンタトランジスタ122と、カウンタトランジスタ122の出力ノードとカウンタ容量制御端子123との間に接続されたカウンタ容量124とを有している。カウンタ回路120は、受光回路110から入力される受光信号に基づいて入射光の到達回数を計数し、カウント値として出力する機能を有する。具体的には、画素駆動回路14から出力されたカウント信号CNTがONの期間、カウンタトランジスタ122がオン制御され、カウンタ回路120は受光回路110からの受光信号を検知する。そして、受光信号がある場合、カウント値を1つ増加させるように構成されている。すなわち、カウンタ回路120は、受光回路110への反射光の到達回数をカウントする。さらに、具体的な図示は省略するが、カウンタ回路120には、カウント値をリセットする機能が付加されていてもよい。カウンタ回路120のリセットは、画素駆動回路14から出力されたリセット信号(図2参照)にしたがって実行される。
比較回路130は、直流カットコンデンサ131を介してカウンタ回路の出力がゲートに接続された入力トランジスタ132と、クランプトランジスタ133と、反転トランジスタ134と、閾値設定トランジスタ135とを備えている。入力トランジスタ132、クランプトランジスタ133、反転トランジスタ134及び閾値設定トランジスタ135は、すべてN型のトランジスタである。
反転トランジスタ134及び入力トランジスタ132は、電源と出力許可信号CSETが入力される許可信号入力端子136との間に直列接続されている。反転トランジスタ134のゲートには、反転制御信号CMPが与えられている。クランプトランジスタ133は、所定のクランプ電位が与えられたクランプ端子137と入力トランジスタ132のゲートとの間に設けられ、そのゲートには、クランプ信号CLPが与えられている。クランプ電圧は、例えば、入力トランジスタ132の閾値電圧よりも高い電圧に設定されている。また、反転トランジスタ134と入力トランジスタ132との間の中間ノードが、閾値設定トランジスタ135を介して記憶回路140の入力に接続されている。そして閾値設定トランジスタ135のゲートには、出力制御信号MEMが与えられている。出力制御信号MEMは、画素駆動回路14から与えられる信号である。このような回路構成にすることにより、カウンタ回路120から出力されたカウント値が所定の閾値よりも大きいか否かを判定する比較機能をN型トランジスタのみで実現している。
さらに、比較回路130は、画素駆動回路14から出力された閾値設定信号(図2参照)がONのとき、カウンタ回路から入力されたカウント値に応じた閾値を設定することができるように構成されていてもよい。そして、設定された閾値に対し、入力されるカウント値が大きい場合、比較回路130からの出力信号である比較信号をONさせる機能を有している。なお、比較回路130には、出力許可信号が入力されていてもよい。この場合、出力許可信号がONの場合のみ、比較信号をON出力するように構成される。
記憶回路140は、N型の距離信号スイッチトランジスタ141と、距離記憶コンデンサ142と、N型の距離選択トランジスタ143とを有している。具体的には、距離信号スイッチトランジスタ141は、ドレインが、TP端子に接続され、ソースが距離記憶コンデンサ142を介してグランドに接続されている。TP端子には、画素駆動回路14から出力された時間信号が与えられる。時間信号は、例えば、第k距離測定期間(kは任意の自然数)に対して、kに1対1対応する電圧となるよう設定されている。また、距離信号スイッチトランジスタ141のゲートには、比較回路130から出力された比較信号が与えられている。これにより、比較信号がONしたとき、このタイミングでの時間信号の値が距離記憶コンデンサ142に記憶される。
距離選択トランジスタ143は、記憶回路140の出力ノード(距離信号スイッチトランジスタ141と距離記憶コンデンサ142の間のノード)と、受光回路110の出力との間に設けられている。また、距離選択トランジスタ143のゲートには、画素駆動回路14から出力された出力制御信号DISが与えられている。これにより、記憶回路140は、距離選択トランジスタ143がONしたとき、距離記憶コンデンサ142に記憶された時間信号を、距離信号として出力する。また、距離選択トランジスタ143の受光回路110側には、受光記憶コンデンサ115が接続されている。
−固体撮像装置の動作−
次に、本実施形態に係る固体撮像装置の動作について、具体的に説明する。図4は、固体撮像装置10の1フレーム期間に含まれる動作期間を示す図である。
次に、本実施形態に係る固体撮像装置の動作について、具体的に説明する。図4は、固体撮像装置10の1フレーム期間に含まれる動作期間を示す図である。
図4に示すように、1フレーム期間は、背景光検知期間、距離測定期間および距離信号出力期間に分けられる。固体撮像装置10は、背景光検知期間、距離測定期間および距離信号出力期間をこの順に繰り返す動作を行う。
図5は、本実施の形態にかかる固体撮像装置10の背景光検知期間の動作シーケンスについて説明するための図である。図6は、本実施の形態にかかる固体撮像装置10の距離測定期間の動作シーケンスについて説明するための図である。
図5に示すように、背景光検知期間では、まず、固体撮像装置10において、光源40の出力をOFFのままとする。この状態で、図2に示した画素100内の受光回路110で入射光を検知する。このとき、受光回路110には、周囲の環境下に存在する背景光(典型的には、昼間の屋外の場合は太陽光)が撮影対象の物体(測定対象物)で反射し、その反射光が受光回路110に入射することになる。受光回路110に併せて設置した回路(図示省略)により、光電変換を行う時間(露光時間)をa秒に設定し、この背景光を受光する。このa秒間に光が画素まで到達した場合、受光回路110により、“受光信号がある”、の状態に設定される。このあと、カウント信号をONする。このとき、受光信号がある場合は、カウント値が1つ増加する。
その後、受光回路110のリセット信号をONし、受光回路110の内部の電気信号および受光信号をリセットする。この一連の行程をb回(bは任意の自然数)繰り返す。すなわち、カウンタ回路120では、上記b回の露光のうち、何回光が到達したかを計数し、記憶することになる。ここでは、光がc回到達したとする。ただし、上記aが十分小さいか、入射光が十分小さく、入射光が光子数個に分解でき、断続的に入射するとみなせることを前提としている。通常は、aが数10ナノ(秒)以下であれば、この前提は十分成立する。
次に、比較回路130に対し、閾値設定信号をONし、カウンタ回路120の出力値であるc回に応じた閾値を設定する。閾値は、カウンタ回路120の出力値であるcそのものでもよいが、ここではd=c+e(eは任意の正の値)に設定する。
次に、距離測定期間の動作を行う。ここでは、距離測定レンジとして、固体撮像装置10の至近距離からRメートルまでの範囲にある物体を検出するものとする。また、その分解能はR/Nメートル(Nは1以上の整数)とする。これを実現するため、図6に示すように、距離測定期間では以下のような行程とする。
まず、図6に示すように、距離測定期間をN個の期間にさらに分ける。分けられたそれぞれの区間は、0〜R/Nメートルを検知する期間1、R/N〜2R/Nメートルを検知する期間2、・・・、(α―1)R/N〜αR/Nメートルを検知する期間α(αは1以上N以下の整数)、・・・、(N−1)R/N〜Rメートルを検知する期間Nとする。なお、距離測定期間の分け方はこの通りに限られるものでない。例えば、距離測定期間の分け方が、不等ピッチ、すなわち、各距離測定期間のうちの少なくとも一部の期間が、他の期間と異なるように設定されていてもよい。ただし、説明の便宜上、ここでは上記のように、N個の等ピッチ期間に分けたものとして説明する。
次に、期間α内での動作について説明する。まず、カウンタ回路120のリセット信号をONし、カウント値をリセットする。また、記憶回路140に入力する時間信号をαに設定する。記憶回路140に入力する時間信号の値は任意に設定することが可能であり、期間1〜期間Nで互いに異なっていればよい。さらに、連続的に変化してもよい。なお、説明の便宜上、図6では、時間信号が期間α内で一定値となるものとして説明している。
さらに、光源40を制御し、a秒間の幅を持った光パルスを投射する。この光がもし、期間αで測定する距離に対応した物体、すなわち(α―1)R/N〜αR/Nメートル先にある物体に反射して固体撮像装置10内のある画素に入射する場合、物体で反射した光パルス(以下、受信光ともいう)は、光源から発射した光パルス(以下、投射光ともいう)が発射した時刻に対して、
だけ遅れて固体撮像装置10に到達する。ここで、Vは光速である。したがって、受光回路110の露光信号TRNにより、露光をこの時刻に開始しa秒間だけ露光するように設定すれば、この距離範囲内にある物体からの受信光を検知することができる。このあと、カウンタ回路120において、カウント信号CNTにより受信光を検知した回数、すなわち光の到達回数のカウントを行う。その後、受光回路110のリセット信号によりリセットする。
上述した手順で露光をb回繰り返し、カウンタ回路120で光の到達回数を計数する。もし、期間αに対応する距離範囲内に物体が存在しなければ、計数の期待値は、背景光成分であるc回であり、閾値dより小さいので、後段の比較回路130の動作は変化しない。一方で、期間αに対応する距離範囲内に物体が存在する場合、計数の期待値はc回を上回る値であるf回となる。すなわち、受信光強度が十分大きい場合、
を満たす。
その後、比較回路130の出力許可信号をONする。上記の式2が満たされている場合は、比較信号がONし、時間信号が距離信号として記憶される。一方で、式2が満たされない場合は、記憶されている距離信号(あるいは初期値の場合もありえる)は変化しない。
その後、期間(α+1)が続き、期間Nで距離測定期間が終了する。このとき、各画素の記憶回路140には、各画素が撮影する物体までの距離に対応した信号、すなわち距離信号が記憶されている。
最後に、距離信号出力期間に、各画素100に記憶された距離信号を出力する。図1に示した距離測定装置1内の固体撮像装置10の場合は、垂直シフトレジスタ13および水平シフトレジスタ16により、順に画素を選択し、距離信号を出力する。この距離信号を信号処理装置20などで処理することにより、三次元的な情報(すなわち距離画像)が得られる。以下、この距離画像を得るための固体撮像装置10からの信号を単に距離画像と呼ぶこともある。
ここまでは、背景光検知期間の露光時間と距離測定期間の露光時間は同じ、また背景光検知期間の光パルス数と距離測定期間の光パルス数も同じとしたが、これに限られるものではない。ただし、異ならせる場合は、式2の成立要件が異ならせた値に応じて変形することになる。
さらに、各期間の光パルスの発射時刻に対する露光信号の遅れ時間もこれに限られるものではなく、様々なバリエーションが容易に考えられる。
次に、先行技術文献で使用されているパルス位相法よりも、本実施形態にかかる固体撮像装置10による距離測定のほうが、距離の測定ダイナミックレンジが広い理由を説明する。
パルス位相法の場合、簡単化して考えると、受信光の強度変化によって距離を測定する方式であるので、画素の飽和レベルを超えた場合には測定不能となる。ところで、受信光強度は物体までの距離の二乗に反比例し、また物体の反射率に比例する。例えば、最大測定距離を100メートル、測定対象の物体の反射率が10%〜100%であるとする。このとき、1メートルの距離にある反射率100%の物体からの受信光強度と、100メートルの距離にある反射率10%の物体からの受信光強度の比は100000:1に達する。一方、一般的な固体撮像装置の単一画素の飽和電子数は10000程度であるので、上記2つを同時に測定できないことを意味している。
一方、固体撮像装置10による距離測定の場合、測定可能か否かは式2が成立するほど受信光強度が大きいことだけが条件であり、物体までの距離と反射率による受信光強度の変化にはまったく左右されない。したがって、固体撮像装置10による距離測定のほうが、パルス位相法よりも距離ダイナミックレンジが大きいといえる。
以下において、固体撮像装置10による距離測定のほうが、パルス位相法よりも背景光強度に対する耐性がよい理由を説明する。測定条件として、上述のように至近距離からRメートルまでの範囲にある物体を検出することにする。また測定精度はR/Nメートルを確保するものとする。
このとき、背景光の影響を最も受けるのは、最遠距離、すなわちRメートル先の物体を測定する場合である。なぜなら、背景光の物体からの反射光強度は、物体までの距離によらないのに対し、光源からの受信光は距離の2乗に反比例するからである。すなわち、受信光におけるSN比は、距離が遠いほど小さくなる。
以下、測定可能である受信光の条件を計算する。以下、エネルギーの単位は光子数であるとする。計算の仮定として、ノイズ成分は、背景光のショットノイズが支配的であるとし、受信光のショットノイズはそれに対し十分小さく無視できるとする。
単一画素への受信光の単位時間当たりの入射ピーク光子数をSとする(入射ピークパワーを光子数換算した値である)。Sは、光源のエネルギーおよび物体の反射率、距離で決定される。この受信光と同時に、背景光が物体に反射することによる成分が重畳する。背景光による入射光成分の単位時間当たりの光子数をBとする。パルス位相法の場合、パルス幅を
にしなければならないから、パルス数をMとすると、単一画素への受信光の合計エネルギーTは、
となる。一方、背景光の成分の合計エネルギーは、
となるが、これに光ショットノイズ
が重畳している。測定される受信光エネルギーTを用いて、精度R/Nメートルを算出するための必要条件は、TがT/N以下の精度を持って測定できることである。すなわち、
が条件である。
それに対して、かかる固体撮像装置10による距離測定に対する式7に対応する式を以下導出する。まず、単一の光パルスの幅およびそれを検知するための露光時間は、期間一つに対応する距離範囲の2倍を光速で通過する時間、すなわち、
以下であればよい。ここでは、単一の光パルスの幅およびそれを検知するための露光時間は、式8に等しいとする。また、期間一つに単一画素に入射する受信光の合計エネルギーは、
となる。ただし、ここでは期間ごとのパルス数とピークエネルギーは等しいと仮定した。これと同時に、入射する背景光による光エネルギーは、
であり、
この光の光ショットノイズは、
である。
この光の光ショットノイズは、
したがって、閾値dは、式10と式11の合計よりも大きいことが必要となる。加えて、受信光が到達しない期間において到達したと誤って判定することを避けるためには、閾値dをさらに大きくするのが望ましい。なお、統計理論によれば、式11の光ショットノイズが、式11のγ倍よりも大きくなる確率は、γ=1のとき16%、γ=2のとき2.5%、γ=3のとき0.15%である。この確率が1/Nよりも小さければ、上記誤判定は生じない。例えばN=100の場合、γ=3であればよい。すなわち、閾値dは、
であるから、誤判定を生じずに測定するための必要条件は、
である。
簡単のために、固体撮像装置10による距離測定において、総パルス数をパルス位相法による測定の場合と一致させる場合を考える。すなわち、固体撮像装置10による距離測定において、パルス位相法のパルス数M、測定期間数N、各測定期間内でのパルス数bが、M=Nbを満たす場合を考えると、式13は、
となる。式14と式7とを比較すると、少なくともN>γの場合には、かかる固体撮像装置10による距離測定方法の方が、パルス位相法よりも小さい光源エネルギーで測定を行うことができる、すなわち、背景光に対する耐性が高いことがわかる。ジェスチャー認識、自動車に搭載して障害物検知を行うなどの場合に、固体撮像装置10による距離測定を用いるのであれば、N>100は少なくとも要求されるため、実質的にパルス位相法よりも小さい光源エネルギーでよいことが分かる。
次に、以下において、背景光成分が小さい場合でも、測距精度が高い理由を説明する。ここではノイズの主成分が受信光成分の光ショットノイズであるとし、他のノイズは無視できるとする。
パルス位相法の場合、受信光成分の光ショットノイズ成分は、大略光エネルギーTに対する光ショットノイズに等しいと考えて、
である。精度R/Nメートルを算出するための必要条件は、TがT/N以下の精度を持って測定できることである。すなわち、
である。
固体撮像装置10による距離計測の場合、簡単のため、M=Nbを満たすとすると、単一の測定期間内の受信光子数は、
である。精度R/Nメートルを得るための必要条件は、単一の測定期間内の受信光エネルギーが1光子以上であることである。すなわち、
である。式16と式18を比較すれば、N>1の場合について、パルス位相法よりもかかる固体撮像装置10による距離測定の方が、小さい光エネルギーで行うことができることがわかる。逆に言うと、同一光エネルギーならば、かかる固体撮像装置10による距離測定の方が、高い測距精度が得られるといえる。
以上のように、本実施形態にかかる固体撮像装置10によると、測定可能距離レンジが広く、強い背景光の環境下においても距離測定が可能である。
また、図3に示すように、本実施形態では、画素100を構成する受光回路110、カウンタ回路120、比較回路130及び記憶回路140に使用されるトランジスタが、全てN型のトランジスタで構成されている。このように、画素100にP型のトランジスタが含まれないようにすることで、P型チャネルトランジスタを形成するためのN型ウェル領域を形成する必要がなくなり、画素面積を小さくすることができる。なお、具体的な図示は省略するが、受光回路110、カウンタ回路120、比較回路130及び記憶回路140に使用されるトランジスタを、全てP型のトランジスタで構成することも可能であり、同様の効果を得ることができる。
<第2の実施形態>
第1の実施形態の構成は、高い測距精度が得られるものであるが、物体から反射した受信光および背景光が非常に微弱な場合には、カウンタ回路にて計数する回数が多くなる場合がある。具体的に、物体から反射した受信光および背景光が非常に微弱な場合とは、露光回数bに対する、背景光到達回数cおよび投射光到達回数fが、以下の条件を満たす場合を指す。
第1の実施形態の構成は、高い測距精度が得られるものであるが、物体から反射した受信光および背景光が非常に微弱な場合には、カウンタ回路にて計数する回数が多くなる場合がある。具体的に、物体から反射した受信光および背景光が非常に微弱な場合とは、露光回数bに対する、背景光到達回数cおよび投射光到達回数fが、以下の条件を満たす場合を指す。
そこで、本実施形態では、図7および図8に示すように、第1の実施形態の構成に加えて、スパース光検出回路をさらに備えている。ここで、「スパース光」は、光の最小単位である光子が到達することがスパース、すなわち「疎」であることを意味して、このように呼んでいる。
以下において、第2の実施形態に係る画素およびその駆動方法について具体的に説明する。なお、以下の説明では、第1の実施形態との相違点を中心に説明するものとし、共通する部分や重複する部分について、その説明を省略する場合がある。例えば、距離測定装置1および固体撮像装置の全体的な構成は、第1の実施形態と共通であり、ここではその詳細な説明を省略する。
−スパース光検出回路の概要−
まず、スパース光検出回路150の構成および機能の概要について説明する。
まず、スパース光検出回路150の構成および機能の概要について説明する。
スパース光検出回路150は、その内部に1つの内部記憶回路151を備えており、その内部記憶回路151の状態を“H”(Highレベル)または“L”(Lowレベル)にできるように構成されている。そして、受光回路110からの受光信号により、受光があった場合、内部記憶回路151の状態を“H”に変化させる。一方、受光がない場合は、内部記憶回路151の状態を変化させない。これにより、複数回の露光を繰り返し実施することで、そのうち一度でも受光があった場合に、内部記憶回路151が“H”に変化するようになっている。この状態を、濃縮化信号として後段のカウンタ回路120に出力するようにする。その出力後、スパース光リセット信号CRSにより、内部記憶回路151の状態を“L”に戻すようにする。ここまでの工程を1回として、この工程をb回(bは任意の自然数)繰り返すことにより、物体から反射した受信光および背景光が非常に微弱な場合でも、第1の実施形態と同様の距離測定が可能となる。換言すると、この“H”に変化する確率が高められた濃縮化信号を用いて、背景光到達回数cおよび受信光到達回数fを計数することにより、物体から反射した受信光および背景光が非常に微弱な場合においても、計数回数が増加することなく、第1の実施形態と同様の距離測定が可能となる。
−画素の構成−
以下において、図8を参照しながら具体的に説明する。なお、受光回路110、カウンタ回路120、比較回路130および記憶回路140の4つのブロックは、第1の実施形態と共通の構成要素であり、その詳細な説明を省略する場合がある。
以下において、図8を参照しながら具体的に説明する。なお、受光回路110、カウンタ回路120、比較回路130および記憶回路140の4つのブロックは、第1の実施形態と共通の構成要素であり、その詳細な説明を省略する場合がある。
スパース光検出回路150は、入出力間に並列接続されたスパース光リセットトランジスタ152およびスパース光記憶トランジスタ153と、スパース光検出回路150の出力ノードとグランドとの間に設けられたスパース光記憶コンデンサ154と、増幅トランジスタ155と、行選択トランジスタ156とを備えている。
スパース光リセットトランジスタ152のゲートには、画素駆動回路14から出力されたリセット信号CRSが与えられている。スパース光記憶トランジスタ153のゲートは、スパース光検出回路150の出力ノードに接続されている。すなわち、スパース光記憶トランジスタ153は、スパース光検出回路150の入出力間にダイオード接続されたトランジスタである。増幅トランジスタ155および行選択トランジスタ156は、電源とCDS回路の入力端子(図示省略)との間に直列接続されている。
ここで、スパース光リセットトランジスタ152、スパース光記憶トランジスタ153、増幅トランジスタ155および行選択トランジスタ156は、すべてN型のトランジスタである。すなわち、本実施形態においても、画素を構成する受光回路110、スパース光検出回路150、カウンタ回路120、比較回路130及び記憶回路140に使用されるトランジスタが、全てN型のトランジスタで構成されている。これにより、N型ウェル領域を形成する必要がなくなり、画素面積を小さくすることができる。
−固体撮像装置の動作−
次に、本実施形態に係る固体撮像装置の動作について、具体的に説明する。ここで、背景光の強度は光源から投射される投射光に対して十分小さいとする。この場合、背景光の検出カウント数cは実質的に“0”であり、背景光検知期間を省略することができる。
次に、本実施形態に係る固体撮像装置の動作について、具体的に説明する。ここで、背景光の強度は光源から投射される投射光に対して十分小さいとする。この場合、背景光の検出カウント数cは実質的に“0”であり、背景光検知期間を省略することができる。
ここで、第1の実施形態と同様に、1フレーム期間は、図4に示すように、背景光検知期間、距離測定期間および距離信号出力期間に分けられる。なお、背景光検知期間および距離信号出力期間の動作は、第1の実施形態と共通であり、ここでは、その詳細な説明を省略する。
以下において、本実施形態に係る距離測定期間の動作について具体的に説明する。図9は、本実施形態に係る距離測定期間の動作シーケンスについて説明するための図である。また、図10は、本実施形態に係る受光回路の駆動シーケンスおよび光照射期間の動作シーケンスについて説明するための図である。
まず、図9に示すように、図4に示されている距離測定期間をN個の期間にさらに分ける。N個の期間のうちの、第k番目(ただし、1≦k≦N)の距離測定期間(以下、第k距離測定期間ともいう)は、リセット・閾値設定期間、光照射期間、閾値越え検出・記憶期間の3つの期間にさらに細分される。図9では、スパース光検出回路部、カウンタ回路部および比較回路部の駆動シーケンスをまとめて示している。
(リセット・閾値設定期間)
最初のリセット・閾値設定期間について、図10を参照しつつ、受光回路の駆動シーケンスを説明する。図10には、放射光のタイミングも合わせて示してある。
最初のリセット・閾値設定期間について、図10を参照しつつ、受光回路の駆動シーケンスを説明する。図10には、放射光のタイミングも合わせて示してある。
まず、リセット信号RSTによりリセットトランジスタ114をONして、受光記憶コンデンサ115の電荷をリセットする。その後、光源40から発光パルスを測定物体物に向けて投射する。投射された発光パルスは、測定対象物に反射し、反射光が固体撮像装置10側に帰還してくる。その反射光の遅れ時間が、第k距離測定期間で設定した遅れ時間αkと略一致すれば、測定対象物は、第k距離測定期間で測定する距離区間内に存在することになる。ここでは、そうであったと過程する。
露光信号TRNは、発光パルスが投射されたタイミングに対して、遅れ時間αkを持ったタイミングでONするように設定されている。露光信号TRNがONの期間に受光された反射光が受光回路110で光電変換され、光電変換後の電荷がトランスファゲートトランジスタ112を介して転送され、受光記憶コンデンサ115の電圧VFDが低下する。この電圧を、後段のスパース光検出回路150に出力する。その後、リセット信号RSTによりリセットトランジスタ114をONして、再び受光記憶コンデンサ115の電荷をリセットする。上記の工程をb回(bは任意の自然数)繰り返す。このとき、下に述べるように、b回のうち一度でも受光記憶コンデンサ115の電圧VFDが低下した場合、スパース光検出回路150内のスパース光記憶コンデンサ154にその低下した電圧が記憶される。
次に、スパース光検出回路150の動作について説明する。
まず、リセット信号CRSがONに設定され、スパース光リセットトランジスタ152がオン制御される。これにより、スパース光検出回路150のスパース光記憶コンデンサ154と、受光回路110のリセットトランジスタ114とが電気的に接続される。このとき、同時にリセット信号RST(図9では図示省略)がONに設定され、スパース光記憶コンデンサ154の電荷がリセットされる。その後、リセット信号RSTがOFFに設定され、次いでCRSをリセット信号CRSがOFFに設定される。
次に、カウンタ容量制御端子123に入力される入力信号EIVを“L”にセットし、クランプ信号CLPによりクランプトランジスタ133をONする。これにより、直流カットコンデンサ131に、クランプトランジスタ133のドレインに与えている電圧、すなわち、クランプ端子137に与えられているクランプ電圧が印加される。前述のとおり、クランプ電圧は、入力トランジスタ132の閾値電圧よりも高い電圧に設定されている。その後、入力信号EIVを“H”にセットし、クランプトランジスタ133をOFFする。
(光照射期間)
次に、光照射期間について説明する。
次に、光照射期間について説明する。
この光照射期間では、スパース光検出回路150、カウンタ回路120および比較回路130の制御パルスはON/OFFしない。そして、この光照射期間のいずれかのタイミングにおいて、仮に受光記憶コンデンサ115の電圧VFDが低下した場合、スパース光記憶コンデンサ154の電圧VCNTが高い電圧に設定されているので、スパース光記憶トランジスタ153がONした状態となる。そのため、電圧VCNTは、電圧VFDと、スパース光記憶トランジスタ153の閾値電圧とが加算された電圧に設定される。同時に、スパース光記憶トランジスタ153はほとんどOFFの状態になり、その後は上記で入力された電圧VFDの電圧値よりも小さい電圧が入力されない限り、スパース光記憶トランジスタ153はONしない。これより、スパース光記憶コンデンサ154には、前述の濃縮化信号が蓄積されることになる。
(閾値越え検出・記憶期間)
次に、閾値越え検出・記憶期間について説明する。
次に、閾値越え検出・記憶期間について説明する。
まず、カウンタ容量制御端子123に入力される入力信号EIVを“L”にセットし、反転制御信号CMPにより反転トランジスタ134をONさせ、許可信号入力端子136の出力許可信号CSETを“L”に設定する。このときの挙動は、光検出しなかったとき、すなわち、スパース光記憶コンデンサ154の電圧VCNTが“H”のままである場合と、光検出したとき、すなわち電圧VCNTが“L”になった場合とに分かれる。
まず、光検出したときは、比較回路130の入力トランジスタ132のゲート電圧は閾値電圧よりも低くなる。したがって、入力トランジスタ132がOFFする。このとき、閾値設定トランジスタ135のドレイン(入力トランジスタ132に接続されている側)の電圧が、反転トランジスタ134のドレイン電圧である電源電圧にセットされる。なお、このノードの寄生容量によりこの電圧は記憶される。その後、入力信号EIVを“H”にセットし、反転制御信号CMPにより反転トランジスタ134をOFFに戻す。
その後、出力制御信号MEMにより閾値設定トランジスタ135がONされ、記憶回路140の距離信号スイッチトランジスタ141のゲートに、電源電圧、すなわち“H”がセットされる。そうすると、距離信号スイッチトランジスタ141を介して、TP端子の電圧が距離記憶コンデンサ142に書き込まれる。ここで、TP端子の電圧は、第k距離測定期間に対して、1対1に対応する電圧に設定されている。これにより、距離記憶コンデンサ142には、測定対象物(物体)までの距離に対応する電圧が書き込まれることになる。そのあと、許可信号入力端子136の出力許可信号CSETが“L”に戻される。
一方で、光検出しなかったときは、比較回路130の入力トランジスタ132のゲート電圧は閾値電圧よりも高くなる。これは、この入力トランジスタ132のゲート電圧が、あらかじめクランプトランジスタ133のドレイン電圧に設定されているからである。したがって、入力トランジスタ320がOFFする。その後、入力信号EIVを“H”にセットし、反転制御信号CMPにより反転トランジスタ134をOFFに戻す。これにより、閾値設定トランジスタ135のドレインはCSETの電圧、すなわち“L”に設定される。
その後、出力制御信号MEMにより閾値設定トランジスタ135がONされ、記憶回路140の距離信号スイッチトランジスタ141のゲートに、“L”がセットされる。これにより距離記憶コンデンサ142の電圧は変化せず、そのまま次の距離測定期間に移ることになる。
このようにして、全ての距離測定期間が終了した後に、各画素100に対応する測定対象物(物体)までの距離に対応した電圧が距離記憶コンデンサ142に書き込まれていることになる。もしくは、測定対象物(物体)が距離測定範囲内に存在しない場合は、距離記憶コンデンサ142がリセット電圧になっていることになる。
その後、距離選択トランジスタ143をONすることにより、距離記憶コンデンサ142の電圧信号が増幅トランジスタ155に出力される。これにより、行選択トランジスタ156を介して、距離信号をCDS回路15に読み出すことができる。その後、リセット信号RSTにより、リセットトランジスタ114をONして、リセットレベルをCDS回路15に読み出すとともに、距離記憶コンデンサ142をリセットして、1つの画素100の工程が終了する。
以上のように、本実施形態によると、反射光の信号光エネルギーが小さい場合においても、精度よく距離測定を行うことができる。
本発明にかかる固体撮像装置は、測定可能距離レンジが広く、かつ、強い背景光の環境下においても距離測定ができるため、自動車用機器、距離測定装置などに用いることができ、衝突防止または自動運転のために応用することができる。
10 固体撮像装置
100 画素
110 受光回路
120 カウンタ回路
130 比較回路
140 記憶回路
150 スパース光検出回路
100 画素
110 受光回路
120 カウンタ回路
130 比較回路
140 記憶回路
150 スパース光検出回路
Claims (6)
- 複数の画素が二次元的に配列された固体撮像装置であって、
前記各画素は、
受光素子を有し、所定の露光時間内に前記受光素子に到達した入射光の有無に応じて変化する受光信号を出力する受光回路と、
前記受光信号に基づいて入射光の到達回数を計数し、カウント値として出力するカウンタ回路と、
閾値設定信号を受け、当該閾値設定信号に基づいて前記カウント値に応じた閾値を設定するとともに、前記カウント値が当該閾値よりも大きい場合にオン状態となる比較信号を出力する比較回路と、
前記比較回路及び前記カウンタ回路による距離測定期間に対応する時間信号を受け、前記比較信号がオン状態のとき、当該時間信号を距離信号として記憶する記憶回路とを備え、
前記受光回路、前記カウンタ回路、前記比較回路及び前記記憶回路に使用されるトランジスタがすべて第1導電型である、ことを特徴とする固体撮像装置。 - 前記比較回路は、前記カウント値がゲートに与えられ、かつ、比較動作期間において、前記カウント値が前記閾値より大きい場合にオン状態となる比較信号を出力する前記第1導電型の入力トランジスタを備え、
前記入力トランジスタは、前記比較動作期間以外のときには、前記カウント値の大小にかかわらず、非アクティブ状態となるように構成されている、ことを特徴とする請求項1記載の固体撮像装置。 - 前記受光回路と前記カウンタ回路との間に設けられたスパース光検出回路をさらに備え、
前記受光回路は、前記露光時間内に、複数回の露光を行い、
前記スパース光検出回路は、前記複数回の露光のうち、少なくとも1回の入射光の到達があった場合に、入射光の到達を示す到達信号を、前記受光信号として前記カウンタ回路に出力するように構成され、
前記カウンタ回路は、前記スパース光検出回路から受けた到達信号に基づいて、入射光の到達回数を計数する、ことを特徴とする請求項1記載の固体撮像装置。 - 前記スパース光検出回路は、前記少なくとも1回の入射光の到達があった場合に、その状態を記憶する内部記憶回路を備えている、ことを特徴とする請求項3記載の固体撮像装置。
- 前記内部記憶回路は、入出力間にダイオード接続された前記第1導電型の記憶トランジスタと、前記記憶トランジスタと並列接続され、リセット信号を受けて当該記憶トランジスタの記憶状態を解除する第1導電型のリセットトランジスタを備えている、ことを特徴とする請求項4記載の固体撮像装置。
- 前記受光信号が出力される第1のノードと、前記距離信号が出力される第2の出力ノードとを、選択信号でオンオフ制御される前記第1導電型の距離選択トランジスタを介して接続し、前記第1のノードを経由して、前記受光信号と前記距離信号とが選択的に読み出せるように構成されている、ことを特徴とする請求項1から5のうちいずれか1項に記載の固体撮像装置。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017064142A JP6735515B2 (ja) | 2017-03-29 | 2017-03-29 | 固体撮像装置 |
| PCT/JP2018/010690 WO2018180660A1 (ja) | 2017-03-29 | 2018-03-19 | 固体撮像装置 |
| US16/496,367 US11169270B2 (en) | 2017-03-29 | 2018-03-19 | Solid-state imaging device |
| CN201880020684.8A CN110462436A (zh) | 2017-03-29 | 2018-03-19 | 固体摄像装置 |
| EP18775203.5A EP3605148A4 (en) | 2017-03-29 | 2018-03-19 | SEMICONDUCTOR IMAGING DEVICE |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017064142A JP6735515B2 (ja) | 2017-03-29 | 2017-03-29 | 固体撮像装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018169162A true JP2018169162A (ja) | 2018-11-01 |
| JP6735515B2 JP6735515B2 (ja) | 2020-08-05 |
Family
ID=63677445
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017064142A Expired - Fee Related JP6735515B2 (ja) | 2017-03-29 | 2017-03-29 | 固体撮像装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11169270B2 (ja) |
| EP (1) | EP3605148A4 (ja) |
| JP (1) | JP6735515B2 (ja) |
| CN (1) | CN110462436A (ja) |
| WO (1) | WO2018180660A1 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112639513B (zh) * | 2018-07-02 | 2024-10-29 | 凸版控股株式会社 | 测距装置、照相机、检查调整装置、测距装置的驱动调整方法及检查调整方法 |
| US11050398B2 (en) * | 2019-01-16 | 2021-06-29 | Analog Devices International Unlimited Company | Large input current detection and fast response optical receiver |
| US11456746B2 (en) * | 2020-01-22 | 2022-09-27 | Raytheon Company | Single phase analog counter for a digital pixel |
| US11277580B2 (en) * | 2020-01-24 | 2022-03-15 | Sony Semiconductor Solutions Corporation | I, Q counter circuit and method for time-of-flight image sensor |
| JP2023023989A (ja) * | 2021-08-06 | 2023-02-16 | 株式会社日立エルジーデータストレージ | 距離計測システム、距離計測装置、および、距離計測方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006242716A (ja) * | 2005-03-02 | 2006-09-14 | Canon Inc | 撮像装置 |
| JP2010091378A (ja) * | 2008-10-07 | 2010-04-22 | Toyota Motor Corp | 画像取得装置及び方法 |
| US20140124653A1 (en) * | 2012-11-02 | 2014-05-08 | The University Court Of The University Of Edinburgh | Pixel circuit with capacitor discharge indicative of number of events |
| JP2015065524A (ja) * | 2013-09-24 | 2015-04-09 | 株式会社ニコン | 撮像素子および撮像装置 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4235729B2 (ja) | 2003-02-03 | 2009-03-11 | 国立大学法人静岡大学 | 距離画像センサ |
| JP2006523074A (ja) * | 2003-04-11 | 2006-10-05 | カネスタ インコーポレイテッド | センサのダイナミックレンジを差分拡大する方法及びシステム |
| JP4485371B2 (ja) * | 2005-01-06 | 2010-06-23 | パナソニック株式会社 | 固体撮像装置 |
| JP4649313B2 (ja) * | 2005-10-28 | 2011-03-09 | 株式会社東芝 | 固体撮像装置 |
| CN101005559A (zh) * | 2006-01-17 | 2007-07-25 | 松下电器产业株式会社 | 固体摄像器件 |
| US7738019B2 (en) * | 2006-10-11 | 2010-06-15 | Avago Technologies General Ip (Singapore) Pte. Ltd. | System and method for providing automatic gain control in an imaging device |
| JP5585903B2 (ja) | 2008-07-30 | 2014-09-10 | 国立大学法人静岡大学 | 距離画像センサ、及び撮像信号を飛行時間法により生成する方法 |
| JP5481221B2 (ja) * | 2010-02-08 | 2014-04-23 | パナソニック株式会社 | 固体撮像装置及びad変換方法 |
| JP2011176762A (ja) * | 2010-02-25 | 2011-09-08 | Panasonic Corp | 固体撮像装置およびカメラ |
| US8716643B2 (en) * | 2010-09-06 | 2014-05-06 | King Abdulaziz City Science And Technology | Single photon counting image sensor and method |
| US8859944B2 (en) | 2010-09-07 | 2014-10-14 | King Abdulaziz City Science And Technology | Coordinated in-pixel light detection method and apparatus |
| JP2012151613A (ja) * | 2011-01-18 | 2012-08-09 | Panasonic Corp | 固体撮像装置及び撮像装置 |
| WO2012147302A1 (ja) * | 2011-04-28 | 2012-11-01 | パナソニック株式会社 | 固体撮像装置及びそれを用いたカメラシステム |
| JP2013251824A (ja) * | 2012-06-01 | 2013-12-12 | Nikon Corp | 撮像素子 |
| WO2015107869A1 (ja) * | 2014-01-14 | 2015-07-23 | パナソニックIpマネジメント株式会社 | 距離画像生成装置及び距離画像生成方法 |
| CN106716994B (zh) * | 2014-09-19 | 2020-01-17 | 松下知识产权经营株式会社 | 固体摄像装置 |
| CA2990466C (en) * | 2015-07-08 | 2023-07-11 | The Commonwealth Of Australia | Spad array structures and methods of operation |
| CN108291961B (zh) * | 2015-12-08 | 2022-06-28 | 松下知识产权经营株式会社 | 固体摄像装置、距离测定装置及距离测定方法 |
| US20200408910A1 (en) * | 2017-09-11 | 2020-12-31 | Panasonic Intellectual Property Management Co., Ltd. | Distance measuring method and distance measuring device |
-
2017
- 2017-03-29 JP JP2017064142A patent/JP6735515B2/ja not_active Expired - Fee Related
-
2018
- 2018-03-19 EP EP18775203.5A patent/EP3605148A4/en not_active Withdrawn
- 2018-03-19 WO PCT/JP2018/010690 patent/WO2018180660A1/ja not_active Ceased
- 2018-03-19 CN CN201880020684.8A patent/CN110462436A/zh active Pending
- 2018-03-19 US US16/496,367 patent/US11169270B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006242716A (ja) * | 2005-03-02 | 2006-09-14 | Canon Inc | 撮像装置 |
| JP2010091378A (ja) * | 2008-10-07 | 2010-04-22 | Toyota Motor Corp | 画像取得装置及び方法 |
| US20140124653A1 (en) * | 2012-11-02 | 2014-05-08 | The University Court Of The University Of Edinburgh | Pixel circuit with capacitor discharge indicative of number of events |
| JP2015065524A (ja) * | 2013-09-24 | 2015-04-09 | 株式会社ニコン | 撮像素子および撮像装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3605148A4 (en) | 2020-04-08 |
| US11169270B2 (en) | 2021-11-09 |
| CN110462436A (zh) | 2019-11-15 |
| WO2018180660A1 (ja) | 2018-10-04 |
| JP6735515B2 (ja) | 2020-08-05 |
| EP3605148A1 (en) | 2020-02-05 |
| US20200412991A1 (en) | 2020-12-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10838066B2 (en) | Solid-state imaging device, distance measurement device, and distance measurement method | |
| JP6443132B2 (ja) | 演算装置 | |
| US9171985B2 (en) | Pixel circuit with controlled capacitor discharge time of flight measurement | |
| US11644551B2 (en) | Lidar systems with improved time-to-digital conversion circuitry | |
| CN110308451B (zh) | 适用于远程飞行时间应用的双模式堆叠光电倍增管 | |
| KR101508410B1 (ko) | 거리 화상 센서, 및 촬상 신호를 비행시간법에 의해 생성하는 방법 | |
| US11626446B2 (en) | Pixel circuit and method of operating the same in an always-on mode | |
| JP6735515B2 (ja) | 固体撮像装置 | |
| WO2016075945A1 (ja) | 光飛行型測距装置 | |
| US20250012903A1 (en) | LIDAR System with Dynamic Resolution | |
| US20220003876A1 (en) | Distance image obtaining method and distance detection device | |
| JP2022067801A (ja) | 光電変換装置、光電変換システム | |
| WO2019050024A1 (ja) | 距離測定方法および距離測定装置 | |
| CN114747204B (zh) | 光检测器、固体摄像装置及距离测定装置 | |
| Wang et al. | A direct TOF sensor with In-pixel differential time-to-charge converters for automotive flash LiDAR and other 3D applications | |
| US11768277B2 (en) | Time-of-flight sensor and control method thereof | |
| CN113906313B (zh) | 具有分布式光电倍增器的高空间分辨率固态图像传感器 | |
| CN114829970A (zh) | 飞行时间成像电路、飞行时间成像系统和飞行时间成像方法 | |
| JP7689346B2 (ja) | 撮像素子および測距装置 | |
| JP7672048B2 (ja) | 撮像素子および測距装置 | |
| JP2021025810A (ja) | 距離画像センサ、および距離画像測定装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190802 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200609 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200629 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6735515 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |