JP2012008260A - 画像生成装置 - Google Patents
画像生成装置 Download PDFInfo
- Publication number
- JP2012008260A JP2012008260A JP2010142879A JP2010142879A JP2012008260A JP 2012008260 A JP2012008260 A JP 2012008260A JP 2010142879 A JP2010142879 A JP 2010142879A JP 2010142879 A JP2010142879 A JP 2010142879A JP 2012008260 A JP2012008260 A JP 2012008260A
- Authority
- JP
- Japan
- Prior art keywords
- image
- laser
- light
- measured
- generation apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 claims abstract description 47
- 238000005286 illumination Methods 0.000 claims description 28
- 230000003287 optical effect Effects 0.000 claims description 22
- 238000000926 separation method Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 8
- 238000005259 measurement Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 4
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 230000001360 synchronised effect Effects 0.000 claims description 3
- 230000005284 excitation Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 9
- 239000011295 pitch Substances 0.000 description 9
- 239000000523 sample Substances 0.000 description 7
- 230000004888 barrier function Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000010287 polarization Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 3
- 230000001105 regulatory effect Effects 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000012472 biological sample Substances 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- Microscoopes, Condenser (AREA)
- Studio Devices (AREA)
Abstract
【課題】簡易な装置構成で様々な位置および方向の高解像度像を素早く得ること。
【解決手段】この画像生成装置1は、被測定物Aの画像を生成する画像生成装置であって、レーザ光を出射するレーザ光源3と、レーザ光の強度を変調させるレーザ出力制御部11と、レーザ光の被測定物Aへの照射位置を走査するレーザスキャナ5と、被測定物Aに複数の空間変調パターンの照明光を照射するように、レーザ出力制御部11及びレーザスキャナ5を制御する変調パターン制御部15と、複数の空間変調パターンの照明光の照射に応じて被測定物Aから発せられる観察光を撮像して複数のパターン画像を取得する撮像装置7と、撮像装置7によって取得された複数のパターン画像を用いて、被測定物Aの高解像度画像を生成する画像データ演算部19と、を備える。
【選択図】図1
【解決手段】この画像生成装置1は、被測定物Aの画像を生成する画像生成装置であって、レーザ光を出射するレーザ光源3と、レーザ光の強度を変調させるレーザ出力制御部11と、レーザ光の被測定物Aへの照射位置を走査するレーザスキャナ5と、被測定物Aに複数の空間変調パターンの照明光を照射するように、レーザ出力制御部11及びレーザスキャナ5を制御する変調パターン制御部15と、複数の空間変調パターンの照明光の照射に応じて被測定物Aから発せられる観察光を撮像して複数のパターン画像を取得する撮像装置7と、撮像装置7によって取得された複数のパターン画像を用いて、被測定物Aの高解像度画像を生成する画像データ演算部19と、を備える。
【選択図】図1
Description
本発明は、被測定物に空間変調された光を照射することにより画像を生成する画像生成装置に関するものである。
従来から、半導体デバイス等に空間変調された光を照射してその結果生じた像を観察する光学装置が用いられている。例えば、下記特許文献1には、光源装置からの光を回折格子を通して試料に照射して、そのときの試料像をCCDカメラで撮像する光学装置が記載されている。また、この光源装置は、回折格子を等速度で回折格子の縞と垂直な方向に移動しながら撮像することで複数の変調像を得た後に、それらの変調像を画像処理することで試料の像を形成する。また、下記特許文献2には、試料に空間変調された光を照射するために、照明光の光路中にSLM(Spatial Light Modulator)を配置した顕微鏡装置も開示されている。このような構成によれば、回折格子を移動させる手段を必要としない。
しかしながら、上述した特許文献1記載の光学装置では、対物レンズ等の光学系が変更された場合には回折格子もそれに対応して交換する必要がある場合がある。これは、対物レンズの倍率を変更したい場合には対物レンズのサイズが変わることになり、このとき回折光子からの回折光の入射位置が変化する結果、高解像度の像を得られなくなるからである。さらに、試料に照射する空間変調光の位相や向きを変える場合には回折格子の水平移動および回転のための駆動系が必要となり、装置構成が複雑化する。
また、上述した特許文献2記載の顕微鏡装置では、SLMの交換は必要なく、SLMの駆動機構も必要ないが、分解能を上げる目的で細かいピッチの空間変調光を作る際には、画素数の多いSLMが必要となり装置が高価になる傾向にあった。
そこで、本発明は、かかる課題に鑑みて為されたものであり、簡易な装置構成で様々な位置および方向の高解像度像を素早く得ることが可能な画像生成装置を提供することを目的とする。
上記課題を解決するため、本発明の画像生成装置は、被測定物の画像を生成する画像生成装置であって、レーザ光を出射するレーザ光源と、レーザ光の強度を変調させるレーザ変調部と、レーザ光の被測定物への照射位置を走査するレーザ走査部と、被測定物に複数の空間変調パターンの照明光を照射するように、レーザ変調部及びレーザ走査部を制御する制御部と、複数の空間変調パターンの照明光の照射に応じて被測定物から発せられる観察光を撮像して複数のパターン画像を取得する撮像部と、撮像部によって取得された複数のパターン画像を用いて、被測定物の高解像度画像を生成する画像処理部と、を備える。
このような画像生成装置によれば、レーザ光源から発せられたレーザ光が、レーザ変調部によってその強度が変調されると同時に、レーザ走査部によって被測定物への照射位置が走査されながら、半導体デバイスや生物試料などの被測定物に照射される。このとき、制御部によって、被測定物に複数の空間変調パターンの照明光が照射されるようにレーザ変調部およびレーザ走査部が制御され、撮像部によって被測定物から発せられる複数のパターン画像が撮像された後、画像処理部によって複数のパターン画像を用いて高解像度画像が生成される。これにより、構成部品の交換を要することなく、複雑な駆動機構を必要とせずに、被測定物の高解像度画像を簡易に取得することができる。それに加えて、被測定物に照射する照明光の空間変調パターンの位相および向きを容易に変更することができ、所望の位置および向きの高解像度画像を素早く得ることができる。
照明光の光路上のレーザ走査部と被測定物との間に設けられ、被測定物からの観察光を照明光の光路と分離して撮像部に導く光分離部を更に備える、ことが好適である。この場合、被測定物からの観察光を撮像部で広範囲のパターン画像として検出することができる。
また、被測定物から発せられる観察光が、レーザ走査部を介すことなく撮像部で撮像されるように構成されていることも好適である。かかる構成を採れば、被測定物からの観察光を2次元のパターン画像として検出することができる。
さらに、撮像部は、パターン画像の1回の撮像期間が、制御部における空間変調パターンの1回の形成期間と同期するように制御される、ことも好適である。こうすれば、撮像部において、照明光の複数の空間変調パターンに対応した複数のパターン画像を、容易に分離して取得することができる。
また、画像処理部は、撮像部によって取得された複数のパターン画像をもとに、被測定物に照射された複数の空間変調パターンと被測定物の構造の空間周波数との干渉縞成分を抽出することで、パターン画像の高周波数成分を低周波数成分に落とした低周波数パターン画像を生成し、低周波数パターン画像の干渉縞成分に基づいて、高解像度画像を生成する、ことも好適である。この場合、被測定物に照射する照明光の空間変調パターンの位相および向きを変えることで、所望の位置および向きの高解像度画像を効率的に得ることができる。
またさらに、レーザ変調部は、レーザ光の強度を三角関数に従って変化するように変調させる、ことも好適である。かかるレーザ変調部を備えれば、空間変調パターンの形成が容易になる。
さらにまた、制御部は、三角関数の位相および周波数を変化させることで、異なる空間変調パターンを形成することも好適である。こうすれば、様々なピッチや位相の空間変調パターンの形成が容易となる。
本発明によれば、簡易な装置構成で様々な位置および方向の高解像度像を素早く得ることができる。
以下、図面を参照しつつ本発明に係る画像生成装置の好適な実施形態について詳細に説明する。なお、図面の説明においては同一又は相当部分には同一符号を付し、重複する説明を省略する。
[第1実施形態]
図1は、本発明の第1実施形態に係る画像生成装置1の構成を示すブロック図である。図1に示す画像生成装置1は、半導体デバイス等の被測定物に対して複数の空間変調パターンの照明光を照射し、それに応じて被測定物Aから発せられる複数の反射像(観察像)を撮像し、それらの反射像を基にして被測定物の高解像度像を得るための装置である。この画像生成装置1は、レーザ光を出射するレーザ光源3と、レーザスキャナ(レーザ走査部)5と、被測定物Aの反射像を撮像する撮像装置(撮像部)7と、レーザ光源3からのレーザ光を被測定物Aに向けて導光し、また、被測定物Aの反射像を撮像装置7に結像させるための光学系9と、レーザ光源3の出力強度を制御するレーザ出力制御部(レーザ変調部)11と、レーザスキャナ5の動作を制御するスキャナ制御部13と、被測定物Aに照射される空間変調パターンを制御する変調パターン制御部15と、撮像装置7から画像データを取り込む画像取込部17と、画像取込部17によって取り込まれた画像データを処理する画像データ演算部(画像処理部)19とを備えている。
図1は、本発明の第1実施形態に係る画像生成装置1の構成を示すブロック図である。図1に示す画像生成装置1は、半導体デバイス等の被測定物に対して複数の空間変調パターンの照明光を照射し、それに応じて被測定物Aから発せられる複数の反射像(観察像)を撮像し、それらの反射像を基にして被測定物の高解像度像を得るための装置である。この画像生成装置1は、レーザ光を出射するレーザ光源3と、レーザスキャナ(レーザ走査部)5と、被測定物Aの反射像を撮像する撮像装置(撮像部)7と、レーザ光源3からのレーザ光を被測定物Aに向けて導光し、また、被測定物Aの反射像を撮像装置7に結像させるための光学系9と、レーザ光源3の出力強度を制御するレーザ出力制御部(レーザ変調部)11と、レーザスキャナ5の動作を制御するスキャナ制御部13と、被測定物Aに照射される空間変調パターンを制御する変調パターン制御部15と、撮像装置7から画像データを取り込む画像取込部17と、画像取込部17によって取り込まれた画像データを処理する画像データ演算部(画像処理部)19とを備えている。
詳細には、光学系9は、リレーレンズ21、光分離部23、対物レンズ25、および結像レンズ27から構成されている。リレーレンズ21は、レーザスキャナ5によって照射角度が振られたレーザ光を対物レンズ25まで効率よく導くための光学系であり、対物レンズ25の射出瞳をレーザスキャナ5の反射面に投影することにより、レーザスキャナ5を反射されたレーザ光を対物レンズ25に確実に到達させる役割を有する。ここで、レーザ光源3、レーザスキャナ5、及びリレーレンズ21はレーザ光を走査するためのレーザ走査手段を、光分離部23及び対物レンズ25はレーザ光を被測定物Aに向けて導光するとともに、被測定物Aからの反射光を撮像装置7へ導光するための共通手段を、結像レンズ27及び撮像装置7は被測定物Aからの反射光を撮像するための撮像手段を、それぞれ構成している。
光分離部23は、照明光の光路上のレーザスキャナ5と被測定物Aとの間に配置されている。この光分離部23は、被測定物Aからの反射光および散乱光などの観察光を透過して結像レンズ27を介して撮像装置7に導くと同時に、レーザスキャナ5からのレーザ光を反射して対物レンズ25を経由して被測定物Aに導くことにより、被測定物Aからの反射光および散乱光がレーザ走査部であるレーザスキャナ5を介して撮像装置7に結像されないようにしている。従って、レーザ走査手段によって走査される被測定物Aのレーザ光の照射位置に対応した、撮像装置7の受光位置に観察光が入射される。このような光分離部23としては、反射率および透過率が1:1であるハーフミラーや8:2等の所定の関係を有するビームスプリッタが用いられる。また、レーザ光が所定の偏光成分を有する場合には、光分離部23として、偏光ビームスプリッタを用いることもできる。この場合は、偏光ビームスプリッタと対物レンズ25との間に、1/4波長板を挿入する。これにより、偏光ビームスプリッタ側から直線偏光のレーザ光が入射した場合に、円偏光に変換して被測定物Aに照射することができるとともに、被測定物Aからの反射光が再び1/4波長板を透過する際に、その反射光を入射時とは90度異なる直線偏光に変換することができる。その結果、反射光を偏光ビームスプリッタに透過させて撮像装置7側に導くことができる。
レーザスキャナ5は、レーザ光の進行方向を変更することによりその照射位置を2次元的に走査させる光学装置である。すなわち、レーザスキャナ5は、リレーレンズ21に向けて入射するレーザ光の入射角度を変更することにより、光学系9を介して照射されるレーザ光の照射位置を、被測定物Aの表面上で2次元的に走査させる。このようなレーザスキャナ5としては、互いの回転軸が直交する2つのミラーを有し、それらの回転角が電気的に制御可能にされたガルバノメータミラーを用いることができる。その他、レーザスキャナ5としては、ポリゴンミラー、MEMS(Micro Electro Mechanical System)ミラー、AOD(音響光学偏向器)、レゾナントスキャナ(共振型ガルバノメータスキャナ)、EOスキャナ(電気光学的光偏向器)等を採用することもできる。
ここで、レーザ光源3から出力されるレーザ光の強度は、レーザ光源3に接続されたレーザ出力制御部11からの制御信号によって変調可能に構成されており、レーザスキャナ5によるレーザ光の被測定物Aの表面の照射位置は、レーザスキャナ5に接続されたスキャナ制御部13からの制御信号によって変更可能に構成されている。さらに、レーザ出力制御部11およびスキャナ制御部13には変調パターン制御部15が接続され、変調パターン制御部15によって、被測定物Aに予め決められた複数の空間(2次元)変調パターンの照明光が照射されるように、レーザ出力制御部11およびスキャナ制御部13が制御される。
次に、図2〜図4を参照して、変調パターン制御部15によって規定される照明光の空間変調パターンについて例示する。
図2〜4には、変調パターン制御部15によって規定された空間変調パターンの被測定物Aに対する照射状態を示している。図2に示すように、まず、変調パターン制御部15は、被測定物Aの平面に沿った所定方向であるX軸方向に沿ってレーザ光の照射位置を移動させるように制御すると同時に、X軸方向の強度分布が三角関数(sin関数、又はcos関数)に従って周期的に増減するようにレーザ光の照射強度を変調させる。同図において、矢印は、レーザ照射位置の変更状態を示している。これにより、X軸方向に沿って幅W1で周期的に変調された帯状照射パターンL1が形成される。続けて、変調パターン制御部15は、X軸に垂直なY軸に沿った方向にレーザ照射位置をずらした後に、レーザ光の照射位置のX軸方向に沿った移動とレーザ光強度の変調を制御して帯状照射パターンL1の形成を繰り返す。その結果、Y軸方向に沿った所望のピッチW1の縞模様を有する空間変調パターンを生成することができる。なお、レーザ光の強度は、周期的なON―OFFで変調されてもよい。
また、図3に示すように、変調パターン制御部15は、X軸に沿った帯状照射パターンL2の空間的な位相を、Y軸方向において隣接するパターン間で徐々にシフトさせるようにレーザ光強度の変調を制御することもできる。この場合は、Y軸方向に対して所望の角度θ2だけ傾斜する所望のピッチW2の縞模様に近似される空間変調パターンを生成することができる。さらに、図4に示すように、変調パターン制御部15は、X軸に沿った1回のレーザ光の走査の間のレーザ光の照射強度を均一にし、Y軸方向に配列される複数の帯状照射パターン間で照射強度が変調されるように制御することもできる。この場合、X軸方向に沿った所望のピッチW3の縞模様を有する空間変調パターンを生成することができる。
撮像装置7はレーザ光の照射位置に対応した受光位置に反射光などの観察光を受光するので、上記のような空間変調パターンを有する照明光の照射に応じて生じる被測定物Aの反射像は、撮像装置7によって撮像されて2次元のパターン画像が取得される。撮像装置7によって取得されたパターン画像は、画像取込部17によって取り込まれる。この画像取込部17は、撮像装置7および変調パターン制御部15に接続され、変調パターン制御部15による被測定物Aの表面における空間変調パターンの1回の形成期間と、1枚の2次元パターン画像の露光期間(撮像期間)とが同期するように、撮像装置7による露光タイミングを制御する。例えば、図2〜図4に示すような空間変調パターンが時間的に連続して形成される場合には、画像取込部17は、それぞれの空間変調パターンの全体の照明光によって生じる反射像を露光、積算することにより、別々の2次元のパターン画像を取得するように、露光タイミングを制御する。
画像取込部17によって取り込まれたパターン画像は、画像データ演算部19によって画像処理が施される。例えば、画像データ演算部19は、被測定物Aの表面にY軸方向に沿った縞模様の複数の空間変調パターンを、所望の周波数で空間位相を変化させながら照射させ、そのとき得られる複数のパターン画像の高周波成分を合成することによりX軸方向に沿った解像度が高められた被測定物Aの高解像度画像を生成する。また、画像データ演算部19は、4方位に沿った複数の空間変調パターンを、所望の周波数で空間位相を変化させながら照射させ、そのとき得られる複数のパターン画像の高周波成分を合成することにより、4方位に解像度が高められた高解像度画像を生成することもできる。詳述すると、得られた複数のパターン画像から、被測定物に照射された複数の空間変調パターンと被測定物の構造の空間周波数との干渉縞成分を抽出することで、パターン画像の高周波数成分を低周波数成分に落とした低周波数パターン画像を生成し、低周波数パターン画像の干渉縞成分に基づいて、高解像度画像を生成する。
以上説明した画像生成装置1によれば、レーザ光源3から発せられたレーザ光が、レーザ出力制御部11によってその強度が変調されると同時に、レーザスキャナ5によって被測定物Aへの照射位置が走査されながら、被測定物Aに照射される。このとき、変調パターン制御部15によって、被測定物Aに複数の空間変調パターンの照明光が照射されるようにレーザ出力制御部11およびレーザスキャナ5が制御され、撮像装置7によって被測定物Aから発せられる複数のパターン画像が撮像された後、画像データ演算部19によって複数のパターン画像を用いて高解像度画像が生成される。これにより、回折格子などの構成部品の交換を要することなく、被測定物Aの高解像度画像を簡易に取得することができる。これに対して、回折格子を使用した従来の方法では、照明光の空間変調パターンのピッチを変更したい場合には回折格子を交換する必要がある。このとき、解像度を高めるためには回折格子からの1次光を対物レンズの端ぎりぎりに入射させる必要があるために、対物レンズの交換も必要となってしまう。回折格子を用いた従来装置において対物レンズの倍率を切り替えた場合でも、一般には対物レンズのサイズも変わってしまい、回折格子からの1次光の対物レンズに対する入射位置が変わってしまうので、高解像度の像を得るためには回折格子の交換が必要である。
また、画像生成装置1によれば、回折格子等を駆動する複雑な駆動機構を必要とせずに、被測定物Aの高解像度画像を簡易に取得することができる。つまり、本実施形態では簡単な光学系とレーザスキャナ等を搭載するだけで済む。それに加えて、変調パターン制御部15の制御によって、被測定物に照射する照明光の空間変調パターンの位相および向きを容易に変更することができ、所望の位置および向きの高解像度画像を素早く得ることができる。これに対して、空間変調パターン生成用としてSLM(Spatial Light Modulator)を用いた従来装置では、任意の方向に任意の角度で回折させるためには非常に微細なSLMが必要となる。例えば、試料上に投影する縞の位相を3種類に変更する場合は、解像限界の縞の本数×3の一軸方向のピクセル数が必要となる。さらに、高解像度化する場合、直行するX,Y軸方向の2方向の縞だけでは斜め方向の解像度が不十分となり、斜め方向の縞も必要となるため、X,Y軸方向と同じピッチの縞を45度方向にも作成する必要が発生する。しかしながらSLMのピクセルは四角形であるため、斜め方向に同一ピッチの縞を作ることができず、縞ピッチを減らして解像度を落とすか、さらにピクセル数の多いSLMを使用することで、同一ピッチを実現することになる。その結果、従来装置では高価なSLMが必要になる。また、SLMにおける光の透過/反射ロスや、ピクセルの継ぎ目におけるロス、0次光、高次光の問題も発生する。
さらに、レーザ光を2次元的に走査して変調する手法を取ることにより、被測定物Aが蛍光試料など2光子吸収を起こすものや、第2次高調波(SHG、2倍波発生)を発生するものなど、非線形な反応を示すものに対しては、照射点の強度を上げやすいため、それらの反応が起こりやすい。その結果、例えば2光子吸収などを利用すればさらに高分解能化された観察も可能になる。また、空間変調パターンの周波数の高調波成分との干渉縞成分を用いて画像を作成することで、さらに高解像度化することができる。
また、光分離部23を備えることで、被測定物Aからの反射像がレーザスキャナ5側に戻ることを防げるので、被測定物Aの反射像を撮像装置7で広範囲のパターン画像として検出することができる。これにより、被測定物Aの高解像画像をより確実に得ることができる。
さらに、レーザ出力制御部11がレーザ光の強度を三角関数に従って変化するように変調させるので、空間変調パターンの形成が容易になる。
[第2実施形態]
図5は、本発明の第2実施形態に係る画像生成装置101の構成を示すブロック図である。同図に示す画像生成装置101は、細胞等の蛍光を発する被測定物に対して複数の空間変調パターンの励起光(照明光)を照射し、それに応じて被測定物Aから発せられる複数の蛍光像(観察像)を撮像し、それらの蛍光像を基にして被測定物の高解像度像を得るための装置である。この画像生成装置101の第1実施形態との相違点は、光分離部123の機能が異なる点と、光分離部123と結像レンズ27との間にバリアフィルタ129を備える点である。
図5は、本発明の第2実施形態に係る画像生成装置101の構成を示すブロック図である。同図に示す画像生成装置101は、細胞等の蛍光を発する被測定物に対して複数の空間変調パターンの励起光(照明光)を照射し、それに応じて被測定物Aから発せられる複数の蛍光像(観察像)を撮像し、それらの蛍光像を基にして被測定物の高解像度像を得るための装置である。この画像生成装置101の第1実施形態との相違点は、光分離部123の機能が異なる点と、光分離部123と結像レンズ27との間にバリアフィルタ129を備える点である。
すなわち、光分離部123は、被測定物Aからの蛍光を透過して結像レンズ27を介して撮像装置7に導くと同時に、レーザスキャナ5からのレーザ光を反射して対物レンズ25を経由して被測定物Aに導くことにより、被測定物Aからの観察光である蛍光がレーザ走査部であるレーザスキャナ5を介して撮像装置7に結像されないようにしている。従って、レーザ走査手段によって走査される被測定物Aのレーザ光の照射位置に対応した、撮像装置7の受光位置に観察光が入射される。このような光分離部23としては、所定の波長成分の励起光と、励起光の波長成分より長波長の蛍光とを分離するダイクロイックミラーが用いられる。このダイクロイックミラーは、レーザスキャナ5側から入射した励起光を対物レンズ25に向けて反射し、被測定物Aから生じた蛍光を透過する機能を有し、短波長反射および長波長透過の光学特性を有する誘電体多層膜を含むミラーである。
バリアフィルタ129は、撮像装置7によるパターン画像の撮像時に、撮像装置7に向けて励起光が到達しないように励起光をカットする。このバリアフィルタは、励起光の波長成分を吸収、反射することによりカットし、蛍光の波長成分を透過させる性質を有し、長波長透過性を有するハイパスフィルタ、又は、蛍光の波長成分のみを透過させるバンドパスフィルタである。
このような画像生成装置101によれば、細胞等の蛍光を発生する被測定物を観察対象とした場合にも、被測定物Aの高解像度画像を簡易に取得することができる。それに加えて、変調パターン制御部15の制御によって、被測定物に照射する照明光の空間変調パターンの位相および向きを容易に変更することができ、所望の位置および向きの高解像度画像を素早く得ることができる。
なお、本発明は、前述した実施形態に限定されるものではない。例えば、被測定物Aに照射される空間変調パターンのコントラストを上げるために、照明光を導光するための光学系の構成として、図6に示すような構成を採用してもよい。
詳細には、レーザ光源3とレーザスキャナ5との間にアキシコン201およびコンバータレンズ202を挿入してもよい。アキシコン201は、円錐形のプリズムであり、レーザ光源3から出射された断面円形の平行ビームを断面がリング状のビームに変換する光学素子である。コンバータレンズ202は、アキシコン201から出射されたリング状のビームをレーザスキャナ5上に円周状に投影させるレンズである。このような照明光用の光学系を用いることで、レーザ光源3からのレーザ光を対物レンズ25の瞳位置でリング状に形成することができる。これにより、被測定物Aの表面でのレーザ光スポットの半値幅を小さくすることができ、レーザビームをエアリディスク径で走査する場合の空間変調パターンのコントラストの低下を防止することができる。
また、画像生成装置101のレーザ光源3としては、図7に示すように、被測定物Aにおける2光子励起を観察可能な構成が採用されてもよい。具体的には、レーザ光源3として超短パルスレーザレーザ3aとその出力を変調させるレーザ変調器3bとから成る構成を採用し、レーザ光源3とレーザスキャナ5の間にレーザ光から所望の波長成分を選択する励起波長選択用フィルタ301を挿入する。2光子励起は本来の励起光の波長の2倍の波長の2つの光子によって電子が励起されて蛍光を発する現象である。そのため、励起波長選択用フィルタ301は、蛍光試料の励起波長の2倍の波長の光を透過させるように機能する。これに対応して、光分離部23としては、レーザスキャナ5側から入射した長波長の励起光を対物レンズ25に向けて反射し、被測定物Aから生じた短波長の蛍光を透過するような機能を有し、長波長反射および短波長透過の光学特性を有するダイクロイックミラーが使用される。また、バリアフィルタ129としては、励起光の長波長成分を吸収、反射することによりカットし、蛍光の短波長成分を透過させる性質を有し、短波長透過性を有するローパスフィルタ、又は、蛍光の波長成分のみを透過させるバンドパスフィルタが使用される。
1,101…画像生成装置、3…レーザ光源、5…レーザスキャナ(レーザ走査部)、7…撮像装置(撮像部)、11…レーザ出力制御部(レーザ変調部)、15…変調パターン制御部、19…画像データ演算部(画像処理部)、23,123…光分離部、A…被測定物。
Claims (7)
- 被測定物の画像を生成する画像生成装置であって、
レーザ光を出射するレーザ光源と、
前記レーザ光の強度を変調させるレーザ変調部と、
前記レーザ光の前記被測定物への照射位置を走査するレーザ走査部と、
前記被測定物に複数の空間変調パターンの照明光を照射するように、前記レーザ変調部及び前記レーザ走査部を制御する制御部と、
前記複数の空間変調パターンの照明光の照射に応じて前記被測定物から発せられる観察光を撮像して複数のパターン画像を取得する撮像部と、
前記撮像部によって取得された前記複数のパターン画像を用いて、前記被測定物の高解像度画像を生成する画像処理部と、
を備えることを特徴とする画像生成装置。 - 前記照明光の光路上の前記レーザ走査部と前記被測定物との間に設けられ、前記被測定物からの前記観察光を前記照明光の光路と分離して前記撮像部に導く光分離部を更に備える、
ことを特徴とする請求項1記載の画像生成装置。 - 前記被測定物から発せられる観察光が、レーザ走査部を介すことなく前記撮像部で撮像されるように構成されている、
ことを特徴とする請求項1又は2記載の画像生成装置。 - 前記撮像部は、パターン画像の1回の撮像期間が、前記制御部における前記空間変調パターンの1回の形成期間と同期するように制御される、
ことを特徴とする請求項1〜3のいずれか1項に記載の画像生成装置。 - 画像処理部は、前記撮像部によって取得された前記複数のパターン画像をもとに、前記被測定物に照射された前記複数の空間変調パターンと前記被測定物の構造の空間周波数との干渉縞成分を抽出することで、前記パターン画像の高周波数成分を低周波数成分に落とした低周波数パターン画像を生成し、前記低周波数パターン画像の干渉縞成分に基づいて、前記高解像度画像を生成する、
ことを特徴とする請求項1〜4のいずれか1項に記載の画像生成装置。 - 前記レーザ変調部は、前記レーザ光の強度を三角関数に従って変化するように変調させる、
ことを特徴とする請求項1〜5のいずれか1項に記載の画像生成装置。 - 前記制御部は、三角関数の位相および周波数を変化させることで、異なる空間変調パターンを形成すること、
ことを特徴とする請求項6記載の画像生成装置。
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010142879A JP2012008260A (ja) | 2010-06-23 | 2010-06-23 | 画像生成装置 |
| CN2011800309039A CN102985866A (zh) | 2010-06-23 | 2011-06-17 | 图像生成装置 |
| KR1020127033466A KR20130113343A (ko) | 2010-06-23 | 2011-06-17 | 화상 생성 장치 |
| US13/806,476 US20130100283A1 (en) | 2010-06-23 | 2011-06-17 | Image generation device |
| PCT/JP2011/063973 WO2011162186A1 (ja) | 2010-06-23 | 2011-06-17 | 画像生成装置 |
| EP11798070.6A EP2587297A4 (en) | 2010-06-23 | 2011-06-17 | IMAGE GENERATING DEVICE |
| TW100122055A TW201213848A (en) | 2010-06-23 | 2011-06-23 | Image generation device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010142879A JP2012008260A (ja) | 2010-06-23 | 2010-06-23 | 画像生成装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012008260A true JP2012008260A (ja) | 2012-01-12 |
Family
ID=45371373
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010142879A Pending JP2012008260A (ja) | 2010-06-23 | 2010-06-23 | 画像生成装置 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US20130100283A1 (ja) |
| EP (1) | EP2587297A4 (ja) |
| JP (1) | JP2012008260A (ja) |
| KR (1) | KR20130113343A (ja) |
| CN (1) | CN102985866A (ja) |
| TW (1) | TW201213848A (ja) |
| WO (1) | WO2011162186A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014112122A (ja) * | 2012-12-05 | 2014-06-19 | Olympus Corp | 光学装置 |
| JP2024042643A (ja) * | 2022-09-15 | 2024-03-28 | ソウル ナショナル ユニヴァーシティ アール アンド ディービー ファウンデーション | イメージ分割基盤の光検出システム及び方法 |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN202771106U (zh) * | 2012-07-13 | 2013-03-06 | 京东方科技集团股份有限公司 | 一种空间立体显示装置 |
| JP6112872B2 (ja) * | 2013-01-18 | 2017-04-12 | キヤノン株式会社 | 撮像システム、画像処理方法、および撮像装置 |
| JP5996687B2 (ja) * | 2015-02-10 | 2016-09-21 | 浜松ホトニクス株式会社 | 検査装置及び検査方法 |
| CN104808327B (zh) * | 2015-05-15 | 2017-10-27 | 华东理工大学 | 一种用于细胞操纵的显微镜 |
| JP6841669B2 (ja) | 2017-01-19 | 2021-03-10 | 浜松ホトニクス株式会社 | 観察装置及び観察方法 |
| CN110007453B (zh) | 2019-05-13 | 2023-11-21 | 中国科学院生物物理研究所 | 一种多照明模式的荧光信号测量装置及其测量方法和应用 |
| CN112462384B (zh) * | 2020-10-13 | 2024-04-05 | 中航航空电子有限公司 | 一种高分辨率固态面阵激光雷达系统、控制方法及装置 |
| CN115702777B (zh) * | 2021-08-13 | 2024-05-17 | 深圳先进技术研究院 | 一种多功能双光子显微成像系统 |
| CN120610280B (zh) * | 2025-08-06 | 2025-10-28 | 长春理工大学 | 一种强光背景下多维度成像探测装置及方法 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5866911A (en) * | 1994-07-15 | 1999-02-02 | Baer; Stephen C. | Method and apparatus for improving resolution in scanned optical system |
| US5563710A (en) * | 1994-10-28 | 1996-10-08 | The Schepens Eye Research Institute, Inc. | Imaging system with confocally self-detecting laser |
| JP3411780B2 (ja) * | 1997-04-07 | 2003-06-03 | レーザーテック株式会社 | レーザ顕微鏡及びこのレーザ顕微鏡を用いたパターン検査装置 |
| JP3874893B2 (ja) * | 1997-06-20 | 2007-01-31 | 株式会社キーエンス | 走査顕微鏡 |
| JP4429431B2 (ja) | 1999-10-21 | 2010-03-10 | オリンパス株式会社 | 光学装置 |
| ATE493683T1 (de) * | 2001-04-07 | 2011-01-15 | Zeiss Carl Microimaging Gmbh | Verfahren und anordnung zur tiefenaufgelösten optischen erfassung einer probe |
| JP3731073B2 (ja) * | 2002-09-17 | 2006-01-05 | 独立行政法人理化学研究所 | 顕微鏡装置 |
| DE602005007403D1 (de) * | 2004-03-25 | 2008-07-24 | Olympus Corp | Scannendes konfokales Mikroskop |
| JP4597744B2 (ja) * | 2004-11-08 | 2010-12-15 | 株式会社トプコン | 光画像計測装置及び光画像計測方法 |
| JP4837300B2 (ja) * | 2005-03-24 | 2011-12-14 | 株式会社トプコン | 光画像計測装置 |
| US7326899B2 (en) * | 2005-07-11 | 2008-02-05 | Olympus Corporation | Laser scanning microscope and image acquiring method of laser scanning microscope |
| DE102005046755A1 (de) * | 2005-09-29 | 2007-04-19 | Carl Zeiss Jena Gmbh | Vorrichtung und Verfahren zum Erzeugen eines Bildes eines Objektes |
| JP2007199572A (ja) | 2006-01-30 | 2007-08-09 | Nikon Corp | 顕微鏡装置 |
| WO2007109861A1 (en) * | 2006-03-29 | 2007-10-04 | The University Of Queensland | Super resolution microscopy |
| US7838818B2 (en) * | 2006-06-22 | 2010-11-23 | Olympus Corporation | Light-stimulus illumination apparatus which scans light-stimulus laser light in a direction intersecting an optical axis |
| US7952374B2 (en) * | 2008-06-02 | 2011-05-31 | Quantum Focus Instruments Corporation | Transient emission scanning microscopy |
-
2010
- 2010-06-23 JP JP2010142879A patent/JP2012008260A/ja active Pending
-
2011
- 2011-06-17 CN CN2011800309039A patent/CN102985866A/zh active Pending
- 2011-06-17 EP EP11798070.6A patent/EP2587297A4/en not_active Withdrawn
- 2011-06-17 WO PCT/JP2011/063973 patent/WO2011162186A1/ja not_active Ceased
- 2011-06-17 US US13/806,476 patent/US20130100283A1/en not_active Abandoned
- 2011-06-17 KR KR1020127033466A patent/KR20130113343A/ko not_active Withdrawn
- 2011-06-23 TW TW100122055A patent/TW201213848A/zh unknown
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014112122A (ja) * | 2012-12-05 | 2014-06-19 | Olympus Corp | 光学装置 |
| US9606341B2 (en) | 2012-12-05 | 2017-03-28 | Olympus Corporation | Optical apparatus |
| JP2024042643A (ja) * | 2022-09-15 | 2024-03-28 | ソウル ナショナル ユニヴァーシティ アール アンド ディービー ファウンデーション | イメージ分割基盤の光検出システム及び方法 |
| JP7688927B2 (ja) | 2022-09-15 | 2025-06-05 | ソウル ナショナル ユニヴァーシティ アール アンド ディービー ファウンデーション | イメージ分割基盤の光検出システム及び方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20130100283A1 (en) | 2013-04-25 |
| EP2587297A1 (en) | 2013-05-01 |
| EP2587297A4 (en) | 2014-08-13 |
| TW201213848A (en) | 2012-04-01 |
| WO2011162186A1 (ja) | 2011-12-29 |
| KR20130113343A (ko) | 2013-10-15 |
| CN102985866A (zh) | 2013-03-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2012008260A (ja) | 画像生成装置 | |
| US20130120563A1 (en) | Image generation device | |
| JP4723806B2 (ja) | 共焦点顕微鏡 | |
| JP6346615B2 (ja) | 光学顕微鏡および顕微鏡観察方法 | |
| JP5340799B2 (ja) | レーザ走査型顕微鏡 | |
| JP5554965B2 (ja) | 位相変調型空間光変調器を用いたレーザ顕微鏡 | |
| JP4600476B2 (ja) | 微細構造物の欠陥検査方法及び欠陥検査装置 | |
| US9081186B2 (en) | Microscope device for generating images of a specimen using phase distribution of light | |
| CN103926225B (zh) | 一种基于倏逝波照明的荧光发射微分显微方法及装置 | |
| JPWO2004036284A1 (ja) | 共焦点顕微鏡、共焦点顕微鏡を用いた蛍光測定方法及び偏光測定方法 | |
| JP2006235420A (ja) | 共焦点顕微鏡 | |
| CN106133580A (zh) | 受激发射损耗显微镜装置 | |
| CN107092086A (zh) | 基于相位调制的激光扫描饱和结构光照明的显微方法及装置 | |
| US10788655B2 (en) | Irradiation device, laser microscope system, irradiation method, and laser microscope detection method | |
| JP2016212154A (ja) | 走査型顕微鏡システム | |
| CN108292034A (zh) | 用于利用结构化的光片照射检查试样的方法和设备 | |
| CN117269190A (zh) | 一种晶圆缺陷光学检测系统 | |
| JP2006313356A5 (ja) | ||
| WO2017213171A1 (ja) | 光学情報検知装置及び顕微鏡システム | |
| KR20060033830A (ko) | 음향광학편향기와 선주사 카메라를 이용한 공초점 레이저선주사 현미경 | |
| JP2010266452A (ja) | 走査型近接場光学顕微鏡 | |
| JP6673497B2 (ja) | 蛍光観察装置 | |
| WO2017082357A1 (ja) | 超解像顕微鏡 | |
| JP2006071353A (ja) | 顕微鏡装置、外観検査装置、半導体外観検査装置及び顕微鏡装置における試料照明方法 | |
| JP6278707B2 (ja) | 光学装置 |