[go: up one dir, main page]

JP2012118126A - 観察装置および観察方法 - Google Patents

観察装置および観察方法 Download PDF

Info

Publication number
JP2012118126A
JP2012118126A JP2010265441A JP2010265441A JP2012118126A JP 2012118126 A JP2012118126 A JP 2012118126A JP 2010265441 A JP2010265441 A JP 2010265441A JP 2010265441 A JP2010265441 A JP 2010265441A JP 2012118126 A JP2012118126 A JP 2012118126A
Authority
JP
Japan
Prior art keywords
sample
unit
image
state
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010265441A
Other languages
English (en)
Inventor
Yuichiro Matsuo
祐一郎 松尾
Toshio Haneda
登志男 羽田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2010265441A priority Critical patent/JP2012118126A/ja
Priority to EP11009397.8A priority patent/EP2458551A3/en
Priority to US13/305,228 priority patent/US20120134539A1/en
Publication of JP2012118126A publication Critical patent/JP2012118126A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • G01N21/6458Fluorescence microscopy
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30024Cell structures in vitro; Tissue sections in vitro

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Multimedia (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Microscoopes, Condenser (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

【課題】撮影開始後における観察対象の状態変化を観察することができる観察装置および観察方法を提供する。
【解決手段】試料Aの画像を取得する光学顕微鏡観察部20と、光学顕微鏡観察部20により時間間隔をあけて取得された複数の画像を比較して、試料Aの状態変化を判定する細胞状態判定部43と、細胞状態判定部43により状態変化が判定された領域を抽出する領域抽出部44と、領域抽出部44により抽出された領域の画像を、光学顕微鏡観察部20よりも高解像度で取得する走査型顕微鏡観察部30とを備える観察装置1を採用する。
【選択図】図1

Description

本発明は、例えば細胞等の生体組織を観察するための観察装置および観察方法に関するものである。
従来、スクリーニングを開始する前にCCDで試料全体を撮影して、撮影した画像を解析することで細胞の位置を特定し、細胞が存在している場所のみにレーザ光(励起光)を照射して蛍光画像を取得する走査型顕微鏡システムが知られている(例えば、特許文献1参照)。この走査型顕微鏡システムによれば、細胞の存在しない位置の画像を取得する必要がないため、速やかに細胞の画像を取得できるという効果を奏する。
特開2005−128086号公報
しかしながら、特許文献1に開示されている走査型顕微鏡システムでは、スクリーニングを開始する前に、CCDで試料全体を撮影して細胞の位置を特定してしまうので、撮影開始後に状態が変化する細胞については画像を取得できないという不都合がある。したがって、例えば、タイムラプス観察中に発現した細胞の核内の微細構造の変化については、観察を行うことができない。
本発明は、上述した事情に鑑みてなされたものであって、撮影開始後における観察対象の状態変化を観察することができる観察装置および観察方法を提供することを目的とする。
上記目的を達成するために、本発明は以下の手段を採用する。
本発明の第1の態様は、試料の画像を取得する第1の画像取得部と、該第1の画像取得部により時間間隔をあけて取得された複数の画像を比較して、前記試料の状態変化を判定する判定部と、該判定部により状態変化が判定された領域を抽出する領域抽出部と、該領域抽出部により抽出された領域の画像を、前記第1の画像取得部よりも高解像度で取得する第2の画像取得部とを備える観察装置である。
本発明の第1の態様によれば、第1の画像取得部により試料の画像が時間間隔をあけて複数取得され、判定部によりこれらの画像が比較されて試料の状態変化が判定される。そして、領域抽出部により状態が変化したと判定された領域が抽出され、この領域の画像が、第2の画像取得部により第1の画像取得部よりも高解像度で取得される。
このようにすることで、観察中に状態が変化した領域(例えば、細胞核内の微細構造が変化した細胞)を高解像度で撮影することができ、その状態変化の様子を観察することができる。また、観察中に状態が変化しない領域については高解像度で画像を取得する必要性を排除することができ、状態変化が判定された領域の画像のみを速やかに且つ高解像度で取得することができる。
上記の第1の態様において、前記試料の状態変化を判定するための基準となるパラメータを入力するパラメータ入力部を備え、前記判定部が、前記パラメータ入力部により入力されたパラメータを用いて前記試料の状態変化を判定することとしてもよい。
このようにすることで、観察を行いたい対象に応じて、試料の状態変化を判定するための基準となるパラメータをパラメータ入力部に入力して、その状態変化を観察することができ、様々な観察対象についての状態変化の観察が可能となる。
上記の第1の態様において、前記パラメータが、前記試料の像を構成する画素群の輝度、画素数、色のいずれか、もしくはその組み合わせであることとしてもよい。
試料の状態変化を判定するための基準となるパラメータとして、色を採用した場合には、例えば細胞の周期によって異なる色の蛍光を発する蛍光プローブ(例えばFUCCI)を試料に加えることで、その状態変化、すなわち細胞周期の進行をリアルタイムで観察することができる。また、パラメータとして画素数を採用した場合には、例えば大きさの変化する細胞をリアルタイムで観察することができる。また、パラメータとして輝度を採用した場合には、例えば観察中に新たに発現した細胞の核内の微細構造の変化をリアルタイムで観察することができる。
上記の第1の態様において、前記第1の画像取得部が、2次元撮像素子であることとしてもよい。
第1の画像取得部を、例えばCCD等の2次元撮像素子とすることで、高速で試料の画像を取得することができ、取得した画像を試料の状態変化の判定用の画像として用いることができる。
上記の第1の態様において、前記第2の画像取得部が、前記試料上でレーザ光を走査する走査部と、該走査部による走査位置に対応付けて前記試料からの光を検出する光検出部とを有することとしてもよい。
第2の画像取得部をレーザ走査型顕微鏡とすることで、状態が変化した領域の画像を高解像度で取得することができる。また、レーザ光を励起光として試料からの蛍光を光検出部により検出することで、状態変化が判定された領域のみに励起光を照射し、観察中に状態が変化しない領域には励起光を照射しないようにすることができ、状態が変化しない領域の退色を防止することができる。
本発明の第2の態様は、時間間隔をあけて試料の画像を複数撮影する第1の画像取得ステップと、該第1の画像取得ステップにより時間間隔をあけて撮影された複数の画像を比較して、前記試料の状態変化を判定する判定ステップと、該判定ステップにより状態変化が判定された領域を抽出する領域抽出ステップと、該領域抽出ステップにより抽出された領域の画像を、前記第1の撮像ステップよりも高解像度で撮影する第2の画像取得ステップとを含む観察方法である。
本発明の第2の態様によれば、第1の態様と同様に、観察中に状態が変化した領域(例えば、細胞核内の微細構造が変化した細胞)を高解像度で撮影することができ、その状態変化の様子を観察することができる。また、観察中に状態が変化しない領域については高解像度で画像を取得する必要性を排除することができ、状態変化が判定された領域の画像のみを速やかに且つ高解像度で取得することができる。
本発明によれば、撮影開始後における観察対象の状態変化を観察することができるという効果を奏する。
本発明の一実施形態に係る観察装置の概略構成図である。 図1の細胞状態判定部および領域抽出部による処理を説明する図であり、(a)は蛍光が発現した細胞がない状態、(b)は蛍光が発現した細胞が出現した状態を示している。 図1の観察装置によってタイムラプス観察を行った場合における作用を説明する図であり、(a)から(c)の順に蛍光が発現した細胞が出現していく状態を示している。 図1の観察装置による試料(ブロックA1)の状態変化を判定する際の処理を説明する図である。 図1の観察装置による状態変化した領域を抽出する際の処理を説明する図である。 図1の観察装置による試料(ブロックA2)の状態変化を判定する際の処理を説明する図である。 図1の観察装置によってタイムラプス観察を行った場合における作用を説明する図であり、(a)から(c)の順に細胞周期が進行し、各細胞の色が変化していく状態を示している。
本発明の一実施形態に係る観察装置1について、図面を参照して以下に説明する。
本実施形態に係る観察装置1は、生体試料中の細胞を観察する細胞観察装置であり、図1に示すように、顕微鏡本体10と、光学顕微鏡観察部(第1の画像取得部)20と、走査型顕微鏡観察部(第2の画像取得部)30と、PC40とを備えている。
顕微鏡本体10は、試料Aを載置する電動ステージ13と、試料Aに対向して配置された対物レンズ14と、光学顕微鏡観察部20からの光と走査型顕微鏡観察部30からの光とを切り替えて対物レンズ14に導く光路切替部16と、対物レンズ14と光路切替部16との間に配置されたミラー15とを備えている。
電動ステージ13は、試料Aを載置した状態で対物レンズ14の光軸に直交する方向(XY方向)に動作して、試料Aにおける対物レンズ14の焦点位置をXY方向に移動させるようになっている。
対物レンズ14は、光学顕微鏡観察部20(光源21)および走査型顕微鏡観察部30(レーザ光源31)から発せられた光を試料Aに照射するとともに、試料Aからの光を集めるようになっている。
光路切替部16は、光学顕微鏡観察部20の光軸と走査型顕微鏡観察部30の光軸との交点に配置されたミラー17と、ミラー17を走査型顕微鏡観察部30の光軸に沿う方向に移動させる駆動機構(図示略)とを備えている。このような構成を有することで、光路切替部16は、光学顕微鏡観察部20からの光と走査型顕微鏡観察部30からの光のいずれか一方を試料Aに照射するとともに、試料Aからの光を光学顕微鏡観察部20と走査型顕微鏡観察部30のいずれか一方に導くようになっている。
具体的には、光路切替部16は、ミラー17を光学顕微鏡観察部20の光軸と走査型顕微鏡観察部30の光軸との交点上に配置することで、走査型顕微鏡観察部30からの光を対物レンズ14(ミラー15)に向けて反射するとともに、この際の試料Aからの光を走査型顕微鏡観察部30(XYスキャナ33)に向けて反射するようになっている。また、光路切替部16は、ミラー17を光学顕微鏡観察部20の光軸上から外すことで、光学顕微鏡観察部20からの光を対物レンズ14(ミラー15)に向けて通過させるとともに、この際の試料Aからの光を光学顕微鏡観察部20(ダイクロイックミラー24)に向けて通過させるようになっている。
光学顕微鏡観察部20は、光源21と、励起フィルタ22と、ミラー23と、ダイクロイックミラー24と、吸収フィルタ25と、CCD(2次元撮像素子)26とを備えており、試料Aの画像を比較的低い解像度で取得するようになっている。
光源21は、例えば水銀キセノンランプであり、広帯域な波長の光を射出するようになっている。光源21は、例えば、試料A中の観察対象に特異的に付着または発現する蛍光物質を励起させる励起光を射出するようになっている。
励起フィルタ22は、光源21から射出された光から、蛍光物質の励起に必要な波長の光を抽出するようになっている。
ミラー23は、励起フィルタ22を透過してきた光源21からの光をダイクロイックミラー24に向けて反射するようになっている。
ダイクロイックミラー24は、光源21からの光を光路切替部16に向けて反射する一方、対物レンズ14により集光された試料Aからの光を透過させるようになっている。これにより、ダイクロイックミラー24は、光源21からの光と、試料Aからの光とを分岐するようになっている。
吸収フィルタ25は、ダイクロイックミラー24を透過してきた光のうち、試料Aからの光以外を遮断するようになっている。
CCD(Charge Coupled Device)26は、吸収フィルタ25を透過してきた試料Aからの光を光電変換して、試料Aの画像情報として電気信号をPC40に出力するようになっている。
走査型顕微鏡観察部30は、レーザ光源31と、光合成部32と、XYスキャナ(走査部)33と、ミラー34と、吸収フィルタ35と、PMT(光検出部)36と、ダイクロイックミラー37とを備えており、試料Aの画像(後述する領域抽出部44により抽出された領域の画像)を、光学顕微鏡観察部20よりも高解像度で取得するようになっている。
レーザ光源31は、互いに異なる波長のレーザ光を射出するレーザ光源31a,31b,31cを有しており、観察対象に応じて、これらレーザ光源からのレーザ光を切り替えて射出するようになっている。レーザ光源31a,31b,31cは、例えば、試料A中の観察対象に特異的に付着または発現する蛍光物質を励起させる励起光をそれぞれ射出するようになっている。
光合成部32は、レーザ光源31a,31b,31cからのレーザ光を同一光軸に合成するダイクロイックミラー32a,32b,32cを有している。具体的には、ダイクロイックミラー32aは、レーザ光源31aからのレーザ光をダイクロイックミラー32bに向けて反射するようになっている。ダイクロイックミラー32bは、レーザ光源31aからのレーザ光を透過させる一方、レーザ光源31bからのレーザ光をダイクロイックミラー32cに向けて反射するようになっている。ダイクロイックミラー32cは、レーザ光源31cからのレーザ光をXYスキャナ33に向けて透過させる一方、レーザ光源31aおよびレーザ光源31bからのレーザ光をXYスキャナ33に向けて反射するようになっている。なお、ダイクロイックミラー32aは、レーザ光源31aからのレーザ光を反射すればよいため、通常のミラーとしてもよい。
XYスキャナ33は、例えば銀コートされた一対のガルバノミラー(図示略)を有しており、これらガルバノミラーの揺動角度を変化させ、ラスタスキャン方式で駆動されるようになっている。これにより、レーザ光源31からのレーザ光を試料A上において2次元的に走査させることができるようになっている。
ダイクロイックミラー37は、レーザ光源31からのレーザ光を透過する一方、対物レンズ14により集光された試料Aからの光をミラー34に向けて反射するようになっている。これにより、ダイクロイックミラー37は、レーザ光源31からのレーザ光と、試料Aからの光とを分岐するようになっている。
ミラー34は、ダイクロイックミラー37により反射された試料Aからの光を吸収フィルタ35に向けて反射するようになっている。
吸収フィルタ35は、ダイクロイックミラー37により反射された光のうち、試料Aからの光以外を遮断するようになっている。
PMT(Photomultiplier Tube:光電子増倍管)36は、吸収フィルタ35を透過してきた試料Aからの光を光電変換して、試料Aの画像情報として電気信号をPC40に出力するようになっている。
PC40は、パーソナルコンピュータであり、パラメータ入力部41と、細胞検出部42と、細胞状態判定部(判定部)43と、領域抽出部44とを機能として備えており、光学顕微鏡観察部20(CCD26)および走査型顕微鏡観察部30(PMT36)から出力された画像情報から画像を生成するようになっている。
パラメータ入力部41は、例えばタッチパネルやキーボードやマウス等の入力装置であり、後述する試料A内の細胞を検出するための閾値や、試料Aの状態変化を判定するための基準となるパラメータが入力されるようになっている。
ここで、試料Aの状態変化を判定するための基準となるパラメータは、例えば、試料Aの像を構成する画素群の輝度、画素数、色のいずれか、もしくはその組み合わせである。ここでは、パラメータ入力部41に、試料Aの状態変化を判定するための基準となるパラメータとして、試料Aの像を構成する画素群の輝度が入力されたものとして説明する。
細胞検出部42は、光学顕微鏡観察部20(CCD26)により取得された試料Aの画像から、細胞を検出するようになっている。具体的には、細胞検出部42は、光学顕微鏡観察部20(CCD26)により取得された試料Aの画像のうち、予め設定された閾値以上の輝度値を有する画素のブロックを細胞として検出する。この際、画素のブロックが、所定の大きさ以上の場合にのみ、細胞として検出することとしてもよい。
細胞状態判定部43は、光学顕微鏡観察部20(CCD26)により時間間隔をあけて取得された複数の画像を比較して、試料Aの状態変化を判定するようになっている。
具体的には、細胞状態判定部43は、光学顕微鏡観察部20(CCD26)により時間間隔をあけて取得された複数の画像について比較し、細胞検出部42により細胞として検出された領域に変化が生じている場合には、試料Aの状態が変化したと判定する。この際、細胞状態判定部43は、パラメータ入力部41に入力されたパラメータを用いて試料Aの状態変化を判定する。
領域抽出部44は、細胞状態判定部43により状態変化が判定された領域を抽出するようになっている。
PC40は、領域抽出部44により抽出した領域の情報を走査型顕微鏡観察部30に出力し、この抽出した領域の画像を、走査型顕微鏡観察部30により高解像度で取得させるようになっている。
上記の処理について、図2(a)および図2(b)に示す具体例を用いて以下に説明する。図2(a)および図2(b)は、タイムラプス観察を行った場合における試料A(ブロックA1)の画像を示しており、図2(a)は蛍光の発現した細胞がない状態、図2(b)は蛍光が発現した細胞が出現した状態を示している。
図2(a)に示す状態においては、細胞状態判定部43により、試料Aの状態が変化したとは判断されないため、領域抽出部44により抽出される領域がない。その結果、走査型顕微鏡観察部30(PMT36)により高解像度で取得させる画像はない。
この図2(a)に示す状態から図2(b)に示す状態にとなった場合、細胞状態判定部43により、試料Aの状態が変化したと判断され、領域抽出部44により、状態変化が判定された領域、すなわち、新たに蛍光が発現した細胞B1,B2の領域が抽出される。そして、走査型顕微鏡観察部30(PMT36)により、上記のように抽出された細胞B1,B2の領域の画像が高解像度で取得される。
上記構成を有する観察装置1の作用について以下に説明する。
本実施形態に係る観察装置1においてタイムラプス観察を開始する場合には、まず、光路切替部16によりミラー17が、光学顕微鏡観察部20の光軸上から外される。これにより、光学顕微鏡観察部20(光源21)からの光を対物レンズ14(ミラー15)に向けて通過させる。
この状態において、光源21から光が射出され、射出された光は、励起フィルタ22、ミラー23、ダイクロイックミラー24、光路切替部16、ミラー15を介して、対物レンズ14により試料A上に照射される。試料Aでは、観察対象である細胞に特異的に付着または発現する蛍光物質が励起され、発生した蛍光が対物レンズ14により集められる。
この蛍光は、ミラー15、光路切替部16、ダイクロイックミラー24、吸収フィルタ25を介してCCD26に入射する。CCD26は、試料Aの画像を比較的低い解像度で取得するようになっており、試料Aからの蛍光を光電変換して、試料Aの画像情報として電気信号をPC40に出力する(第1の画像取得ステップ)。
次に、細胞検出部42により、光学顕微鏡観察部20(CCD26)により取得された試料Aの画像から、細胞が検出される。
次に、細胞状態判定部43により、光学顕微鏡観察部20(CCD26)により時間間隔をあけて取得された複数の画像が比較され、試料Aの状態変化が判定される(判定ステップ)。具体的には、細胞状態判定部43により、時間間隔をあけて取得された複数の画像について比較され、細胞検出部42により細胞として検出された領域に変化が生じている場合には、試料Aの状態が変化したと判定される。
次に、領域抽出部44により、細胞状態判定部43により状態変化が判定された領域が抽出される(領域抽出ステップ)。このように抽出された領域の情報は、走査型顕微鏡観察部30に出力され、この抽出された領域の画像が、走査型顕微鏡観察部30により高解像度で取得される(第2の画像取得ステップ)。
この場合には、光路切替部16によりミラー17が、光学顕微鏡観察部20の光軸上に配置される。これにより、走査型顕微鏡観察部30からのレーザ光を対物レンズ14(ミラー15)に向けて反射させる。この状態において、レーザ光源31からレーザ光が射出され、射出されたレーザ光は、XYスキャナ33により2次元走査され、領域抽出部43により抽出された領域、すなわち細胞状態判定部42により状態変化が判定された領域に対して照射される。
このように走査されたレーザ光は、光路切替部16(ミラー17)、ミラー15を介して、対物レンズ14により試料A上に照射される。試料Aでは、観察対象(細胞B)に特異的に付着または発現する蛍光物質が励起され、発生した蛍光が対物レンズ14により集められる。
この蛍光は、ミラー15、光路切替部16(ミラー17)、XYスキャナ33、ダイクロイックミラー37、ミラー34、吸収フィルタ35を介してPMT36に入射する。PMT36は、試料Aの画像を高い解像度で取得するようになっており、試料Aからの蛍光を光電変換して、試料Aの画像情報として電気信号をPC40に出力する。PC40では、XYスキャナ33による試料A上の走査位置とPMT36から出力された画像情報とから、状態の変化した領域が高解像度で撮影された試料Aの画像が生成される。
上記の処理について、図3から図6に示す具体例を用いて以下に説明する。
図4に示すように、例えばブロックA1について、光学顕微鏡観察部20(CCD26)により低解像度で画像を取得し、このブロックA1に状態の変化した細胞があるか否かを判定する。この際、例えば蛍光強度等の状態が変化した細胞B1,B2が検出された場合には、図5に示すように、細胞B1,B2の領域が、走査型顕微鏡観察部30(PMT36)により高解像度で撮影される。
具体的には、図3(a)から図3(c)に示すように、試料Aの状態の変化に応じて撮影が行われる。図3(a)から図3(c)は、タイムラプス観察を行った場合における試料A(ブロックA1)の画像を示しており、図3(a)から図3(c)に従って蛍光が発現した細胞が出現していく状態を示している。
図3(a)に示す状態においては、細胞状態判定部43により、状態変化が判定された領域、すなわち、蛍光が発現した細胞B1,B2の領域が抽出される。そして、走査型顕微鏡観察部30(PMT36)により、上記のように抽出された細胞B1,B2の領域の画像が高解像度で取得される。
図3(b)に示す状態においては、細胞状態判定部43により、状態変化が判定された領域、すなわち、細胞B1,B2の領域に加えて、新たに蛍光が発現した細胞B3,B4の領域が抽出される。そして、走査型顕微鏡観察部30(PMT36)により、上記のように抽出された細胞B1,B2,B3,B4の領域の画像が高解像度で取得される。
図3(c)に示す状態においては、細胞状態判定部43により、状態変化が判定された領域、すなわち、細胞B1,B2,B3,B4の領域に加えて、新たに蛍光が発現した細胞B5,B6,B7の領域が抽出される。そして、走査型顕微鏡観察部30(PMT36)により、上記のように抽出された細胞B1,B2,B3,B4,B5,B6,B7の領域の画像が高解像度で取得される。
次に、図6に示すように、試料AのブロックA2についても、ブロックA1と同様の処理が行われ、状態の変化が検出されない場合には、高解像度での撮影を行わない。以降、同様に試料Aの他のブロックについても、ブロックA1,A2と同様の処理が順次行われ、試料A全体について状態の変化した領域が高解像度で撮影される。
以上のように、本実施形態に係る観察装置1によれば、光学顕微鏡観察部20により試料Aの画像が時間間隔をあけて複数取得され、細胞状態判定部43によりこれらの画像が比較されて試料Aの状態変化が判定される。そして、領域抽出部44により状態変化が判定された領域が抽出され、この領域の画像が、走査型顕微鏡観察部30により光学顕微鏡観察部20よりも高解像度で取得される。
このようにすることで、観察中に状態が変化した領域(例えば、細胞核内の微細構造が変化した細胞)を高解像度で撮影することができ、その状態変化の様子を観察することができる。また、観察中に状態が変化しない領域については高解像度で画像を取得する必要性を排除することができ、状態変化が判定された領域の画像のみを速やかに且つ高解像度で取得することができる。
また、細胞状態判定部43が、パラメータ入力部41により入力されたパラメータを用いて試料Aの状態変化を判定することで、観察を行いたい対象に応じて、試料Aの状態変化を判定するための基準となるパラメータをパラメータ入力部41に入力して、その状態変化を観察することができ、様々な観察対象についての状態変化の観察が可能となる。なお、このパラメータは、図示しないメモリに予め記憶させておくこととしてもよい。
また、光学顕微鏡観察部20を、例えばCCD等の2次元撮像素子とすることで、高速で試料Aの画像を取得することができ、取得した画像を試料Aの状態変化の判定用の画像として用いることができる。
また、走査型顕微鏡観察部30をレーザ走査型顕微鏡とすることで、状態が変化した領域の画像を高解像度で取得することができる。また、レーザ光を励起光として試料Aからの蛍光をPMT36により検出することで、状態変化が判定された領域のみに励起光を照射し、観察中に状態が変化しない領域には励起光を照射しないようにすることができ、状態が変化しない領域の退色を防止することができる。
なお、本実施形態において、試料Aの状態変化を判定するための基準となるパラメータとして、試料Aの像を構成する画素群の輝度を例に挙げて説明したが、これに代えて、試料Aの像を構成する画素群の輝度、画素数、色のいずれか、もしくはその組み合わせでよい。
以下に、試料Aの状態変化を判定するための基準となるパラメータとして、色を採用した場合について説明する。
この場合には、例えば細胞の周期によって異なる色の蛍光を発する蛍光プローブ(例えばFUCCI)を試料Aに加え、図7(a)から図7(c)に示すように、試料Aの状態の変化、すなわち色の変化に応じて撮影が行われる。
図7(a)から図7(c)は、タイムラプス観察を行った場合における試料A(ブロックA1)の画像を示しており、図7(a)から図7(c)に従って細胞周期が進行し、各細胞の色が変化していく状態を示している。ここでは、緑蛍光(S,G2,M期)の細胞を撮影対象とした例を説明する。
図7(a)に示す状態においては、細胞B1〜B7のうち、緑蛍光を発する細胞は存在しないため、走査型顕微鏡観察部30(PMT36)による撮影は行われない。
図7(b)に示す状態においては、細胞B3から緑蛍光が発生しており、この状態変化が細胞状態判定部43により判定され、細胞B3の領域が領域抽出部44により抽出される。そして、走査型顕微鏡観察部30(PMT36)により、このように抽出された細胞B3の領域の画像が高解像度で取得される。
図7(c)に示す状態においては、細胞B2,B3,B5,B6,B7から緑蛍光が発生しており、この状態変化が細胞状態判定部43により判定され、細胞B2,B3,B5,B6,B7の領域が領域抽出部44により抽出される。そして、走査型顕微鏡観察部30(PMT36)により、このように抽出された細胞B2,B3,B5,B6,B7の領域の画像が高解像度で取得される。
上記のように、試料Aの状態変化を判定するための基準となるパラメータとして、色を採用した場合には、例えば細胞の周期によって異なる色の蛍光を発する蛍光プローブを試料Aに加えることで、その状態変化、すなわち細胞周期の進行をリアルタイムで観察することができる。
また、パラメータとして画素数を採用した場合には、例えば大きさの変化する細胞をリアルタイムで観察することができる。
以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
A 試料
1 観察装置
10 顕微鏡本体
13 電動ステージ
14 対物レンズ
16 光路切替部
20 光学顕微鏡観察部(第1の画像取得部)
21 光源
24 ダイクロイックミラー
26 CCD(2次元撮像素子)
30 走査型顕微鏡観察部(第2の画像取得部)
31 レーザ光源
32 光合成部
33 XYスキャナ(走査部)
36 PMT(光検出部)
40 PC
41 パラメータ入力部
42 細胞検出部
43 細胞状態判定部(判定部)
44 領域抽出部

Claims (6)

  1. 試料の画像を取得する第1の画像取得部と、
    該第1の画像取得部により時間間隔をあけて取得された複数の画像を比較して、前記試料の状態変化を判定する判定部と、
    該判定部により状態変化が判定された領域を抽出する領域抽出部と、
    該領域抽出部により抽出された領域の画像を、前記第1の画像取得部よりも高解像度で取得する第2の画像取得部とを備える観察装置。
  2. 前記試料の状態変化を判定するための基準となるパラメータを入力するパラメータ入力部を備え、
    前記判定部が、前記パラメータ入力部により入力されたパラメータを用いて前記試料の状態変化を判定する請求項1に記載の観察装置。
  3. 前記パラメータが、前記試料の像を構成する画素群の輝度、画素数、色のいずれか、もしくはその組み合わせである請求項2に記載の観察装置。
  4. 前記第1の画像取得部が、2次元撮像素子である請求項1に記載の観察装置。
  5. 前記第2の画像取得部が、
    前記試料上でレーザ光を走査する走査部と、
    該走査部による走査位置に対応付けて前記試料からの光を検出する光検出部とを有する請求項1に記載の観察装置。
  6. 時間間隔をあけて試料の画像を複数撮影する第1の画像取得ステップと、
    該第1の画像取得ステップにより時間間隔をあけて撮影された複数の画像を比較して、前記試料の状態変化を判定する判定ステップと、
    該判定ステップにより状態変化が判定された領域を抽出する領域抽出ステップと、
    該領域抽出ステップにより抽出された領域の画像を、前記第1の撮像ステップよりも高解像度で撮影する第2の画像取得ステップとを含む観察方法。
JP2010265441A 2010-11-29 2010-11-29 観察装置および観察方法 Pending JP2012118126A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2010265441A JP2012118126A (ja) 2010-11-29 2010-11-29 観察装置および観察方法
EP11009397.8A EP2458551A3 (en) 2010-11-29 2011-11-28 Observation apparatus and observation method
US13/305,228 US20120134539A1 (en) 2010-11-29 2011-11-28 Observation apparatus and observation method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010265441A JP2012118126A (ja) 2010-11-29 2010-11-29 観察装置および観察方法

Publications (1)

Publication Number Publication Date
JP2012118126A true JP2012118126A (ja) 2012-06-21

Family

ID=45094386

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010265441A Pending JP2012118126A (ja) 2010-11-29 2010-11-29 観察装置および観察方法

Country Status (3)

Country Link
US (1) US20120134539A1 (ja)
EP (1) EP2458551A3 (ja)
JP (1) JP2012118126A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020209217A1 (ja) * 2019-04-12 2020-10-15 コニカミノルタ株式会社 画像処理システム、画像処理方法及びプログラム
JP2022083387A (ja) * 2020-11-24 2022-06-03 ユニスト(ウルサン ナショナル インスティテュート オブ サイエンス アンド テクノロジー) 超高解像度のイメージと高速の広視野イメージを同時に取得する方法及び装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1195119A (ja) * 1997-09-18 1999-04-09 Olympus Optical Co Ltd 走査型顕微鏡
JP2005031664A (ja) * 2003-07-11 2005-02-03 Carl Zeiss Jena Gmbh レーザ走査型顕微鏡の操作方法
JP2005128086A (ja) * 2003-10-21 2005-05-19 Olympus Corp 走査型顕微鏡システム
JP2005514589A (ja) * 2001-12-05 2005-05-19 ザ・レジェンツ・オブ・ザ・ユニバーシティ・オブ・カリフォルニア ロボット顕微鏡検査システム
JP2006039048A (ja) * 2004-07-23 2006-02-09 Olympus Corp 顕微鏡装置
JP2006215260A (ja) * 2005-02-03 2006-08-17 Olympus Corp 顕微鏡用撮像装置、顕微鏡システム、記録制御方法、および記録制御プログラム
JP3137634U (ja) * 2007-03-27 2007-12-06 夏目光学株式会社 マクロミクロナビゲーションシステム
JP2012002949A (ja) * 2010-06-15 2012-01-05 Nikon Corp 観察装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69839501D1 (de) * 1997-02-27 2008-06-26 Cellomics Inc System für Screening biologischer Zellen

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1195119A (ja) * 1997-09-18 1999-04-09 Olympus Optical Co Ltd 走査型顕微鏡
JP2005514589A (ja) * 2001-12-05 2005-05-19 ザ・レジェンツ・オブ・ザ・ユニバーシティ・オブ・カリフォルニア ロボット顕微鏡検査システム
JP2005031664A (ja) * 2003-07-11 2005-02-03 Carl Zeiss Jena Gmbh レーザ走査型顕微鏡の操作方法
JP2005128086A (ja) * 2003-10-21 2005-05-19 Olympus Corp 走査型顕微鏡システム
JP2006039048A (ja) * 2004-07-23 2006-02-09 Olympus Corp 顕微鏡装置
JP2006215260A (ja) * 2005-02-03 2006-08-17 Olympus Corp 顕微鏡用撮像装置、顕微鏡システム、記録制御方法、および記録制御プログラム
JP3137634U (ja) * 2007-03-27 2007-12-06 夏目光学株式会社 マクロミクロナビゲーションシステム
JP2012002949A (ja) * 2010-06-15 2012-01-05 Nikon Corp 観察装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020209217A1 (ja) * 2019-04-12 2020-10-15 コニカミノルタ株式会社 画像処理システム、画像処理方法及びプログラム
JP2022083387A (ja) * 2020-11-24 2022-06-03 ユニスト(ウルサン ナショナル インスティテュート オブ サイエンス アンド テクノロジー) 超高解像度のイメージと高速の広視野イメージを同時に取得する方法及び装置
JP7756416B2 (ja) 2020-11-24 2025-10-20 ユニスト(ウルサン ナショナル インスティテュート オブ サイエンス アンド テクノロジー) 超高解像度のイメージと高速の広視野イメージを同時に取得する方法及び装置

Also Published As

Publication number Publication date
EP2458551A3 (en) 2017-04-19
US20120134539A1 (en) 2012-05-31
EP2458551A2 (en) 2012-05-30

Similar Documents

Publication Publication Date Title
US8704196B2 (en) Combination microscopy
EP2573607B1 (en) Image processing apparatus, fluorescence microscope apparatus, and image processing program
US20120002043A1 (en) Observation apparatus
JP2005284136A (ja) 観察装置および観察装置の焦点合わせ方法
JP5745752B2 (ja) 細胞スクリーニング方法、その方法に用いる制御ソフトウェア、細胞スクリーニング装置、及び画像解析装置、並びに細胞スクリーニングシステム
JP2011008245A (ja) 生体観察装置
EP2407781B1 (en) Cell observation apparatus and observation method
CN110892251B (zh) 试样观察装置和试样观察方法
JP2010286565A (ja) 蛍光観察装置
CN110869747A (zh) 试样观察装置和试样观察方法
JP7119085B2 (ja) 衝撃再走査システム
JP6161399B2 (ja) 顕微鏡システム
JP2012118126A (ja) 観察装置および観察方法
US7983466B2 (en) Microscope apparatus and cell observation method
JP7501364B2 (ja) 分光イメージング装置および蛍光観察装置
JP5738580B2 (ja) 顕微鏡装置および観察方法
JP2014224856A (ja) レーザ走査型顕微鏡
JP2011209573A (ja) 合焦装置、合焦方法、合焦プログラム及び顕微鏡
JP6355961B2 (ja) 標本観察装置
JP5562582B2 (ja) 蛍光観察装置
JP5669561B2 (ja) 蛍光観察装置
JP2010164635A (ja) 共焦点顕微鏡
JP2004354346A (ja) 測定装置
JP2008185432A (ja) 創薬スクリーニング装置
JP2004177732A (ja) 光学測定装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140515

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140527

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141216

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150407