JP2750151B2 - 画像記録検索表示装置 - Google Patents

Description

【発明の詳細な説明】 ［産業上の利用分野］ 本発明は一連の時系列画像を記録検索する画像記録検
索表示装置に関する。

［従来の技術と発明が解決しようとする課題］ 近年、体腔内に細長の挿入部を挿入することにより、
体腔内臓器等を観察したり、必要に応じて処置具チャン
ネル内に挿通した処置具を用いて各種治療処置のできる
内視鏡（スコープ又はファイバスコープ）が広く用いら
れている。

また、電荷結合素子（CCDと記す。）等の固体撮像素
子を撮像手段に用いた電子スコープも種々使用されてい
る。この電子スコープはファイバスコープに比べ解像度
が高く、画像の記録及び再生等が容易であり、また、画
像の拡大や２画面の比較等の画像処理が容易にできる等
の利点を有する。

上記電子スコープによって映像化された内視鏡像は画
像記録装置に記録されるが、この記録する技術は種々提
案されている。例えば、本出願人は特願昭63-277913号
で内視鏡装置から入力された画像信号を複数の画像記録
部に振分けて記録する技術を提案している。

一方、画像記録装置に記録された画像を再生する場合
は、一連の画像をマルチ画面表示することが行なわれ、
マルチ画面表示装置の画面上に例えば９枚の一連の画像
を順番に表示していた。

しかし、この技術では一連の画像のうち１枚と他の１
枚を比較したい場合は、たまたま同じ画面上に表示して
いる場合は良いが、そうでない場合には画面上に同時表
示して直接比較することができなかった。

本発明は上記事情に鑑みて成されたものであり、一連
の画像を検索表示する場合に、時間的に離れて記憶され
ている画像同志を同時に観察して比較することを容易に
できる画像記録検索表示装置を提供することを目的とす
る。

［課題を解決するための手段及び作用］ 本発明による画像記録検索表示装置は、内視鏡装置よ
り出力される画像信号から時系列順に取り出された一連
の静止画像を記録保持する静止画像記録手段と、上記静
止画像記録手段に記録保持された静止画像を所望の条件
で検索する静止画像検索手段と、上記静止画像検索手段
で検索された静止画像を順次出力する検索画像出力手段
と、上記検索画像出力手段で出力された静止画像を順次
上書き表示する第１の画像表示手段と、上記第１の画像
表示手段で表示された静止画像より所望の静止画像を選
択可能な画像選択手段と、第１の画像表示手段による表
示動作に並行して上記画像選択手段で選択された静止画
像を表示する第２の画像表示手段とを具備したことを特
徴とする。

本発明では、画像記憶手段に記憶された時系列画像は
制御手段によって読み出され表示手段に表示される。こ
の表示された画像から所定の画像を選択すると制御手段
は選択された画像と選択を行うための一連の時系列画像
とを同時に表示手段に出力する。

［実施例］ 以下、本発明を図面を参照して具体的に説明する。

第１図ないし第７図は本発明の第１実施例に係り、第
１図は内視鏡装置と共に用いられる画像記録検索表示装
置の概略図、第２図は画像記録検索装置のブロック図、
第３図は内視鏡装置のブロック図、第４図は記録動作の
説明図、第５図は検索動作の説明図、第６図はモニタの
表示例を示す説明図、第７図は切出し枠設定の説明図で
ある。

第１図において、画像記録検索表示装置１は内視鏡装
置２に接続されており、内視鏡像の記録検索が行えるよ
うになっている。

前記内視鏡装置２は電子内視鏡３と、この電子内視鏡
３に接続された画像入力装置４と、この画像入力装置４
から出力される映像信号を受けて、画像表示する第１の
モニタ６とから構成されている。また、画像入力装置４
は画像記録検索表示装置１を構成する制御手段としての
記録検索装置７に接続されている。画像記録検索表示装
置１は前記記録検索装置７と、表示手段としての第２の
モニタ９と、キーボード８とから構成されている。

前記記録検索装置７には入力手段としての前記キーボ
ード８が接続されており、各種のコマンド及びデータが
入力されるようになっている。記録検索装置７には前記
第２のモニタ９が接続されており、この第２のモニタ９
には検索された画像が表示されるようになっている。

前記電子内視鏡３は可撓性で細長に形成され、観察部
位11に挿入される挿入部12と、この挿入部12の後端部に
連設された操作部13と、この操作部13の側部より延出し
てユニバーサルコード14とを有している。

前記ユニバーサルコード14の後端部にはコネクタ16が
設けられており、このコネクタ16は内視鏡３に照明光を
供給する画像入力装置４の光源部17に接続されている。

第３図において前記電子内視鏡３の挿入部12の先端部
には光源部17より供給された照明光を観察部位11に出射
するファイババンドルによって形成されたライトガイド
18の出射端面が設けられている。このライトガイド18は
挿入部12と操作部13とユニバーサルコード14内とを経て
光源部17に接続され照明光を供給されるようになってい
る。

前記挿入部12の先端部には更に、対物レンズ19が設け
られており、この対物レンズ19の結像位置には固体撮像
素子としてのCCD21が撮像面が位置するようになってい
る。このCCD21には撮像面に結像した被写体像を光電変
換した結果得られる電気信号と、このCCD21を駆動する
駆動クロックが伝送される信号線22が接続されている。
この信号線22は挿入部12とユニバーサルコード14とを経
てコネクタ16に至るようになっている。

前記光源部17には光源ランプ31が設けられており、こ
の光源ランプ31と前記ライトガイド18の入射端面とを結
ぶ光路上には光源ランプ31側より光源ランプ31の照明光
を平行光とするコリメータレンズ32と回転フィルタ33と
照明光を集光してライトガイド18の入射端面に照射する
集光レンズ34とが設けられている。

前記回転フィルタ33は円盤状で周方向に例えば赤
（Ｒ）、緑（Ｇ）、青（Ｂ）の各色光を透過する色透過
フィルタ34R、34G、34Bが設けられており、この各色透
過フィルタ34R,34G,34Bに前記コリメータレンズ32によ
って平行光とされた照明光が入射するようになってい
る。この回転フィルタ33はモータ35によって回転駆動さ
れて、赤、緑、青の各色光を時系列的にライトガイド18
に供給するようになっている。

前記コネクタ16を画像入力装置４に接続することによ
り、信号線22は画像プロセス部36に接続されるようにな
っている。この画像プロセス部36は駆動クロックをCCD2
1に印加して駆動し、該CCD21から送出される電気信号を
RGBビデオ信号に変換して出力するようになっている。
また、画像信号レベルR,B信号のバランス等の制御を行
うようになっている。この画像プロセス部36から出力さ
れるRGBビデオ信号は第１のモニタ６と記録検索装置７
とに出力され、第１のモニタ６では内視鏡像が表示され
るようになっている。

記録検索装置７は第２図に示すように構成されてい
る。

第２図において、RGBビデオ信号はスーパーインポー
ズ部37に入力されて、A/D変換部38でデジタル変換さ
れ、フレームメモリ39に書込まれる。フレームメモリ39
から読み出された映像信号はD/A変換部41でアナログ化
されてRGB出力端より第２のモニタ９に出力されるよう
になっている。

また、記録検索装置７内には制御バス42によってCPU4
3とROM44とRAM46とキーボード入力部47と書込み位置設
定部48と前記スーパーインポーズ部37と記憶位置設定部
49と再生制御部51との間でデータ及び制御信号の入出力
できるようになっている。

一方、記録検索装置７の書込みクロック発生部53には
RGBビデオ信号と共に同期信号が入力されており、この
書込みクロック発生部53は前記A/D変換部38と書込みア
ドレス発生部54とにタイミング信号を出力するようにな
っている。書込みアドレス発生部54には前記書込み位置
設定部48からの制御信号が入力され、この制御信号によ
って書込みアドレスを発生して前記フレームメモリ39に
出力するようになっている。

前記記憶位置設定部49は前記CPU43からの制御信号に
よってデータ記憶部56にフレームメモリ39に書込まれた
映像データの取込みを指示するようになっている。デー
タ記憶部56は前記再生制御部51から再生制御されるよう
になっており、再生制御部51からの制御信号によって映
像データを再びフレームメモリ39に書込むようになって
いる。

記録検索装置７には読出しクロック発生部52が設けら
れており、この読出しクロック発生部52はタイミング信
号を発生して前記D/A変換部41と読出しアドレス発生部5
7とに出力するようになっており、読出しアドレス発生
部57は読出しアドレスを発生して、前記フレームメモリ
39に出力し、フレームメモリ39から映像データを出力す
る。また、読出しクロック発生部52は同期信号発生し、
この同期信号を出力端より第２のモニタ９に出力するよ
うになっている。

前記キーボード入力部47は前記キーボード８に接続さ
れており、制御信号及びデータをCPU43に送出するよう
になっている。

前記ROM44は記録、検索等のプログラムを格納してお
り、キーボード８より入力される制御信号によって処理
を行うようになっている。

次に第４図ないし第７図を使ってCPU43の動作を説明
する。

第４図において、記録動作の説明をする。

P1で記録間隔をキーボード８より入力して、指定す
る。この指定された記録間隔はCPU43によってRAM45に記
憶される。

P2で画像入力装置４から入力された映像データにスー
パーインポーズ部37で切出し枠58が重畳されて第７図
（ａ）に示される画像が第２のモニタ９に表示される。
この画像は画面59の左側に患者のIDデータ61が表示さ
れ、右側に切出し枠58が重畳された内視鏡像62が表示さ
れる。

P3で切出し枠58を第７図（ｂ）に示すキーボード８の
カーソル移動キー63を使って、記録したい画像を切出し
枠58で囲むように移動させて設定する。

P4でCPU43はキーボード８から指令でRAM46に記憶した
記録間隔に従って、データ記憶部56にフレームメモリ39
から切出し枠58の内側の映像データを取込ませる。

P5でキーボード８からの指令でCPU43は映像データの
取込み中止指令をデータ記憶部56に出力してデータ記憶
部56は映像データの取込みを中止する。

上記のように記録間隔を持った画像が順次データ記憶
部56に記録される。このように記録された映像データは
次のように検索される。

第５図のP10でキーボード８から検索条件を入力する
とCPU43は検索を行い、一連の画像の１組を検索する。

P11でデータ記憶部56から検索された映像データを１
コマずつフレームメモリ39に出力し、第６図に示す第２
のモニタ９の画面59上に４分割されて設けられた参照画
像表示部64に１コマずつ順次表示される。

この表示は、静止画像を検索した結果が１コマづつ順
次表示されるので、静止画像が次々と動的に変化してゆ
き、動画的な表示となる。

P12でキーボード８からの指令により参照画像表示部6
4に表示された例えば変化の始まる前の画像、すなわ
ち、第６図の例で４コマ目の画像をフリーズする。

P13でキーボード８からの指令により動画表示部66に
５コマ目から順に表示する。

P14でキーボード８からの指令によって注目した画
像、すなわち、８コマ目のところで画像をフリーズす
る。

P15で一時選択画像表示部（Ａ）67aにフリーズした８
コマ目の画像を移して表示する。

P16でキーボード８からの指令によって動画表示部66
に９コマ目からの画像を順に表示する。

P17で注目した画像、すなわち、11コマ目のところで
画像をフリーズする。

P18で一時選択画像表示部（Ｂ）67bにフリーズした11
コマ目の画像を移して表示する。

P19でキーボード８からの動画表示部66に12コマ目か
ら順に表示する。

P20でキーボード８からの指令により注目した画像の
ところで画像をフリーズする。

P21で一時選択画像表示部（Ａ）67aにフリーズした画
像を移して表示する。

次に本実施例の作用を説明する。

画像入力装置４の光源部17から出射された照明光は回
転フィルタ33によって色分離されて、赤（Ｒ）、緑
（Ｇ）、青（Ｂ）の各色光にされてライトガイド18を経
て観察部位11に照射される。観察部位11からの反射光は
対物レンズ19によってCCD21の撮像面に結像され、光電
変換されて画像入力装置４の画像プロセス部36に入力さ
れる。画像プロセス部36では例えばRGBビデオ信号が生
成されて第１のモニタ６と記録検索装置７とに出力され
る。

画像を記録する場合は、RGBビデオ信号はスーパーイ
ンポーズ部37に入力されて、切出し枠58が重畳されて書
込みクロック発生部53からのタイミング信号が入力され
るA/D変換部38でデジタル化され、フレームメモリ39に
書込まれる。フレームメモリ39では書込まれた映像デー
タが同時に読み出されて、読出しクロック発生部52から
のタイミング信号が入力されるD/A変換部41でアナログ
化されて第２のモニタ９に出力される。

第２のモニタ９の画面59上には第７図（ａ）で示すよ
うに切出し枠58が重畳された内視鏡像62が表示される。

次に、P1からP5までの動作が行なわれて、切出し枠58
内の画像が記録間隔によって記録される。

検索を行う場合はキーボード８から検索条件が入力さ
れ、CPU43は検索データに従って一連画像の１組を検索
して、この一連画像をデータ記憶部56から出力させる。
書込み位置設定部48はフレームメモリ39のアドレスを４
分割して分割されたアドレスに第６図に示す参照画像表
示部64と、一時選択画像表示部67a,67bと動画表示部66
を割当てる。書込みアドレス発生部54は参照画像表示部
64に対応するアドレスを発生して映像データをフレーム
メモリ39上に書込み、この映像データは読み出されてD/
A変換部41を介して第２のモニタ９の参照画像表示部64
に表示される。

以下、２コマ目から順に参照画像表示部64に対応する
フレームメモリ39上に順次書込みが行なわれて参照画像
表示部64に表示される。表示された画像の内４コマ目の
画像をキーボード８から選択すると、フレームメモリ39
上への書込みが禁止され、４コマ目の画像はフリーズさ
れる。

更に、キーボード８からの指令がCPU43に入力される
と、CPU43は書込み位置設定部48に制御信号を出力し、
書込み位置設定部48は書込みアドレス発生部54に動画表
示部66に対応するフレームメモリ39上のアドレスを出力
させる。このアドレスによってデータ記憶部56から出力
された映像データは書込まれて、同時に読み出されてD/
A変換部41を介して第２のモニタ９に出力される。第２
のモニタ９の画面59上には参照画像表示部64に４コマ目
の静止画像と動画表示部66に５コマ目からの画像が順次
表示される。

キーボード８から８コマ目を選択するとCPU43は書込
み位置設定部48に制御信号を出力して、書込み位置設定
部48は書込みアドレス発生部54に一時選択画像表示部
（Ａ）67aに対応するフレームメモリ39上のアドレスを
発生させ、このアドレスで８コマ目の画像をフレームメ
モリ39上に書込む。書込まれた映像データは読み出され
て、第２のモニタ９の画面59上に表示され、参照画像表
示部64には４コマ目の画像、一時選択画像表示部（Ａ）
67aには８コマ目の画像表示される。

以下、同様に一時選択画像表示部（Ｂ）67bに11コマ
目の画像が表示され、更に、選択が行なわれると選択さ
れた画像は一時選択画像表示部（Ａ）67aに表示され
る。

本実施例では第２のモニタ９の画面59を４分割して参
照画像表示部64、一時選択画像表示部67a,67b、動画表
示部66を形成したことによって動画表示部66に表示され
た画像と他の表示部64,67a,67bの画像とを同時に比較で
きるための画像の選択を容易に行うことができ、各画像
の比較を容易に行うことができる。

更に、本実施例のように時間的に変化する患部を記録
した場合、任意の画像を選び出して各々を比較すること
ができるため患部の経時的変化を明確に知ることができ
る。

なお、本実施例では第２のモニタ９の画面59を４分割
して表示しているが、分割数はこれに限定されることな
く、例えば９分割でもよい。

また、検索条件と一致する複数の画像を記憶する記憶
部を設けて、この記憶部から繰返し画像を呼出すように
して、例えば１回目で選択されなかった画像を２回目の
呼出しで選択できるようにしてもよい。

第８図及び第９図は本発明の第２実施例に係り、第８
図は内視鏡装置と共に用いられる画像記録検索表示装置
の概略図、第９図は画像記録検索装置のブロック図であ
る。

本実施例では第１実施例と同様の内視鏡装置２を有し
ており、内視鏡装置２の説明を省略する。

第８図において記録検索装置71には第２のモニタ72と
第３のモニタ73と第４のモニタ74と第５のモニタ76とが
接続されている。

記録検索装置71は第９図のように構成されている。

画像入力装置４から出力されたRGBビデオ信号は切出
し枠58を重畳するスーパーインポーズ部77に入力され
る。スーパーインポーズ部77はA/D変換部78に接続さ
れ、デジタル化された映像データは入力フレームメモリ
79に書込まれるようになっている。入力フレームメモリ
79は出力フレームメモリ81a,81b,81c,81dと映像データ
バス80で接続されており、互いに画像データの入出力が
できるようになっている。各出力フレームメモリ81a,81
b,81c,81dにはD/A変換部82a,82b,82c,82dが各々接続さ
れており、映像データをアナログ化して各々第２のモニ
タ72と第３のモニタ73と第４のモニタ74と第５のモニタ
76とに出力できるようになっている。

前記入力フレームメモリ79には読出し制御部83が接続
されており、出力フレームメモリ81a,81b,81c,81dには
各々読出し制御部84a,84b,84c,84dが接続されている。
各々読出し制御部84a,84b,84c,84dはD/A変換部82a,82b,
82c,82dにも接続されており、タイミング信号や出力す
るようになっている共に同期信号を発生して各モニタ7
2,73,74,76に出力するようになっている。

前記読出し制御部83,84a,84b,84c,84dは制御バス86に
接続されており、更に、この制御バス86には書込み制御
部87と画像デーダ記憶部88と検索データ記憶部89とCPU4
3とROM44とRAM46とキーボードインターフェース91とが
接続されており、データ及び制御信号が入出力できるよ
うになっている。

次に本実施例の作用を説明する。

画像を記録する場合は、画像入力装置４から入力され
たRGBビデオ信号はスーパーインポーズ部77に入力され
切出し枠58が重畳されて、A/D変換部78でデジタル化さ
れ、入力フレームメモリ79に書込まれる。この映像デー
タは読み出されて出力フレームメモリ81aに書込まれ、
更に読み出されてD/A変換部82aでアナログ化され第２の
モニタ72に出力される。第２のモニタ72には第７図
（ａ）で示す切出し枠58が重畳された内視鏡像62が表示
される。

第１実施例と同様にキーボード８から記録間隔を入力
した後にキーボード８より切出し枠58を移動して記録す
る画像を切出し枠58の中に入れる。CPU43はキーボード
８からの指令によって画像データ記憶部88に入力フレー
ムメモリ79の切出し枠58内の映像データ取込ませる。こ
れによって画像データ記憶部88には記録間隔を持った一
連の時系列画像が順次記憶される。

記憶された画像を検索する場合は、キーボード８から
検索条件を入力する。CPU43はこの検索条件から画像デ
ータ記憶部88に記憶された画像の中から一連の画像の１
組を検索する。この検索された一連の画像は検索データ
記憶部89に送られて記憶される。

CPU43はこの記憶された画像を１コマ目か映像データ
バス80を介して出力フレームメモリ81aに出力させる。
出力フレームメモリ81aは書込まれた画像データをD/A変
換部82aでアナログ化して第２のモニタ72に出力する。

第２のモニタ72では１コマ目から順次記憶された内視
鏡像が表示される。

第２のモニタ72を観察しながら、例えば変化の始まる
前の画像をキーボード８を操作して選択する。CPU43は
選択が行なわれると出力フレームメモリ81aへの画像デ
ータの書込みを禁止して既に書込まれた画像、すなわち
選択された画像を繰返し出力するようにして第２のモニ
タ72の表示画像を静止画像とする。

次にCPU43はキーボード８からの指令によって第２の
モニタ72に表示された画像の次に記録された画像から順
次出力フレームメモリ81dに書込みを始め、この書込ま
れた画像データはD/A変換部82dでアナログ化されて第５
のモニタ76に出力されて表示される。

この第５のモニタ76を観察しながら注目した画像をキ
ーボード８より選択する。CPU43はキーボード８の指令
によって出力フレームメモリ81dの書込みを禁止して、
既に書込まれた画像、すなわち選択された画像を繰返し
出力し、第５のモニタ76の表示画像を静止画像とする。
更に、CPU43は第５のモニタ76に表示されていると同じ
画像を出力フレームメモリ81bに書込み、この画像を繰
返し第３のモニタ73に出力する。第３のモニタ73には注
目した画像の静止画像が表示される。

CPU43はキーボード８からの指令によって第３のモニ
タ73に表示された画像の次に記録された画像を第５のモ
ニタ76に順次表示させる。

第５のモニタ76を観察しながら更に注目する画像をキ
ーボード８を操作して選択する。CPU43は選択が行なわ
れると上記と同時に選択された画像を第５のモニタ76に
静止画像として表示し、同じ画像を第４のモニタ74に表
示する。

更に選択を行う場合、選択された画像は第３のモニタ
73に表示され、以下、同様の動作が繰り返し行なわれ
る。

本実施例によれば第１実施例と同様の効果を得ること
ができる。

なお、本実施例では第５のモニタ76に画像を表示して
選択を行い、選択された画像を第２ないし第４のモニタ
72,73,74に静止画像として表示するようにしているが、
選択と静止画像の表示を同じモニタで行うようにしても
よい。

上記の各実施例では切出し枠内から切出して記憶して
いるが、切取らずに記憶し、再生時に切取っても良い。

また、アナログの記憶装置を使用し、動画表示部にア
ナログ記憶記憶装置の出力を表示し、その他のところに
はフリーズした画像を表示しても良い。

更に、本発明は電子内視鏡に限定されるものでなく、
光学式内視鏡に外付けTVカメラを取付けた画像取込み装
置に適用しても同様の効果を得ることができる。

［発明の効果］ 以上説明したように本発明によれば表示手段に参照画
像表示画面と、検索後の一時選択画像表示画面と、動画
表示画面とを設け、参照画像表示画面を観察しながら動
画を観察することができるようにしているので一連の画
像を検索表示する場合に、時間的に離れて記憶されてい
る画像同志を同時に観察して比較することを容易に行う
ことができる。

換言すれば、検索結果の静止画像を順次表示する画面
と、静止画像のうち所望の静止画像を選択表示する画面
を有しているので、一連の検索後の静止画像を観察する
場合に、検索結果より更に目的の静止画像を絞り込み表
示可能であると共に、時間的に離れて記録されている画
像同士を同時に観察して比較することが容易にできる。

【図面の簡単な説明】

第１図ないし第７図は本発明の第１実施例に係り、第１
図は内視鏡装置と共に用いられる画像記録検索表示装置
の概略図、第２図は画像記録検索装置のブロック図、第
３図は内視鏡装置のブロック図、第４図は記録動作の説
明図、第５図は検索動作の説明図、第６図はモニタの表
示例を示す説明図、第７図は切出し枠設定の説明図、第
８図及び第９図は本発明の第２実施例に係り、第８図は
内視鏡装置と共に用いられる画像記録検索表示装置の概
略図、第９図は画像記録検索装置のブロック図である。 １……画像記録検索表示装置 ２……内視鏡装置、３……電子内視鏡 ４……画像入力装置、６……第１のモニタ ７……記録検索装置、８……キーボード ９……第２のモニタ

Claims (1)

(57)【特許請求の範囲】
1. 【請求項１】内視鏡装置より出力される画像信号から時
   系列順に取り出された一連の静止画像を記録保持する静
   止画像記録手段と、 上記静止画像記録手段に記録保持された静止画像を所望
   の条件で検索する静止画像検索手段と、 上記静止画像検索手段で検索された静止画像を順次出力
   する検索画像出力手段と、 上記検索画像出力手段で出力された静止画像を順次上書
   き表示する第１の画像表示手段と、 上記第１の画像表示手段で表示された静止画像より所望
   の静止画像を選択可能な画像選択手段と、 第１の画像表示手段による表示動作に並行して、上記画
   像選択手段で選択された静止画像を表示する第２の画像
   表示手段と、 を具備したことを特徴とする画像記録検索表示装置。