WO2019244407A1

WO2019244407A1 - 内視鏡システム及び内視鏡システムの作動方法

Info

Publication number: WO2019244407A1
Application number: PCT/JP2019/007351
Authority: WO
Inventors: 大記有吉; 理沙新井
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2018-06-19
Filing date: 2019-02-26
Publication date: 2019-12-26
Anticipated expiration: 2020-12-19
Also published as: US20210100426A1; JP2021191314A; US11363939B2

Abstract

内視鏡システムは、第１及び第２の照明光のうちのいずれかを発生する光源部と、被写体を撮像して画像を得る撮像部と、第１の照明光により照明された被写体を撮像して得られた画像を表示させる第１の観察モード、及び、第２の照明光により照明された被写体を撮像して得られた画像の色及び模様のうちの少なくとも一方を加工した画像を表示させる第２の観察モードのうちのいずれかに設定するための指示を行うことが可能な切替指示部と、被写体を観察する際の観察状態を検出する観察状態検出部と、被写体を観察する際の観察状態が適切な観察状態ではない場合に、第２の観察モードに設定するための指示を無効にする制御部と、を有する。

Description

内視鏡システム及び内視鏡システムの作動方法

　本発明は、内視鏡システム及び内視鏡システムの作動方法に関し、特に、生体組織の観察に用いられる内視鏡システム及び内視鏡システムの作動方法に関するものである。

　医療分野の内視鏡観察においては、被検体内に存在する異常部位の診断を支援するための技術として、例えば、当該被検体内に存在する生体組織を含む被写体を撮像して得られた内視鏡画像に対して処理を施すことにより、当該内視鏡画像に含まれる異常部位を特定可能な色及び／または模様を有する診断支援画像を生成して表示させる技術が従来知られている。

　具体的には、例えば、日本国特許第４６３２６４５号公報には、体腔内の生体組織を電子内視鏡で撮像して得られた画像データに対して処理を施すことにより当該生体組織による散乱特徴を算出するとともに、当該算出した散乱特徴に応じた表示色を有するカラー画像を生成して表示させる技術が開示されている。

　ここで、前述の診断支援画像に含まれる色及び／または模様は、例えば、被検体内の被写体を観察する際の観察方向及び明るさ等のような観察状態に応じて変化し得る。そのため、例えば、前述の診断支援画像が表示されている状態においては、被写体を観察する際の観察状態の悪化に起因する誤診が発生し易くなるおそれがある、という問題点が生じる。

　しかし、日本国特許第４６３２６４５号公報には、前述の問題点を解消可能な手法について特に開示等されていない。そのため、日本国特許第４６３２６４５号公報に開示された構成によれば、内視鏡画像の色及び模様のうちの少なくとも一方を加工した画像による診断を行う際の精度が低下してしまうおそれがある、という前述の問題点に応じた課題が生じている。

　本発明は、前述した事情に鑑みてなされたものであり、内視鏡画像の色及び模様のうちの少なくとも一方を加工した画像による診断を行う際の精度を確保することが可能な内視鏡システム及び内視鏡システムの作動方法を提供することを目的としている。

　本発明の一態様の内視鏡システムは、被検体の内部に存在する被写体を照明するための照明光として、第１の照明光及び第２の照明光のうちのいずれかを発生するように構成された光源部と、前記照明光により照明された被写体を撮像して画像を得るように構成された撮像部と、前記被写体を観察する際の観察モードを、前記第１の照明光により照明された前記被写体を撮像して得られた第１の画像を表示装置に表示させる第１の観察モード、及び、前記第２の照明光により照明された前記被写体を撮像して得られた第２の画像の色及び模様のうちの少なくとも一方を加工した第３の画像を前記表示装置に表示させる第２の観察モードのうちのいずれかに設定するための指示を行うことが可能な切替指示部と、前記第１の画像に基づき、前記撮像部が設けられた内視鏡により前記被写体を観察する際の観察状態を検出するように構成された観察状態検出部と、前記観察状態検出部の検出結果に基づき、前記観察モードが前記第１の観察モードから前記第２の観察モードへ切り替わる直前において、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出した場合に、前記切替指示部においてなされた前記観察モードを前記第２の観察モードに設定するための指示を無効にするように構成された制御部と、を有する。

　本発明の一態様の内視鏡システムの作動方法は、光源部が、被検体の内部に存在する被写体を照明するための照明光として、第１の照明光及び第２の照明光のうちのいずれかを発生し、撮像部が、前記照明光により照明された被写体を撮像して画像を取得し、切替指示部が、前記被写体を観察する際の観察モードを、前記第１の照明光により照明された前記被写体を撮像して得られた第１の画像を表示装置に表示させる第１の観察モード、及び、前記第２の照明光により照明された前記被写体を撮像して得られた第２の画像の色及び模様のうちの少なくとも一方を加工した第３の画像を前記表示装置に表示させる第２の観察モードのうちのいずれかに設定するための指示を行い、観察状態検出部が、前記第１の画像に基づき、前記撮像部が設けられた内視鏡により前記被写体を観察する際の観察状態を検出し、制御部が、前記観察状態検出部の検出結果に基づき、前記観察モードが前記第１の観察モードから前記第２の観察モードへ切り替わる直前において、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出した場合に、前記切替指示部においてなされた前記観察モードを前記第２の観察モードに設定するための指示を無効にする。

実施形態に係る内視鏡システムの要部の構成を示す図。実施形態に係る内視鏡システムの光源装置から発せられる光の波長帯域の一例を示す図。血漿の吸光特性の一例を示す図。実施形態に係る内視鏡システムにおいて行われる処理等の具体例を示すフローチャート。実施形態に係る内視鏡システムの動作等に応じて表示される画像の一例を示す図。実施形態に係る内視鏡システムにおいて行われる処理等の具体例の一部を示すフローチャート。実施形態に係る内視鏡システムの動作等に応じて表示される画像の一例を示す図。実施形態に係る内視鏡システムの動作等に応じて表示される選択画面の一例を示す図。実施形態に係る内視鏡システムの動作等に応じて表示される選択画面の一例を示す図。

　以下、本発明の実施形態について、図面を参照しつつ説明を行う。

　図１から図９は、本発明の実施形態に係るものである。

　内視鏡システム１は、図１に示すように、被検体内に挿入可能であるとともに、当該被検体内に存在する生体組織等の被写体を撮像して得られた内視鏡画像を出力するように構成された内視鏡２と、内視鏡２の内部に挿通配置されたライトガイド７を介して当該被写体の観察に用いられる照明光を供給するように構成された光源装置３と、内視鏡２から出力される内視鏡画像に応じた表示画像を出力するための動作を行うように構成されたプロセッサ４と、プロセッサ４から出力される表示画像等を画面上に表示するように構成された表示装置５と、を有している。図１は、実施形態に係る内視鏡システムの要部の構成を示す図である。

　内視鏡２は、被検体内に挿入可能な細長形状に形成された挿入部２ａと、挿入部２ａの基端側に設けられた操作部２ｂと、を有している。また、内視鏡２は、例えば、撮像部２１（後述）から出力される内視鏡画像等の伝送に用いられる信号線が内蔵されたユニバーサルケーブル（不図示）を介し、プロセッサ４に着脱可能に接続されるように構成されている。また、内視鏡２は、ライトガイド７の少なくとも一部が内蔵されたライトガイドケーブル（不図示）を介し、光源装置３に着脱可能に接続されるように構成されている。

　挿入部２ａの先端部２ｃには、被検体内の生体組織等の被写体を撮像するための撮像部２１と、ライトガイド７の出射端部と、ライトガイド７により伝送された照明光を被写体へ照射する照明光学系２２と、が設けられている。

　撮像部２１は、照明光学系２２を経た照明光により照明された被写体を撮像して内視鏡画像を生成するとともに、当該生成した内視鏡画像をプロセッサ４へ出力するように構成されている。すなわち、撮像部２１は、照明光学系２２を経た照明光が照明された被写体を撮像して内視鏡画像を得るように構成されている。また、撮像部２１は、対物光学系２１ａと、撮像素子２１ｂと、アナログフロントエンド（以降、ＡＦＥと略記する）２１ｃと、を有して構成されている。

　対物光学系２１ａは、例えば、レンズ等の光学素子を有し、照明光学系２２を経た照明光により照明された被写体から発せられる戻り光（反射光）を結像するように構成されている。

　撮像素子２１ｂは、例えば、ＣＣＤまたはＣＭＯＳのようなイメージセンサを具備して構成されている。また、撮像素子２１ｂの撮像面には、対物光学系２１ａから入射した戻り光を赤色、緑色及び青色の３色に分光するための原色ベイヤー配列のカラーフィルタと、当該カラーフィルタを通過した光を撮像するためにマトリクス状に配設された複数の画素と、が設けられている。また、撮像素子２１ｂは、対物光学系２１ａにより結像された戻り光を撮像することにより撮像信号を生成し、当該生成した撮像信号をＡＦＥ２１ｃへ出力するように構成されている。また、撮像素子２１ｂは、プロセッサ４から出力される制御信号に応じた動作を行うように構成されている。

　ＡＦＥ２１ｃは、撮像素子２１ｂから出力される撮像信号に対してノイズ低減処理及びＡ／Ｄ変換処理等の所定の信号処理を施すことにより内視鏡画像（内視鏡画像データ）を生成し、当該生成した内視鏡画像をプロセッサ４へ出力するように構成されている。

　操作部２ｂは、ユーザが把持して操作することが可能な形状を具備して構成されている。また、操作部２ｂには、ユーザの入力操作に応じた指示をプロセッサ４に対して行うことが可能な１つ以上のスイッチを具備して構成されたスコープスイッチ２３が設けられている。具体的には、スコープスイッチ２３には、例えば、ユーザの操作に応じ、内視鏡システム１の観察モードを通常観察モードまたは診断支援モードのいずれかに設定する（切り替える）ための指示を行うことが可能な観察モード切替スイッチ（不図示）が設けられている。また、スコープスイッチ２３には、例えば、ユーザの操作に応じ、内視鏡２により被写体を撮像して得られた内視鏡画像を静止画像として記録させるためのレリーズ指示を行うことが可能なレリーズスイッチ（不図示）が設けられている。

　すなわち、スコープスイッチ２３は、切替指示部としての機能を具備し、内視鏡２により撮像された被写体を観察する際の（内視鏡システム１の）観察モードを、内視鏡画像ＷＤＩ（後述）を表示装置５に表示させる通常観察モード、及び、内視鏡画像ＳＤＩ（後述）の色及び模様のうちの少なくとも一方を加工した診断支援画像ＳＤＳ（後述）を表示装置５に表示させる診断支援モードのうちのいずれかに設定するための指示を行うことができるように構成されている。

　光源装置３は、光源部としての機能を有し、被検体内に存在する被写体を照明するための照明光として、照明光ＷＬ及び照明光ＳＬ（いずれも後述）のうちのいずれかを発生する発生するように構成されている。また、光源装置３は、発光部３１と、合波器３２と、集光レンズ３３と、光源制御部３４と、を有して構成されている。

　発光部３１は、青色光源３１ａと、緑色光源３１ｂと、赤色光源３１ｃと、狭帯域光源３１ｄと、を有して構成されている。

　青色光源３１ａは、例えば、青色ＬＥＤ等の発光素子を有して構成されている。また、青色光源３１ａは、青色域に強度を有する青色光（以降、Ｂｂ光と称する）を発生するように構成されている。具体的には、青色光源３１ａは、例えば、図２に示すように、４００ｎｍ～５００ｎｍの波長帯域に強度を有する光をＢｂ光として発生するよう構成されている。また、青色光源３１ａは、光源制御部３４から供給される光源駆動信号に応じて発光または消光するように構成されている。また、青色光源３１ａは、光源制御部３４から供給される光源駆動信号に応じた発光光量で発光するように構成されている。図２は、実施形態に係る内視鏡システムの光源装置から発せられる光の波長帯域の一例を示す図である。

　緑色光源３１ｂは、例えば、緑色ＬＥＤ等の発光素子を有して構成されている。また、緑色光源３１ｂは、緑色域に強度を有する緑色光（以降、Ｂｇ光と称する）を発生するように構成されている。具体的には、緑色光源３１ｂは、例えば、図２に示すように、５００ｎｍ～６００ｎｍの波長帯域に強度を有する光をＢｇ光として発生するよう構成されている。また、緑色光源３１ｂは、光源制御部３４から供給される光源駆動信号に応じて発光または消光するように構成されている。また、緑色光源３１ｂは、光源制御部３４から供給される光源駆動信号に応じた発光光量で発光するように構成されている。

　赤色光源３１ｃは、例えば、赤色ＬＥＤ等の発光素子を有して構成されている。また、赤色光源３１ｃは、赤色域に強度を有する赤色光（以降、Ｂｒ光と称する）を発生するように構成されている。具体的には、赤色光源３１ｃは、例えば、図２に示すように、６００ｎｍ～７００ｎｍの波長帯域に強度を有する光をＢｒ光として発生するよう構成されている。また、赤色光源３１ｃは、光源制御部３４から供給される光源駆動信号に応じて発光または消光するように構成されている。また、赤色光源３１ｃは、光源制御部３４から供給される光源駆動信号に応じた発光光量で発光するように構成されている。

　狭帯域光源３１ｄは、例えば、青色ＬＥＤ等の発光素子を有して構成されている。また、狭帯域光源３１ｄは、青色域に強度を有するとともにＢｂ光よりも狭い波長帯域を有する狭帯域光（以降、Ｎｂ光と称する）を発生するように構成されている。具体的には、狭帯域光源３１ｄは、例えば、図２に示すように、中心波長が４６５ｎｍ付近に設定されかつＢｂ光よりも狭い波長帯域を有する光をＮｂ光として発生するよう構成されている。すなわち、Ｎｂ光の中心波長は、図３に例示するような血漿の吸光特性におけるピーク波長に一致するまたは略一致する波長として設定されている。また、狭帯域光源３１ｄは、光源制御部３４から供給される光源駆動信号に応じて発光または消光するように構成されている。また、狭帯域光源３１ｄは、光源制御部３４から供給される光源駆動信号に応じた発光光量で発光するように構成されている。図３は、血漿の吸光特性の一例を示す図である。

　なお、本実施形態においては、Ｎｂ光の中心波長が、４１５ｎｍから４９５ｎｍまでの範囲に属するいずれかの波長に設定されていればよい。

　合波器３２は、発光部３１から発せられた各光を合波して集光レンズ３３に入射させることができるように構成されている。

　集光レンズ３３は、合波器３２を経て入射した光を集光してライトガイド７の入射端部へ出射するように構成されている。

　光源制御部３４は、例えば、制御回路及びドライブ回路等を具備して構成されている。また、光源制御部３４は、プロセッサ４から出力される制御信号に応じ、発光部３１の各光源を駆動させるための光源駆動信号を生成して出力するように構成されている。

　プロセッサ４は、画像処理部４１と、表示制御部４２と、入力Ｉ／Ｆ（インターフェース）４３と、制御部４４と、を有して構成されている。

　画像処理部４１は、例えば、画像処理回路等を具備して構成されている。また、画像処理部４１は、内視鏡２から出力される内視鏡画像に対してホワイトバランス調整及びガンマ補正等の画像処理を施すとともに、当該画像処理を施した内視鏡画像を表示制御部４２及び制御部４４へ出力するように構成されている。

　表示制御部４２は、例えば、表示制御回路等を具備して構成されている。また、表示制御部４２は、制御部４４から出力される制御信号に応じた表示画像を表示装置５へ出力するための動作を行うように構成されている。また、表示制御部４２は、演算部４２ａと、表示画像生成部４２ｂと、を有して構成されている。また、表示制御部４２は、制御部４４から出力される制御信号に応じ、演算部４２ａの処理により得られた処理結果を制御部４４へ出力するように構成されている。

　演算部４２ａは、画像処理部４１を経て出力される内視鏡画像を用いた演算処理を行うように構成されている。なお、演算部４２ａにより行われる処理の具体例については、後程説明する。

　表示画像生成部４２ｂは、演算部４２ａの演算処理により得られた処理結果に基づいて画像処理部４１を経て出力される内視鏡画像の色及び模様のうちの少なくとも一方を加工することにより、当該内視鏡画像に含まれる異常部位を特定可能な視覚情報を有する診断支援画像を生成するための処理を行うように構成されている。なお、表示画像生成部４２ｂにより行われる処理の具体例については、後程説明する。

　入力Ｉ／Ｆ４３には、ユーザの入力操作に応じた指示を制御部４４に対して行うことが可能な１つ以上のスイッチが設けられている。具体的には、入力Ｉ／Ｆ４３には、例えば、ユーザの操作に応じ、内視鏡システム１の観察モードを通常観察モードまたは診断支援モードのいずれかに設定する（切り替える）ための指示を行うことが可能な観察モード切替スイッチ（不図示）が設けられている。また、入力Ｉ／Ｆ４３には、例えば、ユーザの操作に応じ、内視鏡２により被写体を撮像して得られた内視鏡画像を静止画像として記録させるためのレリーズ指示を行うことが可能なレリーズスイッチ（不図示）が設けられている。

　すなわち、入力Ｉ／Ｆ４３は、切替指示部としての機能を具備し、内視鏡２により撮像された被写体を観察する際の（内視鏡システム１の）観察モードを、内視鏡画像ＷＤＩを表示装置５に表示させる通常観察モード、及び、内視鏡画像ＳＤＩの色及び模様のうちの少なくとも一方を加工した診断支援画像ＳＤＳを表示装置５に表示させる診断支援モードのうちのいずれかに設定するための指示を行うことができるように構成されている。

　なお、本実施形態によれば、スコープスイッチ２３及び入力Ｉ／Ｆ４３に設けられたものと同様の機能を有するレリーズスイッチがスコープスイッチ２３及び入力Ｉ／Ｆ４３以外の装置に設けられていてもよい。

　具体的には、本実施形態によれば、スコープスイッチ２３及び入力Ｉ／Ｆ４３に設けられたものと同様の機能を有するレリーズスイッチが、例えば、キーボード、フットスイッチ、リモコン、タブレット端末及びファイリング装置のうちのいずれかに設けられていてもよい。

　制御部４４は、例えば、制御回路等を具備して構成されている。また、制御部４４は、スコープスイッチ２３または入力Ｉ／Ｆ４３において行われた指示に応じた動作を行うように構成されている。また、制御部４４は、撮像素子２１ｂの動作を制御するための制御信号を生成して出力するように構成されている。また、制御部４４は、光源制御部３４を介して発光部３１の各光源の動作を制御するための制御信号を生成して出力するように構成されている。また、制御部４４は、画像記録部４４ａと、観察状態検出部４４ｂと、を有して構成されている。

　画像記録部４４ａは、画像処理部４１を経て出力される内視鏡画像を観察状態検出用画像として記録するための動作を行うように構成されている。また、画像記録部４４ａは、レリーズ指示が行われた際に、画像処理部４１を経て出力される内視鏡画像をレリーズ画像（静止画像）として記録するための動作を行うように構成されている。また、画像記録部４４ａは、内視鏡システム１の観察モードが診断支援モードに設定された直後に画像処理部４１を経て出力される内視鏡画像を記録画像（静止画像）として記録するための動作を行うように構成されている。

　観察状態検出部４４ｂは、画像記録部４４ａに記録された観察状態検出用画像に基づき、内視鏡２により被写体を観察する際の観察状態に応じた特徴量を算出するための観察状態検出処理を行うように構成されている。なお、観察状態検出部４４ｂにより行われる処理の具体例については、後程説明する。

　なお、本実施形態においては、プロセッサ４の各部が、個々の電子回路として構成されていてもよく、または、ＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の集積回路における回路ブロックとして構成されていてもよい。また、本実施形態においては、例えば、プロセッサ４が１つ以上のＣＰＵを具備して構成されていてもよい。また、本実施形態に係る構成を適宜変形することにより、例えば、図示しないコンピュータが、プロセッサ４の各部の機能を実行させるためのプログラムをメモリ等の記憶媒体から読み込むとともに、当該読み込んだプログラムに応じた動作を行うようにしてもよい。

　表示装置５は、例えば、ＬＣＤ（液晶ディスプレイ）等を具備し、プロセッサ４から出力される表示画像等を表示することができるように構成されている。

　続いて、本実施形態の作用について、図４等を参照しつつ説明する。なお、以降においては、挿入部２ａが被験者の鼻腔内に挿入されるとともに、当該被験者の鼻腔内に存在する生体組織（粘膜等）を含む被写体が撮像部２１により撮像される場合を例に挙げて説明する。図４は、実施形態に係る内視鏡システムにおいて行われる処理等の具体例を示すフローチャートである。

　術者等のユーザは、例えば、内視鏡システム１の各部を接続して電源を投入した後、スコープスイッチ２３または入力Ｉ／Ｆ４３の観察モード切替スイッチを操作することにより、内視鏡システム１の観察モードを通常観察モードに設定するための指示を行う。

　制御部４４は、内視鏡システム１の観察モードを通常観察モードに設定するための指示が行われたことを検知した際に、通常観察モードに応じた動作を行わせるための制御信号を生成して出力する（図４のステップＳ１）。また、制御部４４は、後述の処理により得られた処理結果等に応じ、内視鏡システム１の観察モードを通常観察モードに維持するための動作を行う（図４のステップＳ１）。

　制御部４４は、図４のステップＳ１において、Ｂｂ光、Ｂｇ光及びＢｒ光を光源装置３から出射させるための制御信号を生成して光源制御部３４へ出力する。また、制御部４４は、図４のステップＳ１において、画像処理部４１を経て出力される内視鏡画像ＷＤＩを表示装置５に表示させるための制御信号を生成して表示制御部４２へ出力する。また、制御部４４は、図４のステップＳ１において、画像処理部４１を経て出力される所定期間ＰＡ分の内視鏡画像ＷＤＩを観察状態検出用画像ＶＤＩとして画像記録部４４ａに記録させる。なお、所定期間ＰＡは、例えば、被験者の鼻腔のサイズ等に応じた期間として設定されていればよい。

　光源制御部３４は、制御部４４から出力される制御信号に応じ、通常観察モードにおいて、狭帯域光源３１ｄを消光させつつ、青色光源３１ａと、緑色光源３１ｂと、赤色光源３１ｃと、を同時に発光させるための光源駆動信号を生成して出力する。そして、このような光源制御部３４の動作に応じ、通常観察モードにおいて、Ｂｂ光、Ｂｇ光及びＢｒ光を含む照明光ＷＬが光源装置３（発光部３１）から発せられ、当該照明光ＷＬが被写体に照射され、当該照明光ＷＬの戻り光（反射光）を撮像することにより得られた内視鏡画像ＷＤＩが撮像部２１から画像処理部４１へ出力される。

　画像処理部４１は、制御部４４から出力される制御信号に応じ、内視鏡２から出力される内視鏡画像ＷＤＩに対してホワイトバランス調整及びガンマ補正等の画像処理を施すとともに、当該画像処理を施した内視鏡画像ＷＤＩを表示制御部４２へ出力する。

　表示制御部４２は、制御部４４から出力される制御信号に応じ、通常観察モードにおいて、画像処理部４１を経て出力される内視鏡画像ＷＤＩを表示画像として表示装置５へ出力するための動作を行う。

　画像記録部４４ａは、通常観察モードにおいて、画像処理部４１を経て出力される所定期間ＰＡ分の内視鏡画像ＷＤＩを観察状態検出用画像ＶＤＩとして順次記録するための動作を行う。なお、画像記録部４４ａに記録される観察状態検出用画像ＶＤＩ各々には、例えば、タイムスタンプ等のような、画像記録部４４ａにより記録された時刻を特定可能な時刻情報が付与されているものとする。

　ユーザは、表示装置５に表示される内視鏡画像ＷＤＩを確認しつつ、内視鏡２の挿入部２ａを被験者の鼻腔内へ挿入するとともに、当該被験者の鼻腔内に存在する所望の被写体の近傍に先端部２ｃを配置する。その後、ユーザは、内視鏡２の先端部２ｃを所望の被写体の近傍に配置した状態において、スコープスイッチ２３または入力Ｉ／Ｆ４３の観察モード切替スイッチを操作することにより、内視鏡システム１の観察モードを診断支援モードに設定するための指示を行う。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示が行われたか否かに係る判定処理を行う（図４のステップＳ２）。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示を検出することができなかった場合（Ｓ２：ＮＯ）に、当該指示を前回検出したタイミングから一定期間が経過したか否かに係る判断処理を行う（図４のステップＳ３）。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示を前回検出したタイミングから一定期間が経過していないことを検出した場合（Ｓ３：ＮＯ）に、後述のカウント値ＣＮＴを維持した状態で図４のステップＳ１の動作を行う。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示を前回検出したタイミングから一定期間が経過したことを検出した場合（Ｓ３：ＹＥＳ）に、カウント値ＣＮＴを０にリセットした（図４のステップＳ４）後で図４のステップＳ１の動作を行う。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示を検出することができた場合（Ｓ２：ＹＥＳ）に、画像処理部４１を経て出力される所定期間ＰＢ分の内視鏡画像ＷＤＩを観察状態検出用画像ＶＤＩとして画像記録部４４ａに記録させる。なお、所定期間ＰＢは、例えば、被験者の鼻腔のサイズ等に応じた期間として設定されていればよい。

　画像記録部４４ａは、内視鏡システム１の観察モードを診断支援モードに設定するための指示が（制御部４４により）検出されたタイミングを起点とする所定期間ＰＢにおいて、画像処理部４１から出力される内視鏡画像ＷＤＩを観察状態検出用画像ＶＤＩとして順次記録するための動作を行う。

　すなわち、本実施形態によれば、内視鏡システム１の観察モードを診断支援モードに設定するための指示が行われるより前の所定期間ＰＡと、当該指示が行われた後の当該所定期間ＰＡに連続する期間に相当する所定期間ＰＢと、のそれぞれにおいて、画像処理部４１から出力される内視鏡画像ＷＤＩが観察状態検出用画像ＶＤＩとして画像記録部４４ａに順次記録される。

　観察状態検出部４４ｂは、画像記録部４４ａに記録された観察状態検出用画像ＶＤＩに基づき、内視鏡システム１の観察モードが通常観察モードから診断支援モードへ切り替わる直前における観察状態に応じた特徴量ＦＶＡを算出するための観察状態検出処理を行う（図４のステップＳ５）。

　ここで、観察状態検出部４４ｂにより行われる処理の具体例について、以下に説明する。

　観察状態検出部４４ｂは、画像記録部４４ａに記録された観察状態検出用画像ＶＤＩを分割することにより複数の計算領域ＣＲＡを設定する。

　観察状態検出部４４ｂは、計算領域ＣＲＡに含まれる各画素の画素値に基づき、当該計算領域ＣＲＡにおける特徴量ＦＶＡを算出する。

　本実施形態によれば、以下に列挙するいずれかの算出方法を用いて各計算領域ＣＲＡにおける特徴量ＦＶＡを算出してもよい。なお、以降においては、説明の便宜上、特徴量ＦＶＡの算出対象となる計算領域をＣＲＡＸとし、当該計算領域ＣＲＡＸに含まれる一の画素における青色の画素値をＶｂｍとし、当該一の画素における緑色の画素値をＶｇｍとし、当該一の画素における赤色の画素値Ｖｒｍとして記述するものとする。

　観察状態検出部４４ｂは、例えば、計算領域ＣＲＡＸに含まれる各画素において（Ｖｒｍ＋Ｖｇｍ）／Ｖｂｍの演算（画素値Ｖｒｍ及び画素値Ｖｇｍの和を画素値Ｖｂｍにより規格化するための演算）を行うとともに、当該演算により得られた各値の平均値を特徴量ＦＶＡとして算出する。

　観察状態検出部４４ｂは、例えば、計算領域ＣＲＡＸに含まれる各画素においてＶｒｍ／Ｖｇｍの演算（画素値Ｖｒｍを画素値Ｖｇｍにより規格化するための演算）を行うとともに、当該演算により得られた各値の平均値を特徴量ＦＶＡとして算出する。

　観察状態検出部４４ｂは、例えば、計算領域ＣＲＡＸに含まれる各画素においてＶｒｍ／Ｖｂｍの演算（画素値Ｖｒｍを画素値Ｖｂｍにより規格化するための演算）を行うとともに、当該演算により得られた各値の平均値を特徴量ＦＶＡとして算出する。

　観察状態検出部４４ｂは、例えば、計算領域ＣＲＡＸに含まれる各画素においてＶｇｍ／Ｖｂｍの演算（画素値Ｖｇｍを画素値Ｖｂｍにより規格化するための演算）を行うとともに、当該演算により得られた各値の平均値を特徴量ＦＶＡとして算出する。

　なお、観察状態検出部４４ｂは、計算領域ＣＲＡＸに含まれる各画素において、（Ｖｒｍ＋Ｖｇｍ）／Ｖｂｍ、Ｖｒｍ／Ｖｇｍ、Ｖｒｍ／Ｖｂｍ及びＶｇｍ／Ｖｂｍのうちのいずれかの計算式の分母と分子を逆にした式を用いた演算を行うとともに、当該演算により得られた各値の平均値を特徴量ＦＶＡとして算出するものであってもよい。

　すなわち、観察状態検出部４４ｂは、画像記録部４４ａに記録された内視鏡画像ＷＤＩに基づき、撮像部２１が設けられた内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態を検出する。また、観察状態検出部４４ｂは、内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態を検出するための処理として、内視鏡画像ＷＤＩを分割することにより複数の計算領域ＣＲＡを設定するとともに、当該複数の計算領域ＣＲＡ各々における画素値に応じた複数の特徴量ＦＶＡを算出する処理を行う。また、観察状態検出部４４ｂは、観察状態検出用画像ＶＤＩ（内視鏡画像ＷＤＩ）を分割して得られた計算領域ＣＲＡ毎に算出した特徴量ＦＶＡを、撮像部２１が設けられた内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態の検出結果として取得する。

　制御部４４は、観察状態検出部４４ｂにより算出された特徴量ＦＶＡに基づき、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるか否かに係る判定処理を行う（図４のステップＳ６）。

　ここで、図４のステップＳ６において制御部４４により行われる判定処理の具体例について、以下に説明する。

　制御部４４は、例えば、観察状態検出部４４ｂによる検出結果に基づき、特徴量ＦＶＡが閾値ＴＨＡ以上であることを観察状態検出用画像ＶＤＩの全ての計算領域ＣＲＡにおいて検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得る。また、制御部４４は、例えば、観察状態検出部４４ｂによる検出結果に基づき、特徴量ＦＶＡが閾値ＴＨＡ未満である計算領域ＣＲＡが観察状態検出用画像ＶＤＩに１つ以上存在することを検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得る。すなわち、このような制御部４４の処理によれば、複数の計算領域ＣＲＡにおいて算出された複数の特徴量ＦＶＡの中に閾値ＴＨＡ未満となるものが１つ以上含まれている場合に、内視鏡２により被検体内の（鼻腔内の）被写体を観察する際の観察状態が適切な観察状態ではないことが検出される。

　制御部４４は、例えば、観察状態検出部４４ｂによる検出結果に基づき、特徴量ＦＶＡが閾値ＴＨＢ未満となる計算領域ＣＲＡが観察状態検出用画像ＶＤＩに占める割合が所定の割合ＲＭ未満であることを検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得る。また、制御部４４は、例えば、観察状態検出部４４ｂによる検出結果に基づき、特徴量ＦＶＡが閾値ＴＨＢ未満となる計算領域ＣＲＡが観察状態検出用画像ＶＤＩに占める割合が所定の割合ＲＭ以上であることを検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得る。すなわち、このような制御部４４の処理によれば、複数の計算領域ＣＲＡにおいて算出された複数の特徴量ＦＶＡの中に閾値ＴＨＡ未満となるものが所定の割合以上含まれている場合に、内視鏡２により被検体内の（鼻腔内の）被写体を観察する際の観察状態が適切な観察状態ではないことが検出される。

　制御部４４は、例えば、観察状態検出部４４ｂによる検出結果に基づき、観察状態検出用画像ＶＤＩの各計算領域ＣＲＡにおいて、当該各計算領域ＣＲＡの中から選択した一の計算領域ＣＲＡＹに対応する特徴量ＦＶＡＹと、当該各計算領域ＣＲＡの中から選択した当該一の計算領域ＣＲＡＹとは異なる計算領域ＣＲＡＺに対応する特徴量ＦＶＡＺと、の間の差分値ＤＶＡを算出する。制御部４４は、例えば、差分値ＤＶＡの絶対値｜ＤＶＡ｜が、観察状態検出用画像ＶＤＩの階調数に応じて予め設定した複数の画素値のグループのうちのどのグループに分類されるかに係る分類結果を取得する。そして、制御部４４は、複数の画素値のグループのうちの低画素値のグループに分類された絶対値｜ＤＶＡ｜を有する１つ以上の計算領域ＣＲＧＡが観察状態検出用画像ＶＤＩに占める割合が、当該複数の画素値のグループのうちの高画素値のグループに分類された絶対値｜ＤＶＡ｜を有する１つ以上の計算領域ＣＲＧＢが当該観察状態検出用画像ＶＤＩに占める割合より小さいことを検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得る。また、制御部４４は、１つ以上の計算領域ＣＲＧＡが観察状態検出用画像ＶＤＩに占める割合が、１つ以上の計算領域ＣＲＧＢが当該観察状態検出用画像ＶＤＩに占める割合以上であることを検出した場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得る。すなわち、このような制御部４４の処理によれば、複数の計算領域ＣＲＡ間における複数の特徴量ＦＡＶの差分の大きさを示す複数の演算値（絶対値｜ＤＶＡ｜）が算出されるとともに、当該複数の演算値の中に所定の閾値未満となる演算値が所定の割合以上含まれている場合に、内視鏡２により被検体内の（鼻腔内の）被写体を観察する際の観察状態が適切な観察状態ではないことが検出される。

　以上に述べた処理によれば、制御部４４は、例えば、明るい領域を暗い領域よりも多く含むような観察状態検出用画像ＶＤＩに対して図４のステップＳ６の判定処理を行った場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得る。また、以上に述べたような処理によれば、制御部４４は、例えば、画像内における明暗の差が小さな観察状態検出用画像ＶＤＩに対して図４のステップＳ６の判定処理を行った場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得る。

　以上に述べたような処理によれば、制御部４４は、例えば、暗い領域を明るい領域よりも多く含むような観察状態検出用画像ＶＤＩに対して図４のステップＳ６の判定処理を行った場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得る。また、以上に述べたような処理によれば、制御部４４は、例えば、画像内における明暗の差が大きな観察状態検出用画像ＶＤＩに対して図４のステップＳ６の判定処理を行った場合に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得る。

　制御部４４は、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果を得た（Ｓ６：ＹＥＳ）場合に、後述の図４のステップＳ９の動作を行う。

　制御部４４は、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を得た（Ｓ６：ＮＯ）場合に、現在保持しているカウント値ＣＮＴが所定値以上であるか否かに係る判定処理を行う（図４のステップＳ７）。

　制御部４４は、現在保持しているカウント値ＣＮＴが所定値以上であることを検出した場合（Ｓ７：ＹＥＳ）に、後述の図４のステップＳ９の動作を行う。

　制御部４４は、現在保持しているカウント値ＣＮＴが所定値未満であることを検出した場合（Ｓ７：ＮＯ）に、当該カウント値ＣＮＴに１を加算した（図４のステップＳ８）後で図４のステップＳ１の動作を行う。すなわち、カウント値ＣＮＴは、内視鏡システム１の観察モードを診断支援モードに設定するための指示が制御部４４により一定期間内に無効化された回数を示している。

　以上に述べた動作等によれば、制御部４４は、観察状態検出部４４ｂの検出結果に基づき、内視鏡システム１の観察モードが通常観察モードから診断支援モードへ切り替わる直前において、内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態が適切な観察状態ではないことを検出した場合に、スコープスイッチ２３または入力Ｉ／Ｆ４３においてなされた当該観察モードを診断支援モードに設定するための指示を無効にする。

　制御部４４は、診断支援モードに応じた動作を行わせるための制御信号を生成して出力した（図４のステップＳ９）後、後述の図４のステップＳ１０の動作を行う。すなわち、制御部４４は、内視鏡システム１の観察モードが通常観察モードから診断支援モードへ切り替わる直前において、内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態が適切な観察状態であることを検出した場合（図４のステップＳ６からステップＳ９へ移行した場合）に、当該観察モードを診断支援モードに設定するための制御を行う。また、制御部４４は、内視鏡システム１の観察モードを診断支援モードに設定するための指示を一定期間内に無効にした回数が所定の回数以上である場合（図４のステップＳ７からステップＳ９へ移行した場合）に、当該観察モードを診断支援モードに設定するための制御を行う。

　制御部４４は、図４のステップＳ９において、Ｎｂ光、Ｂｇ光及びＢｒ光を光源装置３から出射させるための制御信号を生成して光源制御部３４へ出力する。また、制御部４４は、図４のステップＳ９において、画像処理部４１を経て出力される内視鏡画像ＳＤＩに応じた診断支援画像ＳＤＳを表示装置５に表示させるための制御信号を生成して表示制御部４２へ出力する。

　光源制御部３４は、制御部４４から出力される制御信号に応じ、診断支援モードにおいて、青色光源３１ａを消光させつつ、緑色光源３１ｂと、赤色光源３１ｃと、狭帯域光源３１ｄと、を同時に発光させるための光源駆動信号を生成して出力する。そして、このような光源制御部３４の動作に応じ、診断支援モードにおいて、Ｎｂ光、Ｂｇ光及びＢｒ光を含む照明光ＳＬが光源装置３（発光部３１）から発せられ、当該照明光ＳＬが被写体に照射され、当該照明光ＳＬの戻り光（反射光）を撮像することにより得られた内視鏡画像ＳＤＩが撮像部２１から画像処理部４１へ出力される。

　画像処理部４１は、内視鏡２から出力される内視鏡画像ＳＤＩに対してホワイトバランス調整及びガンマ補正等の画像処理を施すとともに、当該画像処理を施した内視鏡画像ＳＤＩを表示制御部４２及び制御部４４へそれぞれ出力する。

　表示制御部４２は、制御部４４から出力される制御信号に応じ、診断支援モードにおいて、画像処理部４１を経て出力される内視鏡画像ＳＤＩに応じた診断支援画像ＳＤＳを生成するとともに、当該生成した診断支援画像ＳＤＳを表示画像として表示装置５へ出力するための動作を行う。

　ここで、診断支援モード時に表示装置５に表示される診断支援画像ＳＤＳの生成方法の具体例について説明する。

　演算部４２ａは、画像処理部４１を経て出力される内視鏡画像ＳＤＩの各画素において、当該内視鏡画像ＳＤＩに含まれる生体組織の異常度合いを示す指標値ＩＶを算出するための演算処理を行う。具体的には、演算部４２ａは、例えば、前述の特徴量ＦＶＡの算出方法のうちのいずれか１つと同じ算出方法を用いて指標値ＩＶを算出する。そして、演算部４２ａは、内視鏡画像ＳＤＩの各画素における指標値ＩＶの算出結果を演算処理の処理結果として取得する。

　表示画像生成部４２ｂは、演算部４２ａの演算処理により得られた処理結果に基づいて画像処理部４１を経て出力される内視鏡画像ＳＤＩの色及び模様のうちの少なくとも一方を加工することにより、当該内視鏡画像に含まれる異常部位を特定可能な視覚情報を有する診断支援画像ＳＤＳを生成する。

　具体的には、表示画像生成部４２ｂは、演算部４２ａの演算処理により得られた処理結果に基づき、例えば、内視鏡画像ＳＤＩの各画素において算出された指標値ＩＶを複数の数値範囲のいずれかに分類するとともに、当該各画素に含まれる画素情報を分類後の数値範囲に対応する色及び／または模様に相当する画素情報に置換するような処理を行うことにより診断支援画像ＳＤＳを生成する。そして、このような処理によれば、内視鏡画像ＳＤＩに含まれる正常部位と、当該内視鏡画像ＳＤＩに含まれる異常部位と、に対して別々の色及び／または模様を付けた診断支援画像ＳＤＳが生成される。

　本実施形態によれば、例えば、制御部４４が、図４のステップＳ７及びステップＳ８を経てステップＳ１の動作を行う場合に、内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態が適切な観察状態ではないため診断支援モードへの移行を停止した旨を報知可能なアラートメッセージ等の視覚情報ＡＲＡを内視鏡画像ＷＤＩに併せて表示装置５に表示させるための制御信号を生成して表示制御部４２に出力する動作を行うようにしてもよい。また、本実施形態によれば、例えば、前述の視覚情報ＡＲＡに対応する音声を図示しないスピーカ等から発生させるようにしてもよい。

　本実施形態によれば、例えば、制御部４４が、図４のステップＳ７を経てステップＳ９の動作を行う場合に、内視鏡２により被検体内（鼻腔内）の被写体を観察する際の観察状態が適切な観察状態ではないにも関わらず診断支援モードへ移行した旨を報知可能なアラートメッセージ等の視覚情報ＡＲＢを診断支援画像ＳＤＳに併せて表示装置５に表示させるための制御信号を生成して表示制御部４２に出力する動作を行うようにしてもよい。また、本実施形態によれば、例えば、前述の視覚情報ＡＲＢに対応する音声を図示しないスピーカ等から発生させるようにしてもよい。

　本実施形態によれば、例えば、制御部４４が、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないとの判定結果を図４のステップＳ６の判定処理により得た場合に、図４のステップＳ７をスキップしてステップＳ８の処理及びステップＳ１の動作を行うようにしてもよい。そして、このような場合においては、図４のステップＳ８の処理により加算されるカウント値ＣＮＴの大きさに係わらず、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であるとの判定結果が図４のステップＳ６の判定処理により得られるまでは、内視鏡システム１の観察モードが通常観察モードのまま維持される。

　本実施形態によれば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定する際に、診断支援画像ＳＤＳを単独で表示装置５に表示させるための制御信号を生成して表示制御部４２に出力するものに限らず、例えば、内視鏡画像ＳＤＩ及び診断支援画像ＳＤＳを併せて表示装置５に表示させるための制御信号を生成して表示制御部４２に出力するものであってもよい。そして、このような制御部４４の動作によれば、例えば、図５に示すような、内視鏡画像ＳＤＩと、診断支援画像ＳＤＳと、の２つの画像を含む表示画像ＨＧＳを表示装置５へ出力するための動作が表示制御部４２において行われる。なお、表示画像ＨＧＳには、例えば、指標値ＩＶの平均値等のような所定の統計量を示す文字列が含まれるようにしてもよい。図５は、実施形態に係る内視鏡システムの動作等に応じて表示される画像の一例を示す図である。

　制御部４４は、内視鏡システム１の観察モードを診断支援モードに移行した直後に画像処理部４１を経て出力される内視鏡画像ＳＤＩを記録画像ＳＤＭとして画像記録部４４ａに記録させ（図４のステップＳ１０）、当該内視鏡画像ＳＤＩに応じた診断支援画像ＳＤＳを生成する際に演算部４２ａにより算出された各画素の指標値ＩＶＭを当該記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させた後、後述の図４のステップＳ１１の動作を行う。

　なお、本実施形態によれば、制御部４４が、図４のステップＳ１０において、演算部４２ａにより算出された各画素の指標値ＩＶＭを記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させるものに限らず、当該各画素の指標値ＩＶＭを用いて算出される演算値ＣＶＭを当該記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させるようにしてもよい。

　具体的には、本実施形態によれば、制御部４４が、例えば、演算部４２ａにより算出された各画素の指標値ＩＶＭと閾値ＴＨＣとの差分値ＤＶＢを演算値ＣＶＭとして記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させるようにしてもよい。また、本実施形態によれば、制御部４４が、例えば、演算部４２ａにより算出された各画素の指標値ＩＶＭの平均値ＡＶＡを演算値ＣＶＭとして記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させるようにしてもよい。また、本実施形態によれば、制御部４４が、例えば、差分値ＤＶＢの平均値ＡＶＢを演算値ＣＶＭとして記録画像ＳＤＭに関連付けて画像記録部４４ａに記録させるようにしてもよい。

　また、本実施形態によれば、制御部４４が、指標値ＩＶＭまたは演算値ＣＶＭと、記録画像ＳＤＭと、を関連付けた情報を画像記録部４４ａに記録させるものに限らず、当該情報をプロセッサ４以外の装置に記録させるようにしてもよい。

　具体的には、制御部４４が、指標値ＩＶＭまたは演算値ＣＶＭと、記録画像ＳＤＭと、を関連付けた情報を、例えば、内視鏡２に設けられたスコープメモリ、表示装置５、タブレット端末及びファイリング装置のうちのいずれかに記録させるようにしてもよい。

　制御部４４は、レリーズ指示が行われたか否かに係る判定処理を行う（図４のステップＳ１１）。

　制御部４４は、レリーズ指示を検出することができなかった場合（Ｓ１１：ＮＯ）に、内視鏡システム１の観察モードを診断支援モードに維持しつつ待機状態に移行する。

　制御部４４は、レリーズ指示を検出することができた場合（Ｓ１１：ＹＥＳ）に、当該レリーズ指示の直後に画像処理部４１を経て出力される内視鏡画像ＳＤＩをレリーズ画像ＳＤＲとして画像記録部４４ａに記録させ（図４のステップＳ１２）、当該内視鏡画像ＳＤＩに応じた診断支援画像ＳＤＳを生成する際に演算部４２ａにより算出された各画素の指標値ＩＶＲを当該レリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させた後、内視鏡システム１の観察モードを診断支援モードに維持しつつ待機状態に移行する。

　なお、本実施形態によれば、制御部４４が、図４のステップＳ１２において、演算部４２ａにより算出された各画素の指標値ＩＶＲをレリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させるものに限らず、当該各画素の指標値ＩＶＲを用いて算出される演算値ＣＶＲを当該レリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させるようにしてもよい。

　具体的には、本実施形態によれば、制御部４４が、例えば、演算部４２ａにより算出された各画素の指標値ＩＶＲと閾値ＴＨＤとの差分値ＤＶＣを演算値ＣＶＲとしてレリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させるようにしてもよい。また、本実施形態によれば、制御部４４が、例えば、演算部４２ａにより算出された各画素の指標値ＩＶＲの平均値ＡＶＣを演算値ＣＶＲとしてレリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させるようにしてもよい。また、本実施形態によれば、制御部４４が、例えば、差分値ＤＶＣの平均値ＡＶＤを演算値ＣＶＲとしてレリーズ画像ＳＤＲに関連付けて画像記録部４４ａに記録させるようにしてもよい。

　以上に述べたように、本実施形態によれば、内視鏡システム１の観察モードが通常観察モードから診断支援モードに切り替わる前に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないこと（例えば内視鏡２により鼻腔内の被写体を観察する際の観察方向及び明るさのうちの少なくとも一方が観察に適さない状態であること）が確認された場合に、内視鏡システム１の観察モードを診断支援モードに移行させるための動作を少なくとも一定期間中断させることができる。また、以上に述べたように、本実施形態によれば、内視鏡システム１の観察モードが通常観察モードから診断支援モードに切り替わる前に、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態であること（例えば内視鏡２により鼻腔内の被写体を観察する際の観察方向及び明るさの両方が観察に適した状態であること）が確認された場合に、内視鏡システム１の観察モードを診断支援モードに移行させるための動作が行われる。また、以上に述べたように、本実施形態によれば、内視鏡システム１の観察モードが通常観察モードから診断支援モードに切り替わる前、及び、当該観察モードが通常観察モードから診断支援モードに切り替わった後のいずれかにおいて、内視鏡２により鼻腔内の被写体を観察する際の観察状態が適切な観察状態ではないことを報知するための動作を行うことができる。従って、本実施形態によれば、内視鏡２により被写体を観察する際の観察状態の悪化に起因する誤診を誘発してしまうおそれのある診断支援画像ＳＤＳを極力表示させないようにすることができ、その結果、内視鏡画像の色及び模様のうちの少なくとも一方を加工した画像による診断を行う際の精度を確保することができる。

　なお、本実施形態によれば、例えば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定するための制御を行った際に、現在行われている被検体内（鼻腔内）の被写体の観察において診断支援画像ＳＤＳを生成する際に用いた値と、過去に行われた当該被検体内（鼻腔内）の被写体の観察において診断支援画像ＳＤＳを生成する際に用いられた値と、の間の差異を示す視覚情報を表示装置に表示させるための制御を行うものであってもよい。このような動作の具体例について、図４のステップＳ１２の後に行われる動作として、図６等を参照しつつ以下に説明する。なお、以降においては、既述の動作等を適用可能な部分に関する具体的な説明を適宜省略するものとする。また、以降においては、特に言及の無い限り、指標値ＩＶＲがレリーズ画像ＳＤＲに関連付けられた状態で画像記録部４４ａに記録される場合を例に挙げて説明する。図６は、実施形態に係る内視鏡システムにおいて行われる処理等の具体例の一部を示すフローチャートである。

　制御部４４は、図４のステップＳ１２の動作を行った後、現在の内視鏡観察において画像記録部４４ａに記録されたレリーズ画像ＳＤＲＣに関連付けられている指標値ＩＶＲＣと、過去の内視鏡観察において画像記録部４４ａに記録されたレリーズ画像ＳＤＲＰに関連付けられている指標値ＩＶＲＰと、の間の差異を示す差分値ＤＶＲＡを算出するための処理を行う（図６のステップＳ２１）。

　制御部４４は、図６のステップＳ２１の処理結果として得られた差分値ＤＶＲＡの算出結果を現在の内視鏡観察において取得された内視鏡画像ＳＤＩに併せて表示させるための制御信号を生成して表示制御部４２に出力する（図６のステップＳ２２）。また、制御部４４は、図６のステップＳ２２の動作を行った後、内視鏡システム１の観察モードを診断支援モードに維持しつつ待機状態に移行する。

　表示制御部４２は、制御部４４から出力される制御信号に応じ、例えば、現在の内視鏡観察において取得された内視鏡画像ＳＤＩの色及び模様のうちの少なくとも一方を差分値ＤＶＲＡに基づいて加工することにより診断支援画像ＳＤＴを生成するとともに、当該生成した診断支援画像ＳＤＴを表示画像として表示装置５へ出力するための動作を行う。

　具体的には、表示制御部４２は、例えば、差分値ＤＶＲＡが０である領域と、当該差分値ＤＶＲＡが０ではない領域と、を視覚的に区別可能な色及び／または模様を有するように内視鏡画像ＳＤＩを加工した画像を診断支援画像ＳＤＴとして生成する。

　または、表示制御部４２は、例えば、差分値ＤＶＲＡの大きさに応じて異なる色及び／または模様を有するように内視鏡画像ＳＤＩを加工した画像を診断支援画像ＳＤＴとして生成する。

　または、表示制御部４２は、例えば、差分値ＤＶＲＡが０ではない領域において、当該差分値ＤＶＲＡの大きさに応じて異なる色及び／または模様を有するように内視鏡画像ＳＤＩを加工した画像を診断支援画像ＳＤＴとして生成する。

　なお、表示制御部４２は、制御部４４から出力される制御信号に応じ、例えば、図７に示すような、現在の内視鏡観察において取得された内視鏡画像ＳＤＩと、当該内視鏡画像ＳＤＩ及び差分値ＤＶＲＡに基づいて生成した診断支援画像ＳＤＴと、の２つの画像を含む表示画像ＨＧＴを表示装置５へ出力するための動作を行うものであってもよい。また、表示画像ＨＧＴには、例えば、指標値ＩＶＲＣの平均値等のような所定の統計量を示す文字列が含まれるようにしてもよい。また、表示制御部４２は、例えば、図８に示すような、内視鏡画像ＳＤＩ及び診断支援画像ＳＤＴを重畳した重畳画像ＳＤＩＴを含む表示画像ＨＧＵを表示装置５へ出力するための動作を行うものであってもよい。図７及び図８は、実施形態に係る内視鏡システムの動作等に応じて表示される画像の一例を示す図である。

　また、診断支援画像ＳＤＴは、表示装置５に表示されるものに限らず、例えば、プロセッサ４に接続される電子カルテ等の外部装置に表示されるようにしてもよい。

　また、本実施形態によれば、診断支援画像ＳＤＴが、画像記録部４４ａに記録された指標値ＩＶＲＰを用いて生成されるものに限らず、例えば、プロセッサ４に接続される電子カルテ等の外部装置に記録された過去の指標値ＩＶＲＰを用いて生成されるようにしてもよい。すなわち、本実施形態によれば、制御部４４が、画像記録部４４ａに記録されたレリーズ画像ＳＤＲＣに関連付けられている指標値ＩＶＲＣと、プロセッサ４に接続される外部装置に記録された過去のレリーズ画像ＳＤＲＰに関連付けられている指標値ＩＶＲＰと、の間の差異を示す差分値ＤＶＲＡを算出するようにしてもよい。

　また、本実施形態によれば、例えば、制御部４４が、現在の内視鏡観察において画像記録部４４ａに記録されたレリーズ画像ＳＤＲＣに関連付けられている演算値ＣＶＲＣと、過去の内視鏡観察において画像記録部４４ａに記録された記録画像ＳＤＲＰに関連付けられている演算値ＣＶＲＰと、の間の差異を示す差分値ＤＶＲＢを算出するための処理を行うとともに、当該差分値ＤＶＲＢの算出結果を現在の内視鏡観察において取得された内視鏡画像ＳＤＩに併せて表示させるための制御信号を生成して表示制御部４２に出力するものであってもよい。

　また、本実施形態によれば、例えば、制御部４４が、現在の内視鏡観察において画像記録部４４ａに記録された記録画像ＳＤＭＣに関連付けられている指標値ＩＶＭＣと、過去の内視鏡観察において画像記録部４４ａに記録された記録画像ＳＤＭＰに関連付けられている指標値ＩＶＭＰと、の間の差異を示す差分値ＤＶＭＡを算出するための処理を行うとともに、当該差分値ＤＶＭＡの算出結果を現在の内視鏡観察において取得された内視鏡画像ＳＤＩに併せて表示させるための制御信号を生成して表示制御部４２に出力するものであってもよい。

　また、本実施形態によれば、例えば、制御部４４が、現在の内視鏡観察において画像記録部４４ａに記録された記録画像ＳＤＭＣに関連付けられている演算値ＣＶＭＣと、過去の内視鏡観察において画像記録部４４ａに記録された記録画像ＳＤＭＰに関連付けられている演算値ＣＶＭＰと、の間の差異を示す差分値ＤＶＭＢを算出するための処理を行うとともに、当該差分値ＤＶＭＢの算出結果を現在の内視鏡観察において取得された内視鏡画像ＳＤＩに併せて表示させるための制御信号を生成して表示制御部４２に出力するものであってもよい。

　また、本実施形態によれば、例えば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定するための動作を行う前に、指標値ＩＶＲＰ及びレリーズ画像ＳＤＲＰを関連付けた複数の情報が画像記録部４４ａに記録されていることを検出した場合に、診断支援画像ＳＤＴの生成に用いる画像を複数のレリーズ画像ＳＤＲＰの中からユーザに選択させることが可能な選択画面を表示させるための動作を行うものであってもよい。そして、このような制御部４４の動作によれば、例えば、図９に示すような、現在の内視鏡観察において取得された内視鏡画像ＷＤＩと、過去の内視鏡観察において取得された複数のレリーズ画像ＳＤＲＰに対応するサムネイルと、を含むとともに、スコープスイッチ２３または入力Ｉ／Ｆ４３の操作に応じた所望の画像を当該複数のレリーズ画像ＳＤＲＰの中から選択させることが可能な選択画面ＳＧＷを表示装置５へ出力するための動作が表示制御部４２において行われる。図９は、実施形態に係る内視鏡システムの動作等に応じて表示される選択画面の一例を示す図である。

　また、本実施形態によれば、例えば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定するための動作を行う前に、指標値ＩＶＭＰ及び記録画像ＳＤＭＰを関連付けた情報と、指標値ＩＶＲＰ及びレリーズ画像ＳＤＲＰを関連付けた情報と、が画像記録部４４ａに記録されていることを検出した場合に、診断支援画像ＳＤＴの生成に用いる画像を１つ以上のレリーズ画像ＳＤＲＰ及び当該記録画像ＳＤＭＰの中からユーザに選択させることが可能な選択画面を表示させるための動作を行うものであってもよい。

　また、本実施形態によれば、例えば、所定の観察シーンで観察を行う旨を制御部４４に指示するためのスイッチとして構成されたスイッチＳＷＡ（不図示）が入力Ｉ／Ｆ４３に設けられていてもよい。さらに、本実施形態によれば、例えば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定するための動作を行う前に、指標値ＩＶＲＰ及びレリーズ画像ＳＤＲＰを関連付けた複数の情報が画像記録部４４ａに記録されていること、及び、スイッチＳＷＡ（不図示）における指示が行われたことをそれぞれ検出した場合に、診断支援画像ＳＤＴの生成に用いる画像を当該所定の観察シーンで過去に取得されたレリーズ画像ＳＤＲＰの中から選択するようにしてもよい。なお、前述の所定の観察シーンは、例えば、副鼻腔に形成された各空洞のうちの１つ（前頭洞、篩骨洞、上顎洞または蝶形骨洞）と、内視鏡観察における観察距離（近景または遠景）と、の組み合わせを有するように設定されればよい。

　また、本実施形態によれば、例えば、内視鏡システム１と連動する電子カルテ等の外部装置との通信をオンまたはオフに設定するためのスイッチとして構成されたスイッチＳＷＢ（不図示）が入力Ｉ／Ｆ４３に設けられていてもよい。さらに、本実施形態によれば、例えば、制御部４４が、内視鏡システム１の観察モードを診断支援モードに設定するための動作を行う前に、指標値ＩＶＲＰ及びレリーズ画像ＳＤＲＰを関連付けた複数の情報が外部装置に記録されていること、及び、スイッチＳＷＢ（不図示）がオンされていることをそれぞれ検出した場合に、診断支援画像ＳＤＴの生成に用いる画像を当該外部装置に記録されているレリーズ画像ＳＤＲＰの中から選択するようにしてもよい。

　本発明は、上述した実施形態に限定されるものではなく、発明の趣旨を逸脱しない範囲内において種々の変更や応用が可能であることは勿論である。

　本出願は、２０１８年６月１９日に日本国に出願された特願２０１８－１１６０４４号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲に引用されるものとする。

Claims

　被検体の内部に存在する被写体を照明するための照明光として、第１の照明光及び第２の照明光のうちのいずれかを発生するように構成された光源部と、
　前記照明光により照明された被写体を撮像して画像を得るように構成された撮像部と、
　前記被写体を観察する際の観察モードを、前記第１の照明光により照明された前記被写体を撮像して得られた第１の画像を表示装置に表示させる第１の観察モード、及び、前記第２の照明光により照明された前記被写体を撮像して得られた第２の画像の色及び模様のうちの少なくとも一方を加工した第３の画像を前記表示装置に表示させる第２の観察モードのうちのいずれかに設定するための指示を行うことが可能な切替指示部と、
　前記第１の画像に基づき、前記撮像部が設けられた内視鏡により前記被写体を観察する際の観察状態を検出するように構成された観察状態検出部と、
　前記観察状態検出部の検出結果に基づき、前記観察モードが前記第１の観察モードから前記第２の観察モードへ切り替わる直前において、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出した場合に、前記切替指示部においてなされた前記観察モードを前記第２の観察モードに設定するための指示を無効にするように構成された制御部と、
　を有することを特徴とする内視鏡システム。
　前記制御部は、前記観察状態検出部の検出結果に基づき、前記観察モードが前記第１の観察モードから前記第２の観察モードへ切り替わる直前において、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態であることを検出した場合に、前記観察モードを前記第２の観察モードに設定するための制御を行う
　ことを特徴とする請求項１に記載の内視鏡システム。
　前記制御部は、さらに、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないため前記第２の観察モードへの移行を停止した旨を報知可能な視覚情報を前記第１の画像に併せて表示させるための制御を行う
　ことを特徴とする請求項１に記載の内視鏡システム。
　前記制御部は、前記観察モードを前記第２の観察モードに設定するための指示を一定期間内に無効にした回数が所定の回数以上である場合に、前記観察モードを前記第２の観察モードに設定するための制御を行う
　ことを特徴とする請求項１に記載の内視鏡システム。
　前記制御部は、さらに、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないにも関わらず前記第２の観察モードへ移行した旨を報知可能な視覚情報を前記第３の画像に併せて表示させるための制御を行う
　ことを特徴とする請求項４に記載の内視鏡システム。
　前記観察状態検出部は、前記内視鏡により前記被写体を観察する際の観察状態を検出するための処理として、前記第１の画像を分割することにより複数の計算領域を設定するとともに、前記複数の計算領域各々における画素値に応じた複数の特徴量を算出する処理を行う
　ことを特徴とする請求項１に記載の内視鏡システム。
　前記制御部は、前記複数の特徴量の中に所定の閾値未満となるものが１つ以上含まれている場合に、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出する
　ことを特徴とする請求項６に記載の内視鏡システム。
　前記制御部は、前記複数の特徴量の中に所定の閾値未満となるものが所定の割合以上含まれている場合に、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出する
　ことを特徴とする請求項６に記載の内視鏡システム。
　前記制御部は、前記複数の計算領域間における前記複数の特徴量の差分の大きさを示す複数の演算値を算出し、前記複数の演算値の中に所定の閾値未満となる演算値が所定の割合以上含まれている場合に、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出する
　ことを特徴とする請求項６に記載の内視鏡システム。
　前記制御部は、前記観察モードを前記第２の観察モードに設定する際に、前記第２の画像及び前記第３の画像を併せて表示させるための制御を行う
　ことを特徴とする請求項２に記載の内視鏡システム。
　前記制御部は、前記観察モードを前記第２の観察モードに設定するための制御を行った際に、現在行われている前記被写体の観察において前記第３の画像を生成する際に用いられた値と、過去に行われた前記被写体の観察において前記第３の画像を生成する際に用いられた値と、の間の差異を示す視覚情報を前記表示装置に表示させるための制御を行う
　ことを特徴とする請求項２に記載の内視鏡システム。
　光源部が、被検体の内部に存在する被写体を照明するための照明光として、第１の照明光及び第２の照明光のうちのいずれかを発生し、
　撮像部が、前記照明光により照明された被写体を撮像して画像を取得し、
　切替指示部が、前記被写体を観察する際の観察モードを、前記第１の照明光により照明された前記被写体を撮像して得られた第１の画像を表示装置に表示させる第１の観察モード、及び、前記第２の照明光により照明された前記被写体を撮像して得られた第２の画像の色及び模様のうちの少なくとも一方を加工した第３の画像を前記表示装置に表示させる第２の観察モードのうちのいずれかに設定するための指示を行い、
　観察状態検出部が、前記第１の画像に基づき、前記撮像部が設けられた内視鏡により前記被写体を観察する際の観察状態を検出し、
　制御部が、前記観察状態検出部の検出結果に基づき、前記観察モードが前記第１の観察モードから前記第２の観察モードへ切り替わる直前において、前記内視鏡により前記被写体を観察する際の観察状態が適切な観察状態ではないことを検出した場合に、前記切替指示部においてなされた前記観察モードを前記第２の観察モードに設定するための指示を無効にする
　ことを特徴とする内視鏡システムの作動方法。