[go: up one dir, main page]

JP7560280B2 - Medical image processing device, medical image processing system, and medical image processing method - Google Patents

Medical image processing device, medical image processing system, and medical image processing method Download PDF

Info

Publication number
JP7560280B2
JP7560280B2 JP2020111624A JP2020111624A JP7560280B2 JP 7560280 B2 JP7560280 B2 JP 7560280B2 JP 2020111624 A JP2020111624 A JP 2020111624A JP 2020111624 A JP2020111624 A JP 2020111624A JP 7560280 B2 JP7560280 B2 JP 7560280B2
Authority
JP
Japan
Prior art keywords
diagnostic
examination
patient
diagnostic support
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020111624A
Other languages
Japanese (ja)
Other versions
JP2022010859A (en
Inventor
基裕 佐藤
奈央子 倉富
登美男 前濱
敬祐 伊東
信夫 小林
岳人 都丸
訓 小島
明 望月
智明 小倉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to JP2020111624A priority Critical patent/JP7560280B2/en
Publication of JP2022010859A publication Critical patent/JP2022010859A/en
Application granted granted Critical
Publication of JP7560280B2 publication Critical patent/JP7560280B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本明細書等に開示の実施形態は、医用画像処理装置、医用画像処理システム及び医用画像処理方法に関する。 The embodiments disclosed in this specification relate to a medical image processing device, a medical image processing system, and a medical image processing method.

患者は何か症状があって病院を訪れる場合が多い。また、病院では、患者の来院理由に応じて医用画像を収集し、収集した医用画像を用いて診断が行われる。例えば、患者が肩の痛みを訴えて来院した場合には肩を含む範囲についてX線画像が収集され、医師は、X線画像を参照しつつ患者の肩関節に異常がないかを確認する。 Patients often visit hospitals because they have some symptoms. In addition, hospitals collect medical images depending on the reason for the patient's visit, and diagnoses are made using the collected medical images. For example, if a patient visits a hospital complaining of shoulder pain, X-ray images are collected of the area including the shoulder, and the doctor refers to the X-ray images to check for any abnormalities in the patient's shoulder joint.

特表2006-511882号公報Special Publication No. 2006-511882 特許第4799251号明細書Patent No. 4799251 specification 特許第6275876号明細書Patent No. 6275876 specification

本明細書等に開示の実施形態が解決しようとする課題の一つは、収集された医用画像をより有効に活用することである。ただし、本明細書等に開示の実施形態により解決される課題は上記課題に限られない。後述する実施形態に示す各構成による各効果に対応する課題を、本明細書等に開示の実施形態が解決する他の課題として位置付けることもできる。 One of the problems that the embodiments disclosed in this specification etc. aim to solve is to make more effective use of collected medical images. However, the problems solved by the embodiments disclosed in this specification etc. are not limited to the above problem. Problems corresponding to the effects of each configuration shown in the embodiments described below can also be positioned as other problems solved by the embodiments disclosed in this specification etc.

実施形態の医用画像処理装置は、診断支援部と、通知部とを備える。診断支援部は、第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する。通知部は、前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知する。 The medical image processing device of the embodiment includes a diagnostic support unit and a notification unit. The diagnostic support unit executes diagnostic support processing according to a second diagnostic purpose different from the first diagnostic purpose based on a first diagnostic purpose in a first examination and medical images collected in the first examination. The notification unit notifies at least one of the patient who was the subject of the first examination and the user who executed the first examination of the results of the diagnostic support processing.

図1は、第1の実施形態に係る医用画像処理システムの構成の一例を示すブロック図である。FIG. 1 is a block diagram showing an example of the configuration of a medical image processing system according to the first embodiment. 図2は、第1の実施形態に係るX線診断装置の構成の一例を示すブロック図である。FIG. 2 is a block diagram showing an example of the configuration of the X-ray diagnostic apparatus according to the first embodiment. 図3は、第1の実施形態に係る一連の処理を示す概略図である。FIG. 3 is a schematic diagram showing a series of processes according to the first embodiment. 図4Aは、第1の実施形態に係る学習済みモデルの生成処理について説明するための図である。FIG. 4A is a diagram for explaining a process for generating a trained model according to the first embodiment. 図4Bは、第1の実施形態に係る学習済みモデルの生成処理について説明するための図である。FIG. 4B is a diagram for explaining the process of generating a trained model according to the first embodiment. 図5は、第1の実施形態に係るX線診断装置及び医用画像処理装置の処理の一連の流れを説明するためのフローチャートである。FIG. 5 is a flowchart for explaining a series of processing steps performed by the X-ray diagnostic apparatus and medical image processing apparatus according to the first embodiment.

以下、図面を参照しながら、医用画像処理装置、医用画像処理システム及び医用画像処理方法の実施形態について詳細に説明する。 Below, embodiments of a medical image processing device, a medical image processing system, and a medical image processing method will be described in detail with reference to the drawings.

(第1の実施形態)
第1の実施形態では、医用画像処理装置30を含んだ医用画像処理システム1を例として説明する。例えば、医用画像処理システム1は、図1に示すように、医用画像診断装置10及び医用画像処理装置30を備える。医用画像診断装置10及び医用画像処理装置30は、ネットワークNWを介して接続される。なお、図1は、第1の実施形態に係る医用画像処理システム1の構成の一例を示すブロック図である。
First Embodiment
In the first embodiment, a medical image processing system 1 including a medical image processing device 30 will be described as an example. For example, as shown in Fig. 1, the medical image processing system 1 includes a medical image diagnostic device 10 and a medical image processing device 30. The medical image diagnostic device 10 and the medical image processing device 30 are connected via a network NW. Fig. 1 is a block diagram showing an example of the configuration of the medical image processing system 1 according to the first embodiment.

医用画像診断装置10は、患者P1から医用画像を収集する装置である。例えば、医用画像診断装置10は、X線診断装置やX線CT(Computed Tomography)装置、超音波診断装置、磁気共鳴イメージング(Magnetic Resonance Imaging:MRI)装置、SPECT(Single Photon Emission Computed Tomography)装置、PET(Positron Emission computed Tomography)装置等である。なお、図1においては医用画像診断装置10を1つ示すが、医用画像処理システム1は、医用画像診断装置10を複数含んでもよい。 The medical image diagnostic device 10 is a device that collects medical images from a patient P1. For example, the medical image diagnostic device 10 is an X-ray diagnostic device, an X-ray CT (Computed Tomography) device, an ultrasound diagnostic device, a Magnetic Resonance Imaging (MRI) device, a SPECT (Single Photon Emission Computed Tomography) device, a PET (Positron Emission Computed Tomography) device, etc. Note that although one medical image diagnostic device 10 is shown in FIG. 1, the medical image processing system 1 may include multiple medical image diagnostic devices 10.

医用画像処理装置30は、医用画像診断装置10によって収集された医用画像に基づく各種の処理を実行する。例えば、医用画像処理装置30は、図1に示すように、入力インタフェース31と、ディスプレイ32と、メモリ33と、処理回路34とを有する。 The medical image processing device 30 performs various processes based on the medical images collected by the medical image diagnostic device 10. For example, as shown in FIG. 1, the medical image processing device 30 has an input interface 31, a display 32, a memory 33, and a processing circuit 34.

入力インタフェース31は、ユーザからの各種の入力操作を受け付け、受け付けた入力操作を電気信号に変換して処理回路34に出力する。例えば、入力インタフェース31は、マウスやキーボード、トラックボール、スイッチ、ボタン、ジョイスティック、操作面へ触れることで入力操作を行うタッチパッド、表示画面とタッチパッドとが一体化されたタッチスクリーン、光学センサを用いた非接触入力回路、音声入力回路等により実現される。なお、入力インタフェース31は、医用画像処理装置30本体と無線通信可能なタブレット端末等で構成されることにしても構わない。また、入力インタフェース31は、マウスやキーボード等の物理的な操作部品を備えるものだけに限られない。例えば、医用画像処理装置30とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を処理回路34へ出力する電気信号の処理回路も入力インタフェース31の例に含まれる。 The input interface 31 accepts various input operations from the user, converts the accepted input operations into electrical signals, and outputs the electrical signals to the processing circuitry 34. For example, the input interface 31 is realized by a mouse, a keyboard, a trackball, a switch, a button, a joystick, a touchpad that performs input operations by touching the operation surface, a touch screen that integrates a display screen and a touchpad, a non-contact input circuit using an optical sensor, a voice input circuit, and the like. The input interface 31 may be configured as a tablet terminal or the like that can wirelessly communicate with the main body of the medical image processing device 30. In addition, the input interface 31 is not limited to only those that have physical operating parts such as a mouse and a keyboard. For example, an electrical signal processing circuit that receives an electrical signal corresponding to an input operation from an external input device provided separately from the medical image processing device 30 and outputs the electrical signal to the processing circuitry 34 is also included as an example of the input interface 31.

ディスプレイ32は、各種の情報を表示する。例えば、ディスプレイ32は、後述する診断支援処理の結果を表示する。また、例えば、ディスプレイ32は、入力インタフェース31を介してユーザから各種の指示や設定等を受け付けるためのGUI(Graphical User Interface)を表示する。例えば、ディスプレイ32は、液晶ディスプレイやCRT(Cathode Ray Tube)ディスプレイである。ディスプレイ32は、デスクトップ型でもよいし、医用画像処理装置30本体と無線通信可能なタブレット端末等で構成されることにしても構わない。 The display 32 displays various information. For example, the display 32 displays the results of the diagnostic support process described below. Also, for example, the display 32 displays a GUI (Graphical User Interface) for receiving various instructions and settings from the user via the input interface 31. For example, the display 32 is a liquid crystal display or a CRT (Cathode Ray Tube) display. The display 32 may be a desktop type, or may be configured as a tablet terminal or the like capable of wireless communication with the medical image processing device 30 main body.

メモリ33は、例えば、RAM(Random Access Memory)、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等により実現される。例えば、メモリ33は、医用画像処理装置30に含まれる回路がその機能を実現するためのプログラムを記憶する。また、メモリ33は、医用画像診断装置10から取得した各種の画像を記憶する。なお、メモリ33は、医用画像処理装置30とネットワークNWを介して接続されたサーバ群(クラウド)により実現されることとしてもよい。 The memory 33 is realized, for example, by a semiconductor memory element such as a RAM (Random Access Memory) or a flash memory, a hard disk, an optical disk, etc. For example, the memory 33 stores a program for the circuits included in the medical image processing device 30 to realize their functions. The memory 33 also stores various images acquired from the medical image diagnostic device 10. The memory 33 may also be realized by a group of servers (cloud) connected to the medical image processing device 30 via a network NW.

処理回路34は、制御機能34a、診断支援機能34b、通知機能34c及び表示制御機能34dを実行することで、医用画像処理装置30全体の動作を制御する。ここで、診断支援機能34bは、診断支援部の一例である。また、通知機能34cは、通知部の一例である。また、表示制御機能34dは、表示制御部の一例である。 The processing circuitry 34 controls the operation of the entire medical image processing device 30 by executing the control function 34a, the diagnosis support function 34b, the notification function 34c, and the display control function 34d. Here, the diagnosis support function 34b is an example of a diagnosis support unit. The notification function 34c is an example of a notification unit. The display control function 34d is an example of a display control unit.

例えば、処理回路34は、制御機能34aに対応するプログラムをメモリ33から読み出して実行することにより、入力インタフェース31を介してユーザから受け付けた各種の入力操作に基づいて、診断支援機能34b、通知機能34c及び表示制御機能34dといった各種の機能を制御する。また、制御機能34aは、ネットワークNWを介したデータの送受信を制御する。 For example, the processing circuitry 34 reads out a program corresponding to the control function 34a from the memory 33 and executes it to control various functions such as the diagnostic support function 34b, the notification function 34c, and the display control function 34d based on various input operations received from the user via the input interface 31. In addition, the control function 34a controls the transmission and reception of data via the network NW.

また、例えば、処理回路34は、診断支援機能34bに対応するプログラムをメモリ33から読み出して実行することにより、医用画像診断装置10により収集された医用画像を用いた診断支援処理を実行する。また、例えば、処理回路34は、通知機能34cに対応するプログラムをメモリ33から読み出して実行することにより、診断支援機能34bによる診断支援処理の結果の通知を行なう。また、例えば、処理回路34は、表示制御機能34dに対応するプログラムをメモリ33から読み出して実行することにより、診断支援機能34bによる診断支援処理の結果をディスプレイ32に表示させる。なお、診断支援機能34b、通知機能34c及び表示制御機能34dによる処理については後述する。 For example, the processing circuitry 34 reads out from the memory 33 a program corresponding to the diagnostic support function 34b and executes it to perform diagnostic support processing using medical images collected by the medical image diagnostic device 10. For example, the processing circuitry 34 reads out from the memory 33 a program corresponding to the notification function 34c and executes it to notify the result of the diagnostic support processing by the diagnostic support function 34b. For example, the processing circuitry 34 reads out from the memory 33 a program corresponding to the display control function 34d and executes it to display the result of the diagnostic support processing by the diagnostic support function 34b on the display 32. Note that the processing by the diagnostic support function 34b, the notification function 34c, and the display control function 34d will be described later.

次に、医用画像診断装置10の一例として、図2に示すX線診断装置110について説明する。図2は、第1の実施形態に係るX線診断装置110の構成の一例を示すブロック図である。例えば、X線診断装置110は、X線高電圧装置111と、X線管112と、X線絞り器113と、X線検出器114と、入力インタフェース115と、ディスプレイ116と、メモリ117と、処理回路118とを備える。 Next, an X-ray diagnostic apparatus 110 shown in FIG. 2 will be described as an example of a medical image diagnostic apparatus 10. FIG. 2 is a block diagram showing an example of the configuration of the X-ray diagnostic apparatus 110 according to the first embodiment. For example, the X-ray diagnostic apparatus 110 includes an X-ray high voltage device 111, an X-ray tube 112, an X-ray aperture 113, an X-ray detector 114, an input interface 115, a display 116, a memory 117, and a processing circuit 118.

X線高電圧装置111は、処理回路118による制御の下、X線管112に高電圧を供給する。例えば、X線高電圧装置111は、変圧器(トランス)及び整流器等の電気回路を有し、X線管112に印加する高電圧を発生する高電圧発生装置と、X線管112が照射するX線に応じた出力電圧の制御を行うX線制御装置とを有する。高電圧発生装置は、変圧器方式であってもよいし、インバータ方式であってもよい。 The X-ray high voltage device 111 supplies a high voltage to the X-ray tube 112 under the control of the processing circuit 118. For example, the X-ray high voltage device 111 has electrical circuits such as a transformer and a rectifier, and includes a high voltage generator that generates a high voltage to be applied to the X-ray tube 112, and an X-ray control device that controls the output voltage according to the X-rays emitted by the X-ray tube 112. The high voltage generator may be of a transformer type or an inverter type.

X線管112は、熱電子を発生する陰極(フィラメント)と、熱電子の衝突を受けてX線を発生する陽極(ターゲット)とを有する真空管である。X線管112は、X線高電圧装置111から供給される高電圧を用いて、陰極から陽極に向けて熱電子を照射することにより、X線を発生する。 The X-ray tube 112 is a vacuum tube that has a cathode (filament) that generates thermoelectrons and an anode (target) that generates X-rays when struck by the thermoelectrons. The X-ray tube 112 generates X-rays by irradiating thermoelectrons from the cathode to the anode using a high voltage supplied from the X-ray high voltage device 111.

X線絞り器113は、X線の照射範囲を絞り込むコリメータと、X線を調節するフィルタとを有する。例えば、コリメータは、スライド可能な4枚の絞り羽根を有し、これら絞り羽根をスライドさせることで、X線管112が発生したX線を絞り込んで患者P1に照射させる。ここで、絞り羽根は、鉛などで構成された板状部材であり、X線の照射範囲を調整するためにX線管112のX線照射口付近に設けられる。また、フィルタは、患者P1に対する被曝線量の低減とX線画像の画質向上を目的として、その材質や厚みによって透過するX線の線質を変化させ、患者P1に吸収されやすい軟線成分を低減したり、X線画像のコントラスト低下を招く高エネルギー成分を低減したりする。また、フィルタは、その材質や厚み、位置などによってX線の線量及び照射範囲を変化させ、患者P1へ照射されるX線が予め定められた分布になるようにX線を減衰させる。 The X-ray aperture 113 has a collimator that narrows the X-ray irradiation range and a filter that adjusts the X-rays. For example, the collimator has four slidable aperture blades, and by sliding these aperture blades, the X-rays generated by the X-ray tube 112 are narrowed down and irradiated to the patient P1. Here, the aperture blades are plate-shaped members made of lead or the like, and are provided near the X-ray irradiation port of the X-ray tube 112 to adjust the X-ray irradiation range. In addition, the filter changes the radiation quality of the transmitted X-rays depending on its material and thickness, with the aim of reducing the radiation dose to the patient P1 and improving the image quality of the X-ray image, reducing soft ray components that are easily absorbed by the patient P1 and reducing high energy components that cause a decrease in the contrast of the X-ray image. In addition, the filter changes the dose and irradiation range of the X-rays depending on its material, thickness, position, etc., and attenuates the X-rays so that the X-rays irradiated to the patient P1 have a predetermined distribution.

例えば、X線絞り器113は、モータ及びアクチュエータ等の駆動機構を有し、後述する処理回路118による制御の下、駆動機構を動作させることによりX線の照射を制御する。例えばX線絞り器113は、処理回路118から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、コリメータの絞り羽根の開度を調整して、患者P1に対して照射されるX線の照射範囲を制御する。また、例えば、X線絞り器113は、処理回路118から受け付けた制御信号に応じて駆動電圧を駆動機構に付加することにより、フィルタの位置を調整することで、患者P1に対して照射されるX線の線量の分布を制御する。 For example, the X-ray aperture 113 has a driving mechanism such as a motor and an actuator, and controls the irradiation of X-rays by operating the driving mechanism under the control of the processing circuit 118 described below. For example, the X-ray aperture 113 applies a driving voltage to the driving mechanism in response to a control signal received from the processing circuit 118, thereby adjusting the opening of the aperture blades of the collimator and controlling the irradiation range of the X-rays irradiated to the patient P1. Also, for example, the X-ray aperture 113 applies a driving voltage to the driving mechanism in response to a control signal received from the processing circuit 118, thereby adjusting the position of the filter, thereby controlling the distribution of the X-ray dose irradiated to the patient P1.

X線検出器114は、例えば、マトリクス状に配列された検出素子を有するX線平面検出器(Flat Panel Detector:FPD)である。X線検出器114は、X線管112から照射されて患者P1を透過したX線を検出して、検出したX線量に対応した検出信号を処理回路118へと出力する。なお、X線検出器114は、グリッド、シンチレータアレイ及び光センサアレイを有する間接変換型の検出器であってもよいし、入射したX線を電気信号に変換する半導体素子を有する直接変換型の検出器であっても構わない。 The X-ray detector 114 is, for example, an X-ray flat panel detector (FPD) having detection elements arranged in a matrix. The X-ray detector 114 detects X-rays emitted from the X-ray tube 112 and transmitted through the patient P1, and outputs a detection signal corresponding to the detected X-ray amount to the processing circuit 118. The X-ray detector 114 may be an indirect conversion type detector having a grid, a scintillator array, and a photosensor array, or may be a direct conversion type detector having a semiconductor element that converts the incident X-rays into an electrical signal.

入力インタフェース115は、操作者からの各種の入力操作を受け付け、受け付けた入力操作を電気信号に変換して処理回路118に出力する。例えば、入力インタフェース115は、マウスやキーボード、トラックボール、スイッチ、ボタン、ジョイスティック、操作面へ触れることで入力操作を行うタッチパッド、表示画面とタッチパッドとが一体化されたタッチスクリーン、光学センサを用いた非接触入力回路、音声入力回路等により実現される。なお、入力インタフェース115は、処理回路118と無線通信可能なタブレット端末等で構成されることにしても構わない。また、入力インタフェース115は、マウスやキーボード等の物理的な操作部品を備えるものだけに限られない。例えば、X線診断装置110とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を処理回路118へ出力する電気信号の処理回路も入力インタフェース115の例に含まれる。 The input interface 115 receives various input operations from the operator, converts the received input operations into electrical signals, and outputs the electrical signals to the processing circuit 118. For example, the input interface 115 is realized by a mouse, a keyboard, a trackball, a switch, a button, a joystick, a touchpad that performs input operations by touching the operation surface, a touch screen that integrates a display screen and a touchpad, a non-contact input circuit using an optical sensor, a voice input circuit, and the like. The input interface 115 may be configured as a tablet terminal or the like that can wirelessly communicate with the processing circuit 118. The input interface 115 is not limited to only those that have physical operating parts such as a mouse and a keyboard. For example, an electrical signal processing circuit that receives an electrical signal corresponding to an input operation from an external input device provided separately from the X-ray diagnostic apparatus 110 and outputs the electrical signal to the processing circuit 118 is also included as an example of the input interface 115.

ディスプレイ116は、各種の情報を表示する。例えば、ディスプレイ116は、X線画像や、後述する診断支援処理の結果を表示する。また、例えば、ディスプレイ116は、処理回路118による制御の下、ユーザの指示を受け付けるためのGUIを表示する。例えば、ディスプレイ116は、液晶ディスプレイやCRTディスプレイである。なお、ディスプレイ116はデスクトップ型でもよいし、処理回路118と無線通信可能なタブレット端末等で構成されることにしても構わない。 The display 116 displays various types of information. For example, the display 116 displays X-ray images and the results of the diagnostic support processing described below. In addition, for example, the display 116 displays a GUI for accepting user instructions under the control of the processing circuitry 118. For example, the display 116 is a liquid crystal display or a CRT display. The display 116 may be a desktop type, or may be configured as a tablet terminal or the like capable of wireless communication with the processing circuitry 118.

メモリ117は、例えば、RAM、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等により実現される。例えば、メモリ117は、処理回路118によって収集されたX線画像を受け付けて記憶する。また、メモリ117は、処理回路118によって読み出されて実行される各種機能に対応するプログラムを記憶する。なお、メモリ117は、X線診断装置110とネットワークを介して接続されたサーバ群(クラウド)により実現されることとしてもよい。 The memory 117 is realized by, for example, a semiconductor memory element such as a RAM or a flash memory, a hard disk, an optical disk, or the like. For example, the memory 117 accepts and stores X-ray images collected by the processing circuitry 118. The memory 117 also stores programs corresponding to various functions that are read and executed by the processing circuitry 118. The memory 117 may also be realized by a group of servers (cloud) connected to the X-ray diagnostic apparatus 110 via a network.

処理回路118は、制御機能118a、収集機能118b、診断支援機能118c及び表示制御機能118dを実行することで、X線診断装置110全体の動作を制御する。例えば、処理回路118は、制御機能118aに対応するプログラムをメモリ117から読み出して実行することにより、入力インタフェース115を介してユーザから受け付けた各種の入力操作に基づいて、収集機能118b、診断支援機能118c及び表示制御機能118d等の各種の機能を制御する。また、制御機能118aは、ネットワークNWを介したデータの送受信を制御する。 The processing circuitry 118 controls the operation of the entire X-ray diagnostic apparatus 110 by executing the control function 118a, the collection function 118b, the diagnostic support function 118c, and the display control function 118d. For example, the processing circuitry 118 reads out a program corresponding to the control function 118a from the memory 117 and executes it to control various functions such as the collection function 118b, the diagnostic support function 118c, and the display control function 118d based on various input operations received from the user via the input interface 115. In addition, the control function 118a controls the transmission and reception of data via the network NW.

また、例えば、処理回路118は、収集機能118bに対応するプログラムをメモリ117から読み出して実行することにより、患者P1からX線画像を収集する。例えば、収集機能118bは、X線高電圧装置111を制御し、X線管112に供給する電圧を調整することで、X線管112から患者P1に対して照射されるX線量やオン/オフを制御する。また、収集機能118bは、X線絞り器113の動作を制御し、コリメータが有する絞り羽根の開度を調整することで、患者P1に対して照射されるX線の照射範囲を制御する。また、収集機能118bは、X線絞り器113の動作を制御し、フィルタの位置を調整することで、X線の線量の分布を制御する。また、収集機能118bは、X線検出器114から受信した検出信号に基づいてX線画像を生成し、生成したX線画像をメモリ117に格納する。なお、収集機能118bは、生成したX線画像について各種画像処理を行なってもよい。例えば、収集機能118bは、生成したX線画像に対して、画像処理フィルタによるノイズ低減処理や散乱線補正を実行する。 For example, the processing circuit 118 reads out a program corresponding to the collection function 118b from the memory 117 and executes it to collect an X-ray image from the patient P1. For example, the collection function 118b controls the X-ray high voltage device 111 and adjusts the voltage supplied to the X-ray tube 112 to control the amount of X-rays irradiated from the X-ray tube 112 to the patient P1 and on/off. The collection function 118b also controls the operation of the X-ray aperture 113 and adjusts the opening of the aperture blades of the collimator to control the irradiation range of the X-rays irradiated to the patient P1. The collection function 118b also controls the operation of the X-ray aperture 113 and adjusts the position of the filter to control the distribution of the X-ray dose. The collection function 118b also generates an X-ray image based on a detection signal received from the X-ray detector 114 and stores the generated X-ray image in the memory 117. The collection function 118b may perform various image processing on the generated X-ray image. For example, the collection function 118b performs noise reduction processing and scattered radiation correction using an image processing filter on the generated X-ray image.

また、例えば、処理回路118は、メモリ117から診断支援機能118cに相当するプログラムを読み出して実行することにより、X線画像を用いた診断支援処理を実行する。また、例えば、処理回路118は、メモリ117から表示制御機能118dに対応するプログラムを読み出して実行することにより、診断支援機能118cによる診断支援処理の結果をディスプレイ116に表示させる。 For example, the processing circuitry 118 reads out a program corresponding to the diagnostic support function 118c from the memory 117 and executes it to perform diagnostic support processing using X-ray images. For example, the processing circuitry 118 reads out a program corresponding to the display control function 118d from the memory 117 and executes it to display the results of the diagnostic support processing by the diagnostic support function 118c on the display 116.

以上、医用画像処理システム1の一例について説明した。かかる構成の下、医用画像処理装置30における処理回路34は、収集された医用画像をより有効に活用することを可能とする。 An example of the medical image processing system 1 has been described above. With this configuration, the processing circuitry 34 in the medical image processing device 30 makes it possible to more effectively utilize the collected medical images.

以下、医用画像の収集及び使用の一例について、図3を用いて説明する。図3は、第1の実施形態に係る一連の処理を示す概略図である。なお、図3においては、ステップS1に示すように、肩の痛みを訴える患者P1が来院したケースについて説明する。 An example of the collection and use of medical images will be described below with reference to FIG. 3. FIG. 3 is a schematic diagram showing a series of processes according to the first embodiment. In FIG. 3, a case will be described in which a patient P1 comes to the hospital complaining of shoulder pain, as shown in step S1.

来院した患者P1に対しては、まず、第1の検査が行われる。例えば、患者P1が肩の痛みを訴えている場合には、ステップS2に示すように、整形外科において来院理由に応じた診断が行われる。 When patient P1 visits the hospital, a first examination is first performed. For example, if patient P1 complains of shoulder pain, a diagnosis based on the reason for the visit is made in the orthopedic department, as shown in step S2.

具体的には、患者P1が整形外科を受診した際、医師等のユーザは患者P1から症状についてのヒアリングを行なう。ここで、診断のためにX線画像が必要であると判断した場合、ユーザは、X線診断装置110を用いて、患者P1の肩を含むX線画像を収集する。例えば、収集機能118bは、入力インタフェース115を介してユーザから受け付けた入力操作に基づいて患者P1に対する胸部レントゲンを実行し、X線画像I1を収集する。 Specifically, when patient P1 visits an orthopedic surgeon, a user such as a doctor interviews patient P1 about his or her symptoms. If the user determines that an X-ray image is necessary for diagnosis, the user uses X-ray diagnostic device 110 to collect an X-ray image including the shoulder of patient P1. For example, collection function 118b performs a chest X-ray on patient P1 based on an input operation received from the user via input interface 115, and collects X-ray image I1.

次に、診断支援機能118cは、X線画像I1に基づく診断支援処理を実行する。例えば、診断支援機能118cは、肩関節を観察しやすくなるように、X線画像I1におけるウィンドウ値(Window Level)やウィンドウ幅(Window Width)を調整して、X線画像I11を生成する。また、例えば、診断支援機能118cは、X線画像I11に対するコンピュータ支援診断(Computer-Aided Diagnosis:CAD)処理を実行し、X線画像I11において骨折等の病変が疑われる箇所にマーカを付したX線画像I111を生成する。 Next, the diagnostic support function 118c executes diagnostic support processing based on the X-ray image I1. For example, the diagnostic support function 118c adjusts the window level and window width in the X-ray image I1 to make it easier to observe the shoulder joint, and generates an X-ray image I11. In addition, for example, the diagnostic support function 118c executes computer-aided diagnosis (CAD) processing on the X-ray image I11, and generates an X-ray image I111 in which markers are added to areas in the X-ray image I11 where lesions such as fractures are suspected.

次に、表示制御機能118dは、診断支援機能118cによる診断支援処理の結果をディスプレイ116に表示させる。例えば、表示制御機能118dは、X線画像I11やX線画像I111等のX線画像をディスプレイ116に表示させる。なお、診断支援機能118cによる診断支援処理については省略することとしてもよい。この場合、表示制御機能118dは、収集されたX線画像I1をディスプレイ116に表示させる。そして、ユーザは、ディスプレイ116に表示されたX線画像を参照して患者P1の肩関節に病変が生じていないかを確認し、診断を行なうことができる。 Next, the display control function 118d displays the results of the diagnostic support processing by the diagnostic support function 118c on the display 116. For example, the display control function 118d displays X-ray images such as X-ray image I11 and X-ray image I111 on the display 116. Note that the diagnostic support processing by the diagnostic support function 118c may be omitted. In this case, the display control function 118d displays the collected X-ray image I1 on the display 116. The user can then refer to the X-ray image displayed on the display 116 to check whether or not there is a lesion in the shoulder joint of the patient P1 and make a diagnosis.

なお、収集されたX線画像I1は、一般に、メモリ117又は外部装置において一定期間保管された後に破棄される。即ち、収集されたX線画像I1は、患者P1の来院理由に応じて行なわれる検査の診断目的で使用された後に、適宜破棄される。これに対し、医用画像処理装置30は、収集されたX線画像I1を用いた各種の処理を更に行なって、X線画像I1をより有効に活用する。 The collected X-ray image I1 is generally discarded after being stored for a certain period of time in the memory 117 or an external device. In other words, the collected X-ray image I1 is appropriately discarded after being used for diagnostic purposes in an examination performed according to the reason for the patient P1's visit to the hospital. In contrast, the medical image processing device 30 further performs various types of processing using the collected X-ray image I1 to make more effective use of the X-ray image I1.

以下、第1の検査における診断目的については、第1の診断目的とも記載する。例えば、図3に示す場合、肩の痛みの原因となっている肩関節の病変を特定することが、第1の診断目的となる。また、第1の診断目的と異なる診断目的については、第2の診断目的とも記載する。即ち、医用画像処理装置30は、第1の診断目的での使用に加えて、X線画像I1を第2の診断目的でも使用することにより、X線画像I1をより有効に活用する。 Hereinafter, the diagnostic purpose of the first examination will also be referred to as the first diagnostic purpose. For example, in the case shown in FIG. 3, the first diagnostic purpose is to identify a lesion in the shoulder joint that is causing shoulder pain. A diagnostic purpose different from the first diagnostic purpose will also be referred to as the second diagnostic purpose. In other words, the medical image processing device 30 makes more effective use of the X-ray image I1 by using it for the second diagnostic purpose in addition to the first diagnostic purpose.

具体的には、X線診断装置110における制御機能118aは、図3のステップS3に示すように、ネットワークNWを介して、X線画像I1を医用画像処理装置30に対して送信する。ここで、ネットワークNWは、院内で閉じたローカルネットワークにより構成されてもよいし、インターネットを介したネットワークでもよい。即ち、X線診断装置110と医用画像処理装置30とは、同一施設内に設置されてもよいし、異なる施設に設置されてもよい。 Specifically, the control function 118a in the X-ray diagnostic device 110 transmits the X-ray image I1 to the medical image processing device 30 via the network NW, as shown in step S3 in FIG. 3. Here, the network NW may be configured as a local network closed within the hospital, or may be a network via the Internet. In other words, the X-ray diagnostic device 110 and the medical image processing device 30 may be installed in the same facility or in different facilities.

次に、図3のステップS4に示すように、来院理由と異なる診断が行われる。例えば、上述したように、X線画像I1に基づいて、肩関節の病変を特定するための診断が既に行われている。しかしながら、X線画像I1には、肩関節の病変以外の病変が含まれている可能性がある。例えば、胸部レントゲン検査により収集されたX線画像I1には、肩関節に加えて肺が含まれており、肺がんや肺結核、気胸といった病変が現れている可能性がある。そこで、医用画像処理装置30は、肺がん等の有無を判定するための診断支援処理を実行する。なお、「肺がんの有無を判定すること」、「肺結核の有無を判定すること」及び「気胸の有無を判定すること」は、第2の診断目的の一例である。 Next, as shown in step S4 of FIG. 3, a diagnosis different from the reason for the visit is made. For example, as described above, a diagnosis to identify a lesion in the shoulder joint has already been made based on the X-ray image I1. However, the X-ray image I1 may contain lesions other than the shoulder joint. For example, the X-ray image I1 collected by a chest X-ray examination includes the lungs in addition to the shoulder joint, and lesions such as lung cancer, pulmonary tuberculosis, and pneumothorax may appear. Therefore, the medical image processing device 30 executes a diagnostic support process to determine the presence or absence of lung cancer, etc. Note that "determining the presence or absence of lung cancer," "determining the presence or absence of pulmonary tuberculosis," and "determining the presence or absence of pneumothorax" are examples of the second diagnostic purpose.

例えば、診断支援機能34bは、まず、第2の診断目的に応じたCADを取得する。例えば、診断支援機能34bは、メモリ33に格納された複数のCADの中から、胸部のX線画像に対して適用できるCADを抽出する。また、診断支援機能34bは、抽出したCADのうち、X線画像I1に対して既に使用されているCADを除外する。即ち、診断支援機能34bは、抽出したCADのうち、第1の診断目的に応じたCADを除外する。以下では一例として、肺がんの有無を判定するためのCADc1、肺結核の有無を判定するためのCADc2、及び、気胸の有無を判定するためのCADc3が抽出された場合について説明する。 For example, the diagnostic support function 34b first acquires a CAD corresponding to the second diagnostic purpose. For example, the diagnostic support function 34b extracts a CAD that can be applied to a chest X-ray image from among the multiple CADs stored in the memory 33. In addition, the diagnostic support function 34b excludes, from the extracted CADs, a CAD that has already been used for the X-ray image I1. In other words, the diagnostic support function 34b excludes, from the extracted CADs, a CAD corresponding to the first diagnostic purpose. In the following, as an example, a case will be described in which CADc1 for determining the presence or absence of lung cancer, CADc2 for determining the presence or absence of pulmonary tuberculosis, and CADc3 for determining the presence or absence of pneumothorax are extracted.

なお、診断支援機能34bによる診断支援処理については、機械学習の手法で行なうこととしてもよい。この点は後述する。 The diagnostic support process by the diagnostic support function 34b may be performed using machine learning techniques. This will be described later.

次に、診断支援機能34bは、X線画像I1に対する画像処理を行なってX線画像I12を生成し、生成したX線画像I12にCADc1を適用する。一例を挙げると、診断支援機能34bは、肺を観察しやすくなるようにX線画像I1におけるウィンドウ値やウィンドウ幅を調整して、X線画像I12を生成する。また、一例を挙げると、診断支援機能34bは、肺を観察しやすくなるようにX線画像I1におけるウィンドウ値やウィンドウ幅を調整するとともに、X線画像I1から骨を除去する処理を行なうことにより、X線画像I12を生成する。そして、診断支援機能34bは、X線画像I12及びCADc1を用いて、CAD処理を実行する。同様に、診断支援機能34bは、X線画像I1に対する画像処理を行なってX線画像I13を生成し、生成したX線画像I13にCADc2を適用する。同様に、診断支援機能34bは、X線画像I1に対する画像処理を行なってX線画像I14を生成し、生成したX線画像I14にCADc3を適用する。 Next, the diagnostic support function 34b performs image processing on the X-ray image I1 to generate an X-ray image I12, and applies CADc1 to the generated X-ray image I12. For example, the diagnostic support function 34b adjusts the window value and window width in the X-ray image I1 so that the lungs are easily observed, and generates the X-ray image I12. For example, the diagnostic support function 34b adjusts the window value and window width in the X-ray image I1 so that the lungs are easily observed, and generates the X-ray image I12 by performing a process to remove bones from the X-ray image I1. Then, the diagnostic support function 34b executes CAD processing using the X-ray image I12 and CADc1. Similarly, the diagnostic support function 34b performs image processing on the X-ray image I1 to generate an X-ray image I13, and applies CADc2 to the generated X-ray image I13. Similarly, the diagnostic support function 34b performs image processing on the X-ray image I1 to generate an X-ray image I14, and applies CADc3 to the generated X-ray image I14.

次に、通知機能34cは、診断支援機能34bによる診断支援処理の結果の通知を行なう。例えば、通知機能34cは、図3のステップS5に示すように、診断支援機能34bによる診断支援処理の結果に基づいてレポートR1を生成し、生成したレポートR1を患者P1にフィードバックする。 Next, the notification function 34c notifies the result of the diagnostic support processing by the diagnostic support function 34b. For example, as shown in step S5 of FIG. 3, the notification function 34c generates a report R1 based on the result of the diagnostic support processing by the diagnostic support function 34b, and feeds back the generated report R1 to the patient P1.

一例を挙げると、通知機能34cは、図3に示すように、肺がんの疑いがあることを記載したレポートR1を生成する。ここで、レポートR1においては、肺がんの疑いがあることをテキストで表示してもよいし、画像で表示してもよい。一例を挙げると、通知機能34cは、CADc1を用いたCAD処理の結果に基づいて、X線画像I12において肺がんが疑われる箇所にマーカを付したX線画像I121を生成し、X線画像I121を含んだレポートR1を生成する。 As an example, the notification function 34c generates a report R1 stating that there is a suspicion of lung cancer, as shown in FIG. 3. Here, in the report R1, the suspicion of lung cancer may be displayed in text or in an image. As an example, the notification function 34c generates an X-ray image I121 in which a marker is added to an area suspected of being lung cancer in the X-ray image I12 based on the results of CAD processing using CADc1, and generates a report R1 including the X-ray image I121.

また、通知機能34cは、診断支援機能34bによる診断支援処理の結果について、医用画像処理装置30のユーザからコンサルを受けることとしてもよい。例えば、まず、表示制御機能34dは、診断支援機能34bによる診断支援処理の結果をディスプレイ32に表示させる。一例を挙げると、表示制御機能34dは、肺がんが疑われる箇所にマーカを付したX線画像I121を、ディスプレイ32に表示させる。ここで、ユーザは、X線画像I121におけるマーカが適当か否かを検討し、マーカが適当でない場合には、X線画像I121におけるマーカを修正するための入力操作を行なう。或いは、マーカが適当である場合には、マーカが適当であると判断した旨の情報を付加するための入力操作を行なう。そして、通知機能34cは、ユーザから受け付けた入力操作に応じて、レポートR1を生成する。 The notification function 34c may also receive consultation from the user of the medical image processing device 30 regarding the results of the diagnostic support processing by the diagnostic support function 34b. For example, the display control function 34d first displays the results of the diagnostic support processing by the diagnostic support function 34b on the display 32. As an example, the display control function 34d displays an X-ray image I121 with a marker added to an area suspected of lung cancer on the display 32. Here, the user considers whether the marker in the X-ray image I121 is appropriate, and if the marker is not appropriate, performs an input operation to correct the marker in the X-ray image I121. Alternatively, if the marker is appropriate, performs an input operation to add information that the marker is determined to be appropriate. Then, the notification function 34c generates a report R1 in response to the input operation received from the user.

なお、医用画像処理装置30のユーザは、X線診断装置110のユーザと同一であってもよいし、異なる人物であってもよい。即ち、ステップS2の診断を行なったユーザと、診断支援機能34bによる診断支援処理の結果についてコンサルを行なうユーザとは同一であってもよいし、異なる人物であってもよい。 The user of the medical image processing device 30 may be the same as the user of the X-ray diagnostic device 110, or may be a different person. In other words, the user who performed the diagnosis in step S2 and the user who consults on the results of the diagnostic support processing by the diagnostic support function 34b may be the same as or different from each other.

また、通知機能34cは、診断支援処理の結果の通知を、デジタルの手法で行なってもよいし、アナログの手法で行なってもよい。例えば、通知機能34cは、電子メールや、患者P1が所持する端末にインストールされたアプリケーションを介して、レポートR1の通知を行なうことができる。或いは、通知機能34cは、レポートR1をプリントアウトした書面を、患者P1の自宅や職場に送付することにより、レポートR1の通知を行なうことができる。 The notification function 34c may notify the results of the diagnostic support process by digital or analog means. For example, the notification function 34c may notify the patient P1 of the report R1 via email or an application installed on a terminal carried by the patient P1. Alternatively, the notification function 34c may notify the patient P1 of the report R1 by sending a printed copy of the report R1 to the patient P1's home or workplace.

また、通知機能34cは、診断支援処理の結果を、患者P1以外の者に通知してもよい。例えば、通知機能34cは、第1の検査を実行したユーザに対して、レポートR1を通知することとしてもよい。ここで、ユーザは、レポートR1を参照し、レポートR1の内容を患者P1に知らせるべきか否かを判断することができる。なお、一般に、第1の検査が実行された病院では患者P1の連絡先を把握しており、ユーザは、患者P1に対して適宜連絡を行なうことができる。 The notification function 34c may also notify a person other than the patient P1 of the results of the diagnostic assistance process. For example, the notification function 34c may notify the user who performed the first test of the report R1. Here, the user can refer to the report R1 and determine whether or not to inform the patient P1 of the contents of the report R1. Generally, the hospital where the first test was performed has the contact information for the patient P1, and the user can contact the patient P1 as appropriate.

診断支援処理の結果の通知を受けた患者P1は、診断支援処理の結果に応じて追加の検査を受けることができる。以下では、診断支援処理の結果に基づいて患者P1に対して行なわれる検査を、第2の検査とも記載する。例えば、肺がんの疑いがある旨のレポートR1を参照した患者P1は、図3のステップS6に示すように、呼吸器科を受診して第2の検査を受けることができる。なお、ステップS1において受診した整形外科とステップS6において受診した呼吸器科とは同じ病院であってもよいし、異なる病院であってもよい。 Patient P1 who has been notified of the results of the diagnostic support process can undergo additional examinations depending on the results of the diagnostic support process. Hereinafter, the examination performed on patient P1 based on the results of the diagnostic support process will also be referred to as the second examination. For example, patient P1 who has seen report R1 indicating that he or she is suspected of having lung cancer can visit a respiratory department and undergo a second examination, as shown in step S6 of FIG. 3. Note that the orthopedics department visited in step S1 and the respiratory department visited in step S6 may be the same hospital or different hospitals.

なお、通知機能34cは、診断支援処理の結果の通知を行なう際、更に、患者P1に受診を推薦する病院のリストを作成し、作成したリストを患者P1に通知してもよい。例えば、通知機能34cは、肺がんの疑いがある旨のレポートR1に基づいて、肺がんに関する検査を実行可能な病院のリストを作成し、患者P1に通知する。なお、通知機能34cは、かかるリストを、レポートR1に含めることとしてもよい。これにより、患者P1は、第2の検査を受けるためにいずれの病院を選択すればよいかを容易に判断することができる。 When notifying the patient P1 of the results of the diagnostic support process, the notification function 34c may further create a list of hospitals that are recommended for the patient P1 to visit, and notify the patient P1 of the created list. For example, based on the report R1 indicating that lung cancer is suspected, the notification function 34c creates a list of hospitals that can perform tests related to lung cancer, and notifies the patient P1 of the list. The notification function 34c may include the list in the report R1. This allows the patient P1 to easily determine which hospital to select to undergo the second test.

ここで、通知機能34cは、地域の病院を優先的にリストに含めることができる。例えば、通知機能34cは、患者P1の住所や勤務地等の情報に基づいて、患者P1が通院しやすい病院を優先的にリストに追加する。また、第1の検査が実行された病院は、少なくとも一度来院をしていることから患者P1にとって通いやすい病院である場合が多く、その近隣の病院も患者P1にとって通いやすい場合が多い。そこで、通知機能34cは、第1の検査が実行された病院の近隣の病院を優先的にリストに含めることとしてもよい。更に、通知機能34cは、肺がんに関する治療実績に基づいて、リスト中の病院について優先度を付してもよい。 Here, the notification function 34c can give priority to including local hospitals in the list. For example, the notification function 34c gives priority to adding hospitals that are easy for patient P1 to visit to the list based on information such as the address and place of work of patient P1. Furthermore, the hospital where the first examination was performed is often an easy hospital for patient P1 to visit because patient P1 has visited the hospital at least once, and nearby hospitals are also often easy for patient P1 to visit. Therefore, the notification function 34c may give priority to including hospitals near the hospital where the first examination was performed in the list. Furthermore, the notification function 34c may assign priorities to hospitals in the list based on the treatment records for lung cancer.

また、通知機能34cは、患者P1に受診を推薦する医師のリストを作成し、作成したリストを患者P1に通知してもよい。例えば、通知機能34cは、肺がんの疑いがある旨のレポートR1に応じて、肺がんに関する専門医のリストを作成する。ここで、通知機能34cは、地域の病院に勤務する医師を優先的にリストに含めることができる。また、通知機能34cは、肺がんに関する治療実績に基づいて、リスト中の医師について優先度を付してもよい。 The notification function 34c may also create a list of doctors recommended for patient P1 to see, and notify patient P1 of the created list. For example, the notification function 34c creates a list of lung cancer specialists in response to report R1 indicating a suspicion of lung cancer. Here, the notification function 34c may preferentially include doctors working at local hospitals in the list. The notification function 34c may also prioritize the doctors in the list based on their track record of treating lung cancer.

また、通知機能34cは、診断支援処理の結果に応じて、患者P1に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、患者P1の受診を予約してもよい。即ち、通知機能34cは、第2の検査の予約を行なってもよい。通知機能34cによる予約の処理は、患者P1が希望する場合にのみ行なうこととしてもよいし、自動で行なうこととしてもよい。これにより、通知機能34cは、第2の検査を実行するまでの各種手続きを簡略化することができる。 The notification function 34c may also identify a hospital or doctor that is recommended for patient P1 to visit, depending on the results of the diagnostic support process, and schedule a consultation for patient P1 with the identified hospital or doctor. That is, the notification function 34c may schedule a second examination. The reservation process by the notification function 34c may be performed only when requested by patient P1, or may be performed automatically. In this way, the notification function 34c can simplify various procedures leading up to the execution of the second examination.

図3のステップS7に示すように、第2の検査では、レポートR1に応じた診断が行われる。例えば、レポートR1に肺がんの疑いがある旨が記載されている場合には、第2の検査として、肺の詳細検査が行われる。一例を挙げると、第2の検査では、患者P1の肺のX線CT画像を用いた画像診断や、細胞診等の病理診断が行われ、医師による確定診断が行われる。このような第2の検査による詳細検査結果により、患者P1は、病変がある場合にはこれを早期発見することができる。また、第2の検査を行なう際、医師は、レポートR1を参照することができるため、患者P1から医師への説明負担を軽減することができる。 As shown in step S7 of FIG. 3, in the second examination, a diagnosis is made according to report R1. For example, if report R1 indicates that lung cancer is suspected, a detailed lung examination is performed as the second examination. As an example, in the second examination, image diagnosis using X-ray CT images of patient P1's lungs and pathological diagnosis such as cytology are performed, and a definitive diagnosis is made by a doctor. The detailed examination results from such a second examination allow patient P1 to detect any lesions early. In addition, when performing the second examination, the doctor can refer to report R1, which reduces the burden of explanations from patient P1 to the doctor.

次に、診断支援機能34bによる診断支援処理を機械学習の手法で行なう場合について、図4Aを用いて説明する。図4Aは、第1の実施形態に係る学習済みモデルの生成処理について説明するための図である。なお、図4Aにおいては、学習済みモデルがニューラルネットワーク(Neural Network)により構成されるものとして説明する。 Next, a case where the diagnostic support process by the diagnostic support function 34b is performed using a machine learning technique will be described with reference to FIG. 4A. FIG. 4A is a diagram for explaining the process of generating a trained model according to the first embodiment. Note that in FIG. 4A, the trained model will be described as being configured by a neural network.

また、診断支援機能34bによる診断支援処理を機械学習の手法で行なう場合、第2の検査を実行した病院は、図3のステップS8に示すように、詳細検査結果を医用画像処理装置30に対して送信する。また、医用画像処理装置30は、第2の検査の結果を取得して学習データとして使用する。 When the diagnostic support processing by the diagnostic support function 34b is performed using a machine learning technique, the hospital that performed the second examination transmits the detailed examination results to the medical image processing device 30, as shown in step S8 of FIG. 3. The medical image processing device 30 also acquires the results of the second examination and uses them as learning data.

例えば、診断支援機能34bは、メモリ33から、X線画像の入力を受け付けてCAD処理の結果を出力するように機能付けられた学習済みモデルM1を取得する。学習済みモデルM1は、後述する手法で診断支援機能34bが生成したものであってもよいし、外部装置において生成されたものであってもよい。 For example, the diagnostic support function 34b acquires from the memory 33 a trained model M1 that is functionalized to receive input of an X-ray image and output the results of CAD processing. The trained model M1 may be generated by the diagnostic support function 34b using a method described below, or may be generated by an external device.

次に、診断支援機能34bは、図4Aに示すように、第1の検査において患者P1から収集されたX線画像I1を学習済みモデルM1(ニューラルネットワーク)に対して入力する。また、学習済みモデルM1は、診断結果を出力する。例えば、学習済みモデルM1は、X線画像I1に対する画像処理を行なって処理済み画像を生成し、処理済み画像に対するCAD処理を行なって、CAD処理の結果を出力する。一例を挙げると、学習済みモデルM1は、上述したCADc1、CADc2及びCADc3に相当するCAD処理を行なってその結果を出力する。 Next, as shown in FIG. 4A, the diagnostic assistance function 34b inputs the X-ray image I1 collected from the patient P1 in the first examination to the trained model M1 (neural network). The trained model M1 outputs the diagnosis result. For example, the trained model M1 performs image processing on the X-ray image I1 to generate a processed image, performs CAD processing on the processed image, and outputs the CAD processing result. As an example, the trained model M1 performs CAD processing equivalent to the above-mentioned CADc1, CADc2, and CADc3, and outputs the result.

次に、通知機能34cは、診断支援処理の結果(診断結果)を患者P1に対して通知する。次に、診断結果に基づいて患者P1に対する第2の検査が行われ、詳細検査結果が医用画像処理装置30に対して送信される。そして、診断支援機能34bは、X線画像I1と詳細検査結果とに基づいて、学習済みモデルM1の生成処理を実行する。換言すると、診断支援機能34bは、図4Aに示すように、学習済みモデルM1を更新(アップデート)する。 Next, the notification function 34c notifies the patient P1 of the results of the diagnostic support process (diagnosis result). Next, a second examination is performed on the patient P1 based on the diagnosis result, and the detailed examination result is sent to the medical image processing device 30. Then, the diagnostic support function 34b executes a generation process of the trained model M1 based on the X-ray image I1 and the detailed examination result. In other words, the diagnostic support function 34b updates the trained model M1 as shown in FIG. 4A.

ここで、ニューラルネットワークとは、層状に並べた隣接層間が結合した構造を有し、情報が入力層側から出力層側に伝播するネットワークである。例えば、診断支援機能34bは、上述した学習データを用いて多層のニューラルネットワークについて深層学習(ディープラーニング)を実行することで、学習済みモデルM1を生成する。なお、多層のニューラルネットワークは、例えば、入力層と、複数の中間層(隠れ層)と、出力層とにより構成される。 Here, a neural network is a network that has a structure in which adjacent layers are arranged in layers and are connected, and information propagates from the input layer side to the output layer side. For example, the diagnostic support function 34b generates a trained model M1 by performing deep learning on a multi-layered neural network using the above-mentioned learning data. Note that the multi-layered neural network is composed of, for example, an input layer, multiple intermediate layers (hidden layers), and an output layer.

一例を挙げると、診断支援機能34bは、まず、患者P1に関するX線画像I1及び詳細検査結果を含む学習用データセットを生成する。なお、これまで患者P1についてのみ述べたが、診断支援機能34bは、患者P1を含む複数の患者から学習データを収集し、X線画像及び詳細検査結果の組を多数含んだ学習用データセットを生成することができる。 As an example, the diagnostic support function 34b first generates a learning dataset including X-ray image I1 and detailed examination results for patient P1. Note that while only patient P1 has been described so far, the diagnostic support function 34b can collect learning data from multiple patients, including patient P1, and generate a learning dataset including many sets of X-ray images and detailed examination results.

次に、診断支援機能34bは、X線画像を入力側データとしてニューラルネットワークに入力する。ここで、ニューラルネットワークにおいては、入力層側から出力層側に向かって一方向に隣接層間でのみ結合しながら情報が伝播し、出力層からは、入力されたX線画像に基づくCAD処理の結果が出力される。一例を挙げると、X線画像I1が入力された際、ニューラルネットワークにおいては、X線画像I1から処理済み画像が生成され、処理済み画像に対して各種のCAD処理が行なわれる。なお、入力層側から出力層側に向かって一方向に情報が伝播するニューラルネットワークについては、畳み込みニューラルネットワーク(Convlutional Neural Network:CNN)とも呼ばれる。 Next, the diagnosis support function 34b inputs the X-ray image as input data to the neural network. Here, in the neural network, information propagates in one direction from the input layer side to the output layer side while connecting only between adjacent layers, and the output layer outputs the results of CAD processing based on the input X-ray image. For example, when an X-ray image I1 is input, a processed image is generated from the X-ray image I1 in the neural network, and various CAD processing is performed on the processed image. Note that a neural network in which information propagates in one direction from the input layer side to the output layer side is also called a convolutional neural network (CNN).

診断支援機能34bは、入力側データを入力した際にニューラルネットワークが好ましい結果を出力することができるよう、ニューラルネットワークのパラメータを調整することで、学習済みモデルM1を生成する。例えば、診断支援機能34bは、ニューラルネットワークから出力されるCAD処理の結果と、詳細検査結果(第2の検査の結果)とを比較し、これらの間の差が閾値を下回るまで、ニューラルネットワークのパラメータを調整しながら処理を繰り返す。これにより、診断支援機能34bは、X線画像の入力を受け付けてCAD処理の結果を出力するように機能付けられた学習済みモデルM1を生成することができる。また、診断支援機能34bは、生成した学習済みモデルM1をメモリ33に記憶させる。 The diagnostic support function 34b generates a trained model M1 by adjusting the parameters of the neural network so that the neural network can output favorable results when input data is input. For example, the diagnostic support function 34b compares the CAD processing results output from the neural network with the detailed inspection results (results of the second inspection), and repeats the process while adjusting the parameters of the neural network until the difference between them falls below a threshold. This allows the diagnostic support function 34b to generate a trained model M1 that is functionalized to accept input of an X-ray image and output the results of CAD processing. The diagnostic support function 34b also stores the generated trained model M1 in the memory 33.

上述した通り、診断支援機能34bは、学習済みモデルM1を用いて診断支援処理を実行し、更に、学習済みモデルM1の生成処理を行なうことができる。従って、診断支援機能34bは、患者が来院し、第1の検査及び第2の検査が行われるごとに学習済みモデルM1をアップデートし、診断支援処理の精度を次第に向上させることができる。 As described above, the diagnostic assistance function 34b executes the diagnostic assistance process using the trained model M1, and can also perform the generation process of the trained model M1. Therefore, the diagnostic assistance function 34b can update the trained model M1 each time a patient visits the hospital and the first and second examinations are performed, gradually improving the accuracy of the diagnostic assistance process.

なお、これまで、X線画像I1に対する画像処理を行なって処理済み画像を生成し、生成した処理済み画像に対するCAD処理を行なうものとして説明した。しかしながら実施形態はこれに限定されるものではない。即ち、診断支援機能34bは、画像処理のステップを省略し、X線画像I1(元データ)に対するCAD処理を行なうこととしてもよい。この点は、学習済みモデルM1を用いて診断支援処理を実行する場合についても同様である。 Up to this point, the description has been given of performing image processing on the X-ray image I1 to generate a processed image, and then performing CAD processing on the generated processed image. However, the embodiment is not limited to this. That is, the diagnostic assistance function 34b may omit the image processing step and perform CAD processing on the X-ray image I1 (original data). This also applies to the case where diagnostic assistance processing is performed using the trained model M1.

また、図4Aにおいては、少なくともCAD処理を実行する学習済みモデルM1について説明したが、実施形態はこれに限定されるものではない。例えば、診断支援機能34bは、X線画像の入力を受け付けて処理済み画像を生成するように機能付けられた学習済みモデルM2を用いて診断支援処理を実行することとしてもよい。以下、学習済みモデルM2について、図4Bを用いて説明する。図4Bは、第1の実施形態に係る学習済みモデルの生成処理について説明するための図である。 In addition, in FIG. 4A, the trained model M1 that performs at least CAD processing is described, but the embodiment is not limited to this. For example, the diagnostic assistance function 34b may perform diagnostic assistance processing using the trained model M2 that is functionalized to receive input of an X-ray image and generate a processed image. The trained model M2 will be described below with reference to FIG. 4B. FIG. 4B is a diagram for explaining the generation process of the trained model according to the first embodiment.

例えば、診断支援機能34bは、メモリ33から、X線画像の入力を受け付けて処理済み画像を出力するように機能付けられた学習済みモデルM2を取得する。学習済みモデルM2は、後述する手法で診断支援機能34bが生成したものであってもよいし、外部装置において生成されたものであってもよい。 For example, the diagnostic support function 34b acquires from the memory 33 a trained model M2 that is configured to receive an input of an X-ray image and output a processed image. The trained model M2 may be generated by the diagnostic support function 34b using a method described below, or may be generated by an external device.

次に、診断支援機能34bは、図4Bに示すように、第1の検査において患者P1から収集されたX線画像I1を学習済みモデルM2(ニューラルネットワーク)に対して入力する。また、学習済みモデルM2は、X線画像I1に対する画像処理を行なって処理済み画像を生成する。例えば、学習済みモデルM2は、上述したX線画像I12、X線画像I13及びX線画像I14に相当する処理済み画像を生成する。 Next, as shown in FIG. 4B, the diagnostic support function 34b inputs the X-ray image I1 collected from the patient P1 in the first examination to the trained model M2 (neural network). The trained model M2 also performs image processing on the X-ray image I1 to generate a processed image. For example, the trained model M2 generates processed images corresponding to the above-mentioned X-ray image I12, X-ray image I13, and X-ray image I14.

次に、診断支援機能34bは、学習済みモデルM2を用いて生成した処理済み画像に対するCAD処理を実行する。例えば、診断支援機能34bは、学習済みモデルM2を用いて生成した処理済み画像に対して、上述したCADc1、CADc2及びCADc3等の各種CAD処理を実行する。 Next, the diagnostic support function 34b performs CAD processing on the processed image generated using the trained model M2. For example, the diagnostic support function 34b performs various CAD processes such as CADc1, CADc2, and CADc3 described above on the processed image generated using the trained model M2.

次に、通知機能34cは、診断支援処理の結果(診断結果)を患者P1に対して通知する。次に、診断結果に基づいて患者P1に対する第2の検査が行われ、詳細検査結果が医用画像処理装置30に対して送信される。そして、診断支援機能34bは、X線画像I1と詳細検査結果とに基づいて、学習済みモデルM2の生成処理を実行する。換言すると、診断支援機能34bは、図4Bに示すように、学習済みモデルM2をアップデートする。 Next, the notification function 34c notifies the patient P1 of the results of the diagnostic support process (diagnosis result). Next, a second examination is performed on the patient P1 based on the diagnosis result, and the detailed examination result is sent to the medical image processing device 30. Then, the diagnostic support function 34b executes a generation process of the trained model M2 based on the X-ray image I1 and the detailed examination result. In other words, the diagnostic support function 34b updates the trained model M2 as shown in FIG. 4B.

一例を挙げると、診断支援機能34bは、まず、患者P1に関するX線画像I1及び詳細検査結果を含む学習用データセットを生成する。また、診断支援機能34bは、X線画像I1を入力側データとしてニューラルネットワークに入力する。ここで、ニューラルネットワークにおいては、入力層側から出力層側に向かって一方向に隣接層間でのみ結合しながら情報が伝播し、出力層からは、入力されたX線画像I1に基づく処理済み画像が出力される。そして、診断支援機能34bは、入力側データを入力した際にニューラルネットワークが好ましい結果を出力することができるよう、ニューラルネットワークのパラメータを調整することで、学習済みモデルM2を生成する。 As an example, the diagnostic support function 34b first generates a learning dataset including the X-ray image I1 and detailed examination results for patient P1. The diagnostic support function 34b also inputs the X-ray image I1 to the neural network as input data. Here, in the neural network, information propagates in one direction from the input layer to the output layer while connecting only between adjacent layers, and a processed image based on the input X-ray image I1 is output from the output layer. The diagnostic support function 34b then generates a trained model M2 by adjusting the parameters of the neural network so that the neural network can output favorable results when the input data is input.

一例を挙げると、ニューラルネットワークの出力層からは、X線画像I1におけるウィンドウ値やウィンドウ幅を調整した処理済み画像が出力される。また、一例を挙げると、ニューラルネットワークの出力層からは、X線画像I1から骨を除去した処理済み画像が出力される。ここで、診断支援機能34bは、ニューラルネットワークから出力された処理済み画像に対してCADc1、CADc2及びCADc3等の各種CAD処理を実行する。また、診断支援機能34bは、CAD処理の結果と、詳細検査結果(第2の検査の結果)とを比較し、これらの間の差が閾値を下回るまで、ニューラルネットワークのパラメータを調整しながら処理を繰り返す。 As one example, the output layer of the neural network outputs a processed image in which the window value and window width in the X-ray image I1 have been adjusted. As another example, the output layer of the neural network outputs a processed image in which bones have been removed from the X-ray image I1. Here, the diagnostic support function 34b executes various CAD processes such as CADc1, CADc2, and CADc3 on the processed image output from the neural network. Also, the diagnostic support function 34b compares the results of the CAD processes with the detailed examination results (results of the second examination), and repeats the process while adjusting the parameters of the neural network until the difference between them falls below a threshold value.

即ち、画像処理がより適切に行なわれているほどCAD処理の精度も向上するところ、診断支援機能34bは、より適切な画像処理を行なうことができるように、ニューラルネットワークを学習させる。これにより、診断支援機能34bは、X線画像の入力を受け付けて処理済み画像を出力するように機能付けられた学習済みモデルM2を生成することができる。また、診断支援機能34bは、生成した学習済みモデルM2をメモリ33に記憶させる。 In other words, the more appropriately the image processing is performed, the higher the accuracy of the CAD processing. The diagnostic support function 34b trains the neural network so that more appropriate image processing can be performed. This allows the diagnostic support function 34b to generate a trained model M2 that is functionally configured to accept input of an X-ray image and output a processed image. The diagnostic support function 34b also stores the generated trained model M2 in the memory 33.

上述した通り、診断支援機能34bは、学習済みモデルM2を用いて処理済み画像を生成し、生成した処理済み画像に対するCAD処理を行ない、更に、学習済みモデルM2の生成処理を行なうことができる。従って、診断支援機能34bは、患者が来院し、第1の検査及び第2の検査が行われるごとに学習済みモデルM2をアップデートし、画像処理の精度を次第に向上させることができる。例えば、診断支援機能34bは、学習済みモデルM2をアップデートするごとに、X線画像におけるウィンドウ値やウィンドウ幅の調整や、骨の除去処理についての精度を向上させることができる。 As described above, the diagnostic support function 34b can generate a processed image using the trained model M2, perform CAD processing on the generated processed image, and further perform generation processing of the trained model M2. Therefore, the diagnostic support function 34b can update the trained model M2 every time a patient visits the hospital and a first examination and a second examination are performed, gradually improving the accuracy of image processing. For example, the diagnostic support function 34b can improve the accuracy of adjusting the window value and window width in the X-ray image and the bone removal process every time the trained model M2 is updated.

なお、これまで、学習済みモデルM1及び学習済みモデルM2が畳み込みニューラルネットワーク(CNN)により構成されるものとして説明したが、診断支援機能34bは、全結合ニューラルネットワークや、再帰型ニューラルネットワーク(Recurrent Neural Network:RNN)等の他種のニューラルネットワークにより学習済みモデルM1及び学習済みモデルM2を構成してもよい。 Up to this point, the trained model M1 and the trained model M2 have been described as being configured using a convolutional neural network (CNN), but the diagnostic support function 34b may configure the trained model M1 and the trained model M2 using other types of neural networks, such as a fully connected neural network or a recurrent neural network (RNN).

また、診断支援機能34bは、ニューラルネットワーク以外の機械学習手法により、学習済みモデルM1及び学習済みモデルM2を生成してもよい。例えば、診断支援機能34bは、ロジスティック(Logistic)回帰分析、非線形判別分析、サポートベクターマシン(Support Vector Machine:SVM)、ランダムフォレスト(Random Forest)、ナイーブベイズ(Naive Bayes)等のアルゴリズムを用いて機械学習を行ない、学習済みモデルM1及び学習済みモデルM2を生成することとしても構わない。 The diagnostic support function 34b may generate the trained model M1 and the trained model M2 using a machine learning method other than a neural network. For example, the diagnostic support function 34b may perform machine learning using algorithms such as logistic regression analysis, nonlinear discriminant analysis, a support vector machine (SVM), a random forest, and a naive Bayes to generate the trained model M1 and the trained model M2.

次に、X線診断装置110及び医用画像処理装置30による処理の手順の一例を、図5を用いて説明する。図5は、第1の実施形態に係るX線診断装置110及び医用画像処理装置30の処理の一連の流れを説明するためのフローチャートである。 Next, an example of the processing procedure by the X-ray diagnostic device 110 and the medical image processing device 30 will be described with reference to FIG. 5. FIG. 5 is a flowchart for explaining a series of processing steps by the X-ray diagnostic device 110 and the medical image processing device 30 according to the first embodiment.

ステップS101は、処理回路118の収集機能118bに対応する。ステップS102は、処理回路118の表示制御機能118dに対応する。ステップS103は、処理回路118の制御機能118aに対応する。ステップS104、ステップS105、ステップS111及びステップS112は、処理回路34の診断支援機能34bに対応する。ステップS106は、処理回路34の表示制御機能34dに対応する。ステップS107、ステップS108、ステップS109及びステップS110は、処理回路34の通知機能34cに対応する。 Step S101 corresponds to the collection function 118b of the processing circuit 118. Step S102 corresponds to the display control function 118d of the processing circuit 118. Step S103 corresponds to the control function 118a of the processing circuit 118. Steps S104, S105, S111, and S112 correspond to the diagnosis support function 34b of the processing circuit 34. Step S106 corresponds to the display control function 34d of the processing circuit 34. Steps S107, S108, S109, and S110 correspond to the notification function 34c of the processing circuit 34.

まず、処理回路118は、第1の検査において、患者P1からX線画像I1を収集する(ステップS101)。次に、処理回路118は、収集したX線画像I1をユーザに提示する(ステップS102)。なお、処理回路118は、ステップS102において、収集したX線画像I1をそのままディスプレイ116に表示させてもよいし、X線画像I1に基づく診断支援処理の結果をディスプレイ116に表示させてもよい。ここで、X線診断装置110のユーザは、第1の診断目的に応じた診断を実行する。例えば、患者P1が肩の痛みを訴えて来院した場合、ユーザは、X線画像I1を参照して患者P1の肩関節に病変が生じていないかを確認し、診断を行なう。 First, the processing circuitry 118 collects an X-ray image I1 from the patient P1 in the first examination (step S101). Next, the processing circuitry 118 presents the collected X-ray image I1 to the user (step S102). In step S102, the processing circuitry 118 may display the collected X-ray image I1 directly on the display 116, or may display the results of the diagnostic support process based on the X-ray image I1 on the display 116. Here, the user of the X-ray diagnostic device 110 performs a diagnosis according to the first diagnostic purpose. For example, if the patient P1 visits the hospital complaining of shoulder pain, the user refers to the X-ray image I1 to check whether there is a lesion in the shoulder joint of the patient P1 and performs a diagnosis.

次に、処理回路34は、X線画像I1を医用画像処理装置30に送信する(ステップS103)。また、処理回路34は、X線画像I1に基づくCADを実行する(ステップS104)。具体的には、処理回路34は、第1の診断目的とX線画像I1とに基づいて、第1の診断目的と異なる第2の診断目的に応じたCADを実行する。例えば、第1の検査において肩関節の病変を特定するための診断が行われていた場合、処理回路34は、肺がんや肺結核、気胸等に関するCADを実行する。なお、処理回路34は、X線画像I1に対する画像処理を実行し、処理済み画像についてCAD処理を実行することしてもよい。また、処理回路34は、学習済みモデルM1又は学習済みモデルM2を用いて、画像処理やCADを実行することとしても構わない。 Next, the processing circuitry 34 transmits the X-ray image I1 to the medical image processing device 30 (step S103). The processing circuitry 34 also executes CAD based on the X-ray image I1 (step S104). Specifically, the processing circuitry 34 executes CAD according to a second diagnostic purpose different from the first diagnostic purpose based on the first diagnostic purpose and the X-ray image I1. For example, if a diagnosis to identify a lesion in the shoulder joint is performed in the first examination, the processing circuitry 34 executes CAD related to lung cancer, pulmonary tuberculosis, pneumothorax, etc. The processing circuitry 34 may execute image processing on the X-ray image I1 and execute CAD processing on the processed image. The processing circuitry 34 may also execute image processing and CAD using the learned model M1 or the learned model M2.

次に、処理回路34は、CAD処理の結果について、ユーザによる確認(コンサル)を受けるか否かを判定する(ステップS105)。ユーザによる確認を受ける場合(ステップS105肯定)、処理回路34は、CAD処理の結果をディスプレイ32に表示させる(ステップS106)。また、ステップS106の後、又は、ユーザによる確認を受けない場合(ステップS105否定)、処理回路34は、レポートR1を作成する(ステップS107)。例えば、ステップS106の後、処理回路34は、ユーザから受け付けた入力操作に応じてレポートR1を作成する。 Next, the processing circuitry 34 determines whether or not the results of the CAD processing are to be confirmed (consulted) by the user (step S105). If the results of the CAD processing are to be confirmed by the user (Yes in step S105), the processing circuitry 34 displays the results of the CAD processing on the display 32 (step S106). After step S106, or if the results are not to be confirmed by the user (No in step S105), the processing circuitry 34 creates a report R1 (step S107). For example, after step S106, the processing circuitry 34 creates a report R1 in response to an input operation received from the user.

次に、処理回路34は、レポートR1を患者P1に対して送信する(ステップS108)。ここで、処理回路34は、患者P1に受診を推薦する病院又は医師のリストを作成し、作成したリストを併せて患者P1に通知することとしてもよい。また、処理回路34は、予約を行なうか否かを判定する(ステップS109)。予約を行なう場合(ステップS109肯定)、処理回路34は、レポートR1に応じて患者P1に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して予約を実行する(ステップS110)。 Next, the processing circuitry 34 transmits the report R1 to the patient P1 (step S108). Here, the processing circuitry 34 may create a list of hospitals or doctors recommended for the patient P1 to visit, and notify the patient P1 of the list. The processing circuitry 34 also determines whether or not to make a reservation (step S109). If a reservation is to be made (Yes in step S109), the processing circuitry 34 identifies a hospital or doctor recommended for the patient P1 to visit according to the report R1, and makes a reservation with the identified hospital or doctor (step S110).

ステップS110の後、又は、予約を行なわない場合(ステップS109否定)、処理回路34は、詳細検査結果を受診したか否かを判定する(ステップS111)。即ち、処理回路34は、第2の検査の結果を受診したか否かを判定する。詳細検査結果を受信した場合(ステップS111肯定)、処理回路34は、X線画像I1と詳細検査結果とを学習データとして用いて、学習済みモデルM1又は学習済みモデルM2を更新する(ステップS112)。そして、ステップS112の後、又は、詳細検査結果を受信しなかった場合(ステップS111)、処理回路34は、処理を終了する。 After step S110, or if no reservation is made (step S109: No), the processing circuitry 34 determines whether the detailed examination results have been received (step S111). That is, the processing circuitry 34 determines whether the results of the second examination have been received. If the detailed examination results have been received (step S111: Yes), the processing circuitry 34 uses the X-ray image I1 and the detailed examination results as learning data to update the learned model M1 or the learned model M2 (step S112). Then, after step S112, or if the detailed examination results have not been received (step S111), the processing circuitry 34 ends the process.

上述したように、第1の実施形態によれば、診断支援機能34bは、第1の検査における第1の診断目的と、第1の検査において収集されたX線画像I1とに基づいて、第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する。また、通知機能34cは、診断支援処理の結果を、第1の検査の対象となった患者P1及び第1の検査を実行したユーザの少なくとも一方に対して通知する。従って、第1の実施形態に係る医用画像処理装置30は、X線画像I1について、第1の診断目的のみならず第2の診断目的でも使用して、より有効に活用することができる。 As described above, according to the first embodiment, the diagnostic assistance function 34b executes diagnostic assistance processing according to a second diagnostic purpose different from the first diagnostic purpose based on the first diagnostic purpose in the first examination and the X-ray image I1 collected in the first examination. In addition, the notification function 34c notifies at least one of the patient P1 who was the subject of the first examination and the user who performed the first examination of the results of the diagnostic assistance processing. Therefore, the medical image processing device 30 according to the first embodiment can use the X-ray image I1 not only for the first diagnostic purpose but also for the second diagnostic purpose, making more effective use of the X-ray image I1.

また、一般に、医師はそれぞれが専門分野を有する。例えば、整形外科の医師であれば、肩の痛みを訴える患者P1に対しては、肩関節に着目した診断を行なう。しかしながら、肩に痛みがある場合でもその原因が肩にあるとは限らない。かかる場合、整形外科を何度受診しても痛みは軽減されず、患者にとってはストレスとなり、病院側にとっても負担が増加することとなる。これに対し、第1の実施形態によれば、医用画像処理装置30は、医師の専門分野に関わらずに痛みの原因を検出することができ、患者及び病院の負担を軽減することができる。例えば、医師にとっては、読影の負担が軽減される。また、ひいては、医療費も削減されることとなる。 In addition, doctors generally have their own areas of expertise. For example, an orthopedic doctor will diagnose patient P1 who is complaining of shoulder pain by focusing on the shoulder joint. However, even if there is shoulder pain, the cause is not necessarily in the shoulder. In such cases, no matter how many times the patient visits an orthopedic surgeon, the pain will not be alleviated, which will be stressful for the patient and will increase the burden on the hospital. In contrast, according to the first embodiment, the medical image processing device 30 can detect the cause of pain regardless of the doctor's area of expertise, thereby reducing the burden on the patient and the hospital. For example, the burden of interpreting images is reduced for doctors. This will also ultimately lead to a reduction in medical expenses.

また、上述したように、第1の実施形態によれば、通知機能34cは、診断支援処理の結果に応じて患者P1に受診を推薦する病院又は医師のリストを作成して通知したり、受診を推薦する病院又は医師の予約を行なったりすることができる。即ち、医用画像処理装置30は、専門の異なる複数の病院や医師を連携させて、患者P1の診断に向けることができる。これにより、各医師は、自らの専門分野に集中して診断を行なうことができるようになり、診断の効率を向上させることができる。 Also, as described above, according to the first embodiment, the notification function 34c can create and notify a list of hospitals or doctors recommended for patient P1 depending on the results of the diagnostic support process, or make an appointment with the recommended hospital or doctor. That is, the medical image processing device 30 can link multiple hospitals and doctors with different specialties to diagnose patient P1. This allows each doctor to focus on their own area of expertise when making a diagnosis, improving the efficiency of diagnosis.

(第2の実施形態)
上述した第1の実施形態では、肩の痛みを訴える患者P1に対して第1の検査が行われたケースを例として説明した。これに対し、第2の実施形態では、腹部の痛みを訴える患者P2に対して第1の検査が行われるケースについて説明する。第2の実施形態に係る医用画像処理システム1は、図1及び図2に示した医用画像処理システム1と同様の構成を有する。以下、第1の実施形態において説明した点については、図1及び図2と同一の符号を付し、説明を省略する。
Second Embodiment
In the above-mentioned first embodiment, a case where the first examination is performed on a patient P1 who complains of shoulder pain is described as an example. In contrast, in the second embodiment, a case where the first examination is performed on a patient P2 who complains of abdominal pain is described. A medical image processing system 1 according to the second embodiment has a configuration similar to that of the medical image processing system 1 shown in Figures 1 and 2. Hereinafter, the points described in the first embodiment are denoted by the same reference numerals as those in Figures 1 and 2, and description thereof will be omitted.

例えば、腹部の痛みを訴える患者P2が内科を受診した際、医師等のユーザは患者P2から症状についてのヒアリングを行なう。ここで、診断のためにX線画像が必要であると判断した場合、ユーザは、X線診断装置110を用いて、患者P2の腹部を含むX線画像I2を収集する。 For example, when patient P2 complaining of abdominal pain visits an internal medicine doctor, a user such as a doctor interviews patient P2 about his/her symptoms. If the user determines that an X-ray image is necessary for diagnosis, the user uses the X-ray diagnostic device 110 to collect an X-ray image I2 including the abdomen of patient P2.

次に、診断支援機能118cは、X線画像I2に基づく診断支援処理を実行する。例えば、診断支援機能118cは、X線画像I2に対するCAD処理を実行し、X線画像I12に描出された消化管のうち穿孔が疑われる箇所にマーカを付したX線画像I21を生成する。次に、表示制御機能118dは、X線画像I21をディスプレイ116に表示させる。或いは、表示制御機能118dは、収集されたX線画像I2をそのままディスプレイ116に表示させてもよい。そして、ユーザは、ディスプレイ116に表示されたX線画像を参照して、患者P2の消化管における穿孔の有無を検討し、診断を行なう。また、制御機能118aは、X線画像I2を医用画像処理装置30に送信する。 Next, the diagnostic support function 118c executes diagnostic support processing based on the X-ray image I2. For example, the diagnostic support function 118c executes CAD processing on the X-ray image I2 to generate an X-ray image I21 in which a marker is added to a portion of the digestive tract depicted in the X-ray image I12 where perforation is suspected. Next, the display control function 118d causes the X-ray image I21 to be displayed on the display 116. Alternatively, the display control function 118d may cause the collected X-ray image I2 to be displayed directly on the display 116. Then, the user refers to the X-ray image displayed on the display 116 to examine the presence or absence of a perforation in the digestive tract of the patient P2 and make a diagnosis. In addition, the control function 118a transmits the X-ray image I2 to the medical image processing device 30.

次に、診断支援機能34bは、X線画像I2に基づいて、第2の診断目的に応じた診断支援処理を実行する。例えば、診断支援機能34bは、消化管の穿孔を判定するCAD以外のCADであって、腹部のX線画像に対して適用可能なCADを取得し、取得したCADを用いたCAD処理を実行する。かかるCADの例としては、例えば、胆石を検出するCAD、腎嚢胞を検出するCAD等が挙げられる。また、診断支援機能34bは、上述した学習済みモデルM1又は学習済みモデルM2を用いて、X線画像I2に基づく診断支援処理を実行することとしても構わない。 Next, the diagnostic support function 34b executes diagnostic support processing according to the second diagnostic purpose based on the X-ray image I2. For example, the diagnostic support function 34b acquires a CAD other than the CAD for determining perforation of the digestive tract that is applicable to abdominal X-ray images, and executes CAD processing using the acquired CAD. Examples of such CAD include a CAD for detecting gallstones and a CAD for detecting renal cysts. The diagnostic support function 34b may also execute diagnostic support processing based on the X-ray image I2 using the trained model M1 or trained model M2 described above.

次に、通知機能34cは、診断支援処理の結果を、患者P2、又は、患者P2に対する第1の検査を実行したユーザの少なくとも一方に対して通知する。例えば、通知機能34cは、診断支援機能34bによる診断支援処理の結果に基づいてレポートR2を生成し、生成したレポートR2を患者P2にフィードバックする。なお、通知機能34cは、レポートR2について、医用画像処理装置30のユーザからコンサルを受けることとしてもよい。また、通知機能34cは、患者P2に受診を推薦する病院又は医師のリストを作成し、作成したリストを患者P2に通知してもよい。また、通知機能34cは、患者P2に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、患者P2の受診を予約してもよい。 Next, the notification function 34c notifies at least one of the patient P2 and the user who performed the first examination on the patient P2 of the results of the diagnostic support processing. For example, the notification function 34c generates a report R2 based on the results of the diagnostic support processing by the diagnostic support function 34b, and feeds back the generated report R2 to the patient P2. The notification function 34c may receive consultation from the user of the medical image processing device 30 regarding the report R2. The notification function 34c may also create a list of hospitals or doctors recommended for the patient P2 to visit, and notify the patient P2 of the created list. The notification function 34c may also identify a hospital or doctor recommended for the patient P2 to visit, and make an appointment for the patient P2 to visit the identified hospital or doctor.

次に、診断支援処理の結果に基づいて、患者P2に対する第2の検査が実行される。例えば、X線画像I2から腎嚢胞が検出された場合、腎臓に対する詳細検査が行われる。これにより、患者P2は、腎臓における病変を早期発見することができる。また、診断支援機能34bは、第2の検査の結果を受信した場合、X線画像I2と、第2の検査の結果とを学習データとして用いて、学習済みモデルM1又は学習済みモデルM2の更新を行なうことができる。 Next, a second examination is performed on patient P2 based on the results of the diagnostic support processing. For example, if a renal cyst is detected from X-ray image I2, a detailed examination of the kidney is performed. This allows patient P2 to detect lesions in the kidney at an early stage. Furthermore, when the diagnostic support function 34b receives the results of the second examination, it can use the X-ray image I2 and the results of the second examination as learning data to update the trained model M1 or trained model M2.

(第3の実施形態)
さて、これまで第1~第2の実施形態について説明したが、上述した実施形態以外にも、種々の異なる形態にて実施されてよいものである。
Third Embodiment
Although the first and second embodiments have been described above, the present invention may be embodied in various different forms other than the above-described embodiments.

例えば、図1においては、医用画像診断装置10と医用画像処理装置30とが別体であるものとして説明した。しかしながら、実施形態はこれに限定されるものではない。例えば、医用画像診断装置10が備えるコンソールが、医用画像処理装置30として機能する場合であってもよい。一例を挙げると、X線診断装置110の処理回路118が、上述した診断支援機能34b、通知機能34c、表示制御機能34dといった機能を実行する場合であってもよい。 For example, in FIG. 1, the medical image diagnostic device 10 and the medical image processing device 30 are described as separate entities. However, the embodiment is not limited to this. For example, a console provided in the medical image diagnostic device 10 may function as the medical image processing device 30. As one example, the processing circuitry 118 of the X-ray diagnostic device 110 may execute functions such as the above-mentioned diagnostic support function 34b, notification function 34c, and display control function 34d.

或いは、診断支援機能34b、通知機能34c、表示制御機能34dといった各種の機能を有する処理回路が、複数の装置に分散して配置されていてもよい。例えば、上述した診断支援機能34bを医用画像処理装置30の処理回路34が実行し、通知機能34cをX線診断装置110の処理回路118が実行する場合であってもよい。 Alternatively, processing circuits having various functions such as the diagnostic support function 34b, the notification function 34c, and the display control function 34d may be distributed and arranged in multiple devices. For example, the above-mentioned diagnostic support function 34b may be executed by the processing circuitry 34 of the medical image processing device 30, and the notification function 34c may be executed by the processing circuitry 118 of the X-ray diagnostic device 110.

また、上述した実施形態では、第1の検査において収集された医用画像として、X線画像I1及びX線画像I2について説明した。しかしながら実施形態はこれに限定されるものではない。例えば、第1の検査においてX線CT画像や、超音波画像、MR画像、SPECT画像、PET画像等が収集された場合においても、同様に適用が可能である。また、例えば、第1の検査において透視像が収集された場合においても、同様に適用が可能である。なお、透視像とは、収集と並行して表示される医用画像である。 In the above-described embodiment, X-ray image I1 and X-ray image I2 are described as medical images collected in the first examination. However, the embodiment is not limited to this. For example, the present invention can be similarly applied when X-ray CT images, ultrasound images, MR images, SPECT images, PET images, etc. are collected in the first examination. The present invention can also be similarly applied when fluoroscopic images are collected in the first examination. Note that a fluoroscopic image is a medical image that is displayed in parallel with collection.

なお、第1の検査においては、収集された医用画像の全体が使用されない場合がある。例えば、X線CT画像等の3次元画像が収集された場合、第1の検査において医師が参照するのは、レンダリング処理等を行なって生成された2次元画像である。かかる2次元画像は、3次元画像に基づいて多数生成することが可能であり、その全てについて医師が読影を行なうことは容易ではない。 In addition, in the first examination, the entire collected medical image may not be used. For example, when three-dimensional images such as X-ray CT images are collected, the doctor refers to a two-dimensional image generated by rendering processing or the like in the first examination. Many such two-dimensional images can be generated based on three-dimensional images, and it is not easy for a doctor to interpret all of them.

ここで、診断支援機能34bは、医用画像のうち、第1の検査において使用されなかった部分について診断支援処理を実行してもよい。例えば、診断支援機能34bは、第1の検査において収集されたX線CT画像に基づいて、第1の検査において生成されなかった位置又は角度の2次元画像を生成し、生成した2次元画像に対するCAD処理を行なうこととしてもよい。或いは、診断支援機能34bは、X線CT画像(元データ)に対するCAD処理を行なうこととしてもよい。 Here, the diagnostic support function 34b may perform diagnostic support processing on a portion of the medical image that was not used in the first examination. For example, the diagnostic support function 34b may generate a two-dimensional image at a position or angle that was not generated in the first examination based on the X-ray CT image collected in the first examination, and perform CAD processing on the generated two-dimensional image. Alternatively, the diagnostic support function 34b may perform CAD processing on the X-ray CT image (original data).

また、上述した実施形態では、第2の検査の結果として、医師による確定診断について説明した。しかしながら実施形態はこれに限定されるものではなく、第2の検査の結果は、第2の検査におけるCAD処理の結果であってもよい。また、診断支援機能34bは、第1の検査において収集された医用画像と、第2の検査におけるCAD処理の結果とを学習データとして用いて、学習済みモデルM1又は学習済みモデルM2を更新してもよい。 In the above-described embodiment, a definitive diagnosis by a doctor has been described as the result of the second examination. However, the embodiment is not limited to this, and the result of the second examination may be the result of CAD processing in the second examination. Furthermore, the diagnosis support function 34b may update the trained model M1 or trained model M2 using the medical images collected in the first examination and the result of CAD processing in the second examination as training data.

例えば、図3において、ステップS4では、肩関節に関する診断を目的として収集されたX線画像I1を用いたCAD処理により、肺がんの有無が判定される。一方で、ステップS7では、肺がんに関する診断を目的として収集された医用画像を用いたCAD処理により、肺がんの有無が判定される。このため、ステップS7におけるCAD処理の結果は、ステップS4におけるCAD処理の結果と比較して高精度である。以上より、診断支援機能34bは、ステップS7におけるCAD処理の結果を正解データとして用いて、学習済みモデルM1又は学習済みモデルM2を更新することができる。 For example, in FIG. 3, in step S4, the presence or absence of lung cancer is determined by CAD processing using an X-ray image I1 collected for the purpose of diagnosing the shoulder joint. On the other hand, in step S7, the presence or absence of lung cancer is determined by CAD processing using a medical image collected for the purpose of diagnosing lung cancer. Therefore, the result of the CAD processing in step S7 is more accurate than the result of the CAD processing in step S4. As described above, the diagnosis support function 34b can update the trained model M1 or trained model M2 using the result of the CAD processing in step S7 as correct answer data.

或いは、診断支援機能34bは、第1の検査を受けた後の患者の症状の推移に基づいて、学習済みモデルM1又は学習済みモデルM2を更新することもできる。例えば、図3に示した通り肺がんの疑いがある旨のレポートR1が通知された場合においても、患者P1が第2の検査を受診しないケースが想定される。かかる場合、診断支援機能34bは、患者P1が実際に肺がんを発症したか否かを正解データとして用いて、学習済みモデルM1又は学習済みモデルM2を更新することができる。 Alternatively, the diagnostic support function 34b can update the trained model M1 or the trained model M2 based on the progression of the patient's symptoms after undergoing the first test. For example, as shown in FIG. 3, even when a report R1 indicating a suspicion of lung cancer is notified, it is conceivable that the patient P1 will not undergo the second test. In such a case, the diagnostic support function 34b can update the trained model M1 or the trained model M2 using as correct answer data whether or not the patient P1 has actually developed lung cancer.

上記説明において用いた「プロセッサ」という文言は、例えば、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、特定用途向け集積回路(Application Specific Integrated Circuit:ASIC)、プログラマブル論理デバイス(例えば、単純プログラマブル論理デバイス(Simple Programmable Logic Device:SPLD)、複合プログラマブル論理デバイス(Complex Programmable Logic Device:CPLD)、及びフィールドプログラマブルゲートアレイ(Field Programmable Gate Array:FPGA))等の回路を意味する。プロセッサが例えばCPUである場合、プロセッサは記憶回路に保存されたプログラムを読み出し実行することで機能を実現する。一方、プロセッサが例えばASICである場合、記憶回路にプログラムを保存する代わりに、当該機能がプロセッサの回路内に論理回路として直接組み込まれる。なお、実施形態の各プロセッサは、プロセッサごとに単一の回路として構成される場合に限らず、複数の独立した回路を組み合わせて1つのプロセッサとして構成し、その機能を実現するようにしてもよい。さらに、各図における複数の構成要素を1つのプロセッサへ統合してその機能を実現するようにしてもよい。 The term "processor" used in the above description refers to circuits such as a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), an Application Specific Integrated Circuit (ASIC), a programmable logic device (e.g., a Simple Programmable Logic Device (SPLD), a Complex Programmable Logic Device (CPLD), and a Field Programmable Gate Array (FPGA)). If the processor is, for example, a CPU, the processor realizes the function by reading and executing a program stored in a memory circuit. On the other hand, if the processor is, for example, an ASIC, instead of storing a program in a memory circuit, the function is directly incorporated as a logic circuit in the circuit of the processor. Note that each processor in the embodiments is not limited to being configured as a single circuit for each processor, but may be configured as a single processor by combining multiple independent circuits to realize the function. Furthermore, multiple components in each figure may be integrated into a single processor to realize the function.

上述した実施形態に係る各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。即ち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。更に、各装置にて行われる各処理機能は、その全部又は任意の一部が、CPU及び当該CPUにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現されうる。 The components of each device according to the above-described embodiments are conceptual and functional, and do not necessarily need to be physically configured as shown in the figures. In other words, the specific form of distribution and integration of each device is not limited to that shown in the figures, and all or part of the devices can be functionally or physically distributed and integrated in any unit depending on various loads and usage conditions. Furthermore, all or any part of the processing functions performed by each device can be realized by a CPU and a program analyzed and executed by the CPU, or can be realized as hardware using wired logic.

また、上述した実施形態で説明した医用画像処理方法は、予め用意された医用画像処理プログラムをパーソナルコンピュータやワークステーション等のコンピュータで実行することによって実現することができる。この医用画像処理プログラムは、インターネット等のネットワークを介して配布することができる。また、この医用画像処理プログラムは、ハードディスク、フレキシブルディスク(FD)、CD-ROM、MO、DVD等のコンピュータで読み取り可能な非一過性の記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。 The medical image processing method described in the above embodiment can be realized by executing a prepared medical image processing program on a computer such as a personal computer or a workstation. This medical image processing program can be distributed via a network such as the Internet. This medical image processing program can also be recorded on a non-transitory recording medium that can be read by a computer, such as a hard disk, flexible disk (FD), CD-ROM, MO, or DVD, and executed by being read from the recording medium by a computer.

以上説明した少なくとも1つの実施形態によれば、収集された医用画像をより有効に活用することができる。 According to at least one of the embodiments described above, collected medical images can be utilized more effectively.

いくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更、実施形態同士の組み合わせを行なうことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 Although several embodiments have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, substitutions, modifications, and combinations of embodiments can be made without departing from the spirit of the invention. These embodiments and their modifications are within the scope of the invention and its equivalents as set forth in the claims, as well as the scope and spirit of the invention.

1 医用画像処理システム
110 X線診断装置
118 処理回路
118a 制御機能
118b 収集機能
118c 診断支援機能
118d 表示制御機能
30 医用画像処理装置
34 処理回路
34a 制御機能
34b 診断支援機能
34c 通知機能
34d 表示制御機能
REFERENCE SIGNS LIST 1 Medical image processing system 110 X-ray diagnostic device 118 Processing circuit 118a Control function 118b Acquisition function 118c Diagnosis support function 118d Display control function 30 Medical image processing device 34 Processing circuit 34a Control function 34b Diagnosis support function 34c Notification function 34d Display control function

Claims (17)

第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と分野が異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する通知部と
を備える、医用画像処理装置。
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose, the second diagnostic purpose being in a field different from the first diagnostic purpose, based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
a notification unit that notifies at least one of a patient who was the subject of the first examination and a user who performed the first examination of a result of the diagnostic support processing, and further creates a list of hospitals or doctors that are recommended for the patient based on the result of the diagnostic support processing, and notifies the patient of the list .
前記診断支援部は、前記第2の診断目的に応じて、前記医用画像に対するコンピュータ支援診断(Computer-Aided Diagnosis:CAD)処理を行なうことにより、前記診断支援処理を実行する、請求項1に記載の医用画像処理装置。 The medical image processing device according to claim 1, wherein the diagnostic support unit executes the diagnostic support processing by performing computer-aided diagnosis (CAD) processing on the medical image according to the second diagnostic purpose. 前記診断支援部は、前記第2の診断目的に応じて、前記医用画像に対する画像処理を行なって処理済み画像を生成し、生成した処理済み画像に対するCAD処理を行なうことにより、前記診断支援処理を実行する、請求項1に記載の医用画像処理装置。 The medical image processing device according to claim 1, wherein the diagnostic support unit performs image processing on the medical image in accordance with the second diagnostic purpose to generate a processed image, and performs CAD processing on the generated processed image, thereby executing the diagnostic support processing. 前記診断支援部は、前記医用画像の入力を受け付けて前記CAD処理の結果を出力するように機能付けられた学習済みモデルを用いて、前記診断支援処理を実行する、請求項2又は3に記載の医用画像処理装置。 The medical image processing device according to claim 2 or 3, wherein the diagnostic support unit executes the diagnostic support process using a trained model that is functionalized to accept input of the medical image and output the results of the CAD process. 前記診断支援部は、前記医用画像の入力を受け付けて前記処理済み画像を生成するように機能付けられた学習済みモデルを用いて、前記処理済み画像を生成し、生成した処理済み画像に対するCAD処理を行なうことにより前記診断支援処理を実行する、請求項3に記載の医用画像処理装置。 The medical image processing device according to claim 3, wherein the diagnostic support unit generates the processed image using a trained model that is functionalized to receive the input of the medical image and generate the processed image, and executes the diagnostic support process by performing CAD processing on the generated processed image. 前記診断支援部は、前記医用画像と、前記診断支援処理の結果に基づいて前記患者に対して行なわれた第2の検査の結果とを学習データとして用いて、前記学習済みモデルを更新する、請求項4又は5に記載の医用画像処理装置。 The medical image processing device according to claim 4 or 5, wherein the diagnostic support unit updates the trained model using the medical image and the results of a second examination performed on the patient based on the results of the diagnostic support processing as training data. 前記通知部は、前記診断支援処理の結果に基づいて前記医用画像上の病変が疑われる箇所にマーカを付した画像を生成し、当該画像を含んだレポートにより、前記患者及び前記ユーザの少なくとも一方に対して前記診断支援処理の結果を通知する、請求項1~6のいずれか一項に記載の医用画像処理装置。 The medical image processing device according to any one of claims 1 to 6, wherein the notification unit generates an image in which a marker is added to a location on the medical image where a lesion is suspected based on the result of the diagnostic support processing, and notifies at least one of the patient and the user of the result of the diagnostic support processing by a report including the image. 前記診断支援処理の結果を表示させる表示制御部を更に備え、
前記通知部は、前記診断支援処理の結果を参照した第1のユーザから受け付けた入力操作に応じて前記診断支援処理の結果を示すレポートを作成し、前記患者、及び、前記第1の検査を実行したユーザであって前記第1のユーザと異なる第2のユーザの少なくとも一方に対して前記レポートを通知する、請求項1~7のいずれか一項に記載の医用画像処理装置。
A display control unit that displays a result of the diagnostic support processing,
The medical image processing device according to any one of claims 1 to 7, wherein the notification unit creates a report indicating the results of the diagnostic support processing in response to an input operation received from a first user who has referred to the results of the diagnostic support processing, and notifies at least one of the patient and a second user who performed the first examination and is different from the first user of the report.
前記通知部は、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、前記患者の受診を予約する、請求項1~のいずれか一項に記載の医用画像処理装置。 The medical image processing device according to any one of claims 1 to 8, wherein the notification unit further identifies a hospital or doctor to be recommended for the patient based on a result of the diagnostic support processing, and schedules a consultation for the patient at the identified hospital or doctor . 第1の検査における第1の診断目的に応じて医用画像を収集する収集部と、
前記第1の診断目的と前記医用画像とに基づいて、前記第1の診断目的と分野が異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する通知部と
を備える、医用画像処理システム。
an acquisition unit that acquires medical images according to a first diagnostic objective of a first examination;
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose, the second diagnostic purpose being in a field different from the first diagnostic purpose, based on the first diagnostic purpose and the medical image;
a notification unit that notifies at least one of the patient who was the subject of the first examination and the user who performed the first examination of the results of the diagnostic support processing, and further creates a list of hospitals or doctors that are recommended for the patient based on the results of the diagnostic support processing, and notifies the patient of the list .
第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と分野が異なる第2の診断目的に応じた診断支援処理を実行し、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する
ことを含む、医用画像処理方法。
Executing a diagnostic support process according to a second diagnostic purpose, the second diagnostic purpose being in a field different from the first diagnostic purpose, based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
a medical image processing method including notifying a result of the diagnostic support processing to at least one of a patient who was the subject of the first examination and a user who performed the first examination, and further creating a list of hospitals or doctors recommended for the patient based on the result of the diagnostic support processing, and notifying the patient of the list .
第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する通知部と
を備える、医用画像処理装置。
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose different from a first diagnostic purpose in a first examination based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
a notification unit that notifies at least one of a patient who was the subject of the first examination and a user who performed the first examination of a result of the diagnostic support processing, and further creates a list of hospitals or doctors that are recommended for the patient based on the result of the diagnostic support processing, and notifies the patient of the list.
第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、前記患者の受診を予約する通知部と
を備える、医用画像処理装置。
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose different from a first diagnostic purpose in a first examination based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
a notification unit that notifies at least one of a patient who was the subject of the first examination and a user who performed the first examination of a result of the diagnostic support processing, and further identifies a hospital or doctor that is recommended for the patient based on the result of the diagnostic support processing, and makes an appointment for the patient to be examined at the identified hospital or doctor.
第1の検査における第1の診断目的に応じて医用画像を収集する収集部と、
前記第1の診断目的と前記医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する通知部と
を備える、医用画像処理システム。
an acquisition unit that acquires medical images according to a first diagnostic objective of a first examination;
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose different from the first diagnostic purpose based on the first diagnostic purpose and the medical image;
a notification unit that notifies at least one of the patient who was the subject of the first examination and the user who performed the first examination of the results of the diagnostic support processing, and further creates a list of hospitals or doctors that are recommended for the patient based on the results of the diagnostic support processing, and notifies the patient of the list.
第1の検査における第1の診断目的に応じて医用画像を収集する収集部と、
前記第1の診断目的と前記医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行する診断支援部と、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、前記患者の受診を予約する通知部と
を備える、医用画像処理システム。
an acquisition unit that acquires medical images according to a first diagnostic objective of a first examination;
a diagnostic support unit that executes a diagnostic support process according to a second diagnostic purpose different from the first diagnostic purpose based on the first diagnostic purpose and the medical image;
a notification unit that notifies at least one of the patient who was the subject of the first examination and the user who performed the first examination of the results of the diagnostic support processing, and further identifies a hospital or doctor that is recommended for the patient based on the results of the diagnostic support processing, and makes an appointment for the patient to be examined at the identified hospital or doctor.
第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行し、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師のリストを作成し、当該リストを前記患者に通知する
ことを含む、医用画像処理方法。
execute a diagnostic support process according to a second diagnostic purpose different from the first diagnostic purpose based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
a medical image processing method including notifying a result of the diagnostic support processing to at least one of a patient who was the subject of the first examination and a user who performed the first examination, and further creating a list of hospitals or doctors recommended for the patient based on the result of the diagnostic support processing, and notifying the patient of the list.
第1の検査における第1の診断目的と、前記第1の検査において収集された医用画像とに基づいて、前記第1の診断目的と異なる第2の診断目的に応じた診断支援処理を実行し、
前記診断支援処理の結果を、前記第1の検査の対象となった患者及び前記第1の検査を実行したユーザの少なくとも一方に対して通知し、更に、前記診断支援処理の結果に応じて前記患者に受診を推薦する病院又は医師を特定し、特定した病院又は医師に対して、前記患者の受診を予約する
ことを含む、医用画像処理方法。
execute a diagnostic support process according to a second diagnostic purpose different from the first diagnostic purpose based on a first diagnostic purpose in a first examination and medical images acquired in the first examination;
A medical image processing method comprising: notifying at least one of a patient who was the subject of the first examination and a user who performed the first examination of a result of the diagnostic support processing; identifying a hospital or doctor recommended for the patient based on the result of the diagnostic support processing; and scheduling a consultation for the patient with the identified hospital or doctor.
JP2020111624A 2020-06-29 2020-06-29 Medical image processing device, medical image processing system, and medical image processing method Active JP7560280B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020111624A JP7560280B2 (en) 2020-06-29 2020-06-29 Medical image processing device, medical image processing system, and medical image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020111624A JP7560280B2 (en) 2020-06-29 2020-06-29 Medical image processing device, medical image processing system, and medical image processing method

Publications (2)

Publication Number Publication Date
JP2022010859A JP2022010859A (en) 2022-01-17
JP7560280B2 true JP7560280B2 (en) 2024-10-02

Family

ID=80147755

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020111624A Active JP7560280B2 (en) 2020-06-29 2020-06-29 Medical image processing device, medical image processing system, and medical image processing method

Country Status (1)

Country Link
JP (1) JP7560280B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114862210A (en) * 2022-05-13 2022-08-05 心韵恒安医疗科技(北京)有限公司 Online electrocardiogram task distribution method

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002163633A (en) 2000-11-24 2002-06-07 Fuji Photo Film Co Ltd Image information processing system
JP2003159262A (en) 2001-11-27 2003-06-03 Sense It Smart Corp Oral cavity preparatory examination system, oral cavity preparatory examination method, recording medium and program
JP2004295184A (en) 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd Diagnostic support image processing service system
JP2005103055A (en) 2003-09-30 2005-04-21 Konica Minolta Medical & Graphic Inc Medical image processor
JP2010268820A (en) 2007-09-11 2010-12-02 Konica Minolta Medical & Graphic Inc Medical image system, medical photographing device, data processing method, and program
JP2014030556A (en) 2012-08-02 2014-02-20 Hitachi Ltd Image processing device
JP2020048685A (en) 2018-09-25 2020-04-02 キヤノンメディカルシステムズ株式会社 Breast cancer diagnosis support apparatus, breast cancer diagnosis support system, and breast cancer diagnosis support method
US20200160122A1 (en) 2018-11-21 2020-05-21 Enlitic, Inc. Multi-label heat map display system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002163633A (en) 2000-11-24 2002-06-07 Fuji Photo Film Co Ltd Image information processing system
JP2003159262A (en) 2001-11-27 2003-06-03 Sense It Smart Corp Oral cavity preparatory examination system, oral cavity preparatory examination method, recording medium and program
JP2004295184A (en) 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd Diagnostic support image processing service system
JP2005103055A (en) 2003-09-30 2005-04-21 Konica Minolta Medical & Graphic Inc Medical image processor
JP2010268820A (en) 2007-09-11 2010-12-02 Konica Minolta Medical & Graphic Inc Medical image system, medical photographing device, data processing method, and program
JP2014030556A (en) 2012-08-02 2014-02-20 Hitachi Ltd Image processing device
JP2020048685A (en) 2018-09-25 2020-04-02 キヤノンメディカルシステムズ株式会社 Breast cancer diagnosis support apparatus, breast cancer diagnosis support system, and breast cancer diagnosis support method
US20200160122A1 (en) 2018-11-21 2020-05-21 Enlitic, Inc. Multi-label heat map display system

Also Published As

Publication number Publication date
JP2022010859A (en) 2022-01-17

Similar Documents

Publication Publication Date Title
US11393579B2 (en) Methods and systems for workflow management
US9492136B2 (en) Method and apparatus that automates tube current and voltage selection for CT scans
US9668712B2 (en) Method and system for quantitative imaging
JP7223539B2 (en) Breast cancer diagnosis support device, breast cancer diagnosis support system, and breast cancer diagnosis support method
JP7330744B2 (en) Medical information processing device, ordering system and program
JP2016209267A (en) Medical image processor and program
JP7682792B2 (en) Medical support device, its operation method and operation program, and medical support system
JP2020177463A (en) Medical information processing equipment, medical information processing system and medical information processing program
JP7560280B2 (en) Medical image processing device, medical image processing system, and medical image processing method
JP7358120B2 (en) Information processing device, tomography device, information processing method and program
JP2021099565A (en) Medical system, medical information management device, and terminal device
JP2021122658A (en) Radiation image processing equipment, methods and programs
JP6598653B2 (en) Medical information processing apparatus and medical information processing system
JP7662386B2 (en) Medical image diagnostic device, medical image processing device, and medical image processing system
US20220346710A1 (en) Learned model generating method, processing device, and storage medium
JP5167647B2 (en) Diagnostic system
JP2024110319A (en) Medical information processing device, medical information processing system, and medical information processing method
Mahajan et al. Audit of artificial intelligence algorithms and its impact in relieving shortage of specialist doctors
JP7568439B2 (en) Medical information processing device, X-ray diagnostic device, and medical information processing program
Nishikawa et al. Fifty years of SPIE Medical Imaging proceedings papers
JP2020099583A (en) Medical information processing apparatus and X-ray diagnostic apparatus
Ibrahim et al. Evaluation of Image Quality of Head Computed Tomography at the University of Maiduguri Teaching Hospital, Nigeria
Mohamed Hanif et al. Diagnostic Reference Level (DRL) of the Cardiac Catheterisation Procedures.
JP2025161210A (en) Medical work support device, method, and program
Abesi Effect of auto-adaptive metal artifact reduction (aMAR) program in cone-beam computed tomography on assessing pre-implant bone levels

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230428

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231219

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240717

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240821

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240919

R150 Certificate of patent or registration of utility model

Ref document number: 7560280

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150