JP2002200048A - Diagnosis support system - Google Patents
Diagnosis support systemInfo
- Publication number
- JP2002200048A JP2002200048A JP2001000884A JP2001000884A JP2002200048A JP 2002200048 A JP2002200048 A JP 2002200048A JP 2001000884 A JP2001000884 A JP 2001000884A JP 2001000884 A JP2001000884 A JP 2001000884A JP 2002200048 A JP2002200048 A JP 2002200048A
- Authority
- JP
- Japan
- Prior art keywords
- diagnosis support
- support system
- diagnosis
- doctor
- abnormality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 100
- 230000005856 abnormality Effects 0.000 claims description 45
- 230000003213 activating effect Effects 0.000 claims 1
- 238000000034 method Methods 0.000 abstract description 21
- 230000002159 abnormal effect Effects 0.000 abstract description 11
- 238000012545 processing Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 10
- 230000003902 lesion Effects 0.000 description 7
- 239000003550 marker Substances 0.000 description 5
- 238000001514 detection method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 201000005202 lung cancer Diseases 0.000 description 1
- 208000020816 lung neoplasm Diseases 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、医用画像をコンピ
ュータで解析し、医師の判断を支援する診断支援システ
ムに係り、特に診断支援処理の開始方法に改良を加えた
診断支援システムに関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a diagnosis support system for analyzing a medical image by a computer and assisting a doctor in making a decision, and more particularly to a diagnosis support system having an improved method for starting a diagnosis support process.
【0002】[0002]
【従来の技術】従来、CT装置、MRI装置、超音波装
置などで撮影された医用画像の陰影をコンピュータを用
いて解析し、その陰影の中から病巣候補を絞り込んで医
師に提示し、医師の判断を仰ぐという診断支援(CA
D:Computer Aided Detectio
n)システムが実用化されつつある。この診断支援シス
テムを実際の検診に用いる場合の運用形態として、次の
ようなものが提案されている。通常の肺がん検診時に
は、まず最初に二人の医師がそれぞれ並行して独立に読
影を行い、その後にその読影結果を持ち寄り、両医師が
最終的に異常あり又は異常なしの総合判定を行ってい
る。この総合判定の結果が異常ありの場合にはその患者
に対して精密検査が行われることになる。一方、総合判
定の結果が異常なしの場合には、医師が自ら診断支援シ
ステムを起動して異常の有無を解析させていた。そし
て、診断支援システムの解析の結果が異常ありとなった
場合には、医師は再度確認のために読影を行っていた。2. Description of the Related Art Conventionally, shadows of medical images captured by a CT apparatus, an MRI apparatus, an ultrasonic apparatus, etc. are analyzed using a computer, and lesion candidates are narrowed down from the shadows and presented to a doctor. Diagnosis support for seeking judgment (CA
D: Computer Aided Detectio
n) The system is being put into practical use. The following has been proposed as an operation mode when this diagnostic support system is used for actual medical examination. At the time of normal lung cancer screening, first, two doctors perform independent interpretations in parallel, then bring the interpretation results, and both doctors finally make a comprehensive judgment of whether there is an abnormality or no abnormality . If the result of the comprehensive judgment is abnormal, a detailed examination is performed on the patient. On the other hand, if the result of the comprehensive judgment is no abnormality, the doctor has started the diagnosis support system by himself and analyzed the presence or absence of the abnormality. When the result of the analysis by the diagnosis support system indicates that there is an abnormality, the doctor performs the image interpretation for confirmation again.
【0003】[0003]
【発明が解決しようとする課題】医師は自分が異常なし
と総合的に判断した場合に、自らキー入力などの操作を
行って診断支援システムを起動しなければならなかっ
た。例えば、両医師が総合判定して、異常なしと認めた
場合、その異常なしと認められた患者のID番号などを
キーボードなどの操作子を用いて診断支援システムに入
力することによって初めて診断支援システムはその患者
の医用画像に対して解析を行っていた。すなわち、その
患者のID番号などが入力されない限り、診断支援シス
テムはその患者に対して解析を行うことはなかった。従
って、両医師のいずれか一方が診断支援システムに対し
て患者のID番号などを入力することになっている場合
や両医師の総合判定の結果を記したメモなどに基づいて
看護婦などの第三者が入力することになっている場合な
どに、何らかのミスによって患者のID番号などが入力
されなかったり、又は誤ったものが入力されたりするこ
とがある。このような場合、入力されなかった患者に対
しては診断支援システムが起動することはなく、診断支
援システムを導入したにも係わらずそれが有効に機能し
ないという問題があった。When the doctor comprehensively judges that there is no abnormality, the doctor has to start the diagnosis support system by performing operations such as key input by himself. For example, if both doctors make a comprehensive judgment and find that there is no abnormality, the diagnosis support system is first entered by inputting the ID number of the patient who is found to have no abnormality into the diagnosis support system using an operator such as a keyboard. Was analyzing the patient's medical image. That is, unless the patient's ID number or the like is input, the diagnosis support system does not analyze the patient. Therefore, when one of the two doctors is to input the patient's ID number or the like to the diagnosis support system, or based on a memo or the like describing the result of the comprehensive judgment by the two doctors, For example, when three persons are to enter, the patient's ID number or the like may not be inputted or an incorrect one may be inputted due to some mistake. In such a case, there is a problem that the diagnosis support system is not activated for a patient who has not been input, and does not function effectively despite the introduction of the diagnosis support system.
【0004】本発明の目的は、操作者が診断支援システ
ムを一々操作しなくても異常なしと判定された患者の医
用画像に対して自動的に解析処理を行うことのできる診
断支援システムを提供することにある。[0004] An object of the present invention is to provide a diagnosis support system capable of automatically performing analysis processing on a medical image of a patient determined to have no abnormality without operating the diagnosis support system one by one. Is to do.
【0005】[0005]
【課題を解決するための手段】請求項1に係る診断支援
システムは、医師によって診断された医用画像データに
異常あり又は異常なしに関するデータを付加して記録媒
体に記録するデータ記録手段と、前記記録媒体に記録さ
れている前記医用画像データの中から異常なしに関する
データの付加されたものを抽出する抽出手段と、前記抽
出手段によって抽出された医用画像データに対して自動
的に診断支援プログラムを起動して解析を行う解析手段
と、前記解析手段の解析結果に応じて医師にその解析結
果を知らせる報知手段とを備えたものである。According to a first aspect of the present invention, there is provided a diagnostic support system comprising: data recording means for adding data relating to abnormality or no abnormality to medical image data diagnosed by a doctor and recording the data on a recording medium; Extracting means for extracting, from the medical image data recorded on the recording medium, data to which data relating to no abnormality has been added; and automatically executing a diagnosis support program on the medical image data extracted by the extracting means. It comprises an analysis means for starting and performing analysis, and a notifying means for notifying a doctor of the analysis result in accordance with the analysis result of the analysis means.
【0006】医師が行う最終な診断結果はリポートして
記録される。データ記録手段は、このリポートに基づい
て異常あり又は異常なしに関するデータを記録媒体に記
録する。抽出手段は、記録媒体の中から異常なしと記録
されたものだけを抽出し、抽出された医用画像データを
自動的に解析手段に解析させる。解析手段の解析の結果
が異常ありの場合にはその結果が医師に伝達されるの
で、医師はその医用画像に基づいて再確認を行うことが
できる。従って、リポート作成の段階で誤って異常なし
と記録した場合や医師の読影に誤認があった場合など、
それが自動的に医師に報知されるので、医師の手を煩わ
せることなく診断支援システムを有効に利用することが
できる。[0006] The final diagnosis made by the doctor is reported and recorded. The data recording means records, on the recording medium, data on the presence or absence of the abnormality based on the report. The extracting means extracts only those recorded as having no abnormality from the recording medium, and causes the analyzing means to automatically analyze the extracted medical image data. If the result of the analysis by the analysis means is abnormal, the result is transmitted to the doctor, so that the doctor can reconfirm based on the medical image. Therefore, if there is a mistake in recording the report at the stage of report creation, or if there is a mistake
Since this is automatically notified to the doctor, the diagnosis support system can be effectively used without bothering the doctor.
【0007】[0007]
【発明の実施の形態】以下添付図面に従って本発明に係
る診断支援システムの好ましい実施の形態について説明
する。図1は本発明が適用される診断支援システム全体
のハードウエア構成を示すブロック図である。この診断
支援システムは、例えばX線CT装置、MRI装置、超
音波装置などの医用画像モダリティで被検体の対象部位
について収集した複数の断層像に基づいて病巣候補陰影
等の抽出や絞り込みの画像処理、及び病巣候補陰影、抽
出途中画像等の表示を行うものである。この診断支援シ
ステムは、本願の発明者の一人が先に出願した特願20
00−314550号に記載されているので、その詳細
については説明を省略する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Preferred embodiments of a diagnosis support system according to the present invention will be described below with reference to the accompanying drawings. FIG. 1 is a block diagram showing a hardware configuration of an entire diagnosis support system to which the present invention is applied. This diagnosis support system is based on a plurality of tomographic images collected for a target site of a subject by a medical image modality such as an X-ray CT apparatus, an MRI apparatus, and an ultrasonic apparatus, and performs image processing for extracting and narrowing down a lesion candidate shadow or the like. , And lesion candidate shadows, images during extraction, and the like are displayed. This diagnostic support system is disclosed in Japanese Patent Application No.
Since it is described in JP-A-00-314550, a detailed description thereof will be omitted.
【0008】診断支援システムは、各構成要素の動作を
制御する中央処理装置(CPU)10と、診断支援シス
テムの制御プログラムが格納された主メモリ11と、各
患者の複数の断層像データ及び動作プログラム等が格納
された磁気ディスク12と、表示用の画像データを一時
記憶する表示メモリ13と、この表示メモリ13からの
画像データに基づいて画像を表示する表示装置としての
CRTディスプレイ14と、画面上のソフトスイッチを
操作するマウス15及びマウスコントローラ16と、各
種パラメータ設定用のキーやスイッチを備えたキーボー
ド17と、スピーカ18と、上記各構成要素を接続する
共通バス19とから構成される。The diagnosis support system includes a central processing unit (CPU) 10 for controlling the operation of each component, a main memory 11 storing a control program for the diagnosis support system, a plurality of tomographic image data and operation data for each patient. A magnetic disk 12 storing a program and the like, a display memory 13 for temporarily storing image data for display, a CRT display 14 as a display device for displaying an image based on the image data from the display memory 13, a screen, It is composed of a mouse 15 and a mouse controller 16 for operating the above software switches, a keyboard 17 having keys and switches for setting various parameters, a speaker 18, and a common bus 19 for connecting the above-mentioned components.
【0009】この実施の形態では、主メモリ11以外の
記憶装置として、磁気ディスク12のみが接続されてい
るが、これ以外にフロッピー(登録商標)ディスクドラ
イブ、ハードディスクドライブ、CD−ROMドライ
ブ、光磁気ディスク(MO)ドライブ、ZIPドライ
ブ、PDドライブ、DVDドライブなどが接続されてい
てもよい。さらに、図示していない通信インターフェイ
スを介してLAN(ローカルエリアネットワーク)やイ
ンターネット、電話回線などの種々の通信ネットワーク
上に接続可能とし、他のコンピュータやデータベースと
の間で画像データのやりとりを行えるようにしてもよ
い。In this embodiment, only the magnetic disk 12 is connected as a storage device other than the main memory 11, but in addition, a floppy (registered trademark) disk drive, hard disk drive, CD-ROM drive, magneto-optical A disk (MO) drive, ZIP drive, PD drive, DVD drive, or the like may be connected. Furthermore, it can be connected to various communication networks such as a LAN (local area network), the Internet, and a telephone line via a communication interface (not shown) so that image data can be exchanged with other computers and databases. It may be.
【0010】以下、図1の診断支援システムの動作例に
ついて図面を用いて説明する。図2は、診断支援システ
ムが実行するメインフローを示す図である。図1のCP
U10はこのメインフローに従って動作する。図3は、
このメインフローによって医用画像に関するデータがど
のように処理されるのかを示す図であり、図3(A)は
医師の診断前の医用画像に関するデータであり、図3
(B)は医師の診断後の医用画像に関するデータであ
り、図3(C)は医師の診断後であって診断支援システ
ムによる解析結果後のデータである。図4は、ディスプ
レイに表示される表示画面の一例を示す図であり、図4
(A)はリポート作成時の画面を示し、図4(B)は警
告時の表示画面を示す。このメインフローは、二人の医
師がそれぞれ並行して独立に読影を行った後の読影結果
に対して、両医師が最終的に異常あり又は異常なしの総
合判定を行う場合に行われる一連の処理である。以下、
このメインフローの詳細をステップ順に説明する。Hereinafter, an example of operation of the diagnosis support system of FIG. 1 will be described with reference to the drawings. FIG. 2 is a diagram illustrating a main flow executed by the diagnosis support system. CP in FIG.
U10 operates according to this main flow. FIG.
FIG. 3A is a diagram showing how data on a medical image is processed according to this main flow. FIG. 3A shows data on a medical image before a doctor's diagnosis.
FIG. 3B shows data on a medical image after a doctor's diagnosis, and FIG. 3C shows data after a doctor's diagnosis and an analysis result by the diagnosis support system. FIG. 4 is a diagram showing an example of a display screen displayed on the display.
4A shows a screen at the time of report creation, and FIG. 4B shows a display screen at the time of warning. This main flow is a series of steps performed when two doctors finally make a comprehensive judgment of whether there is an abnormality or no abnormality with respect to the interpretation result after the two doctors independently perform the interpretation in parallel. Processing. Less than,
Details of the main flow will be described in the order of steps.
【0011】[ステップS20]ディスプレイ14上に
患者のID入力画面を表示し、患者のID番号の入力を
待つ。ID番号が入力されたら、医用画像モダリティに
よって予め撮影された医用画像の中から診断対象となる
患者のID番号に対応した図3(A)のような医用画像
を磁気ディスク12から読み出し、ディスプレイ14に
表示する。図3(A)の医用画像は、患者に関する各種
情報などを記録したヘッダ情報部と複数n枚の医用画像
データ1〜nから構成される。ヘッダ情報部に示してあ
る支援済フラグCADは診断支援システムによる解析が
行われた場合に「1」となるフラグである。図3(A)
及び図3(B)の場合には診断支援システムによる解析
は未だ行われていないので、支援済フラグCADは
「0」である。[Step S20] A patient ID input screen is displayed on the display 14, and input of a patient ID number is waited. When the ID number is input, a medical image as shown in FIG. 3A corresponding to the ID number of the patient to be diagnosed is read from the magnetic disk 12 from among the medical images taken in advance by the medical image modality, and the display 14 is displayed. To be displayed. The medical image shown in FIG. 3A is composed of a header information section in which various information related to the patient is recorded and a plurality of n pieces of medical image data 1 to n. The supported flag CAD shown in the header information section is a flag that becomes “1” when the analysis is performed by the diagnosis support system. FIG. 3 (A)
In the case of FIG. 3B, since the analysis by the diagnosis support system has not been performed yet, the supported flag CAD is “0”.
【0012】[ステップS21]医師はディスプレイ1
4に医用画像を順次表示させながら、自分の行った読影
結果と照らし合わせながら異常あり又は異常なしの最終
的な総合判定を行う。 [ステップS22]前記ステップS21の総合判定が終
了した場合、その判定結果を診断リポートとして医師に
作成させるために図4(A)のような診断リポート画面
41をディスプレイ14に表示する。医師は図4(A)
の表示画面に対して、診断結果を入力する。診断結果の
入力はキーボード17を用いて診断の詳細内容をテキス
トデータとし入力してもよいし、又は予め作成されてあ
る項目をチェックするようにしてもよい。この診断リポ
ートの中で、最も重要なものは「異常を認めない」とい
う項目と「上記の異常を認める」という項目である。こ
の項目のいずれか一方をチェックしないと、終了ボタン
42を操作しても次のステップには進まないようになっ
ている。図4(A)では、「異常を認めない」という項
目がチェックされ、その左側の二重円の内円が黒色表示
で示されている。医師によって作成された診断リポート
は、図3(B)に示すように、医用画像データの付加情
報として記録される。付加情報には医師の作成した詳細
なテキストデータなどと共に「異常を認めない」又は
「異常を認める」の情報が付加されている。[Step S21] The doctor displays 1
Then, while displaying the medical images in sequence, a final comprehensive determination of whether there is an abnormality or not is made while checking the result of the interpretation performed by the user. [Step S22] When the comprehensive judgment in step S21 is completed, a diagnostic report screen 41 as shown in FIG. 4A is displayed on the display 14 so that the doctor can prepare the judgment result as a diagnostic report. The doctor sees Fig. 4 (A)
Enter the diagnosis result on the display screen. The diagnosis result may be input by using the keyboard 17 to input detailed contents of the diagnosis as text data, or an item created in advance may be checked. Among the diagnostic reports, the most important ones are the item "no abnormality is recognized" and the item "recognize the above abnormality". If one of these items is not checked, the next step will not proceed even if the end button 42 is operated. In FIG. 4A, the item "No abnormality is recognized" is checked, and the inner circle of the double circle on the left side is shown in black. The diagnostic report created by the doctor is recorded as additional information of the medical image data, as shown in FIG. The additional information is accompanied by detailed information such as detailed text data created by the doctor and information indicating "no abnormality is recognized" or "recognize abnormality".
【0013】[ステップS23]医師の診断結果を常時
監視しているプロセスが、前記ステップS22で作成さ
れた図3(B)に示すような診断リポートを調べにい
き、総合判定が「異常を認めない」であるか否かを判定
し、「異常を認めない」(yes)の場合は次のステッ
プS24に進み、「異常を認める」(no)の場合はリ
ターンし、次の診断リポートが作成されるまで監視す
る。 [ステップS24]診断リポートの総合判定が「異常を
認めない」であるとステップS23で判定されたので、
この診断リポートの付加されている医用画像データに基
づいて、前述の特願2000−314550号に記載さ
れているコンピュータによる画像診断支援処理を開始す
る。なお、これ以外の診断支援装置を用いて画像診断支
援処理を行ってもよいことは言うまでもない。[Step S23] The process of constantly monitoring the doctor's diagnosis results looks at the diagnostic report as shown in FIG. 3B created in step S22, and the overall judgment is "abnormal. It is determined whether or not "no", and if "no abnormality" (yes), the process proceeds to the next step S24, and if "no abnormality" (no), the process returns and the next diagnostic report is created. Monitor until done. [Step S24] Since it is determined in step S23 that the comprehensive determination of the diagnostic report is "No abnormality detected",
Based on the medical image data to which the diagnostic report is added, an image diagnosis support process by a computer described in Japanese Patent Application No. 2000-314550 is started. It goes without saying that the image diagnosis support processing may be performed using another diagnosis support apparatus.
【0014】[ステップS25]ステップS24の画像
診断支援処理の結果が異常ありか否かの判定を行い、異
常あり(yes)の場合はステップS26に進み、異常
なし(no)の場合はステップS27に進む。 [ステップS26]コンピュータによる画像診断支援処
理の結果が異常ありだったので、図4(B)に示すよう
な警告ウィンドウ43をディスプレイ14上に表示す
る。この警告ウィンドウ43は画像診断支援システムに
よって処理した結果、異常とおもわれる箇所が発見され
たことを意味するものである。医師がこの警告ウィンド
ウ43を選択(クリック)することによって、ディスプ
レイ14上には図5に示すような病巣候補陰影をマーカ
ーで示した検出結果を示すウィンドウとそのマーカー部
分を拡大して示す拡大ウィンドウが同時に表示される。
拡大ウィンドウはこの検出結果ウィンドウ中のマーカー
部分を所定倍率で拡大して表示したものである。このよ
うに拡大表示することによって、医者はより正確に病巣
陰影候補を観察することができる。[Step S25] It is determined whether or not the result of the image diagnosis support processing in step S24 is abnormal. If there is an abnormality (yes), the process proceeds to step S26. If there is no abnormality (no), the process proceeds to step S27. Proceed to. [Step S26] Since the result of the image diagnosis support processing by the computer is abnormal, a warning window 43 as shown in FIG. 4B is displayed on the display 14. This warning window 43 means that a portion considered abnormal is found as a result of processing by the image diagnosis support system. When the doctor selects (clicks) the warning window 43, a window showing a detection result in which a lesion candidate shadow is shown by a marker as shown in FIG. 5 and an enlarged window showing the marker portion in an enlarged manner are displayed on the display 14. Are displayed at the same time.
The enlarged window is an enlarged display of the marker portion in the detection result window at a predetermined magnification. By enlarging and displaying in this manner, the doctor can more accurately observe the lesion shadow candidate.
【0015】図5に示した画面は標準画面であり、画面
左端に一列に並んでいる表示モード選択ボタンによっ
て、種々の表示モードを選択することができるようにな
っている。この表示モード選択ボタンは、標準表示モー
ド、よこ順表示モード、たて順表示モード、距離順表示
モード、渦巻順表示モード及び登録順表示モードの七種
類のモードが存在する。図5は病巣候補陰影の抽出処理
の行われた画像の順番に表示する標準モードを示すもの
であり、図6に示すように抽出された画像a〜dの順番
通りに表示する。各画像a〜dの切替えは、図5の右下
にある上下三角形の画面切替えボタンによって行われ
る。なお、下向き三角形の表示された画面切替えボタン
は次画面表示ボタンであり、上向き三角形の表示された
画面切替えボタンは前画面表示ボタンである。なお、画
像cには病巣陰影候補が二カ所存在するので、このよう
な場合には、マーカー切替えボタンが表示されるように
なっている。また、拡大画面の表示倍率を適宜変更する
こともできるボタンも表示されるがここでは省略してあ
る。この標準モード以外のよこ順表示モード、たて順表
示モード、距離順表示モード、渦巻順表示モード、登録
順表示モードについては説明を省略する。The screen shown in FIG. 5 is a standard screen, and various display modes can be selected by the display mode selection buttons arranged in a line at the left end of the screen. The display mode selection button has seven types of modes: a standard display mode, a horizontal display mode, a vertical display mode, a distance display mode, a spiral display mode, and a registration display mode. FIG. 5 shows a standard mode in which images are displayed in the order in which the focus candidate shadows have been extracted, and the images are displayed in the order of the extracted images a to d as shown in FIG. Switching between the images a to d is performed by a screen switching button of an upper and lower triangle at the lower right of FIG. The screen switching button displaying a downward triangle is a next screen display button, and the screen switching button displaying an upward triangle is a previous screen display button. Note that since there are two lesion shadow candidates in the image c, a marker switching button is displayed in such a case. In addition, a button that allows the display magnification of the enlarged screen to be appropriately changed is also displayed, but is omitted here. Descriptions of the horizontal order display mode, the vertical order display mode, the distance order display mode, the spiral order display mode, and the registration order display mode other than the standard mode will be omitted.
【0016】[ステップS27]診断支援システムによ
る診断結果が異常なしだったので、ここでは診断支援処
理による診断が終了したことを示すために、図3(C)
に示すように医用画像データのヘッダ情報部の支援済フ
ラグCADに「1」をセットし、リターンする。支援済
フラグCADに「1」がセットされることによって、後
述するデータベースにこの医用画像データに関する情報
が格納された場合であっても、この支援済フラグCAD
によってこの医用画像データに対しては診断支援システ
ムによる解析処理が終了していることを認識することが
できるようになり、二重に診断支援システムによる解析
処理を行うことがなくなる。なお、ステップS26の警
告表示を行ったにも係わらず、医師が見落としてしまっ
た場合には、支援済フラグCADには「1」がセットさ
れないので、再び診断支援システムによる解析が行われ
その結果が後で医師に報告されるようになっている。[Step S27] Since the result of the diagnosis by the diagnosis support system is normal, here, in order to indicate that the diagnosis by the diagnosis support processing has been completed, FIG.
As shown in (1), "1" is set to the supported flag CAD in the header information section of the medical image data, and the routine returns. By setting “1” to the supported flag CAD, even if information on the medical image data is stored in a database described later, the supported flag CAD is set.
Thus, it is possible to recognize that the analysis processing by the diagnosis support system has been completed for the medical image data, and the analysis processing by the diagnosis support system is not performed twice. If the doctor overlooks despite the warning display in step S26, since the supported flag CAD is not set to "1", the analysis is again performed by the diagnosis support system and the result is Will be reported to the doctor later.
【0017】図7は、本発明に係る診断支援システムの
別の実施の形態の概略構成を示す図である。これは、ネ
ットワーク70を介してX線CT装置71、MRI装置
72、超音波装置73などの医用画像モダリティやリポ
ート作成装置74及び診断支援装置75が接続されてい
る様子を示す。各医用画像モダリティから出力される医
用画像情報はデータベース76に逐次蓄積される。デー
タベース76に蓄積される画像情報は、図3(A)に示
すようなものであり、ヘッダ情報部に支援済フラグCA
Dを有する。FIG. 7 is a diagram showing a schematic configuration of another embodiment of the diagnosis support system according to the present invention. This shows a state where medical image modalities such as an X-ray CT apparatus 71, an MRI apparatus 72, and an ultrasonic apparatus 73, a report creation apparatus 74, and a diagnosis support apparatus 75 are connected via a network 70. Medical image information output from each medical image modality is sequentially stored in the database 76. The image information stored in the database 76 is as shown in FIG. 3A, and the supported flag CA
D.
【0018】リポート作成装置74及び診断支援装置7
5の構成は、図1の診断支援システムと基本的にはほぼ
同じであり、中央処理装置(CPU)によって全体を制
御されるようになっている。図1の診断支援システムと
リポート作成装置74及び診断支援装置75とが異なる
点は、図1の診断支援システムがリポート作成処理及び
診断支援処理の両方を行うのに対して、リポート作成装
置74はリポート作成処理だけを行い、診断支援装置7
5は診断支援処理だけを行うようになっている点であ
る。従って、この実施の形態に係る診断支援システムで
は、リポート作成装置74によって作成された診断リポ
ートは画像データと共にデータベース76に順次蓄積さ
れる。そして、診断支援装置75はデータベース76の
中から順次診断レポートの総合判定が「異常を認めな
い」となっている画像を抽出し、抽出された画像に対し
て診断支援処理を実行し、異常ありの場合には医師に対
して警告を表示するようになっている。なお、図1に示
すような診断支援システムを搭載したものがネットワー
ク70に接続されている場合もある。The report creation device 74 and the diagnosis support device 7
The configuration of 5 is basically the same as that of the diagnosis support system of FIG. 1, and is entirely controlled by a central processing unit (CPU). The difference between the diagnosis support system of FIG. 1 and the report creation device 74 and the diagnosis support device 75 is that the diagnosis support system of FIG. 1 performs both the report creation process and the diagnosis support process, whereas the report creation device 74 Only the report creation processing is performed, and the diagnosis support device 7
5 is that only the diagnosis support processing is performed. Therefore, in the diagnosis support system according to this embodiment, the diagnosis report created by the report creation device 74 is sequentially stored in the database 76 together with the image data. Then, the diagnosis support apparatus 75 sequentially extracts, from the database 76, images for which the overall judgment of the diagnosis report is “No abnormality is recognized”, executes a diagnosis support process on the extracted images, and In this case, a warning is displayed to the doctor. In some cases, a device equipped with a diagnosis support system as shown in FIG.
【0019】図8は、図7のネットワーク接続された診
断支援システムの動作例を説明するためのフローチャー
ト図である。以下、このフローチャートの詳細をステッ
プ順に説明する。なお、図8において、ステップS80
〜ステップS82からなるフローチャートはリポート作
成装置74によって実行されるものであり、ステップS
90〜ステップS96からなるフローチャートは診断支
援装置75によって実行されるものである。FIG. 8 is a flowchart for explaining an operation example of the network-connected diagnosis support system of FIG. Hereinafter, details of this flowchart will be described in the order of steps. Note that, in FIG.
The flowchart consisting of steps S82 to S82 is executed by the report creation device 74,
The flowchart consisting of 90 to step S96 is executed by the diagnosis support device 75.
【0020】[ステップS80]図2のステップS20
〜ステップS22とほぼ同じ処理を実行し、医師によっ
て診断リポートが作成される。すなわち、ディスプレイ
14上に患者のID入力画面が表示されるので、医師は
患者のID番号を入力する。ID番号が入力されると、
データベース76の中から診断対象となる患者のID番
号に対応した図3(A)のような画像を読み出し、リポ
ート作成装置74内の記憶装置内に格納し、ディスプレ
イ14に表示する。医師は、ディスプレイ14に表示さ
れた画像を順次表示させながら、自分の行った読影結果
と照らし合わせながら異常あり又は異常なしの最終的な
総合判定を行う。そして、医師は、図4(A)のような
診断リポート画面41に従って、診断結果を入力し、診
断レポートを作成する。診断レポートの形式は図2の場
合と同じである。医師によって作成された診断リポート
は、図3(B)に示すように、画像データの付加情報と
して記録される。付加情報には医師の作成した詳細なテ
キストデータなどと共に「異常を認めない」又は「異常
を認める」の情報が付加されている。[Step S80] Step S20 in FIG.
ほ ぼ Executes substantially the same processing as in step S22, and a doctor creates a diagnostic report. That is, since a patient ID input screen is displayed on the display 14, the doctor inputs the patient ID number. When the ID number is entered,
An image as shown in FIG. 3A corresponding to the ID number of the patient to be diagnosed is read from the database 76, stored in the storage device of the report generating device 74, and displayed on the display 14. The doctor makes a final overall judgment of whether there is an abnormality or no abnormality while sequentially displaying the images displayed on the display 14 and checking the result of the interpretation performed by the doctor. Then, the doctor inputs the diagnosis result according to the diagnosis report screen 41 as shown in FIG. 4A and creates a diagnosis report. The format of the diagnosis report is the same as that of FIG. The diagnostic report created by the doctor is recorded as additional information of the image data, as shown in FIG. The additional information is accompanied by detailed information such as detailed text data created by a doctor, and information of "No abnormality is recognized" or "No abnormality is recognized".
【0021】[ステップS81]医師の診断結果である
診断リポートに関する情報を対応する画像データの付加
情報としてデータベース88に格納する。 [ステップS82]医師による診断が終了したか否かの
判定を行い、終了でない(no)と判定された場合はス
テップS80にリターンして、次の患者に対する診断を
行い、終了(yes)と判定された場合は処理を終了す
る。[Step S81] Information on a diagnosis report, which is a diagnosis result of a doctor, is stored in the database 88 as additional information of the corresponding image data. [Step S82] It is determined whether or not the diagnosis by the doctor has been completed. If it is determined that the diagnosis has not been completed (no), the process returns to step S80 to make a diagnosis on the next patient and determine that the diagnosis has been completed (yes). If so, the process ends.
【0022】[ステップS90]データベース88に格
納されている各画像データのヘッダ情報部を読み出す。 [ステップS91]ヘッダ情報部の解析済フラグCAD
が「0」であるか否かを判定し、「0」(yes)の場
合は次のステップS92に進み、「1」(no)の場合
はリターンする。すなわち、解析済フラグCADが
「1」の場合には解析する必要がないからである。な
お、どのような順番でデータベース88からヘッダ情報
を読み出すかは任意であるが、診断レポートの作成年月
日に基づいて過去1週間分のものについて読み出し処理
を行うようにしてもよい。[Step S90] The header information section of each image data stored in the database 88 is read. [Step S91] Analyzed flag CAD of header information section
Is determined to be “0”. If “0” (yes), the process proceeds to the next step S92, and if “1” (no), the process returns. That is, when the analyzed flag CAD is “1”, it is not necessary to perform the analysis. The order in which the header information is read from the database 88 is arbitrary, but the reading process may be performed for the past one week based on the date of creation of the diagnostic report.
【0023】[ステップS92]前のステップS91で
解析フラグCADが「0」と判定されたので、図3
(B)に示すように画像データに付加されている診断リ
ポートを調べにいき、総合判定が「異常を認めない」で
あるか否かを判定し、「異常を認めない」(yes)の
場合は次のステップS93に進み、「異常を認める」
(no)の場合はステップS96にジャンプする。 [ステップS93]診断リポートの総合判定が「異常を
認めない」であるとステップS92で判定されたので、
この診断リポートの付加されている画像データに基づい
て、前述のように画像診断支援処理を開始する。[Step S92] Since the analysis flag CAD is determined to be "0" in the previous step S91, FIG.
As shown in (B), the diagnostic report added to the image data is examined, and it is determined whether or not the comprehensive determination is “no abnormality is recognized”, and if “no abnormality is recognized” (yes) Proceeds to the next step S93, and “accepts an abnormality”
In the case of (no), the process jumps to step S96. [Step S93] Since it is determined in step S92 that the comprehensive determination of the diagnostic report is “no abnormality recognized”,
Based on the image data to which the diagnostic report has been added, the image diagnosis support processing is started as described above.
【0024】[ステップS94]ステップS93の画像
診断支援処理の結果が異常ありか否かの判定を行い、異
常あり(yes)の場合はステップS95に進み、異常
なし(no)の場合はステップS96に進む。 [ステップS95]画像診断支援処理の結果が異常あり
だったので、前述のステップS26と同じように図4
(B)に示すような警告ウィンドウ43をリポート作成
装置74のディスプレイ14上に表示する。これ以降は
医師がこの警告ウィンドウ43を選択(クリック)する
ことによって、ディスプレイ14上には図5に示すよう
な病巣候補陰影をマーカーで示した検出結果を示すウィ
ンドウとそのマーカー部分を拡大して示す拡大ウィンド
ウが同時に表示される。なお、警告表示を行おうとした
にも係わらず、リポート作成装置74が起動状態になか
ったり、医師による確認が行われなかった場合には、支
援済フラグCADは「0」のまま、データベース88に
戻され、再びデータベース88からヘッダ情報部が読み
出され、前述の一連の処理及び診断支援装置75による
解析が行われ、その結果が後で医師に報告される。[Step S94] It is determined whether or not the result of the image diagnosis support processing in step S93 is abnormal. If there is an abnormality (yes), the process proceeds to step S95, and if there is no abnormality (no), the process proceeds to step S96. Proceed to. [Step S95] Since the result of the image diagnosis support processing is abnormal, as in step S26 described above, FIG.
A warning window 43 as shown in (B) is displayed on the display 14 of the report creation device 74. Thereafter, when the doctor selects (clicks) the warning window 43, the window showing the detection result in which the lesion candidate shadow is shown by a marker as shown in FIG. The enlarged window shown is displayed at the same time. If the report creation device 74 is not in the activated state or the confirmation by the doctor is not performed in spite of the warning display, the supported flag CAD remains “0” and is stored in the database 88. Then, the header information section is read again from the database 88, and the above-described series of processing and analysis by the diagnosis support device 75 are performed, and the result is later reported to the doctor.
【0025】[ステップS96]診断支援システムによ
る診断結果が異常なしだったので、ここでは診断支援処
理による診断が終了したことを示すために、図3(C)
に示すように医用画像データのヘッダ情報部の支援済フ
ラグCADに「1」をセットし、リターンする。このよ
うに支援済フラグCADに「1」がセットされることに
よって、データベース88からはこの画像データに対し
て診断支援処理が行われることはない。[Step S96] Since the result of the diagnosis by the diagnosis support system is normal, in order to indicate that the diagnosis by the diagnosis support processing has been completed, FIG.
As shown in (1), "1" is set to the supported flag CAD in the header information section of the medical image data, and the routine returns. By setting "1" to the supported flag CAD in this manner, the database 88 does not perform the diagnostic support processing on this image data.
【0026】なお、上述の実施の形態では、異常なし又
は異常ありのデータを付加する場合について説明した
が、異常ありの場合にはそれに関するデータを付加し、
異常なしの場合にはデータを付加しないようにしてもよ
い。この場合、異常ありのデータの無いものを抽出し、
それに対して診断支援処理を実行するようにすればよ
い。また、データを付加するのではなく、フラグ形式で
記録するようにしてもよい。In the above-described embodiment, the case of adding data indicating that there is no abnormality or the presence of an abnormality has been described.
If there is no abnormality, the data may not be added. In this case, extract the data without abnormal data,
The diagnosis support processing may be executed in response thereto. Instead of adding data, the data may be recorded in a flag format.
【0027】[0027]
【発明の効果】以上説明したように本発明の診断支援シ
ステムによれば、操作者が診断支援システムを一々操作
しなくても異常なしと判定された患者の医用画像に対し
て自動的に解析処理を行うことができるという効果があ
る。As described above, according to the diagnosis support system of the present invention, a medical image of a patient determined to have no abnormality is automatically analyzed even if the operator does not operate the diagnosis support system one by one. There is an effect that processing can be performed.
【図1】 本発明が適用される診断支援システム全体の
ハードウエア構成を示すブロック図FIG. 1 is a block diagram showing a hardware configuration of an entire diagnosis support system to which the present invention is applied;
【図2】 図1の診断支援システムが実行するメインフ
ローを示す図FIG. 2 is a diagram showing a main flow executed by the diagnosis support system of FIG. 1;
【図3】 図2のメインフローによって医用画像に関す
るデータがどのように処理されるのかを示す図FIG. 3 is a diagram showing how data relating to a medical image is processed according to the main flow of FIG. 2;
【図4】 ディスプレイに表示される表示画面の一例を
示す図、図4(A)はリポート作成時の画面、図4
(B)は警告時の表示画面FIG. 4 is a view showing an example of a display screen displayed on a display, FIG. 4 (A) is a screen at the time of report creation, FIG.
(B) is a display screen at the time of warning
【図5】 図4の警告ウィンドウを選択したときに表示
される画面の一例であり、病巣候補陰影の抽出処理の行
われた画像の順番に表示する標準モードを示す図FIG. 5 is an example of a screen displayed when the warning window of FIG. 4 is selected, showing a standard mode in which images in which a focus candidate shadow extraction process has been performed are displayed in order.
【図6】 抽出された画像a〜dの順番通りに表示する
標準モードの一例を示す図FIG. 6 is a diagram showing an example of a standard mode in which extracted images a to d are displayed in order.
【図7】 本発明に係る診断支援システムの別の実施の
形態の概略構成を示す図FIG. 7 is a diagram showing a schematic configuration of another embodiment of the diagnosis support system according to the present invention;
【図8】 図7のネットワーク接続された診断支援シス
テムの動作例を説明するためのフローチャート図8 is a flowchart for explaining an operation example of the diagnosis support system connected to the network of FIG. 7;
10…中央処理装置(CPU)、11…主メモリ、12
…磁気ディスク、13…表示メモリ、14…CRTディ
スプレイ、15…マウス、16…コントローラ、17…
キーボード、18…スピーカ、19…共通バス、41…
診断リポート画面、42…終了ボタン、43…警告ウィ
ンドウ、70…ネットワーク、71…X線CT装置、7
2…MRI装置、73…超音波装置、74…リポート作
成装置、75…診断支援装置、76…データベース10 central processing unit (CPU), 11 main memory, 12
... magnetic disk, 13 ... display memory, 14 ... CRT display, 15 ... mouse, 16 ... controller, 17 ...
Keyboard, 18 speaker, 19 common bus, 41 ...
Diagnostic report screen, 42 ... end button, 43 ... warning window, 70 ... network, 71 ... X-ray CT apparatus, 7
2: MRI apparatus, 73: Ultrasound apparatus, 74: Report creation apparatus, 75: Diagnosis support apparatus, 76: Database
Claims (1)
に異常あり又は異常なしに関するデータを付加して記録
媒体に記録するデータ記録手段と、 前記記録媒体に記録されている前記医用画像データの中
から異常なしに関するデータの付加されたものを抽出す
る抽出手段と、 前記抽出手段によって抽出された医用画像データに対し
て自動的に診断支援プログラムを起動して解析を行う解
析手段と、 前記解析手段の解析結果に応じて医師にその解析結果を
知らせる報知手段とを備えたことを特徴とする診断支援
システム。1. A data recording means for adding data relating to abnormality or no abnormality to medical image data diagnosed by a physician and recording the data on a recording medium, and from among the medical image data recorded on the recording medium Extracting means for extracting data to which data relating to no abnormality is added; analyzing means for automatically activating a diagnosis support program for medical image data extracted by the extracting means and performing analysis; and A diagnosis support system comprising: a notifying unit that notifies a doctor of the analysis result according to the analysis result.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001000884A JP4662517B2 (en) | 2001-01-09 | 2001-01-09 | Diagnosis support system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001000884A JP4662517B2 (en) | 2001-01-09 | 2001-01-09 | Diagnosis support system |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2002200048A true JP2002200048A (en) | 2002-07-16 |
| JP2002200048A5 JP2002200048A5 (en) | 2008-02-28 |
| JP4662517B2 JP4662517B2 (en) | 2011-03-30 |
Family
ID=18869582
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001000884A Expired - Fee Related JP4662517B2 (en) | 2001-01-09 | 2001-01-09 | Diagnosis support system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4662517B2 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006522383A (en) * | 2003-02-07 | 2006-09-28 | セラドク・インコーポレーテッド | System, method and computer program for interfacing an expert system to a clinical information system |
| WO2007059615A1 (en) * | 2005-11-23 | 2007-05-31 | The Medipattern Corporation | Method and system of computer-aided quantitative and qualitative analysis of medical images |
| JP2009157527A (en) * | 2007-12-25 | 2009-07-16 | Canon Inc | Medical image processing apparatus, medical image processing method and program |
| US7783094B2 (en) | 2005-06-02 | 2010-08-24 | The Medipattern Corporation | System and method of computer-aided detection |
| JP2013215563A (en) * | 2012-03-12 | 2013-10-24 | Toshiba Corp | Report creation support device, and report browsing device |
| US12175664B2 (en) | 2019-06-17 | 2024-12-24 | Olympus Corporation | Image recording apparatus, information processing apparatus, information processing method, and recording medium |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04333972A (en) * | 1991-05-10 | 1992-11-20 | Toshiba Corp | Medical diagnosis supporting system |
| JPH06292655A (en) * | 1993-04-12 | 1994-10-21 | Toshiba Corp | Medical diagnosis support system |
| JPH07250817A (en) * | 1994-03-15 | 1995-10-03 | Fujitsu Ltd | Medical image display method and device |
| JPH08166995A (en) * | 1994-12-13 | 1996-06-25 | Toshiba Corp | Medical diagnosis support system |
| JPH105202A (en) * | 1996-06-21 | 1998-01-13 | Toshiba Medical Eng Co Ltd | Diagnosis support system |
-
2001
- 2001-01-09 JP JP2001000884A patent/JP4662517B2/en not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04333972A (en) * | 1991-05-10 | 1992-11-20 | Toshiba Corp | Medical diagnosis supporting system |
| JPH06292655A (en) * | 1993-04-12 | 1994-10-21 | Toshiba Corp | Medical diagnosis support system |
| JPH07250817A (en) * | 1994-03-15 | 1995-10-03 | Fujitsu Ltd | Medical image display method and device |
| JPH08166995A (en) * | 1994-12-13 | 1996-06-25 | Toshiba Corp | Medical diagnosis support system |
| JPH105202A (en) * | 1996-06-21 | 1998-01-13 | Toshiba Medical Eng Co Ltd | Diagnosis support system |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006522383A (en) * | 2003-02-07 | 2006-09-28 | セラドク・インコーポレーテッド | System, method and computer program for interfacing an expert system to a clinical information system |
| US7783094B2 (en) | 2005-06-02 | 2010-08-24 | The Medipattern Corporation | System and method of computer-aided detection |
| WO2007059615A1 (en) * | 2005-11-23 | 2007-05-31 | The Medipattern Corporation | Method and system of computer-aided quantitative and qualitative analysis of medical images |
| US8014576B2 (en) | 2005-11-23 | 2011-09-06 | The Medipattern Corporation | Method and system of computer-aided quantitative and qualitative analysis of medical images |
| US8391574B2 (en) | 2005-11-23 | 2013-03-05 | The Medipattern Corporation | Method and system of computer-aided quantitative and qualitative analysis of medical images from multiple modalities |
| JP2009157527A (en) * | 2007-12-25 | 2009-07-16 | Canon Inc | Medical image processing apparatus, medical image processing method and program |
| JP2013215563A (en) * | 2012-03-12 | 2013-10-24 | Toshiba Corp | Report creation support device, and report browsing device |
| US10930385B2 (en) | 2012-03-12 | 2021-02-23 | Canon Medical Systems Corporation | Report generation support apparatus and report reading apparatus |
| US12175664B2 (en) | 2019-06-17 | 2024-12-24 | Olympus Corporation | Image recording apparatus, information processing apparatus, information processing method, and recording medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4662517B2 (en) | 2011-03-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5100285B2 (en) | MEDICAL DIAGNOSIS SUPPORT DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
| JP5875285B2 (en) | Medical diagnosis support apparatus, information processing method, and program | |
| JP5264136B2 (en) | MEDICAL DIAGNOSIS SUPPORT DEVICE, ITS CONTROL METHOD, COMPUTER PROGRAM, AND STORAGE MEDIUM | |
| US8423571B2 (en) | Medical image information display apparatus, medical image information display method, and recording medium on which medical image information display program is recorded | |
| JPH0512352A (en) | Medical diagnosis support system | |
| KR20120072961A (en) | Method and apparatus for aiding image diagnosis using medical image, image diagnosis aiding system for performing the same | |
| JP4651353B2 (en) | Diagnosis support system | |
| JP5995415B2 (en) | Medical diagnosis support apparatus, information processing method, and program | |
| JP4960024B2 (en) | Medical image management method and medical image management apparatus using the same | |
| JP4906404B2 (en) | Diagnosis support method, diagnosis support apparatus, diagnosis support system, and diagnosis support program | |
| JP4731127B2 (en) | Image diagnosis support apparatus and method | |
| RU2459258C2 (en) | Decision-based displays for medical information systems | |
| JP6448588B2 (en) | Medical diagnosis support apparatus, medical diagnosis support system, information processing method, and program | |
| JP2011103095A (en) | Medical image display system and program | |
| JP6316325B2 (en) | Information processing apparatus, information processing apparatus operating method, and information processing system | |
| JP6625155B2 (en) | Information processing apparatus, method of operating information processing apparatus, and program | |
| JP4662517B2 (en) | Diagnosis support system | |
| JP2012143368A (en) | Medical image display device and program | |
| JP5816321B2 (en) | Information processing apparatus, information processing system, information processing method, and program | |
| JP2003299645A (en) | Image diagnosis supporting device | |
| JP2007307290A (en) | Medical image reading system | |
| US20230401708A1 (en) | Recording medium, information processing apparatus, information processing system, and information processing method | |
| JP2020173801A (en) | Medical information processing device and medical information processing method | |
| JP5573106B2 (en) | Medical image display system and program | |
| JP2022099055A (en) | Medical information display device and medical information display system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080104 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080104 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080221 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100628 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100826 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100915 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101110 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101130 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101229 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140114 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |