JP2013005871A - 被検体情報取得装置、表示制御方法およびプログラム - Google Patents
被検体情報取得装置、表示制御方法およびプログラム Download PDFInfo
- Publication number
- JP2013005871A JP2013005871A JP2011139455A JP2011139455A JP2013005871A JP 2013005871 A JP2013005871 A JP 2013005871A JP 2011139455 A JP2011139455 A JP 2011139455A JP 2011139455 A JP2011139455 A JP 2011139455A JP 2013005871 A JP2013005871 A JP 2013005871A
- Authority
- JP
- Japan
- Prior art keywords
- information
- acoustic wave
- display
- subject
- accuracy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
【解決手段】被検体内を伝播した音響波を検出した検出素子から出力される音響波信号を用いて被検体内の特性情報を取得する被検体情報取得装置であって、音響波信号を用いて被検体内の各注目点における特性情報を取得する特性情報取得部と、音響波の検出に関する条件である音響波検出情報を用いて複数の特性情報の精度の違いを示す情報を生成する精度情報生成部と、各注目点における特性情報および精度の違いを示す情報を用いて複数の特性情報の精度の違いを識別可能な表示情報を生成し表示部に表示させる表示情報生成部と、を有する被検体情報取得装置を用いる。
【選択図】図1
Description
このような光画像化技術の一つとして、Photoacoustic Tomography(PAT:光音響トモグラフィー)がある。光音響トモグラフィーとは、光音響効果により被検体内で伝播・拡散した光のエネルギーを吸収した生体組織から発生した音響波に基づき、被検体内部の光学特性値に関連した情報を可視化する技術である。光学特性値に関連した情報取得の一例としては、音響波を、被検体を取り囲む複数の個所で検出し、得られた信号を数学的に解析処理する方法がある。
像再構成手法で代表的に使われているUniversal Back Projection(UBP)法に関して
説明する。式(1)の光音響波動方程式を周波数空間上で解析することで、p0(r)を求める逆問題を正確に解くことができる。その結果を時間空間上で表したのがUBPである。最終的に以下のような式(2)が導かれる。
本明細書における有効な音響波信号とは、探触子の素子の特性や感度により定まる実用的な値以上で検出された音響波に基づいた音響波信号のことである。一般的な超音波探触子では、素子の中心軸の音圧から1/2の音圧になる指向角で定まる円錐状の範囲に収まる音源からの音響波を有効とする。そのため、本発明の実施においてもこのような素子の指向性の範囲の音源による音響波を検出した場合に有効な音響波信号として説明する。ただし、指向角は、必ずしも、音圧が1/2になる角度に限定しなくてもよい。本明細書の説明においては、素子ごとの特性や感度から、素子ごとに有効とみなして定まる範囲を音源とする音響波の検出に基づいた音響波信号を有効な音響波信号とし、その場合の指向角により定まる範囲を素子の指向性の範囲として説明する。
再構成対象領域内の1点に対する受信領域上の音響波信号の検出位置情報、各点に有効な音響波信号群を抽出することになる。
の違いを示す情報と、を用いて前記複数の特性情報の精度の違いを識別可能な表示情報を生成する表示情報生成ステップと、前記表示情報を表示させるステップと、を有することを特徴とする表示制御方法である。
図1は、本実施形態に係る光音響波診断装置の機能構成を示している。図1に示すように、本実施形態に係る光音響波診断装置は、情報処理部1000、音響波信号計測部1100によって構成されている。本発明の光音響波診断装置は、被検体内を伝播した音響波を受信して被検体内の特性情報を取得する被検体情報取得システムである。各機能ブロックを実施するための機器構成の例を図2、図3に示している。図2は、本実施形態に係る光音響波診断装置の情報処理部1000(被検体情報取得装置)を実施する機器構成の一例である。また、図3は、音響波信号計測部1100を実施する機器構成の一例である。
音響波信号計測部1100は、音響波検出器1105(図3)の各素子で検出された音響波検出情報を情報処理部1000に送信する。
ここで、音響波検出器1105は、例えば、超音波を検出する探触子である。また、音響波検出情報とは、音響波を受信した音響波検出器の検出素子から出力される受信信号(音響波信号)や、音響波検出器1105の受信面上に配置された素子の位置に関する情報や、感度、指向性に関する情報のような素子の情報が該当する。さらに、音響波取得の撮影パラメータや他の計測情報のような音響波信号取得時の条件に関わる情報も含まれる。光音響波診断装置では、音響波を発生させる光の光源の制御や、被検体を圧迫する場合の圧迫に関する情報も、音響波信号取得時の条件として取得する。
情報処理部1000は、音響波信号計測部1100から得られた音響波検出情報を用いて、3次元画像再構成処理を行う。また、生成された3次元再構成画像と音響波検出情報を生成し、本発明における判定結果情報と領域情報を生成する。さらに、これらを用いて表示情報を生成する。そして、判定結果を認識できるような形で、表示情報に基づいて再構成画像の表示を行うことで、画質の異なる領域を識別可能な表示を行う。つまり取得した特性情報の精度(被検体の特徴と画像上の特徴との相関の度合いを含む)の違いを識別可能な表示を行う。
図1において、情報処理部1000は、音響波情報取得部1001、再構成処理部1002、画質判定部1003、領域情報生成部1004、表示情報生成部1005、表示部1006によって構成される。
本実施例では、音響波信号計測部1100から送信された音響波検出情報を用いて画像再構成を行う手順で説明する。しかし、本発明の実施形態は、音響波情報取得部1001が音響波検出情報を取得する手段を限定せず実施可能である。必ずしも、音響波信号計測部1100を必要とせず、例えば、音響波信号計測部1100が送信するデータと同等の音響波検出情報をサーバ装置からネットワークを介して取得してもよい。また、音響波情報取得部1001内の記憶装置や記憶媒体から読み出して実施することも可能である。
ここで、再構成処理部1002の画像再構成処理は、解析解による3次元画像再構成であれば、タイムドメイン法であっても、フーリエドメイン法であっても本発明の第1の実施形態を適用することができる。
また、再構成処理部1002は、再構成処理に用いた音響波検出情報を生成する。
る音響波検出情報であれば、どのような情報も含めることができる。例えば、再構成処理を行う各点に用いる音響波信号の数、受信位置、音響波検出器の素子の指向性の範囲内で受信された音響波信号数、音響波信号の受信条件等があげられる。画質判定部1003で再構成画像品質(つまり特性情報の精度の優劣の度合いなど)の判定に利用可能な情報であれば、音響波検出情報に含めることができる。さらに、光音響波の場合は、音響波を生じさせた光の波長や照明条件等も含めることができる。
再構成画像がボリュームデータである場合には、画質が同等であるボクセル群の識別子をグルーピングし、画質のレベルに対応づけた情報でもよい。また、境界付近にあるボクセルを特定する情報と区切られた領域の画質のレベルを示す情報であってもよい。
きる。さらには各値の統計情報を数値、グラフやヒストグラム等で表示することも可能である。表示情報生成部1005が生成する表示情報は、これらの情報の生成も含まれる。
音響波信号計測部1100の機能は、I/F107を介して実現される。なお、上記各構成要素は共通バス108により互いに通信可能に接続されている。
図3は、音響波信号計測部1100の構成の一例を示す図である。
光源1101は、レーザーや発光ダイオード等のような被検体に照射する照射光の光源である。照射光には、被検体を構成する成分のうち特定の成分で吸収の度合いが強いと予想される波長の光を用いる。
信号を送信する。
この音響波信号群を受信領域上の素子の位置ごとの音響波信号として扱うことにより、あたかも、同じ素子ピッチで、移動数倍の素子が配置されたサイズの音響波検出器のようにみなすことができる。
、実施可能である。
次に、図4、図5のフローチャートを用いて、本発明の被検体情報取得装置である情報処理部が実行する具体的な表示制御方法の処理の手順を説明する。以下の実施形態では、音響波信号計測部1100で音響波を計測する。そして、情報処理部1000で計測した音響波に基づいた再構成画像の生成および画質判定を行い、領域情報、表示情報を生成し、再構成画像における断面画像と境界線を表示する表示制御方法の例について説明する。
図4(a)は、本発明の実施における音響波信号計測部1100が音響波を計測して、音響波信号と音響波検出情報を取得する手順をしたフローチャートである。本実施例では図3で示した光音響波計測装置で音響波と音響波検出情報を取得する例について説明する。しかし、本発明の適用は光音響波計測装置に限定されるものではない。音響波に基づいた情報を生成するために音響波を取得して音響波信号と音響波検出情報を取得できる装置であれば、どのような装置であっても適用することができる。
ステップS402において、被検体1107が放出した光音響波を音響波検出器1105で検出する。光音響波を検出すると、S403に進む。
ステップS403において、制御部1102は、撮影時のパラメータや音響波検出器1105の素子ごとに検出された音響波信号等を含む音響波検出情報を生成する。
図5は、情報処理部1000で音響波情報取得部1001が音響波検出情報を取得し、再構成処理部1002が、再構成処理に用いた音響波検出情報を記録しながら、音響波検
出情報に基づいた再構成画像を生成する手順を示したフローチャートである。
ステップS501において、音響波情報取得部1001は音響波信号計測部1100から取得した音響波検出情報を主メモリ102、または、磁気ディスク103等の記憶装置に記憶し、再構成処理部1002が利用できるようにする。そして、再構成処理部1002に音響波検出情報、または、記憶したアドレスに関する情報を送信する。
ここで、注目点ごとに抽出される音響波信号群の数は、必ずしも、同数ではない。例えば、音響波検出器の全素子で検出された音響波信号群を用いることもあれば、一部の素子で検出された音響波信号群を抽出する場合もある。
音響波信号群で再構成する領域との画質に差がでてくる。結果として、対称性のある位置に他の検出素子があるものの割合が多いほど、画質は良くなる。
また、装置固有の条件で、有効な音響波信号を制限する場合もある。撮影可能な位置にある被検体であっても、装置の内壁、部品等の音響波特性に影響する要因が把握できる場合は、有効な音響波信号群を制限する場合もある。
さらに、画像再構成に要する処理時間の短縮のために、再構成処理に用いる音響波信号数をあえて少なくすることもある。
図4(b)は、本発明の実施例における画質の判定と判定結果に基づいた領域情報を生成する手順を示したフローチャートである。以下に、本実施例の判定処理について図4(b)のフローチャートを用いて説明する。
ステップS801において、画質判定部1003は、再構成処理部1002から送られた音響波検出情報に関する情報と、あらかじめ、ユーザーに設定された画質判定設定情報に基づいて、画質の判定を行う。画質判定設定情報は、画質判定方法、および、再構成画像の画質判定の基準、または、段階を特定できる設定情報を指定する情報であればよい。特に、音響波検出情報をパラメータとして指定する場合は、どのような情報であっても設定できる。
をそのまま利用する場合でも領域情報として扱う。すなわち、本発明の実施時に明確に領域情報を生成するステップがなくとも、画質判定部の判定結果に基づいて再構成画像内の領域を分割した領域に基づいた表示情報を生成するための領域に関する情報であれば、本発明の領域情報といえる。
図4(c)は、本実施例における表示情報生成部1005が表示情報を生成し、表示部1006が表示する表示手順を示したフローチャートである。表示情報生成部1005が領域情報を取得した時から開始される。
、Coronal画像表示領域703、Sagittal画像表示領域704はそれぞれ、再構成画像のAxial断面、Coronal断面、Sagittal断面を表示する表示ウインドウ701上の表示領域の
例である。斜線の領域として表わされたAxial画像705、Coronal画像706、Sagittal画像707は、それぞれ、被検体の再構成画像のAxial断面、Coronal断面、Sagittal断面の各画像表示の例である。
また、同じ領域情報に基づいて、境界線や境界面ではなく、領域ごとの色や濃度、透明度を変更して断面画像を表示するように表示情報を生成する方法もある。
の影響を反映させるような方法も実施できる。
以上、説明した手順を実施する本発明の情報表示装置、または、情報表示方法により、再構成画像内における画質の異なる領域を識別可能な情報を表示することができる。
<その他の実施形態>
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した各実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒
体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (17)
- 被検体内を伝播した音響波を検出した検出素子から出力される音響波信号を用いて被検体内の特性情報を取得する被検体情報取得装置であって、
前記音響波信号を用いて、被検体内の各注目点における特性情報を取得する特性情報取得部と、
前記音響波の検出に関する条件である音響波検出情報を用いて複数の前記特性情報の精度の違いを示す情報を生成する精度情報生成部と、
前記各注目点における特性情報と、前記精度の違いを示す情報と、を用いて前記複数の特性情報の精度の違いを識別可能な表示情報を生成し表示部に表示させる表示情報生成部と、
を有することを特徴とする被検体情報取得装置。 - 前記音響波検出情報を用いて前記特性情報の精度を判定する判定部をさらに有し、
前記精度情報生成部は、前記判定部での判定結果を用いて前記特性情報の精度の違いを示す情報を生成する
ことを特徴とする請求項1に記載の被検体情報取得装置。 - 前記特性情報取得部は、前記被検体内部の注目点からの音響波に起因する音響波信号群を注目点ごとに抽出し、当該音響波信号群を用いて前記各注目点における特性情報を求める
ことを特徴とする請求項1又は2に記載の被検体情報取得装置。 - 前記表示情報生成部は、前記精度の違いを示す情報に基づいて前記複数の特性情報からなる特性情報分布を複数の領域に分割することで前記複数の特性情報の精度の違いを識別可能な表示情報を生成する
ことを特徴とする請求項1乃至3のいずれか1項に記載の被検体情報取得装置。 - 前記表示情報生成部は、前記特性情報分布に前記複数の領域の境界線が重畳表示されるような前記表示情報の生成を行う
ことを特徴とする請求項4に記載の被検体情報取得装置。 - 前記音響波検出情報には、前記検出素子の位置に関する情報が含まれる
ことを特徴とする請求項1乃至5のいずれか1項に記載の被検体情報取得装置。 - 前記音響波検出情報には、前記検出素子の感度および指向性に関する情報がさらに含まれる
ことを特徴とする請求項6に記載の被検体情報取得装置。 - 前記特性情報取得部は、前記音響波検出情報に基づいて、前記注目点ごとに、有効な音響波を検出しうる領域である有効音響波検出領域を算出し、当該有効音響波検出領域に含まれる検出素子の位置に関する情報を用いて前記音響波信号群を抽出する
ことを特徴とする請求項3に記載の被検体情報取得装置。 - 被検体内の特性情報を表示する表示制御方法であって、
被検体内を伝播した音響波を検出した検出素子から出力される音響波信号を用いて、被検体内の各注目点における特性情報を取得するステップと、
前記音響波の検出に関する条件である音響波検出情報を用いて複数の前記特性情報の精度の違いを示す情報を生成する精度情報生成ステップと、
前記各注目点における特性情報と、前記精度の違いを示す情報と、を用いて前記複数の
特性情報の精度の違いを識別可能な表示情報を生成する表示情報生成ステップと、
前記表示情報を表示させるステップと、
を有することを特徴とする表示制御方法。 - 前記音響波検出情報を用いて前記特性情報の精度を判定する判定ステップをさらに有し、
前記精度情報生成ステップでは、前記判定ステップにおける判定結果を用いて前記特性情報の精度の違いを示す情報を生成する
ことを特徴とする請求項9に記載の表示制御方法。 - 前記取得するステップでは、前記被検体内部の注目点からの音響波に起因する音響波信号群を注目点ごとに抽出し、当該音響波信号群を用いて前記各注目点における特性情報を求める
ことを特徴とする請求項9又は10に記載の表示制御方法。 - 前記表示情報生成ステップでは、前記精度の違いを示す情報に基づいて前記複数の特性情報からなる特性情報分布を複数の領域に分割することで前記複数の特性情報の精度の違いを識別可能な表示情報を生成する
ことを特徴とする請求項9乃至11のいずれか1項に記載の表示制御方法。 - 前記表示情報生成ステップでは、前記特性情報分布に前記複数の領域の境界線が重畳表示されるような前記表示情報の生成を行う
ことを特徴とする請求項12に記載の表示制御方法。 - 前記音響波検出情報には、前記検出素子の位置に関する情報が含まれる
ことを特徴とする請求項9乃至13のいずれか1項に記載の表示制御方法。 - 前記音響波検出情報には、前記検出素子の感度および指向性に関する情報がさらに含まれる
ことを特徴とする請求項14に記載の表示制御方法。 - 前記取得するステップでは、前記音響波検出情報に基づいて、前記注目点ごとに、有効な音響波を検出しうる領域である有効音響波検出領域を算出し、当該有効音響波検出領域に含まれる検出素子の位置に関する情報を用いて前記音響波信号群を抽出する
ことを特徴とする請求項11に記載の表示制御方法。 - 請求項9乃至16のいずれか1項に記載の表示制御方法の各ステップをコンピュータに実行させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011139455A JP5847454B2 (ja) | 2011-06-23 | 2011-06-23 | 被検体情報取得装置、表示制御方法およびプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011139455A JP5847454B2 (ja) | 2011-06-23 | 2011-06-23 | 被検体情報取得装置、表示制御方法およびプログラム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015229944A Division JP6072206B2 (ja) | 2015-11-25 | 2015-11-25 | 被検体情報取得装置および表示方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013005871A true JP2013005871A (ja) | 2013-01-10 |
| JP5847454B2 JP5847454B2 (ja) | 2016-01-20 |
Family
ID=47673782
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011139455A Expired - Fee Related JP5847454B2 (ja) | 2011-06-23 | 2011-06-23 | 被検体情報取得装置、表示制御方法およびプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5847454B2 (ja) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014018369A (ja) * | 2012-07-17 | 2014-02-03 | Canon Inc | 被検体情報取得装置およびその制御方法 |
| JP2014136012A (ja) * | 2013-01-16 | 2014-07-28 | Canon Inc | 被検体情報取得装置 |
| WO2015107794A1 (ja) | 2014-01-16 | 2015-07-23 | 富士フイルム株式会社 | 光音響計測装置並びにそれに利用される信号処理装置および信号処理方法 |
| JP2018033886A (ja) * | 2016-09-02 | 2018-03-08 | 国立大学法人京都大学 | 光音響情報処理方法、光音響情報処理プログラムおよび光音響情報処理装置 |
| JP2019008766A (ja) * | 2017-06-27 | 2019-01-17 | ソニー株式会社 | 情報処理装置および方法、並びに、情報処理システム |
| US10529588B2 (en) | 2015-06-01 | 2020-01-07 | Toshiba Memory Corporation | Substrate treatment method and substrate treatment apparatus |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008161674A (ja) * | 2006-12-04 | 2008-07-17 | Matsushita Electric Ind Co Ltd | 超音波診断装置 |
| JP2010512940A (ja) * | 2006-12-21 | 2010-04-30 | ユニヴァシティート トウェンテ | イメージング装置および方法 |
| JP2010514486A (ja) * | 2006-12-26 | 2010-05-06 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 医療撮像システム |
| JP2010233961A (ja) * | 2009-03-31 | 2010-10-21 | Canon Inc | 画像処理装置、画像処理方法 |
-
2011
- 2011-06-23 JP JP2011139455A patent/JP5847454B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008161674A (ja) * | 2006-12-04 | 2008-07-17 | Matsushita Electric Ind Co Ltd | 超音波診断装置 |
| JP2010512940A (ja) * | 2006-12-21 | 2010-04-30 | ユニヴァシティート トウェンテ | イメージング装置および方法 |
| JP2010514486A (ja) * | 2006-12-26 | 2010-05-06 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 医療撮像システム |
| JP2010233961A (ja) * | 2009-03-31 | 2010-10-21 | Canon Inc | 画像処理装置、画像処理方法 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014018369A (ja) * | 2012-07-17 | 2014-02-03 | Canon Inc | 被検体情報取得装置およびその制御方法 |
| JP2014136012A (ja) * | 2013-01-16 | 2014-07-28 | Canon Inc | 被検体情報取得装置 |
| WO2015107794A1 (ja) | 2014-01-16 | 2015-07-23 | 富士フイルム株式会社 | 光音響計測装置並びにそれに利用される信号処理装置および信号処理方法 |
| US10529588B2 (en) | 2015-06-01 | 2020-01-07 | Toshiba Memory Corporation | Substrate treatment method and substrate treatment apparatus |
| JP2018033886A (ja) * | 2016-09-02 | 2018-03-08 | 国立大学法人京都大学 | 光音響情報処理方法、光音響情報処理プログラムおよび光音響情報処理装置 |
| JP2019008766A (ja) * | 2017-06-27 | 2019-01-17 | ソニー株式会社 | 情報処理装置および方法、並びに、情報処理システム |
| JP7039938B2 (ja) | 2017-06-27 | 2022-03-23 | ソニーグループ株式会社 | 情報処理装置および方法、並びに、情報処理システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5847454B2 (ja) | 2016-01-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6192297B2 (ja) | 被検体情報取得装置、表示制御方法、およびプログラム | |
| JP5917037B2 (ja) | 被検体情報取得装置および被検体情報取得方法 | |
| JP5761935B2 (ja) | 被検体情報取得装置、被検体情報取得方法および被検体情報取得プログラム | |
| JP5496031B2 (ja) | 音響波信号処理装置ならびにその制御方法および制御プログラム | |
| JP6253323B2 (ja) | 被検体情報取得装置およびその制御方法 | |
| US11426078B2 (en) | Object information acquiring apparatus and control method thereof | |
| JP6071260B2 (ja) | 被検体情報取得装置および情報処理方法 | |
| US10064556B2 (en) | Photoacoustic apparatus, signal processing method of photoacoustic apparatus, and program | |
| JP5847454B2 (ja) | 被検体情報取得装置、表示制御方法およびプログラム | |
| JP2011212254A (ja) | イメージング装置及びイメージング方法 | |
| WO2018043193A1 (ja) | 情報取得装置および信号処理方法 | |
| JP6742734B2 (ja) | 被検体情報取得装置および信号処理方法 | |
| JP6072206B2 (ja) | 被検体情報取得装置および表示方法 | |
| JP6234518B2 (ja) | 情報処理装置および情報処理方法 | |
| JP2018192309A (ja) | 情報処理装置、情報処理方法およびプログラム | |
| JP6400068B2 (ja) | 情報処理装置および情報処理方法 | |
| JP2018012027A (ja) | 記録データのデータ構造 | |
| JP2017164222A (ja) | 処理装置および処理方法 | |
| JP6625182B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| JP2017070341A (ja) | 被検体情報取得装置およびその制御方法 | |
| JP2022034766A (ja) | 画像生成方法、画像生成プログラムおよび画像生成装置 | |
| JP2020171813A (ja) | 被検体情報取得装置および信号処理方法 | |
| JP2017086173A (ja) | 被検体情報取得装置およびその制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140616 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150609 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150810 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151027 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151125 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5847454 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |