JP5489885B2 - 車両位置算出システム及び車両位置算出方法並びにそのプログラム - Google Patents
車両位置算出システム及び車両位置算出方法並びにそのプログラム Download PDFInfo
- Publication number
- JP5489885B2 JP5489885B2 JP2010149221A JP2010149221A JP5489885B2 JP 5489885 B2 JP5489885 B2 JP 5489885B2 JP 2010149221 A JP2010149221 A JP 2010149221A JP 2010149221 A JP2010149221 A JP 2010149221A JP 5489885 B2 JP5489885 B2 JP 5489885B2
- Authority
- JP
- Japan
- Prior art keywords
- target
- vehicle
- distance
- captured image
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000004364 calculation method Methods 0.000 title claims description 116
- 238000003384 imaging method Methods 0.000 claims description 36
- 238000000034 method Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 claims description 6
- 239000003550 marker Substances 0.000 description 29
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000005452 bending Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Train Traffic Observation, Control, And Security (AREA)
- Closed-Circuit Television Systems (AREA)
Description
図1は同実施形態による車両位置算出システムの構成を示すブロック図である。
この図において、符号1は車両である。当該車両1は、例えば電車などであり、走行帯であるレール軌道上などを走行する。そして、車両1はカメラ等の撮影装置2と、車両位置を算出する車両位置算出装置3を備えている。撮影装置2は、車両1の走行中に、側壁などに設けられた標識4を撮影し、当該撮影画像中に出現した標識4からの情報を用いて、車両位置算出装置3が、自車両の絶対位置(軌道の基準点(出発ホームの先端の位置など)からの距離)を算出する。ここで、標識4は、例えば側壁に数十メートル間隔で設置され、撮影装置2はそれらを撮影すべくシャッターを切る動作を行う。このとき撮影装置2は、等間隔でシャッターを切るようにしてもよいし、速度が増すに従ってシャッターを切る間隔を短くするようにしてもよい。また、撮影装置2は、走行中にシャッターを切る間隔を狭めて、側壁に設けられた標識4の全てを撮影するように走行速度に応じたシャッター速度の制御を行うようにしてもよい。なお、図示していないが、夜間走行中に標識4を撮影する際に当該標識4を照らすためのライトが車両に搭載されるようにしてもよい。
この図が示すように、標識は側壁に設置されており、標識には、当該標識に対して予め割り当てられた絶対位置(軌道の基準点からの距離)を判定するための情報が表示されている。本実施形態においては、標識には二次元コードが表示されているものとするが、絶対位置を示す軌道の基準点からの距離がそのまま文字表示されていてもよいし、当該絶対位置を特定するための記号や番号などが表示されるようにしてもよい。なお、図2において破線部内は標識4の複数の撮影画像に基づいて次の撮影画像において標識4が出現するであろうと予想される領域(予想出現領域)を示している。
車両位置算出装置3は、図3で示すように、他の装置と信号を送受信する通信部31、車両位置算出装置3の各処理部を制御する制御部32、車両概略位置を特定する車両概略位置特定部33、車両位置を算出するための各情報を記憶するデータベース34、標識4の撮影画像内における予想出現領域を検出する予想出現領域特定部35、予想される標識存在範囲における当該標識4の車両中心からの距離の複数の候補を算出する第1距離算出部36、撮影画像を用いて車両中心からの標識4の詳細な距離を算出する第2距離算出部37、撮影画像に出現した標識の絶対位置と、車両中心からの標識4の詳細な距離とを用いて車両の絶対位置を算出する車両絶対位置算出部38、とを備える。
この図が示すように、データベース34には軌道線形情報(図4(a))と、標識位置情報(図4(b))とが予め格納されている。軌道線形情報は、車両1が走行する軌道(走行帯)の平面曲線の情報(曲がり方向やその曲率半径など)や、縦断曲線の情報(勾配方向やその曲率半径)などが登録されている。より具体的には、例えば、軌道線形情報が平面曲線であれば、緩和曲線開始位置、円曲線開始位置、円曲線終了位置、緩和曲線終了位置、曲率半径などが、標識位置に対応付けられて登録されている。
また、標識位置情報は、標識4の設置位置が登録されている。この設置位置は、より具体的には、例えば、進行方向の位置となる車両1が走行する軌道の基準点からの距離(絶対位置)や、車両1の軌道中心からの距離などである。
図6は車両位置とターゲットとの間の距離の算出概要を示す第1の図である。
図7は車両位置とターゲットとの間の距離の算出概要を示す第2の図である。
次に、図5,図6、図7を用いて、車両位置算出システムの処理の詳細について説明する。
まず、車両1が走行を開始すると、車両位置算出装置3の制御部32が車両の走行を検知し(ステップS101)、通信部31を介して撮影装置2へ撮影信号を出力する。撮影装置2は撮影信号を受信すると撮影を行う。制御部32は所定の間隔、または速度に応じた間隔で撮影信号を送信し、撮影信号を受信する度に撮影装置2は撮影を行う。撮影装置2は撮影を行うたびに、その撮影画像を車両位置算出装置3へ送信する。なお、本実施形態1において、撮影装置2は例えばデジタルカメラと同様の機能を有するものであるとする。
そして、このように表すことのできる(X,Y,Z)を式(1)に代入すると、画像上の一点(Xc,Yc)を求めることができる。従って、Lの値を変化させて、それぞれのLに対する(Xc,Yc)を算出し、当該(Xc,Yc)の位置が、撮影画像の左端から右端にかけて10分割されたいずれかの分割点の位置と一致した場合、その(Xc,Yc)を算出したときのLを、当該分割点においてターゲットとなる標識4が出現したと仮定した場合の、当該標識4の軌道の基準点からの距離と、車両位置の軌道の基準点からの距離との差(標識4の車両中心位置からの軌道上の距離)とすることができる。
X,Y,Zは、車両1の空間的中心位置(0、0、0)を基準とする標識4の相対位置を示している。
また、式(1)においてp’ 1 〜p’ 3 は、車両1の空間的中心位置(0、0、0)を基準としたカメラの相対位置を示している。
また、式(1)においてRijは(1≦i≦3,1≦j≦3)は回転行列であり、カメラの姿勢を示している。また、式(1)においてa〜dはカメラの視野情報を示しており、具体的には、aは画像幅方向の画角及び解像度に関するパラメータ、bは画像幅方向の画像中心に関するパラメータ、cは画像高さ方向の画角及び解像度に関するパラメータ、dは画像高さ方向の画像中心に関するパラメータを示している。
また、式(1)においてHcは、計算式を簡単にするための中間パラメータを示している。
また、式(1)においてXc,Ycは、撮影画像内の座標を示している。
このような処理により、車両概略位置特定部33は、撮影画像内の全ての領域について、二次元コードの所定の大きさの範囲に一致する当該撮影画像内における範囲を、1画素ずつずらしながら行う場合に比べて、標識4の出現位置を処理の負荷を軽減することができるようになる。
また、車両1の軌道の基準点からのセンサによって走行距離を計測する場合や、標識によってその走行距離を補正するような場合には、停電などによる車両への電源供給断によって、過去に検出した位置の情報や、車軸回転数センサによって検出した走行距離に基づく基準点からの距離の情報が削除されてしまうため、電源供給の復旧時に、直ちに車両の詳細な基準点からの距離を把握することは難しかった。しかしながら、上述の本実施形態による処理により、近距離間隔で設置されている標識を撮影したり、GPSで座標を検知したりすることにより、詳細な車両1の基準点からの距離を算出することができるようになる。
2・・・撮影装置
3・・・車両位置算出装置
4・・・標識
31・・・通信部
32・・・制御部
33・・・車両概略位置特定部
34・・・データベース
35・・・予想出現領域特定部
36・・・第1距離算出部
37・・・第2距離算出部
38・・・車両絶対位置算出部
Claims (9)
- 車両に搭載の撮影装置によって撮影されたターゲットに予め割り当てられて登録されている絶対位置、または位置信号の受信に基づいて検出する地上座標に対応する絶対位置、を車両概略位置として特定する車両概略位置特定部と、
前記車両概略位置において車両が走行する軌道の線形情報と、前記ターゲットの前記軌道からの相対位置と、前記撮影装置の位置、姿勢、視野の情報と、に基づいて、前記撮影装置による撮影画像の範囲内に前記ターゲットが出現したと仮定した場合の当該ターゲットの車両位置からの軌道上の距離の算出用のターゲット相対距離算出式を生成し、当該ターゲット相対距離算出式を用いて前記ターゲットの車両位置からの軌道上の距離を、前記撮影画像内の前記ターゲットが移動する方向における複数の異なる仮想出現位置それぞれについて算出する第1距離算出部と、
前記撮影画像内の前記複数の異なる仮想出現位置それぞれと、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する第2距離算出部と、
前記第2距離算出部で算出された前記ターゲットの前記車両位置からの軌道上の距離と、前記ターゲットに予め割り当てられて登録されている絶対位置または前記位置信号の受信に基づいて検出する地上座標に対応する絶対位置とに基づいて、前記車両の絶対位置を算出する車両絶対位置算出部と、
を備えることを特徴とする車両位置算出システム。 - 前記撮影装置が撮影した撮影画像内に出現する前記ターゲットの位置に基づいて、次の撮影によって前記撮影装置から取得した撮影画像内における前記ターゲットの予想出現領域を特定する予想出現領域特定部とを有し、
前記第1距離算出部および前記第2距離算出部は、前記予想出現領域内に限って距離の算出を行う
ことを特徴とする請求項1に記載の車両位置算出システム。 - 前記第2距離算出部は、
前記複数の異なる仮想出現位置のうち、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置に近い2つの仮想出現位置について前記第1距離算出部において算出された距離と、
前記2つの仮想出現位置と前記実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係と、
に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する
ことを特徴とする請求項1または請求項2に記載の車両位置算出システム。 - 車両位置算出システムにおける車両位置算出方法であって、
車両に搭載の撮影装置によって撮影されたターゲットに予め割り当てられて登録されている絶対位置、または位置信号の受信に基づいて検出する地上座標に対応する絶対位置、を車両概略位置として特定する車両概略位置特定ステップと、
前記車両概略位置において車両が走行する軌道の線形情報と、前記ターゲットの前記軌道からの相対位置と、前記撮影装置の位置、姿勢、視野の情報と、に基づいて、前記撮影装置による撮影画像の範囲内に前記ターゲットが出現したと仮定した場合の当該ターゲットの車両位置からの軌道上の距離の算出用のターゲット相対距離算出式を生成し、当該ターゲット相対距離算出式を用いて前記ターゲットの車両位置からの軌道上の距離を、前記撮影画像内の前記ターゲットが移動する方向における複数の異なる仮想出現位置それぞれについて算出する第1距離算出ステップと、
前記撮影画像内の前記複数の異なる仮想出現位置それぞれと、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する第2距離算出ステップと、
前記第2距離算出ステップにおいて算出された前記ターゲットの前記車両位置からの軌道上の距離と、前記ターゲットに予め割り当てられて登録されている絶対位置または前記位置信号の受信に基づいて検出する地上座標に対応する絶対位置とに基づいて、前記車両の絶対位置を算出する車両絶対位置算出ステップと、
を有することを特徴とする車両位置算出方法。 - 前記撮影装置が撮影した撮影画像内に出現する前記ターゲットの位置に基づいて、次の撮影によって前記撮影装置から取得した撮影画像内における前記ターゲットの予想出現領域を特定する予想出現領域特定ステップとを有し、
前記第1距離算出ステップおよび前記第2距離算出ステップにおいて、前記予想出現領域内に限って距離の算出を行う
ことを特徴とする請求項4に記載の車両位置算出方法。 - 前記第2距離算出ステップは、
前記複数の異なる仮想出現位置のうち、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置に近い2つの仮想出現位置について前記第1距離算出ステップにおいて算出された距離と、
前記2つの仮想出現位置と前記実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係と、
に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する
ことを特徴とする請求項4または請求項5に記載の車両位置算出方法。 - 車両位置算出システムのコンピュータを、
車両に搭載の撮影装置によって撮影されたターゲットに予め割り当てられて登録されている絶対位置、または位置信号の受信に基づいて検出する地上座標に対応する絶対位置、を車両概略位置として特定する車両概略位置特定手段、
前記車両概略位置において車両が走行する軌道の線形情報と、前記ターゲットの前記軌道からの相対位置と、前記撮影装置の位置、姿勢、視野の情報と、に基づいて、前記撮影装置による撮影画像の範囲内に前記ターゲットが出現したと仮定した場合の当該ターゲットの車両位置からの軌道上の距離の算出用のターゲット相対距離算出式を生成し、当該ターゲット相対距離算出式を用いて前記ターゲットの車両位置からの軌道上の距離を、前記撮影画像内の前記ターゲットが移動する方向における複数の異なる仮想出現位置それぞれについて算出する第1距離算出手段、
前記撮影画像内の前記複数の異なる仮想出現位置それぞれと、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する第2距離算出手段、
前記第2距離算出手段で算出された前記ターゲットの前記車両位置からの軌道上の距離と、前記ターゲットに予め割り当てられて登録されている絶対位置または前記位置信号の受信に基づいて検出する地上座標に対応する絶対位置とに基づいて、前記車両の絶対位置を算出する車両絶対位置算出手段、
として機能させることを特徴とするプログラム。 - 前記コンピュータを、
前記撮影装置が撮影した撮影画像内に出現する前記ターゲットの位置に基づいて、次の撮影によって前記撮影装置から取得した撮影画像内における前記ターゲットの予想出現領域を特定する予想出現領域特定手段として機能させ、
前記第1距離算出手段および前記第2距離算出手段は、前記予想出現領域内に限って距離の算出を行う
ことを特徴とする請求項7に記載のプログラム。 - 前記第2距離算出手段は、
前記複数の異なる仮想出現位置のうち、前記ターゲットが実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置に近い2つの仮想出現位置について前記第1距離算出手段において算出された距離と、
前記2つの仮想出現位置と前記実際に前記撮影画像内に出現した場合の前記撮影画像内の当該ターゲットの位置との関係と、
に基づいて、前記ターゲットの前記車両位置からの軌道上の距離を算出する
ことを特徴とする請求項7または請求項8に記載のプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010149221A JP5489885B2 (ja) | 2010-06-30 | 2010-06-30 | 車両位置算出システム及び車両位置算出方法並びにそのプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010149221A JP5489885B2 (ja) | 2010-06-30 | 2010-06-30 | 車両位置算出システム及び車両位置算出方法並びにそのプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012011867A JP2012011867A (ja) | 2012-01-19 |
| JP5489885B2 true JP5489885B2 (ja) | 2014-05-14 |
Family
ID=45598820
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010149221A Expired - Fee Related JP5489885B2 (ja) | 2010-06-30 | 2010-06-30 | 車両位置算出システム及び車両位置算出方法並びにそのプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5489885B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105946905A (zh) * | 2016-05-06 | 2016-09-21 | 中国铁路总公司 | 虚拟轨道区段占用检测方法 |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5906958B2 (ja) * | 2012-06-25 | 2016-04-20 | 株式会社リコー | 画像形成装置 |
| JP6073097B2 (ja) * | 2012-09-19 | 2017-02-01 | 大河 伊藤 | 情報処理装置、情報処理方法およびプログラム |
| JP6220322B2 (ja) * | 2014-09-01 | 2017-10-25 | 公益財団法人鉄道総合技術研究所 | ホーム検知方法およびホーム検知装置ならびに列車の開扉支援装置 |
| JP7042596B2 (ja) * | 2017-11-30 | 2022-03-28 | 株式会社東芝 | 誤差算出装置および誤差算出システム |
| CN109747681A (zh) * | 2019-01-14 | 2019-05-14 | 卡斯柯信号有限公司 | 一种列车定位装置及方法 |
| JP2020179708A (ja) * | 2019-04-23 | 2020-11-05 | 株式会社日立製作所 | 位置推定装置、位置推定システム、位置推定方法 |
| JP7349318B2 (ja) * | 2019-10-18 | 2023-09-22 | 株式会社日立製作所 | センサ性能評価システム及び方法、並びに、自動運転システム |
| CN113511235B (zh) * | 2020-04-10 | 2023-06-30 | 北京瑞途科技有限公司 | 一种基于轨道的定位校准方法 |
| JP7154470B2 (ja) * | 2020-09-24 | 2022-10-17 | 三菱電機株式会社 | 情報処理システム、情報処理装置、プログラム及び情報処理方法 |
| CN119953427A (zh) * | 2025-02-10 | 2025-05-09 | 中国铁道科学研究院集团有限公司 | 一种列车定位系统和方法 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3184656B2 (ja) * | 1993-03-04 | 2001-07-09 | シャープ株式会社 | 車載用監視カメラ装置 |
| JPH11203458A (ja) * | 1998-01-13 | 1999-07-30 | Nissan Motor Co Ltd | 道路形状認識装置 |
| JP2003123197A (ja) * | 2001-10-16 | 2003-04-25 | Alpine Electronics Inc | 道路標示等認識装置 |
| JP4370869B2 (ja) * | 2003-09-25 | 2009-11-25 | トヨタ自動車株式会社 | 地図データ更新方法および地図データ更新装置 |
| US7999848B2 (en) * | 2004-06-11 | 2011-08-16 | Stratech Systems Limited | Method and system for rail track scanning and foreign object detection |
| JP2008145247A (ja) * | 2006-12-08 | 2008-06-26 | Toyota Motor Corp | 車両用現在位置特定装置 |
| DE102006062061B4 (de) * | 2006-12-29 | 2010-06-10 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung, Verfahren und Computerprogramm zum Bestimmen einer Position basierend auf einem Kamerabild von einer Kamera |
| JP4900810B2 (ja) * | 2007-03-30 | 2012-03-21 | 株式会社京三製作所 | 列車位置検知装置と列車制御装置 |
| JP2009250718A (ja) * | 2008-04-03 | 2009-10-29 | Nissan Motor Co Ltd | 車両位置検出装置及び車両位置検出方法 |
-
2010
- 2010-06-30 JP JP2010149221A patent/JP5489885B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105946905A (zh) * | 2016-05-06 | 2016-09-21 | 中国铁路总公司 | 虚拟轨道区段占用检测方法 |
| CN105946905B (zh) * | 2016-05-06 | 2018-04-20 | 中国铁路总公司 | 虚拟轨道区段占用检测方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012011867A (ja) | 2012-01-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5489885B2 (ja) | 車両位置算出システム及び車両位置算出方法並びにそのプログラム | |
| CN110174093B (zh) | 定位方法、装置、设备和计算机可读存储介质 | |
| CN108694882B (zh) | 用于标注地图的方法、装置和设备 | |
| US11467001B2 (en) | Adjustment value calculation method | |
| JP6241422B2 (ja) | 運転支援装置、運転支援方法、および運転支援プログラムを記憶する記録媒体 | |
| CN108692719B (zh) | 物体检测装置 | |
| JP4600357B2 (ja) | 測位装置 | |
| JP5901779B2 (ja) | 画像データベース地図サービスからアシストシステム内にデータを移す方法 | |
| CN103680193B (zh) | 停车导引方法及相关装置 | |
| JP5472142B2 (ja) | 地図データ生成装置および走行支援装置 | |
| TW201123024A (en) | Method of detecting, populating and/or verifying conditions, attributions, and/or objects along a navigable street network and system therefor | |
| US20220012509A1 (en) | Overhead-view image generation device, overhead-view image generation system, and automatic parking device | |
| JP6070206B2 (ja) | 位置座標変換システム、位置座標変換方法、車載装置、世界座標計測装置および位置座標変換プログラム | |
| JP6759175B2 (ja) | 情報処理装置および情報処理システム | |
| JP2012127896A (ja) | 移動体位置測定装置 | |
| JP2007232690A (ja) | 現在地検出装置、地図表示装置、および現在地検出方法 | |
| JPWO2020039937A1 (ja) | 位置座標推定装置、位置座標推定方法およびプログラム | |
| CN104748754B (zh) | 车辆定位方法及其系统 | |
| JP2018185239A (ja) | 位置姿勢推定装置及びプログラム | |
| JP2018189463A (ja) | 車両位置推定装置及びプログラム | |
| KR101255461B1 (ko) | 도로시설물 자동 위치측정 방법 | |
| JP2009204385A (ja) | 標定装置、標定方法および標定プログラム | |
| CN119027636A (zh) | 位置推定装置、位置推定方法及位置推定用计算机程序 | |
| JP2010190647A (ja) | 車両位置測定装置及び車両位置測定プログラム | |
| JP2007147458A (ja) | 位置検出装置、位置検出方法、位置検出プログラムおよび記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20130125 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130125 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131008 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131009 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20131209 Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131209 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140128 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140225 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5489885 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |