[go: up one dir, main page]

JP2011210098A - Drive assistance system and drive assistance method - Google Patents

Drive assistance system and drive assistance method Download PDF

Info

Publication number
JP2011210098A
JP2011210098A JP2010078670A JP2010078670A JP2011210098A JP 2011210098 A JP2011210098 A JP 2011210098A JP 2010078670 A JP2010078670 A JP 2010078670A JP 2010078670 A JP2010078670 A JP 2010078670A JP 2011210098 A JP2011210098 A JP 2011210098A
Authority
JP
Japan
Prior art keywords
risk
time
driver
driving
driving support
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010078670A
Other languages
Japanese (ja)
Other versions
JP5897787B2 (en
Inventor
Jun Sakugawa
純 佐久川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2010078670A priority Critical patent/JP5897787B2/en
Publication of JP2011210098A publication Critical patent/JP2011210098A/en
Application granted granted Critical
Publication of JP5897787B2 publication Critical patent/JP5897787B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Steering Control In Accordance With Driving Conditions (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】ドライバーの煩わしさの低減を図ることができる運転支援装置及び運転支援方法を提供する。
【解決手段】
本発明に係る運転支援装置1は、所定の調整判定時間τより計測時間が短いときには、支援判定部18がリスクマップ作成部14によって算出された第1のリスク度をより低いリスク度である第2のリスク度に調整し、支援判定部18が、その第2のリスク度に応じて運転支援の内容を決定する。そのため、ドライバーがリスク対象を注視してから早期に回避操作を行った場合、運転支援のレベルを低下させることができ、ドライバーに対して過度の運転支援をする事態が抑制され、その結果、運転支援の際のドライバーの煩わしさが効果的に低減される。
【選択図】 図6
A driving support device and a driving support method capable of reducing the troublesomeness of a driver are provided.
[Solution]
In the driving assistance device 1 according to the present invention, when the measurement time is shorter than the predetermined adjustment determination time τ, the support determination unit 18 sets the first risk level calculated by the risk map creation unit 14 to a lower risk level. The assistance determination unit 18 determines the content of driving assistance according to the second risk degree. Therefore, if the driver performs an avoidance operation early after paying attention to the risk object, the level of driving assistance can be reduced, and the situation of excessive driving assistance to the driver is suppressed, resulting in driving The troublesomeness of the driver at the time of assistance is effectively reduced.
[Selection] Figure 6

Description

本発明は、ドライバーの運転を支援する運転支援装置及び運転支援方法に関するものである。   The present invention relates to a driving support device and a driving support method that support driving of a driver.

従来、このような分野における技術文献として、特開2007−133692号公報が知られている。この公報には、ドライバーが安全確認の際に注意すべき領域(注意必要領域)とドライバーが現に注意している領域(注意領域)とを比較し、注意領域が注意必要領域をカバーしていないと判定した場合に、ドライバーへの警報や衝突回避等の運転支援を実行する技術が開示されている。   Conventionally, as a technical document in such a field, Japanese Patent Application Laid-Open No. 2007-133692 is known. This publication compares the area that the driver should pay attention to when checking safety (the area that requires attention) with the area that the driver is currently paying attention to (the attention area), and the attention area does not cover the area that requires attention In the case where it is determined that the vehicle is driving, a technology for performing driving support such as warning to the driver and collision avoidance is disclosed.

特開2007−133692号公報Japanese Patent Laid-Open No. 2007-133682

発明者らは、上述した注意領域と注意必要領域との比較等により、ドライバーが衝突対象物を実際に注視したと判定した際の運転支援について研究を重ね、ドライバーの煩わしさを低減することができる技術を新たに見いだした。   The inventors have conducted research on driving support when it is determined that the driver has actually watched the collision object by comparing the attention area with the attention-necessary area described above, and the driver's troublesomeness can be reduced. I found a new technology.

つまり、本発明は、ドライバーの煩わしさの低減を図ることができる運転支援装置及び運転支援方法を提供することを目的とする。   That is, an object of the present invention is to provide a driving support device and a driving support method that can reduce the troublesomeness of a driver.

本発明に係る運転支援装置は、車両の運転者に対して車両周辺のリスク対象を回避するための運転支援を行う運転支援装置であって、リスク対象を検出するリスク対象検出手段と、リスク対象検出手段によって検出されたリスク対象を、運転者が注視したことを検出する注視検出手段と、運転者の運転操作を検出する運転操作検出手段と、リスク対象検出手段及び運転操作検出手段の検出結果に基づいて、運転者がリスク対象に対するリスク回避操作を行ったことを検出する回避操作判定手段と、注視検出手段によって運転手の注視が検出された時点から、回避操作判定手段によって運転者によるリスク回避操作が行われた時点までの時間を計測する回避操作時間計測手段と、リスク対象検出手段が検出したリスク対象の、車両に対する第1のリスク度を算出するリスク度算出手段と、回避操作時間計測手段によって計測された計測時間と、所定の調整判定時間とを比較し、且つ、計測時間が調整判定時間より短いと判定したときに、リスク度算出手段によって算出された第1のリスク度をより低いリスク度である第2のリスク度に調整するリスク度調整手段と、運転支援の内容を決定する支援内容決定手段であって、回避操作時間計測手段によって計測時間が調整判定時間より長いと判定されたときには、リスク度算出手段によって算出された第1のリスク度に応じて、運転支援の内容を決定し、回避操作時間計測手段によって計測時間が調整判定時間より短いと判定されたときには、リスク度調整手段によって調整された第2のリスク度に応じて、運転支援の内容を決定する支援内容決定手段と、を備える。   A driving support apparatus according to the present invention is a driving support apparatus that performs driving support for avoiding a risk target around a vehicle to a driver of the vehicle, the risk target detection means for detecting the risk target, and the risk target Detection results of the gaze detection means for detecting that the driver has gazed at the risk object detected by the detection means, the driving operation detection means for detecting the driving operation of the driver, and the detection results of the risk object detection means and the driving operation detection means And the avoidance operation determination means for detecting that the driver has performed the risk avoidance operation on the risk object, and the risk by the driver by the avoidance operation determination means from the time when the driver's attention is detected by the gaze detection means. The avoidance operation time measuring means for measuring the time until the time when the avoidance operation is performed, and the risk object detected by the risk object detection means, the first for the vehicle When the risk degree calculating means for calculating the risk degree and the measurement time measured by the avoidance operation time measuring means are compared with a predetermined adjustment determination time, and when it is determined that the measurement time is shorter than the adjustment determination time, A risk level adjusting unit that adjusts the first risk level calculated by the risk level calculating unit to a second risk level that is a lower risk level, and a support content determining unit that determines the content of driving support, which is avoided When the operation time measuring means determines that the measurement time is longer than the adjustment determination time, the content of driving support is determined according to the first risk degree calculated by the risk degree calculating means, and the avoidance operation time measuring means is When it is determined that the measurement time is shorter than the adjustment determination time, the content of the driving support is determined according to the second risk level adjusted by the risk level adjustment unit. It includes a content determining means.

この運転支援装置においては、所定の調整判定時間より計測時間が短いときには、リスク度調整手段がリスク度算出手段によって算出された第1のリスク度をより低いリスク度である第2のリスク度に調整し、支援内容決定手段が、その第2のリスク度に応じて運転支援の内容を決定する。そのため、運転者がリスク対象を注視してから早期に回避操作を行った場合、運転支援のレベルを低下させることができ、運転者に対して過度の運転支援をする事態が抑制され、その結果、運転支援の際の運転者の煩わしさが効果的に低減される。   In this driving support device, when the measurement time is shorter than the predetermined adjustment determination time, the risk degree adjusting means changes the first risk degree calculated by the risk degree calculating means to a second risk degree that is a lower risk degree. The support content determination means adjusts and determines the content of the driving support according to the second risk degree. Therefore, if the driver performs an avoidance operation early after paying attention to the risk object, the level of driving assistance can be reduced, and the situation of excessive driving assistance to the driver is suppressed, and as a result The troublesomeness of the driver at the time of driving assistance is effectively reduced.

また、リスク度調整手段は、車両がリスク対象に到達するまでの時間の短さに応じて、調整判定時間を短縮し、その短縮された調整判定時間と計測時間とを比較する態様であってもよい。この場合、リスク度調整手段において、危険のレベルに応じた適切なリスク度調整を行うことができる。   The risk degree adjusting means is a mode in which the adjustment determination time is shortened according to the short time until the vehicle reaches the risk target, and the shortened adjustment determination time is compared with the measurement time. Also good. In this case, the risk level adjustment means can perform an appropriate risk level adjustment according to the level of danger.

本発明に係る運転支援方法は、車両の運転者に対して車両周辺のリスク対象を回避するための運転支援を行う運転支援方法であって、リスク対象を検出するリスク対象検出ステップと、リスク対象検出ステップにおいて検出されたリスク対象を、運転者が注視したことを検出する注視検出ステップと、運転者の運転操作を検出する運転操作検出ステップと、リスク対象検出ステップ及び運転操作検出ステップの検出結果に基づいて、運転者がリスク対象に対するリスク回避操作を行ったことを検出する回避操作判定ステップと、注視検出ステップにおいて運転手の注視が検出された時点から、回避操作判定ステップにおいて運転者によるリスク回避操作が行われた時点までの時間を計測する回避操作時間計測ステップと、リスク対象検出ステップが検出したリスク対象の、車両に対する第1のリスク度を算出するリスク度算出ステップと、回避操作時間計測ステップによって計測された計測時間と、所定の調整判定時間とを比較し、且つ、計測時間が調整判定時間より短いと判定したときに、リスク度算出手段において算出された第1のリスク度をより低いリスク度である第2のリスク度に調整するリスク度調整ステップと、運転支援の内容を決定する支援内容決定ステップであって、回避操作時間計測ステップにおいて計測時間が調整判定時間より長いと判定されたときには、リスク度算出ステップにおいて算出された第1のリスク度に応じて、運転支援の内容を決定し、回避操作時間計測ステップにおいて計測時間が調整判定時間より短いと判定されたときには、リスク度調整ステップにおいて調整された第2のリスク度に応じて、運転支援の内容を決定する支援内容決定ステップと、を備える。   A driving support method according to the present invention is a driving support method for performing driving support for avoiding a risk target around a vehicle to a driver of the vehicle, the risk target detection step for detecting the risk target, and the risk target Detection results of a gaze detection step for detecting that the driver gazes at the risk target detected in the detection step, a driving operation detection step for detecting the driving operation of the driver, and a detection result of the risk target detection step and the driving operation detection step The avoidance operation determination step for detecting that the driver has performed the risk avoidance operation on the risk object, and the risk by the driver in the avoidance operation determination step from the time when the driver's attention is detected in the gaze detection step. The avoidance operation time measurement step that measures the time until the avoidance operation is performed, and the risk object detection step The risk level calculation step for calculating the first risk level for the vehicle of the risk target detected by the process, the measurement time measured by the avoidance operation time measurement step, and the predetermined adjustment determination time are compared and measured. A risk degree adjustment step for adjusting the first risk degree calculated by the risk degree calculation means to a second risk degree that is a lower risk degree when it is determined that the time is shorter than the adjustment determination time; When it is determined that the measurement time is longer than the adjustment determination time in the avoidance operation time measurement step, driving according to the first risk level calculated in the risk level calculation step The content of the support is determined, and if the measurement time is determined to be shorter than the adjustment determination time in the avoidance operation time measurement step, the risk level is adjusted. In response to a second risk potential which is adjusted in step comprises a support content determination step of determining the content of driving support, the.

この運転支援方法においては、所定の調整判定時間より計測時間が短いときには、リスク度調整手段がリスク度算出ステップによって算出された第1のリスク度をより低いリスク度である第2のリスク度に調整し、支援内容決定ステップにおいて、その第2のリスク度に応じた運転支援の内容を決定する。そのため、運転者がリスク対象を注視してから早期に回避操作を行った場合、運転支援のレベルを低下させることができ、運転者に対して過度の運転支援をする事態が抑制され、その結果、運転支援の際の運転者の煩わしさが効果的に低減される。   In this driving support method, when the measurement time is shorter than the predetermined adjustment determination time, the risk degree adjusting means changes the first risk degree calculated by the risk degree calculating step to a second risk degree that is a lower risk degree. In the support content determination step, the content of the driving support is determined according to the second risk degree. Therefore, if the driver performs an avoidance operation early after paying attention to the risk object, the level of driving assistance can be reduced, and the situation of excessive driving assistance to the driver is suppressed, and as a result The troublesomeness of the driver at the time of driving assistance is effectively reduced.

また、リスク度調整ステップでは、車両がリスク対象に到達するまでの時間の短さに応じて、調整判定時間を短縮し、その短縮された調整判定時間と計測時間とを比較する態様であってもよい。この場合、リスク度調整ステップにおいて、危険のレベルに応じた適切なリスク度調整を行うことができる。   Further, in the risk degree adjustment step, the adjustment determination time is shortened according to the short time until the vehicle reaches the risk target, and the shortened adjustment determination time is compared with the measurement time. Also good. In this case, an appropriate risk level adjustment according to the level of danger can be performed in the risk level adjustment step.

本発明によれば、ドライバーの煩わしさの低減を図ることができる運転支援装置及び運転支援方法が提供される。   ADVANTAGE OF THE INVENTION According to this invention, the driving assistance apparatus and driving assistance method which can aim at reduction of the troublesomeness of a driver are provided.

図1は、車両が衝突するまでに提供される運転支援の内容について示した図である。FIG. 1 is a diagram showing the details of driving assistance provided until a vehicle collides. 図2は、情報提供段階における運転支援について示した図である。FIG. 2 is a diagram showing driving assistance in the information provision stage. 図3は、回避誘導段階における運転支援について示した図である。FIG. 3 is a diagram showing driving assistance in the avoidance guidance stage. 図4は、回避制御段階における運転支援について示した図である。FIG. 4 is a diagram illustrating driving assistance in the avoidance control stage. 図5は、リスク対象との衝突を回避するまでのドライバーの状態について示した図である。FIG. 5 is a diagram illustrating the state of the driver until the collision with the risk target is avoided. 図6は、本発明の実施形態に係る運転支援装置の概略構成図である。FIG. 6 is a schematic configuration diagram of the driving support apparatus according to the embodiment of the present invention. 図7は、図6に示した運転支援装置の各機能を示した図である。FIG. 7 is a diagram illustrating each function of the driving support apparatus illustrated in FIG. 6. 図8は、図6の運転支援装置が運転支援の内容を決定する際に利用する支援形態マップを示した図である。FIG. 8 is a diagram showing a support form map used when the driving support apparatus of FIG. 6 determines the content of driving support. 図9は、本実施形態におけるリスク度R0〜R3の想定シーンを示した図である。FIG. 9 is a diagram showing an assumed scene of risk degrees R0 to R3 in the present embodiment. 図10は、図6の運転支援装置を用いて運転支援を行う処理手順を示したフローチャートである。FIG. 10 is a flowchart showing a processing procedure for performing driving assistance using the driving assistance apparatus of FIG. 図11は、本実施形態における調整判定時間と衝突余裕時間との関係を示したグラフである。FIG. 11 is a graph showing the relationship between the adjustment determination time and the collision margin time in the present embodiment.

以下、本発明を実施するための形態について、添付図面を参照しつつ詳細に説明する。なお、同一又は同等の要素については同一の符号を付し、説明が重複する場合にはその説明を省略する。   Hereinafter, embodiments for carrying out the present invention will be described in detail with reference to the accompanying drawings. In addition, the same code | symbol is attached | subjected about the same or equivalent element, and the description is abbreviate | omitted when description overlaps.

本発明の実施形態の説明に先立ち、運転支援装置が提供する各種運転支援の内容について、図1〜4を参照しつつ説明する。   Prior to the description of the embodiment of the present invention, the contents of various driving assistances provided by the driving assistance device will be described with reference to FIGS.

図1に示すとおり、運転支援装置が提供する運転支援には、車両が衝突するまでの時間に応じて、(a)情報提供段階、(b)回避誘導段階、(c)回避制御段階があり、各段階において所定の運転支援が行われる。以下、これらの運転支援の内容について説明する。
(a)情報提供段階
As shown in FIG. 1, the driving assistance provided by the driving assistance device includes (a) an information provision stage, (b) an avoidance guidance stage, and (c) an avoidance control stage, depending on the time until the vehicle collides. In each stage, predetermined driving assistance is performed. Hereinafter, the content of these driving assistance is demonstrated.
(A) Information provision stage

情報提供段階では、衝突までの予測時間が比較的長く(たとえば4.0秒)、運転支援装置は、運転手自らの判断で危険から遠ざかる運転をしてもらうことを目的とした運転支援を行う。すなわち、図2に示すように、前方に存在する衝突可能性のある物体(リスク対象)を、レーダやカメラにより検知して、その存在をドライバーに報知する。図2に示した態様では、車両前方に、路側物B1、先行車B2、歩行者B3が存在している。すなわち、ドライバーには、3つのリスク対象B1、B2、B3が報知される。
(b)回避誘導段階
In the information provision stage, the prediction time until the collision is relatively long (for example, 4.0 seconds), and the driving support device performs driving support for the purpose of driving away from danger based on the driver's own judgment. . That is, as shown in FIG. 2, an object (risk target) that has a possibility of collision existing ahead is detected by a radar or a camera, and the presence is notified to the driver. In the aspect shown in FIG. 2, a roadside object B1, a preceding vehicle B2, and a pedestrian B3 are present in front of the vehicle. That is, the driver is notified of three risk targets B1, B2, and B3.
(B) Avoidance guidance stage

回避誘導段階では、衝突までの予測時間が短く(たとえば2.5秒)、運転支援装置は、ドライバー自らの回避操作を誘うことを目的とした運転支援を行う。すなわち、図3に示すように、リスク対象の情報に基づいて衝突リスクを演算し、衝突リスク対象B2の最も小さいエリアから、自車の推奨進路D及び最適車速を生成する。これら「推奨進路」と「最適車速」とを合わせて「目標経路」と定義される。その目標経路に対して、自車の実際の経路に所定値以上の乖離があった場合には、目標経路に近づけるように操舵方向を誘導するための運転支援(たとえば、単発ステアトルクの入力や緩減速制御)を行う。
(c)回避制御段階
In the avoidance guidance stage, the predicted time until the collision is short (for example, 2.5 seconds), and the driving support device performs driving support for the purpose of inviting the driver's own avoidance operation. That is, as shown in FIG. 3, the collision risk is calculated based on the risk target information, and the recommended course D and the optimum vehicle speed of the own vehicle are generated from the smallest area of the collision risk target B2. These “recommended route” and “optimum vehicle speed” are combined to define a “target route”. When the actual route of the vehicle is more than a predetermined value with respect to the target route, driving assistance for guiding the steering direction so as to approach the target route (for example, input of a single steering torque or Slow deceleration control).
(C) Avoidance control stage

回避制御段階では、衝突までの予測時間が極めて短く(たとえば、1.0秒)、運転支援装置は、ドライバーの運転操作に介入して衝突を回避することを目的とした運転支援を行う。すなわち、図4(b)に示すように、リスク対象Bとの衝突を回避するために、運転支援装置が、減速(ブレーキ)及び軌道変更(ステア)の介入制御(ステア・ブレーキ協調制御)を行う。なお、従来はブレーキ制御のみが行われていた(図4(a)参照)。   In the avoidance control stage, the predicted time until the collision is extremely short (for example, 1.0 second), and the driving assistance device performs driving assistance for the purpose of avoiding the collision by intervening in the driving operation of the driver. That is, as shown in FIG. 4B, in order to avoid a collision with the risk target B, the driving support device performs intervention control (steer / brake cooperative control) of deceleration (brake) and trajectory change (steer). Do. Conventionally, only brake control has been performed (see FIG. 4A).

ここで、車両前方に、衝突する可能性のあるリスク対象が存在する場合に、そのリスク対象との衝突を回避するまでのドライバーの状態について、図5を参照しつつ説明する。   Here, when there is a risk object that may collide in front of the vehicle, the state of the driver until the collision with the risk object is avoided will be described with reference to FIG.

リスク対象との衝突を回避するためには、ドライバーはまず、そのリスク対象を見る必要がある。そして、リスク対象を見たときには、そのリスク対象との衝突可能性を認識し、危険を感知する必要がある。さらに、危険を感知したときには、実際に回避操作を行って、対処しなければならない。   In order to avoid a collision with a risk object, the driver must first look at the risk object. When the risk object is viewed, it is necessary to recognize the possibility of collision with the risk object and sense the danger. Furthermore, when a danger is detected, an actual avoidance operation must be performed.

つまり、ドライバーは、リスク対象を見て、危険を感知して、対処することで、リスク対象との衝突という危険を回避する。   That is, the driver avoids the danger of a collision with the risk object by looking at the risk object, sensing the danger, and dealing with it.

続いて、実施形態に係る運転支援装置1について、図6を参照しつつ説明する。この運転支援装置1は、自車のドライバーに対して車両周辺のリスク対象を回避するための運転支援を行う装置であり、車両走行時のリスクとなる障害物(リスク対象)を検出し、検出した障害物と車両とが衝突するまでの衝突余裕時間(TTC[Time To Collision])に応じた運転支援をドライバーに提供するものである。   Next, the driving support device 1 according to the embodiment will be described with reference to FIG. The driving support device 1 is a device that performs driving support for avoiding a risk target around the vehicle for the driver of the own vehicle, and detects and detects an obstacle (risk target) that becomes a risk when the vehicle travels. The driver is provided with driving assistance corresponding to the time to collision (TTC [Time To Collision]) until the obstacle collides with the vehicle.

運転支援装置1は、演算処理を行うCPU[Central Processing Unit]、記憶部となるROM[Read Only Memory]及びRAM[Random Access Memory]、入力信号回路、出力信号回路、電源回路等により構成され、装置を統括的に制御する運転支援ECU[Electric Control Unit]2を有している。運転支援ECU2は、ドライバー状態検出部(注視検出手段)3、白線検出部4、障害物検出部(リスク対象検出手段)5、運転操作検出部(運転操作検出手段)6、車速センサ7、ヨーレートセンサ8のそれぞれと電気的に接続されている。さらに、運転支援ECU2は、HMI[Human Machine Interface]9、車両制御部10のそれぞれと電気的に接続されている。   The driving support device 1 includes a CPU [Central Processing Unit] that performs arithmetic processing, a ROM [Read Only Memory] and a RAM [Random Access Memory] that are storage units, an input signal circuit, an output signal circuit, a power supply circuit, and the like. It has driving support ECU [Electric Control Unit] 2 which controls an apparatus centrally. The driving support ECU 2 includes a driver state detection unit (gaze detection unit) 3, a white line detection unit 4, an obstacle detection unit (risk target detection unit) 5, a driving operation detection unit (driving operation detection unit) 6, a vehicle speed sensor 7, and a yaw rate. Each of the sensors 8 is electrically connected. Further, the driving support ECU 2 is electrically connected to each of an HMI [Human Machine Interface] 9 and a vehicle control unit 10.

ドライバー状態検出部3は、ドライバーの視線を検出するカメラを備えており、後述する障害物検出部5によって検出された障害物を、ドライバーが注視したことを検出する部分である。ドライバー状態検出部3は、ドライバーによる障害物の注視を検出すると、その検出結果を運転支援ECU2に送信する。   The driver state detection unit 3 includes a camera that detects the driver's line of sight, and is a part that detects that the driver has watched an obstacle detected by the obstacle detection unit 5 described later. When the driver state detection unit 3 detects the gaze of the obstacle by the driver, the driver state detection unit 3 transmits the detection result to the driving support ECU 2.

白線検出部4は、車両前方の白線の位置を認識するためのカメラを備えており、その光軸方向が車両の進行方向と一致するように車両の前方に取り付けられる。白線検出部4のカメラは、走行している道路を十分に撮像可能な左右方向に広い撮像範囲を有している。白線検出部4は、撮像した車両前方の画像及びこの画像から認識した白線の位置を白線認識情報として運転支援ECU2に送信する。   The white line detection unit 4 includes a camera for recognizing the position of the white line in front of the vehicle, and is attached to the front of the vehicle so that the optical axis direction thereof coincides with the traveling direction of the vehicle. The camera of the white line detection unit 4 has a wide imaging range in the left-right direction that can sufficiently image a running road. The white line detection unit 4 transmits the captured image ahead of the vehicle and the position of the white line recognized from this image to the driving support ECU 2 as white line recognition information.

障害物検出部5は、電波を利用して車両周辺の障害物を検出するためのレーダを備えており、そのレーダは、車両前方に延びる扇状の検出範囲を有する前方レーダと、前方レーダの検出範囲より近距離で広角な扇状の検出範囲を有する前側方広角近距離レーダとで構成されている(図7(a)参照)。障害物検出部5は、検出した障害物の位置や大きさ等を障害物情報として運転支援ECU2に送信する。   The obstacle detection unit 5 includes a radar for detecting obstacles around the vehicle using radio waves. The radar includes a front radar having a fan-shaped detection range extending in front of the vehicle, and detection of the front radar. It is composed of a front side wide-angle short-range radar having a fan-shaped detection range that is closer and wider than the range (see FIG. 7A). The obstacle detection unit 5 transmits the detected position and size of the obstacle to the driving assistance ECU 2 as obstacle information.

運転操作検出部6は、ドライバーによる車両の運転操作を検出するセンサである。運転操作検出部6は、例えば操舵角センサ、アクセルペダルセンサ、ブレーキペダルセンサ、及び方向指示操作検出センサ等により構成される。運転操作検出部6は、検出したドライバーの運転操作を運転操作情報として運転支援ECU2に送信する。   The driving operation detection unit 6 is a sensor that detects the driving operation of the vehicle by the driver. The driving operation detection unit 6 includes, for example, a steering angle sensor, an accelerator pedal sensor, a brake pedal sensor, and a direction instruction operation detection sensor. The driving operation detection unit 6 transmits the detected driving operation of the driver to the driving support ECU 2 as driving operation information.

車速センサ7は、車両の車速を検出するセンサである。車速センサ7は、例えば車輪に取り付けられ、車輪の回転速度から車速を検出する。車速センサ7は、検出した車速を車速情報として運転支援ECU2に送信する。ヨーレートセンサ8は、車両のヨーレートを検出するセンサである。ヨーレートセンサ8は、例えば車体に取り付けられている。ヨーレートセンサ8は、検出した車両のヨーレートをヨーレート情報として運転支援ECU2に送信する。   The vehicle speed sensor 7 is a sensor that detects the vehicle speed of the vehicle. The vehicle speed sensor 7 is attached to a wheel, for example, and detects the vehicle speed from the rotational speed of the wheel. The vehicle speed sensor 7 transmits the detected vehicle speed to the driving support ECU 2 as vehicle speed information. The yaw rate sensor 8 is a sensor that detects the yaw rate of the vehicle. The yaw rate sensor 8 is attached to the vehicle body, for example. The yaw rate sensor 8 transmits the detected yaw rate of the vehicle to the driving support ECU 2 as yaw rate information.

HMI9は、装置とドライバーとの間において情報をやり取りするためのインターフェイスである。HMI9は、ドライバーに情報提供するためのディスプレイパネル及びスピーカを備えている。HMI9は、運転支援ECU2から情報提供指令が送信された場合、運転支援としてドライバーに対する情報提供を行う。   The HMI 9 is an interface for exchanging information between the device and the driver. The HMI 9 includes a display panel and a speaker for providing information to the driver. The HMI 9 provides information to the driver as driving support when an information providing command is transmitted from the driving support ECU 2.

車両制御部10は、運転支援ECU2から送信された各種指令に応じて車両を制御する部分である。車両制御部10は、運転支援ECU2から回避誘導指令が送信された場合、ドライバーに対する回避誘導を実施する。回避誘導とは、車両が障害物を回避する方向に車両のハンドル、ブレーキペダル、及びアクセルペダルを駆動させることで、ドライバーの回避運転を誘導する運転支援である。回避誘導時におけるハンドル等の駆動は、車両の走行に影響させない。また、車両制御部10は、運転支援ECU2から回避制御指令が送信された場合、車両の回避制御を行う。回避制御とは、車両制御部10が運転に介入して車両を強制的に停止又は進路変更させる運転支援である。   The vehicle control unit 10 is a part that controls the vehicle in response to various commands transmitted from the driving support ECU 2. When the avoidance guidance command is transmitted from the driving support ECU 2, the vehicle control unit 10 performs avoidance guidance for the driver. The avoidance guidance is driving assistance that guides the avoidance operation of the driver by driving the vehicle handle, the brake pedal, and the accelerator pedal in a direction in which the vehicle avoids the obstacle. Driving the steering wheel or the like during avoidance guidance does not affect the running of the vehicle. Moreover, the vehicle control part 10 performs avoidance control of a vehicle, when the avoidance control command is transmitted from driving assistance ECU2. The avoidance control is driving assistance in which the vehicle control unit 10 intervenes in driving to forcibly stop or change the course of the vehicle.

運転支援ECU2は、逸脱余裕時間演算部12、衝突余裕時間演算部13、及びリスクマップ作成部(リスク度算出手段)14を有している。さらに、運転支援ECU2は、警報タイミング演算部15、車両制御目標値演算部16、車両制御量演算部17、支援判定部(回避操作判定手段、回避操作時間計測手段、リスク度調整手段、支援内容決定手段)18を有している。   The driving support ECU 2 includes a departure allowance time calculation unit 12, a collision allowance time calculation unit 13, and a risk map creation unit (risk degree calculation means) 14. Further, the driving support ECU 2 includes an alarm timing calculation unit 15, a vehicle control target value calculation unit 16, a vehicle control amount calculation unit 17, a support determination unit (avoidance operation determination unit, avoidance operation time measurement unit, risk level adjustment unit, support content). Determination means) 18.

逸脱余裕時間演算部12は、各種情報に基づいて、走行中の車両が白線から逸脱するまでの時間である逸脱余裕時間を算出する。逸脱余裕時間演算部12は、白線検出部4から送信された白線認識情報、運転操作検出部6から送信された運転操作情報、車速センサ7から送信された車速情報、及びヨーレートセンサ8から送信されたヨーレート情報に基づいて、公知の方法により逸脱余裕時間を算出する。逸脱余裕時間演算部12は、算出した逸脱余裕時間を逸脱余裕時間情報としてリスクマップ作成部14に送信する。   The departure allowance time calculation unit 12 calculates a departure allowance time, which is a time until the running vehicle departs from the white line, based on various information. The departure margin time calculation unit 12 is transmitted from the white line recognition information transmitted from the white line detection unit 4, the driving operation information transmitted from the driving operation detection unit 6, the vehicle speed information transmitted from the vehicle speed sensor 7, and the yaw rate sensor 8. Based on the yaw rate information, the deviation margin time is calculated by a known method. The departure allowance time calculation unit 12 transmits the calculated departure allowance time to the risk map creation unit 14 as departure allowance time information.

衝突余裕時間演算部13は、各種情報に基づいて、走行中の車両が障害物に衝突するまでの時間である衝突余裕時間(すなわち、TTC)を算出する。衝突余裕時間演算部13は、障害物検出部5から送信された障害物情報、運転操作検出部6から送信された運転操作情報、車速センサ7から送信された車速情報、及びヨーレートセンサ8から送信されたヨーレート情報に基づいて、公知の方法によりTTCを算出する。衝突余裕時間演算部13は、算出したTTCをTTC情報としてリスクマップ作成部14に送信する。   The collision margin time calculation unit 13 calculates a collision margin time (that is, TTC) that is a time until the traveling vehicle collides with an obstacle based on various information. The collision margin time calculation unit 13 transmits the obstacle information transmitted from the obstacle detection unit 5, the driving operation information transmitted from the driving operation detection unit 6, the vehicle speed information transmitted from the vehicle speed sensor 7, and the yaw rate sensor 8. Based on the obtained yaw rate information, TTC is calculated by a known method. The collision allowance time calculation unit 13 transmits the calculated TTC to the risk map creation unit 14 as TTC information.

リスクマップ作成部14は、逸脱余裕時間演算部12から送信された逸脱余裕時間情報、衝突余裕時間演算部13から送信されたTTC情報、運転操作検出部6から送信された運転操作情報、車速センサ7から送信された車速情報、及びヨーレートセンサ8から送信されたヨーレート情報に基づいて、リスクマップを作成する。   The risk map creation unit 14 includes the departure margin time information transmitted from the departure margin time calculation unit 12, the TTC information transmitted from the collision margin time calculation unit 13, the driving operation information transmitted from the driving operation detection unit 6, and a vehicle speed sensor. A risk map is created based on the vehicle speed information transmitted from 7 and the yaw rate information transmitted from the yaw rate sensor 8.

図7(b)に示すように、リスクマップは、各障害物(柱L、対向車両N、及び先行車両M)と衝突するリスクが高くなる領域を楕円状の衝突リスク領域として表し、これらの衝突リスク領域を避けた車両の推奨進路を生成するためのマップである。衝突リスク領域は、各障害物に対するTTCから算出されたリスク度に応じて設定されている。リスク度は、衝突リスクを示す指標であり、TTCが小さいほどすなわち車両が障害物と衝突するまでの時間が少ないほど高くなる。   As shown in FIG. 7B, the risk map represents an area where the risk of collision with each obstacle (column L, oncoming vehicle N, and preceding vehicle M) is high as an elliptical collision risk area. It is a map for producing | generating the recommended course of the vehicle which avoided the collision risk area | region. The collision risk area is set according to the degree of risk calculated from the TTC for each obstacle. The degree of risk is an index indicating a collision risk, and increases as the TTC is smaller, that is, the time until the vehicle collides with an obstacle is smaller.

衝突リスク領域は、リスク度に応じた複数の階層から構成されている。例えば電柱Lの衝突リスク領域は、低リスク度領域A、中リスク度領域B、及び高リスク度領域Cの3つの階層から構成されている。理解を容易にするためTTCを用いて各階層の区分を例示すると、低リスク度領域AはTTCが4.0秒以下の領域、中リスク度領域BはTTCが2.5秒以下の領域、高リスク度領域CはTTCが1.4秒以下の領域として設定される。なお、移動可能な対向車両等においては、衝突リスク領域は低リスク度領域A及び中リスク度領域Bから構成されている。これらの領域に車両が入り込んだ場合には、領域毎に異なる内容の運転支援が行われる。   The collision risk area is composed of a plurality of hierarchies according to the degree of risk. For example, the collision risk area of the utility pole L is composed of three layers of a low risk degree area A, a medium risk degree area B, and a high risk degree area C. In order to facilitate understanding, the division of each hierarchy is illustrated using TTC. The low risk area A is an area where the TTC is 4.0 seconds or less, the medium risk degree area B is an area where the TTC is 2.5 seconds or less, The high risk degree area C is set as an area where TTC is 1.4 seconds or less. Note that, in a movable oncoming vehicle or the like, the collision risk area includes a low risk degree area A and a medium risk degree area B. When a vehicle enters these areas, driving assistance with different contents is performed for each area.

リスクマップ作成部14は、作成したリスクマップに基づいて、車両の推奨進路に関する演算処理を行い、推奨進路を走行する際の最適車速情報を生成する。リスクマップ作成部14は、生成した推奨進路情報及び最適車速情報を車両制御に用いる目標経路情報として車両制御目標値演算部16に送信する。また、リスクマップ作成部14は、作成したリスクマップをリスクマップ情報として警報タイミング演算部15及び車両制御目標値演算部16に送信する。   Based on the created risk map, the risk map creation unit 14 performs calculation processing related to the recommended route of the vehicle, and generates optimal vehicle speed information when traveling on the recommended route. The risk map creation unit 14 transmits the generated recommended route information and optimum vehicle speed information to the vehicle control target value calculation unit 16 as target route information used for vehicle control. The risk map creation unit 14 transmits the created risk map as risk map information to the alarm timing calculation unit 15 and the vehicle control target value calculation unit 16.

図1に示すように、警報タイミング演算部15は、各種情報に基づいて、運転支援の一つである情報提供に関する演算を行う。具体的には、警報タイミング演算部15は、リスクマップ作成部14から送信されたリスクマップ情報、白線検出部4から送信された白線認識情報、及び障害物検出部5から送信された障害物情報に基づいて、情報提供としてHMI9のディスプレイパネルに表示する画像情報及びスピーカから出力する警報情報を生成する。警報タイミング演算部15は、生成した画像情報及び警報情報を支援判定部18に送信する。   As shown in FIG. 1, the alarm timing calculation unit 15 performs calculation related to information provision, which is one of driving assistance, based on various information. Specifically, the alarm timing calculation unit 15 includes the risk map information transmitted from the risk map creation unit 14, the white line recognition information transmitted from the white line detection unit 4, and the obstacle information transmitted from the obstacle detection unit 5. Based on the above, image information displayed on the display panel of the HMI 9 as information provision and alarm information output from the speaker are generated. The alarm timing calculation unit 15 transmits the generated image information and alarm information to the support determination unit 18.

車両制御目標値演算部16は、リスクマップ作成部14から送信されたリスクマップ情報及び目標経路情報に基づいて、運転支援である回避誘導及び回避制御に関する制御目標値を定める。車両制御目標値演算部16は、回避誘導における制御目標値、すなわちドライバーを誘導するための車両のハンドル、ブレーキペダル、及びアクセルペダルの駆動量及び駆動方向を算出する。   The vehicle control target value calculation unit 16 determines a control target value related to avoidance guidance and avoidance control, which are driving assistance, based on the risk map information and target route information transmitted from the risk map creation unit 14. The vehicle control target value calculation unit 16 calculates the control target value in avoidance guidance, that is, the driving amount and driving direction of the vehicle steering wheel, brake pedal, and accelerator pedal for guiding the driver.

また、車両制御目標値演算部16は、リスクマップ作成部14から送信されたリスクマップ情報及び目標経路情報に基づいて、回避制御における制御目標値、すなわち運転に介入する際の操舵制御、制動制御、及び加速制御の各目標値を算出する。車両制御目標値演算部16は、算出した回避誘導における制御目標値及び回避制御における制御目標値を制御目標値情報として支援判定部18に送信する。また、車両制御目標値演算部16は、リスクマップ作成部14から送信された目標経路情報を支援判定部18に送信する。   Further, the vehicle control target value calculation unit 16 is based on the risk map information and the target route information transmitted from the risk map creation unit 14, and is a control target value in avoidance control, that is, steering control and braking control when intervening in driving. And each target value of acceleration control is calculated. The vehicle control target value calculation unit 16 transmits the calculated control target value in avoidance guidance and the control target value in avoidance control to the support determination unit 18 as control target value information. In addition, the vehicle control target value calculation unit 16 transmits the target route information transmitted from the risk map creation unit 14 to the support determination unit 18.

支援判定部18は、各種情報に基づいて、運転支援の内容及び実行タイミングを判断する。運転支援の内容としては、支援度の異なる情報提供(注意喚起や警報)、回避誘導(ドライバー誘導)、回避制御(介入制御)がある。情報提供は、ドライバーに対する支援度が最も低く、HMI9を通じてドライバーに障害物への注意を促す。回避誘導は、ドライバーに対する支援度が情報提供の次に低く、車両が障害物を回避する方向に車両のハンドル、ブレーキペダル、及びアクセルペダルを駆動させることで、ドライバーの回避運転を誘導する。回避制御は、ドライバーに対する支援度が最も高く、運転に介入して車両を強制的に停止又は進路変更させる。   The support determination unit 18 determines the content and execution timing of driving support based on various information. The contents of driving support include information provision (attention and warning) with different degrees of support, avoidance guidance (driver guidance), and avoidance control (intervention control). The provision of information has the lowest degree of support for the driver, and urges the driver to pay attention to obstacles through the HMI 9. In the avoidance guidance, the degree of support for the driver is the second lowest after information is provided, and the driver's avoidance operation is guided by driving the vehicle handle, the brake pedal, and the accelerator pedal in a direction in which the vehicle avoids the obstacle. The avoidance control has the highest degree of support for the driver, and forcibly stops or changes the course of the vehicle through driving.

支援判定部18は、運転支援の内容を判定する際、図8に示すような支援形態マップを利用する。この支援形態マップには、TTCの判定条件として、T1(2.5〜3.5秒)、T2(1.8〜2.5秒)、T3(〜1.8秒)が設定されており、推定危険度(リスク度)の判定条件として、R0〜R3が設定されている。   The support determination unit 18 uses a support form map as shown in FIG. 8 when determining the content of driving support. In this support form map, T1 (2.5 to 3.5 seconds), T2 (1.8 to 2.5 seconds), and T3 (up to 1.8 seconds) are set as TTC determination conditions. R0 to R3 are set as judgment conditions for the estimated risk level (risk level).

ここで、リスク度R0〜R3の想定シーンについて、図9を参照しつつ説明する。図9に示すシーンでは、歩行者がリスク対象の障害物である。   Here, the assumed scenes of the risk degrees R0 to R3 will be described with reference to FIG. In the scene shown in FIG. 9, the pedestrian is an obstacle to be risked.

図9(a)に示すリスク度R0では、歩行者は、自車の進路上に侵入しておらず、且つ、進路上に侵入できる交通ルールもない状況である。   In the risk degree R0 shown in FIG. 9A, the pedestrian does not enter the course of the own vehicle and there is no traffic rule that can enter the course.

図9(b)に示すリスク度R1では、歩行者は、自車の進路上に侵入していないが、進路上に侵入できる交通ルール(横断歩道)がある状況である。   In the risk degree R1 shown in FIG. 9B, the pedestrian has not entered the course of his / her own vehicle, but has a traffic rule (crosswalk) that can enter the course.

図9(c)に示すリスク度R2では、歩行者は、自車の進路上に侵入していないが、進路上に侵入できる交通ルール(横断歩道)がある状況であり、しかも、他の障害物(他車)との関係から進路上に侵入する可能性が高い状況である。   In the risk degree R2 shown in FIG. 9C, the pedestrian has not entered the course of the own vehicle, but has a traffic rule (pedestrian crossing) that can enter the course, and other obstacles This is a situation where there is a high possibility of entering the course due to the relationship with objects (other cars).

図9(d)に示すリスク度R3では、歩行者は、自車の進路上に侵入している状況、若しくは、まさに侵入しようとしている状況である。   In the risk degree R3 shown in FIG. 9 (d), the pedestrian is in a situation where he / she has entered the course of his / her own vehicle, or is in a situation where he / she is about to enter.

運転支援装置1は、各種センサを利用してリスク対象の状況を把握するとともに、運転支援ECU2において判定をおこない、上記リスク度R0〜R3の中から1つのリスク度(第1のリスク度)を決定する。   The driving support device 1 uses various sensors to grasp the status of the risk target, and makes a determination in the driving support ECU 2 to obtain one risk level (first risk level) from the above risk levels R0 to R3. decide.

支援判定部18は、リスク対象のTTCとリスク度とから、図8の支援形態マップを参照して、運転支援の内容を決定する。   The assistance determination unit 18 determines the content of driving assistance with reference to the assistance form map of FIG. 8 based on the risk target TTC and the degree of risk.

また、支援判定部18は、回避操作判定手段として機能し、運転操作検出部6から提供された運転操作情報に基づいて、ドライバーがリスク回避操作を行ったか否かを判定する。このリスク回避操作には、認識時操作と回避時操作とが含まれる。   The assistance determination unit 18 functions as an avoidance operation determination unit, and determines whether or not the driver has performed a risk avoidance operation based on the driving operation information provided from the driving operation detection unit 6. This risk avoidance operation includes a recognition operation and an avoidance operation.

認識時操作とは、ドライバーが衝突のおそれがあると認識した障害物から車両を遠ざけようとする操作である。支援判定部18は、ドライバーがアクセル操作、ブレーキ操作、ハンドル操作のうち少なくとも一つの操作を所定の操作量以上行った場合に、認識時操作を行ったと判定する。なお、認識時操作には、踏み込んでいたアクセルペダルを放す操作も含まれる。また、操作量自体が所定の操作量に満たない場合であっても、ペダル操作による車両の加速度変化が所定値以上の場合や白線を跨いでレーンチェンジを行った場合には認識時操作が行われたと判定するようにしてもよい。   The operation at the time of recognition is an operation of trying to keep the vehicle away from an obstacle that the driver has recognized as a possibility of collision. The assistance determination unit 18 determines that an operation at the time of recognition is performed when the driver performs at least one operation of an accelerator operation, a brake operation, and a steering wheel operation by a predetermined operation amount or more. Note that the operation at the time of recognition includes an operation of releasing the accelerator pedal that was depressed. Even when the operation amount itself is less than the predetermined operation amount, the operation at the time of recognition is performed when the acceleration change of the vehicle due to the pedal operation exceeds a predetermined value or when the lane change is performed across the white line. It may be determined that it has been broken.

回避時操作は、認識時操作と比べてより明確に障害物を避けようとする操作である。回避時操作が行われたか否かの判定は、認識時操作の場合と同様に行われる。回避時操作が行われたか否かの判定は、上述の他、車速が0になった場合、車両の進行方向が障害物から明らかに逸れた場合等に回避時操作が行われたと判定してもよい。支援判定部18は、障害物毎にドライバーがリスク回避操作(すなわち、認識時操作や回避時操作)を行ったか否かの判定結果を記憶する。   The avoidance operation is an operation that tries to avoid an obstacle more clearly than the recognition operation. The determination whether or not the avoidance operation is performed is performed in the same manner as the recognition operation. In addition to the above, the determination of whether or not the avoidance operation has been performed is based on the determination that the avoidance operation has been performed when the vehicle speed becomes zero, or when the traveling direction of the vehicle clearly deviates from the obstacle. Also good. The support determination unit 18 stores a determination result as to whether or not the driver has performed a risk avoidance operation (that is, an operation during recognition or an operation during avoidance) for each obstacle.

ここで、上述したドライバー状態検出部3ではドライバーによる障害物の注視までは検出できるものの、障害物への注意意識の有無が明確にはわからない。そこで、支援判定部18が、ドライバーによるリスク回避操作の有無を確認することにより、ドライバーに障害物への注意意識が有ることが確認される。   Here, although the driver state detection unit 3 described above can detect until the driver gazes at the obstacle, the presence or absence of attention to the obstacle is not clearly understood. Therefore, the support determination unit 18 confirms whether or not the driver is aware of the obstacle by confirming the presence or absence of the risk avoidance operation by the driver.

さらに、支援判定部18は、回避操作時間計測手段として機能し、ドライバー状態検出部3によってドライバーが障害物を注視したことを検出してからの時間を計測しており、そのドライバーの注視タイミングから、上記リスク回避操作のタイミングまでの時間計測を行う。   Further, the support determination unit 18 functions as an avoidance operation time measurement unit, and measures the time after the driver state detection unit 3 detects that the driver has watched the obstacle, and from the driver's watch timing. The time until the timing of the risk avoidance operation is measured.

支援判定部18は、リスク度調整手段として機能し、上記計測時間と所定の調整判定時間とを比較する。そして、計測時間が調整判定時間より短いと判定したときには、前述したリスク度(第1のリスク度)をより低いリスク度である第2のリスク度に調整する。たとえば、リスク対象の状況から第1のリスク度がR3と判定されているときに、より低いリスク度R2に調整する。なお、支援判定部18は、計測時間が調整判定時間より長いと判定したときには、上記リスク度の調整は行わない。   The support determination unit 18 functions as a risk level adjustment unit, and compares the measurement time with a predetermined adjustment determination time. When it is determined that the measurement time is shorter than the adjustment determination time, the above-described risk level (first risk level) is adjusted to a second risk level that is a lower risk level. For example, when the first risk level is determined as R3 from the situation of the risk target, the risk level is adjusted to a lower risk level R2. The support determination unit 18 does not adjust the risk level when it is determined that the measurement time is longer than the adjustment determination time.

支援判定部18は、支援内容決定手段として機能し、計測時間が調整判定時間より短いときには、調整された第2のリスク度を用いて、運転支援の内容を決定する。一方、計測時間が調整判定時間より長いときには、第1のリスク度を用いて、運転支援の内容を決定する。   The support determination unit 18 functions as support content determination means. When the measurement time is shorter than the adjustment determination time, the support determination unit 18 determines the content of driving support using the adjusted second risk degree. On the other hand, when the measurement time is longer than the adjustment determination time, the content of driving support is determined using the first risk degree.

支援判定部18は、支援内容を情報提供として運転支援を行う必要があると判断した場合、警報タイミング演算部15で生成された画像情報及び警報情報を含む情報提供指令をHMI9に送信する。支援判定部18は、支援内容を回避誘導に変更して運転支援を行う必要があると判断した場合、車両制御目標値演算部16で生成された制御目標値情報を含む回避誘導指令を車両制御部10に送信する。また、支援判定部18は、支援内容を回避制御に変更して運転支援を行う必要があると判断した場合、車両制御部10に回避制御指令を送信する。   When the support determination unit 18 determines that it is necessary to perform driving support using the support content as information provision, the support determination unit 18 transmits to the HMI 9 an information provision command including image information and alarm information generated by the alarm timing calculation unit 15. When the support determination unit 18 determines that it is necessary to change the support content to avoidance guidance and perform driving support, the assistance determination unit 18 controls the avoidance guidance command including the control target value information generated by the vehicle control target value calculation unit 16. To the unit 10. Further, when the support determination unit 18 determines that it is necessary to change the support content to avoidance control and perform driving support, the assist determination unit 18 transmits an avoidance control command to the vehicle control unit 10.

続いて、上述した運転支援装置を用いて運転支援を行う処理手順について、図10を参照しつつ説明する。   Next, a processing procedure for performing driving assistance using the above-described driving assistance device will be described with reference to FIG.

まず、運転支援ECU2が、各種センサ類4〜8を通じて各種情報を取得する。そして、得られた情報に基づいて、衝突危険性のあるリスク対象に対し、衝突余裕時間TTCとリスク度Rとを付与する(ステップS10)。   First, the driving assistance ECU 2 acquires various information through the various sensors 4-8. Then, based on the obtained information, a collision allowance time TTC and a risk degree R are assigned to a risk target having a collision risk (step S10).

次に、ドライバー状態検出部3により、ドライバーの視線を検出し(ステップS11)、さらに、ドライバーがリスク対象である障害物を確認したか否かを判定する(ステップS12)。このステップS12において、ドライバーが障害物を確認したと判定された場合には、次のステップS13に進み、確認したと判定されなかった場合には、後述するステップS16に進む。   Next, the driver state detection unit 3 detects the driver's line of sight (step S11), and further determines whether the driver has confirmed an obstacle that is a risk target (step S12). In step S12, if it is determined that the driver has confirmed the obstacle, the process proceeds to the next step S13. If it is not determined that the driver has confirmed, the process proceeds to step S16 described later.

ステップS13では、ステップS10において付与されたTTCに応じた調整判定時間τを決定する。   In step S13, an adjustment determination time τ corresponding to the TTC given in step S10 is determined.

続くステップS14では、ドライバーによるリスク回避操作(たとえばブレーキ操作)が、リスク対象をドライバーが注視したタイミングから、上記調整判定時間τ以内に行われたか否かを判定する。このステップS14において、リスク回避操作が調整判定時間τ以内に行われたと判定された場合には、次のステップS15に進み、行われたと判定されなかった場合には、後述するステップS16に進む。   In the subsequent step S14, it is determined whether or not a risk avoidance operation (for example, a brake operation) by the driver has been performed within the adjustment determination time τ from the timing when the driver gazes at the risk target. If it is determined in step S14 that the risk avoiding operation has been performed within the adjustment determination time τ, the process proceeds to the next step S15. If it is not determined that the risk avoiding operation has been performed, the process proceeds to step S16 described later.

ステップS15では、ステップS10において付与されたリスク度を、1ランクダウン(たとえば、R3→R2)するリスク度調整を行う。   In step S15, a risk level adjustment is performed to lower the risk level assigned in step S10 by one rank (for example, R3 → R2).

そして、ステップS16では、衝突余裕時間TTCとリスク度Rとに基づいて、上述した運転支援マップに従う運転支援が決定され、その内容での運転支援が実施される。   In step S16, driving support according to the above-described driving support map is determined based on the collision margin time TTC and the risk degree R, and driving support with the content is performed.

以上説明した運転支援装置1による運転支援方法によれば、ドライバーが障害物を注視して確認したタイミングからリスク回避操作をするまでの時間(計測時間)が、所定の調整判定時間τより短いときには、リスク対象の状況から決定された第1のリスク度が、よりリスク度の低い第2のリスク度に調整され、その第2のリスク度に対応する内容の運転支援が行われる。そのため、ドライバーがリスク対象を注視してから早期に回避操作を行った場合、運転支援のレベルを低下させることができ、ドライバーに対して過度の運転支援をする事態が抑制され、その結果、運転支援の際のドライバーの煩わしさが効果的に低減されることとなる。   According to the driving support method by the driving support apparatus 1 described above, when the time (measurement time) from the timing at which the driver has looked at the obstacle to confirm the risk avoidance operation is shorter than the predetermined adjustment determination time τ. The first risk level determined from the status of the risk target is adjusted to a second risk level with a lower risk level, and driving support with content corresponding to the second risk level is performed. Therefore, if the driver performs an avoidance operation early after paying attention to the risk object, the level of driving assistance can be reduced, and the situation of excessive driving assistance to the driver is suppressed, resulting in driving The troublesomeness of the driver at the time of assistance is effectively reduced.

なお、調整判定時間τは、リスク対象の衝突余裕時間TTCの短さに応じて短縮して、その短縮された調整判定時間と計測時間とを比較してもよい。たとえば、図11に示すグラフのように、衝突余裕時間TTCが短いほど、調整判定時間τを短くする。この場合には、危険のレベルに応じた適切なリスク度調整を行うことができる。   The adjustment determination time τ may be shortened according to the shortness of the risk target collision margin time TTC, and the shortened adjustment determination time may be compared with the measurement time. For example, as shown in the graph of FIG. 11, the adjustment determination time τ is shortened as the collision margin time TTC is shorter. In this case, an appropriate risk level adjustment according to the level of danger can be performed.

本発明は、上述した実施形態に限定されるものではない。例えば、上述した実施形態では、車両と衝突する可能性のある障害物をリスク対象として説明したが、リスク対象は障害物に限られず、例えば車道付近の溝や道路の凹みをリスク対象として本発明を適用してもよい。   The present invention is not limited to the embodiment described above. For example, in the above-described embodiment, an obstacle that may collide with a vehicle has been described as a risk object. However, the risk object is not limited to an obstacle, and for example, a groove near a roadway or a recess in a road is used as a risk object. May be applied.

また、ドライバーが障害物を認識していると判断された場合の運転支援の内容の変更は、支援中止という内容に変更する場合に限られず、運転支援の内容を支援度の低い内容に変更、例えば運転に介入する回避制御から運転に介入しない回避誘導に運転支援の内容を変更することでドライバーの煩わしさの低減を図る態様であってもよい。ここで、運転支援の内容を支援度の低い内容に変更することには、元の情報提供と比べてスピーカの出力がより小さい情報提供に変更することや、元の回避誘導と比べてハンドル等の駆動がより小さな回避誘導に変更することが含まれる。   In addition, the change of the content of driving support when it is determined that the driver recognizes the obstacle is not limited to the case of changing to the content of suspension of support, the content of driving support is changed to a content with low support level, For example, it may be possible to reduce the driver's troublesomeness by changing the content of driving assistance from avoidance control that intervenes in driving to avoidance guidance that does not intervene in driving. Here, in order to change the content of driving support to a content with a low degree of support, it is necessary to change the information output of the speaker to be smaller than the original information provision, or to handle etc. compared to the original avoidance guidance Change to a smaller avoidance guidance.

1…運転支援装置、2…運転支援ECU、3…ドライバー状態検出部、5…障害物検出部、6…運転操作検出部、9…HMI、10…車両制御部、13…衝突余裕時間演算部、14…リスクマップ作成部、18…支援判定部。   DESCRIPTION OF SYMBOLS 1 ... Driving assistance device, 2 ... Driving assistance ECU, 3 ... Driver state detection part, 5 ... Obstacle detection part, 6 ... Driving operation detection part, 9 ... HMI, 10 ... Vehicle control part, 13 ... Collision allowance time calculation part , 14 ... Risk map creation unit, 18 ... Support determination unit.

Claims (4)

車両の運転者に対して前記車両周辺のリスク対象を回避するための運転支援を行う運転支援装置であって、
前記リスク対象を検出するリスク対象検出手段と、
前記リスク対象検出手段によって検出された前記リスク対象を、前記運転者が注視したことを検出する注視検出手段と、
前記運転者の運転操作を検出する運転操作検出手段と、
前記リスク対象検出手段及び前記運転操作検出手段の検出結果に基づいて、前記運転者が前記リスク対象に対するリスク回避操作を行ったことを検出する回避操作判定手段と、
前記注視検出手段によって運転手の注視が検出された時点から、前記回避操作判定手段によって前記運転者による前記リスク回避操作が行われた時点までの時間を計測する回避操作時間計測手段と、
前記リスク対象検出手段が検出した前記リスク対象の、前記車両に対する第1のリスク度を算出するリスク度算出手段と、
前記回避操作時間計測手段によって計測された計測時間と、所定の調整判定時間とを比較し、且つ、前記計測時間が前記調整判定時間より短いと判定したときに、前記リスク度算出手段によって算出された前記第1のリスク度をより低いリスク度である第2のリスク度に調整するリスク度調整手段と、
前記運転支援の内容を決定する支援内容決定手段であって、前記回避操作時間計測手段によって前記計測時間が前記調整判定時間より長いと判定されたときには、前記リスク度算出手段によって算出された前記第1のリスク度に応じて、前記運転支援の内容を決定し、前記回避操作時間計測手段によって前記計測時間が前記調整判定時間より短いと判定されたときには、前記リスク度調整手段によって調整された前記第2のリスク度に応じて、前記運転支援の内容を決定する支援内容決定手段と、
を備える、運転支援装置。
A driving support device that performs driving support for avoiding a risk target around the vehicle for a driver of the vehicle,
Risk object detection means for detecting the risk object;
Gaze detection means for detecting that the driver gazes at the risk object detected by the risk object detection means;
Driving operation detecting means for detecting the driving operation of the driver;
Based on the detection results of the risk object detection means and the driving operation detection means, an avoidance operation determination means for detecting that the driver has performed a risk avoidance operation on the risk object;
Avoidance operation time measuring means for measuring the time from when the driver's gaze is detected by the gaze detection means to when the driver performs the risk avoidance operation by the avoidance operation determination means;
A risk degree calculating means for calculating a first risk degree for the vehicle of the risk object detected by the risk object detecting means;
When the measurement time measured by the avoidance operation time measurement means is compared with a predetermined adjustment determination time, and when it is determined that the measurement time is shorter than the adjustment determination time, it is calculated by the risk degree calculation means. A risk level adjusting means for adjusting the first risk level to a second risk level that is a lower risk level;
Support content determination means for determining the content of the driving support, wherein when the measurement time is determined to be longer than the adjustment determination time by the avoidance operation time measurement means, the risk degree calculation means calculates the first The content of the driving support is determined according to the risk level of 1, and when the measurement time is determined to be shorter than the adjustment determination time by the avoidance operation time measurement unit, the risk level adjustment unit adjusts the risk Support content determination means for determining the content of the driving support according to the second risk level;
A driving support device comprising:
前記リスク度調整手段は、前記車両が前記リスク対象に到達するまでの時間の短さに応じて、前記調整判定時間を短縮し、その短縮された調整判定時間と前記計測時間とを比較する、請求項1記載の運転支援装置。   The risk degree adjusting means reduces the adjustment determination time according to a short time until the vehicle reaches the risk target, and compares the reduced adjustment determination time with the measurement time. The driving support apparatus according to claim 1. 車両の運転者に対して前記車両周辺のリスク対象を回避するための運転支援を行う運転支援方法であって、
前記リスク対象を検出するリスク対象検出ステップと、
前記リスク対象検出ステップにおいて検出された前記リスク対象を、前記運転者が注視したことを検出する注視検出ステップと、
前記運転者の運転操作を検出する運転操作検出ステップと、
前記リスク対象検出ステップ及び前記運転操作検出ステップの検出結果に基づいて、前記運転者が前記リスク対象に対するリスク回避操作を行ったことを検出する回避操作判定ステップと、
前記注視検出ステップにおいて運転手の注視が検出された時点から、前記回避操作判定ステップにおいて前記運転者による前記リスク回避操作が行われた時点までの時間を計測する回避操作時間計測ステップと、
前記リスク対象検出ステップが検出した前記リスク対象の、前記車両に対する第1のリスク度を算出するリスク度算出ステップと、
前記回避操作時間計測ステップによって計測された計測時間と、所定の調整判定時間とを比較し、且つ、前記計測時間が前記調整判定時間より短いと判定したときに、前記リスク度算出手段において算出された前記第1のリスク度をより低いリスク度である第2のリスク度に調整するリスク度調整ステップと、
前記運転支援の内容を決定する支援内容決定ステップであって、前記回避操作時間計測ステップにおいて前記計測時間が前記調整判定時間より長いと判定されたときには、前記リスク度算出ステップにおいて算出された前記第1のリスク度に応じて、前記運転支援の内容を決定し、前記回避操作時間計測ステップにおいて前記計測時間が前記調整判定時間より短いと判定されたときには、前記リスク度調整ステップにおいて調整された前記第2のリスク度に応じて、前記運転支援の内容を決定する支援内容決定ステップと、
を備える、運転支援方法。
A driving support method for performing driving support for avoiding a risk target around the vehicle for a driver of the vehicle,
A risk object detection step of detecting the risk object;
A gaze detection step for detecting that the driver gazes at the risk target detected in the risk target detection step;
A driving operation detecting step for detecting the driving operation of the driver;
Based on the detection results of the risk object detection step and the driving operation detection step, an avoidance operation determination step for detecting that the driver has performed a risk avoidance operation on the risk object;
An avoidance operation time measuring step for measuring a time from when the driver's gaze is detected in the gaze detection step to a time when the risk avoidance operation is performed by the driver in the avoidance operation determination step;
A risk degree calculating step of calculating a first risk degree for the vehicle of the risk object detected by the risk object detecting step;
When the measurement time measured by the avoidance operation time measurement step is compared with a predetermined adjustment determination time, and when it is determined that the measurement time is shorter than the adjustment determination time, it is calculated by the risk degree calculation means. A risk level adjustment step for adjusting the first risk level to a second risk level that is a lower risk level;
The support content determination step for determining the content of the driving support, wherein when it is determined in the avoidance operation time measurement step that the measurement time is longer than the adjustment determination time, the risk degree calculation step calculates the first The content of the driving support is determined according to the risk level of 1. When the measurement time is determined to be shorter than the adjustment determination time in the avoidance operation time measurement step, the risk adjustment step is performed. A support content determination step for determining the content of the driving support according to a second risk level;
A driving support method comprising:
前記リスク度調整ステップでは、前記車両が前記リスク対象に到達するまでの時間の短さに応じて、前記調整判定時間を短縮し、その短縮された調整判定時間と前記計測時間とを比較する、請求項3記載の運転支援方法。   In the risk degree adjustment step, the adjustment determination time is shortened according to a short time until the vehicle reaches the risk target, and the reduced adjustment determination time is compared with the measurement time. The driving support method according to claim 3.
JP2010078670A 2010-03-30 2010-03-30 Driving support device and driving support method Active JP5897787B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010078670A JP5897787B2 (en) 2010-03-30 2010-03-30 Driving support device and driving support method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010078670A JP5897787B2 (en) 2010-03-30 2010-03-30 Driving support device and driving support method

Publications (2)

Publication Number Publication Date
JP2011210098A true JP2011210098A (en) 2011-10-20
JP5897787B2 JP5897787B2 (en) 2016-03-30

Family

ID=44941066

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010078670A Active JP5897787B2 (en) 2010-03-30 2010-03-30 Driving support device and driving support method

Country Status (1)

Country Link
JP (1) JP5897787B2 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013034182A1 (en) * 2011-09-08 2013-03-14 Valeo Schalter Und Sensoren Gmbh Method for creating a vehicle surroundings map, driver assistance device, and vehicle having a driver assistance device
JP2013250781A (en) * 2012-05-31 2013-12-12 Toyota Motor Corp Drive support device and drive support method
JP2014080179A (en) * 2012-09-26 2014-05-08 Nissan Motor Co Ltd Steering control device
JP2014098965A (en) * 2012-11-13 2014-05-29 Toyota Motor Corp Drive support apparatus and drive support method
WO2015008380A1 (en) * 2013-07-19 2015-01-22 本田技研工業株式会社 Vehicle travel safety device, vehicle travel safety method, and vehicle travel safety program
EP3725628A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
EP3725629A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
EP3725630A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
EP3730368A1 (en) * 2019-04-24 2020-10-28 Mazda Motor Corporation Vehicle control device, method and computer program product
EP3730367A1 (en) * 2019-04-24 2020-10-28 Mazda Motor Corporation Vehicle control device, method and computer program product
JP2020175794A (en) * 2019-04-19 2020-10-29 マツダ株式会社 Vehicle control device
CN113353069A (en) * 2021-07-22 2021-09-07 中国第一汽车股份有限公司 Automatic emergency braking system, and method and system for adjusting automatic emergency braking system
WO2022054311A1 (en) * 2020-09-14 2022-03-17 株式会社日立製作所 Vehicle control device
JP2024052613A (en) * 2022-09-30 2024-04-11 本田技研工業株式会社 MOVING OBJECT PREDICTION DEVICE, TRAFFIC SAFETY SUPPORT SYSTEM, AND COMPUTER PROGRAM
JP2025090785A (en) * 2014-09-30 2025-06-17 Case特許株式会社 vehicle

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002025000A (en) * 2000-07-11 2002-01-25 Mazda Motor Corp Control device for vehicle
JP2004110347A (en) * 2002-09-18 2004-04-08 Nissan Motor Co Ltd VEHICLE DRIVE OPERATION ASSISTANCE DEVICE, VEHICLE DRIVE OPERATION ASSISTANCE METHOD, AND VEHICLE USING THE METHOD
JP2005267112A (en) * 2004-03-17 2005-09-29 Toyota Central Res & Dev Lab Inc Driver state estimation device and information presentation system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002025000A (en) * 2000-07-11 2002-01-25 Mazda Motor Corp Control device for vehicle
JP2004110347A (en) * 2002-09-18 2004-04-08 Nissan Motor Co Ltd VEHICLE DRIVE OPERATION ASSISTANCE DEVICE, VEHICLE DRIVE OPERATION ASSISTANCE METHOD, AND VEHICLE USING THE METHOD
JP2005267112A (en) * 2004-03-17 2005-09-29 Toyota Central Res & Dev Lab Inc Driver state estimation device and information presentation system

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013034182A1 (en) * 2011-09-08 2013-03-14 Valeo Schalter Und Sensoren Gmbh Method for creating a vehicle surroundings map, driver assistance device, and vehicle having a driver assistance device
JP2013250781A (en) * 2012-05-31 2013-12-12 Toyota Motor Corp Drive support device and drive support method
JP2014080179A (en) * 2012-09-26 2014-05-08 Nissan Motor Co Ltd Steering control device
JP2014098965A (en) * 2012-11-13 2014-05-29 Toyota Motor Corp Drive support apparatus and drive support method
WO2015008380A1 (en) * 2013-07-19 2015-01-22 本田技研工業株式会社 Vehicle travel safety device, vehicle travel safety method, and vehicle travel safety program
JPWO2015008380A1 (en) * 2013-07-19 2017-03-02 本田技研工業株式会社 Vehicle travel safety device, vehicle travel safety method, and vehicle travel safety program
JP7712725B2 (en) 2014-09-30 2025-07-24 Case特許株式会社 vehicle
JP2025090785A (en) * 2014-09-30 2025-06-17 Case特許株式会社 vehicle
JP2020175803A (en) * 2019-04-19 2020-10-29 マツダ株式会社 Vehicle control device
CN111824089A (en) * 2019-04-19 2020-10-27 马自达汽车株式会社 Vehicle control device
CN111824088A (en) * 2019-04-19 2020-10-27 马自达汽车株式会社 vehicle control device
CN111824090A (en) * 2019-04-19 2020-10-27 马自达汽车株式会社 Vehicle control device
EP3725628A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
EP3725629A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
EP3725630A1 (en) * 2019-04-19 2020-10-21 Mazda Motor Corporation Vehicle control device
JP2020175804A (en) * 2019-04-19 2020-10-29 マツダ株式会社 Vehicle control device
JP2020175795A (en) * 2019-04-19 2020-10-29 マツダ株式会社 Vehicle control device
JP2020175794A (en) * 2019-04-19 2020-10-29 マツダ株式会社 Vehicle control device
JP7332996B2 (en) 2019-04-19 2023-08-24 マツダ株式会社 vehicle controller
CN111845731A (en) * 2019-04-24 2020-10-30 马自达汽车株式会社 Vehicle control device
CN111845670B (en) * 2019-04-24 2022-07-19 马自达汽车株式会社 Vehicle control device
CN111845670A (en) * 2019-04-24 2020-10-30 马自达汽车株式会社 Vehicle control device
EP3730367A1 (en) * 2019-04-24 2020-10-28 Mazda Motor Corporation Vehicle control device, method and computer program product
EP3730368A1 (en) * 2019-04-24 2020-10-28 Mazda Motor Corporation Vehicle control device, method and computer program product
WO2022054311A1 (en) * 2020-09-14 2022-03-17 株式会社日立製作所 Vehicle control device
JP2022047738A (en) * 2020-09-14 2022-03-25 株式会社日立製作所 Vehicle control unit
JP7443208B2 (en) 2020-09-14 2024-03-05 日立Astemo株式会社 Vehicle control device
CN113353069A (en) * 2021-07-22 2021-09-07 中国第一汽车股份有限公司 Automatic emergency braking system, and method and system for adjusting automatic emergency braking system
CN113353069B (en) * 2021-07-22 2023-03-24 中国第一汽车股份有限公司 Automatic emergency braking system, and method and system for adjusting automatic emergency braking system
JP2024052613A (en) * 2022-09-30 2024-04-11 本田技研工業株式会社 MOVING OBJECT PREDICTION DEVICE, TRAFFIC SAFETY SUPPORT SYSTEM, AND COMPUTER PROGRAM
JP7652855B2 (en) 2022-09-30 2025-03-27 本田技研工業株式会社 MOVING OBJECT PREDICTION DEVICE, TRAFFIC SAFETY SUPPORT SYSTEM, AND COMPUTER PROGRAM

Also Published As

Publication number Publication date
JP5897787B2 (en) 2016-03-30

Similar Documents

Publication Publication Date Title
JP5897787B2 (en) Driving support device and driving support method
CN113734159B (en) Control apparatus for vehicle and control method for vehicle
US10832578B2 (en) System and method for collision prevention
CN106515735B (en) Drive off parking space assist
EP2032406B1 (en) Method and apparatus for using an automated lane keeping system to maintain lateral vehicle spacing
CN104798123B (en) Drive assistance device and driving assistance method
JP5601453B2 (en) Vehicle driving support device
EP3699049A1 (en) Vehicle control device
US20210229660A1 (en) Driving assist system
JP6485328B2 (en) Vehicle driving support device
KR101478068B1 (en) Apparatus for preventing collision in vehicle and method thereof
JP2009078733A (en) Driving support device
JP5768891B2 (en) Vehicle driving support system
JP2011198247A (en) Driving support device
KR20100106570A (en) Device, method, and computer program for avoiding collisions or minimizing the collision severity in case of a collision, for vehicles, particularly commercial vehicles
KR20150110713A (en) Method for determining a triggering criterion for braking and an emergency braking system for a vehicle
JP2010083312A (en) Vehicle drive assist system
JP2014093040A (en) Collision avoidance support device and collision avoidance support method
CN103140403A (en) Driving support device and method
CN103459225A (en) driving support system
JP2008195289A (en) Vehicle driving support device
US20210229659A1 (en) Driving assist system
JP5321441B2 (en) Driving assistance device
JP5440292B2 (en) Vehicle control device
JP2010018162A (en) Vehicle collision preventive device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131210

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140722

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150303

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160303

R151 Written notification of patent or utility model registration

Ref document number: 5897787

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151