JP2018149942A - 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム - Google Patents
集中度判定装置、集中度判定方法及び集中度判定のためのプログラム Download PDFInfo
- Publication number
- JP2018149942A JP2018149942A JP2017048187A JP2017048187A JP2018149942A JP 2018149942 A JP2018149942 A JP 2018149942A JP 2017048187 A JP2017048187 A JP 2017048187A JP 2017048187 A JP2017048187 A JP 2017048187A JP 2018149942 A JP2018149942 A JP 2018149942A
- Authority
- JP
- Japan
- Prior art keywords
- concentration
- driving
- driver
- mode
- driving mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
- B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/005—Handover processes
- B60W60/0059—Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D6/00—Arrangements for automatically controlling steering depending on driving conditions sensed and responded to, e.g. control circuits
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
- Steering Control In Accordance With Driving Conditions (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】運転の安全性及び運転の快適性の双方に配慮するようにする。【解決手段】集中度判定装置は、車両の運転者を監視するセンサから監視データを取得する監視データ取得部と、前記監視データから前記運転者の運転集中度を推定する集中度推定部と、前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較部と、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力部とを備える。【選択図】図4
Description
この発明は、例えば、車両の運転者の集中度を判定する集中度判定装置、集中度判定方法及び集中度判定のためのプログラムに関する。
近年、車両の運転モードとして、運転者の運転操作に基づいて車両を走行させる手動運転モード以外に、運転者の運転操作によらず予め設定された経路に沿って車両を走行させる自動運転モードの開発が進められている。
運転中における運転者の注意行動を検出して、運転者に警告する技術の開発も進められている(特許文献1参照)。
運転者には運転の安全性が求められているが、運転者に求められる運転集中度は、運転者の置かれている状況に応じて異なる。車両が常に厳しい基準で運転者の運転集中度を監視し、運転集中度がこの基準を下回った時に警告を発するようにしていれば、運転の安全性は保たれる。しかしながら、運転者の置かれている状況によっては、車両は頻繁に警報を発することになる。この場合、運転者の運転の快適性は損なわれる。
この発明は、上記事情に着目してなされたもので、運転の安全性及び運転の快適性の双方に配慮することができる集中度判定装置、集中度判定方法及び集中度判定のためのプログラムを提供しようとするものである。
上記課題を解決するために、この発明の第1の態様は、車両の運転者を監視するセンサから監視データを取得する監視データ取得部と、前記監視データから前記運転者の運転集中度を推定する集中度推定部と、前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較部と、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力部とを備える集中度判定装置である。
この発明の第2の態様は、第1の態様の集中度判定装置において、前記集中度推定部が、前記運転者の眠気及び脇見の少なくとも何れかを指標として前記運転集中度を推定するようにしたものである。
この発明の第3の態様は、第1の態様の集中度判定装置において、前記信号出力部が、前記運転集中度を推定する指標に応じて前記第1の時間の長さ及び前記第2の時間の長さの少なくとも何れか一方を変更するようにしたものである。
この発明の第4の態様は、第1の態様の集中度判定装置において、前記信号出力部は、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさないと判定された場合であっても、前記第1の時間内に前記運転集中度が前記自動運転モード用の基準を満たした場合、前記指示信号を出力しないこと、及び、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさないと判定された場合であっても、前記第2の時間内に前記運転集中度が前記手動運転モード用の基準を満たした場合、前記指示信号を出力しないこと、の少なくとも何れか一方を行うようにしたものである。
この発明の第5の態様は、車両の運転者を監視するセンサから監視データを取得する監視データ取得過程と、前記監視データから前記運転者の運転集中度を推定する集中度推定過程と、前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較過程と、前記自動運転モードにおいて前記運転集中度が前記自動運転用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力過程とを備える集中度判定方法である。
この発明の第6の態様は、第1の態様から第5の態様の何れかの態様の集中度判定装置が備える各部の処理をコンピュータに機能させる集中度判定のためのプログラムである。
この発明の第1の態様によれば、集中度判定装置は、手動運転モードの場合には自動運転モードの場合よりも警告の緊急度が高いため、早く指示信号を出力することができる。運転者は、指示信号に基づく警告によって、手動運転モードの場合には自動運転モードの場合よりも早く運転集中度の低下を認識して運転集中度を高めることができる。したがって、運転の安全性は、運転モードによらずに保たれる。
さらに、第1の態様によれば、集中度判定装置は、自動運転モードの場合には第2の時間よりも長い第1の時間の経過を待って指示信号を出力することができる。集中度判定装置は、第1の時間の経過前に発生した事象によって指示信号の出力を必要としない場合には、自動運転モードの場合における過剰な指示信号の出力を減らすことができる。運転者は、自動運転モードの場合に過剰な警告を受けることがなくなるので、運転モードによらず、運転に集中した状態を快適に保つことができる。したがって、運転の快適性は、運転モードによらずに保たれる。
すなわち、第1の態様によれば、集中度判定装置は、運転の安全性及び運転の快適性の双方に配慮することができる。
さらに、第1の態様によれば、集中度判定装置は、自動運転モードの場合には第2の時間よりも長い第1の時間の経過を待って指示信号を出力することができる。集中度判定装置は、第1の時間の経過前に発生した事象によって指示信号の出力を必要としない場合には、自動運転モードの場合における過剰な指示信号の出力を減らすことができる。運転者は、自動運転モードの場合に過剰な警告を受けることがなくなるので、運転モードによらず、運転に集中した状態を快適に保つことができる。したがって、運転の快適性は、運転モードによらずに保たれる。
すなわち、第1の態様によれば、集中度判定装置は、運転の安全性及び運転の快適性の双方に配慮することができる。
この発明の第2の態様によれば、集中度判定装置は、眠気または脇見という運転モードによらず運転の安全性への影響が大きい指標を用いて運転者が運転に適した状態か否かを監視することができる。これにより、運転者は、運転モードによらず、運転に集中した状態を保つことができる。
この発明の第3の態様によれば、集中度判定装置は、自動運転モードの場合及び手動運転モードの場合の少なくとも何れか一方において、指標毎の警告の緊急度に応じた早さで指示信号を出力することができる。運転者は、適切なタイミングで警告を受けることができるので、適切に運転モードに適した状態を保つことができる。
この発明の第4の態様によれば、集中度判定装置は、自動運転モードの場合及び手動運転モードの場合の少なくとも何れか一方において、不要となった指示信号の出力を中止することができる。集中度判定装置は、過剰な指示信号の出力を減らすことができる。運転者は、過剰な警告を受けることがなくなるので、運転に集中した状態を快適に保つことができる。集中度判定装置が指示信号の出力を中止したとしても、運転集中度は基準を満たすように回復している。したがって、運転の安全性は保たれる。
この発明の第5の態様によれば、集中度判定方法は、上述の第1の態様と同様の効果を得ることができる。すなわち、集中度判定方法は、運転の安全性及び運転の快適性の双方に配慮することができる。
この発明の第6の態様によれば、集中度判定のためのプログラムは、上述の第1の態様と同様の効果を得ることができる。すなわち、集中度判定のためのプログラムは、運転の安全性及び運転の快適性の双方に配慮することができる。
以下、図面を参照してこの発明に係る実施形態について説明する。
[一実施形態]
(構成)
図1は、この発明の一実施形態に係る集中度判定装置2を備えた車両1の全体構成を示す図である。集中度判定装置2は、乗用車等の車両1に搭載される。集中度判定装置2の構成については後述する。車両1は、例えば、自動車、バス、トラック及び電車等のうちの何れかであっても、これら以外の運転者(以下、ドライバとも称する)が乗る乗り物であってもよい。
[一実施形態]
(構成)
図1は、この発明の一実施形態に係る集中度判定装置2を備えた車両1の全体構成を示す図である。集中度判定装置2は、乗用車等の車両1に搭載される。集中度判定装置2の構成については後述する。車両1は、例えば、自動車、バス、トラック及び電車等のうちの何れかであっても、これら以外の運転者(以下、ドライバとも称する)が乗る乗り物であってもよい。
車両1は、基本設備として、動力源及び変速装置を含むパワーユニット3と、ステアリングホイール5が装備された操舵装置4とを備え、さらに運転モードとしては手動運転モードと自動運転モードとを備えている。動力源としては、エンジンまたはモータ、あるいはその両方が用いられる。
手動運転モードは、例えば、運転者の手動による運転操作を主体として車両1を走行させるモードである。手動運転モードには、例えば、運転者の運転操作のみに基づいて車両1を走行させる動作モードと、運転者の運転操作を主体としながら運転者の運転操作を支援する運転操作支援制御を行う動作モードが含まれる。
運転操作支援制御は、例えば、車両1のカーブ走行時にカーブの曲率に基づいて運転者の操舵が適切な操舵量となるように操舵トルクをアシストする。また運転操作支援制御には、運転者のアクセル操作(例えばアクセルペダルの操作)またはブレーキ操作(例えばブレーキペダルの操作)を支援する制御と、手動操舵(操舵の手動運転)及び手動速度調整(速度調整の手動運転)も含まれる。手動操舵は、運転者のステアリングホイール5の操作を主体として車両1の操舵を行う。手動速度調整は、運転者のアクセル操作またはブレーキ操作を主体として車両1の速度調整を行う。
なお、運転操作支援制御には、運転者の運転操作に強制的に介入して、車両1を自動走行させる制御は含まれない。すなわち、手動運転モードには、予め設定された許容範囲において運転者の運転操作を車両1の走行に反映させるが、一定条件(例えば車両1の車線逸脱等)の下で車両1の走行に強制的に介入する制御は含まれない。
一方、自動運転モードは、例えば、車両1の走行する道路に沿って自動で車両1を走行させる運転状態を実現するモードである。自動運転モードには、例えば、運転者が運転操作をすることなく、予め設定された目的地に向かって自動的に車両1を走行させる運転状態が含まれる。自動運転モードは、必ずしも車両1の全ての制御を自動で行う必要はなく、予め設定された許容範囲において運転者の運転操作を車両1の走行に反映する運転状態も自動運転モードに含まれる。すなわち、自動運転モードには、予め設定された許容範囲において運転者の運転操作を車両1の走行に反映させるが、一定条件の下で車両1の走行に強制的に介入する制御が含まれる。
車両1は、さらに、車外カメラ6と、ステアリングセンサ7と、アクセルペダルセンサ8と、ブレーキペダルセンサ9と、GPS受信機10と、ジャイロセンサ11と、車速センサ12と、ナビゲーション装置13と、自動運転制御装置14と、ドライバカメラ15と、音声出力装置16とを備える。
車外カメラ6は、車両1の外部を撮影することができるように、車両1の任意の位置に設置されている。なお、図1には1つの車外カメラ6を示しているが、車両1は、異なる方向を撮影する複数の車外カメラを備えていてもよい。車外カメラ6は、車両1の近傍の走行環境を連続的に撮影する。車外カメラ6は、車両1の運転開始に応答して起動し、車両1の外部を連続的に撮影する。車外カメラ6は、撮影した画像(以下、車外画像データとも称する)を集中度判定装置2及び自動運転制御装置14へ出力する。
ステアリングセンサ7は、操舵角を検出する。ステアリングセンサ7は、検出結果を自動運転制御装置14へ出力する。
アクセルペダルセンサ8は、アクセルペダルの操作量を検出する。アクセルペダルセンサ8は、検出結果を自動運転制御装置14へ出力する。
ブレーキペダルセンサ9は、ブレーキペダルの操作量を検出する。ブレーキペダルセンサ9は、検出結果を自動運転制御装置14へ出力する。
GPS受信機10は、車両1の現在位置情報を受信する。GPS受信機10は、現在位置情報を集中度判定装置2、ナビゲーション装置13及び自動運転制御装置14へ出力する。
ジャイロセンサ11は、車両1の挙動を検出する。ジャイロセンサ11は、検出結果を自動運転制御装置14へ出力する。
車速センサ12は、車両1の速度を検出する。車速センサ12は、検出結果を自動運転制御装置14へ出力する。
アクセルペダルセンサ8は、アクセルペダルの操作量を検出する。アクセルペダルセンサ8は、検出結果を自動運転制御装置14へ出力する。
ブレーキペダルセンサ9は、ブレーキペダルの操作量を検出する。ブレーキペダルセンサ9は、検出結果を自動運転制御装置14へ出力する。
GPS受信機10は、車両1の現在位置情報を受信する。GPS受信機10は、現在位置情報を集中度判定装置2、ナビゲーション装置13及び自動運転制御装置14へ出力する。
ジャイロセンサ11は、車両1の挙動を検出する。ジャイロセンサ11は、検出結果を自動運転制御装置14へ出力する。
車速センサ12は、車両1の速度を検出する。車速センサ12は、検出結果を自動運転制御装置14へ出力する。
ナビゲーション装置13は、映像を表示するディスプレイ131を備える映像表示装置の一例である。ナビゲーション装置13は、地図情報を記憶している。ナビゲーション装置13は、運転者等によって入力される目的地に関する情報と、地図情報と、GPS受信機10からの現在位置情報とを用いて、現在位置から目的地までの経路情報を抽出する。ナビゲーション装置13は、経路情報をディスプレイ131に表示する。ナビゲーション装置13は、経路情報以外の情報をディスプレイ131に表示することもできる。
ナビゲーション装置13は、経路情報を集中度判定装置2及び自動運転制御装置14へ出力する。
ナビゲーション装置13は、経路情報を集中度判定装置2及び自動運転制御装置14へ出力する。
上述の経路情報は、現在位置から目的地までの道順の情報だけでなく、現在位置から目的地までの道路環境に関する情報を含んでいてもよい。
道路環境に関する情報のいくつかの例について説明する。
道路環境に関する情報は、現在位置から目的地までに通過する道路の種別の情報を含んでいてもよい。道路の種別は、例えば、人の通行が制限されている道路または人の通行が制限されていない道路などに分けられる。人の通行が制限されている道路は、例えば、高速道路である。高速道路は、高速自動車国道と自動車専用道路とを指す。人の通行が制限されていない道路は、例えば、一般道路である。一般道路は、高速道路以外の道路を指す。
道路環境に関する情報のいくつかの例について説明する。
道路環境に関する情報は、現在位置から目的地までに通過する道路の種別の情報を含んでいてもよい。道路の種別は、例えば、人の通行が制限されている道路または人の通行が制限されていない道路などに分けられる。人の通行が制限されている道路は、例えば、高速道路である。高速道路は、高速自動車国道と自動車専用道路とを指す。人の通行が制限されていない道路は、例えば、一般道路である。一般道路は、高速道路以外の道路を指す。
道路環境に関する情報は、現在位置から目的地までに通過する道路の制限速度の情報を含んでいてもよい。
道路環境に関する情報は、現在位置から目的地までに通過する道路上の設置物の位置情報を含んでいてもよい。設置物は、例えば、標識であるが、これ以外に道路に設置されている物であってもよい。
道路環境に関する情報は、現在位置から目的地までに通過する道路近傍の建造物の位置情報を含んでいてもよい。
なお、経路情報は、道路環境に関する情報として、上述の例以外の情報を含んでいてもよい。
道路環境に関する情報は、現在位置から目的地までに通過する道路上の設置物の位置情報を含んでいてもよい。設置物は、例えば、標識であるが、これ以外に道路に設置されている物であってもよい。
道路環境に関する情報は、現在位置から目的地までに通過する道路近傍の建造物の位置情報を含んでいてもよい。
なお、経路情報は、道路環境に関する情報として、上述の例以外の情報を含んでいてもよい。
自動運転制御装置14の構成について説明する。
自動運転制御装置14は、運転モードが自動運転モードである場合に車両1の走行を自動制御する。
自動運転制御装置14は、車外カメラ6からの車外画像データと、ステアリングセンサ7からの検出結果と、アクセルペダルセンサ8からの検出結果と、ブレーキペダルセンサ9からの検出結果と、GPS受信機10からの現在位置情報と、ジャイロセンサ11からの検出結果と、車速センサ12からの検出結果と、ナビゲーション装置13からの経路情報とを取得する。自動運転制御装置14は、例えば、これらの情報と、路車間通信により取得される交通情報とを基にして、車両1の走行を自動制御する。
自動運転制御装置14は、運転モードが自動運転モードである場合に車両1の走行を自動制御する。
自動運転制御装置14は、車外カメラ6からの車外画像データと、ステアリングセンサ7からの検出結果と、アクセルペダルセンサ8からの検出結果と、ブレーキペダルセンサ9からの検出結果と、GPS受信機10からの現在位置情報と、ジャイロセンサ11からの検出結果と、車速センサ12からの検出結果と、ナビゲーション装置13からの経路情報とを取得する。自動運転制御装置14は、例えば、これらの情報と、路車間通信により取得される交通情報とを基にして、車両1の走行を自動制御する。
自動制御には、例えば、自動操舵(操舵の自動運転)と自動速度調整(速度の自動運転)がある。自動操舵は、操舵装置4を自動で制御する運転状態である。自動操舵にはLKAS(Lane Keeping Assist System)が含まれる。LKASは、例えば、運転者がステアリング操作をしない場合であっても、車両1が走行車線から逸脱しないように自動で操舵装置4を制御する。なお、LKASの実行中であっても、車両1が走行車線を逸脱しない範囲(許容範囲)において運転者のステアリング操作を車両1の操舵に反映してもよい。なお、自動操舵はLKASに限らない。
自動速度調整は、車両1の速度を自動で制御する運転状態である。自動速度調整にはACC(Adaptive Cruise Control)が含まれる。ACCとは、例えば、車両1の前方に先行車が存在しない場合は予め設定された設定速度で車両1を定速走行させる定速制御を行い、車両1の前方に先行車が存在する場合には先行車との車間距離に応じて車両1の車速を調整する追従制御を行うものである。自動運転制御装置14は、ACCを実行中であっても、運転者のブレーキ操作(例えばブレーキペダルの操作)に応じて車両1を減速させる。また自動運転制御装置14は、ACCを実行中であっても、予め設定された最大許容速度(例えば走行中の道路において法的に定められた最高速度)まで、運転者のアクセル操作(例えばアクセルペダルの操作)に応じて車両1を加速させることもできる。なお、自動速度調整は、ACCに限らず、CC(Cruise Control:定速制御)等も含まれる。
ドライバカメラ15の構成について説明する。
ドライバカメラ15は、例えば、ダッシュボード上のような運転者の正面となる位置に設置されている。ドライバカメラ15は、運転者を監視するセンサの一例である。ドライバカメラ15は、車両1の運転開始に応答して起動し、運転者の顔を含む所定の範囲を連続的に撮影する。ドライバカメラ15は、撮影した画像(以下、運転者画像データという)を集中度判定装置2へ出力する。運転者画像データは、運転者の状態を検出するために用いられる監視データの一例である。運転者の状態は、例えば、運転者の前方注視、眠気、脇見、服の着脱、電話操作、窓側・肘掛けへの寄り掛かり、同乗者やペットによる運転妨害、病気の発症、後ろ向き、突っ伏し、飲食、喫煙、めまい、異常行動、カーナビゲーション・オーディオ操作、眼鏡・サングラスの着脱、写真撮影及び対象に対する認知度合(対象認知度合)などの指標のうちの少なくとも何れか1つの指標を含む。対象認知度合は、運転者が対象を(例えば視覚的に)どの程度認知したかの指標であり、運転者が対象を(例えば目視で)確認して意識している度合である。運転者の状態は、ここに例示する指標以外の指標を含んでいてもよい。
ドライバカメラ15は、例えば、ダッシュボード上のような運転者の正面となる位置に設置されている。ドライバカメラ15は、運転者を監視するセンサの一例である。ドライバカメラ15は、車両1の運転開始に応答して起動し、運転者の顔を含む所定の範囲を連続的に撮影する。ドライバカメラ15は、撮影した画像(以下、運転者画像データという)を集中度判定装置2へ出力する。運転者画像データは、運転者の状態を検出するために用いられる監視データの一例である。運転者の状態は、例えば、運転者の前方注視、眠気、脇見、服の着脱、電話操作、窓側・肘掛けへの寄り掛かり、同乗者やペットによる運転妨害、病気の発症、後ろ向き、突っ伏し、飲食、喫煙、めまい、異常行動、カーナビゲーション・オーディオ操作、眼鏡・サングラスの着脱、写真撮影及び対象に対する認知度合(対象認知度合)などの指標のうちの少なくとも何れか1つの指標を含む。対象認知度合は、運転者が対象を(例えば視覚的に)どの程度認知したかの指標であり、運転者が対象を(例えば目視で)確認して意識している度合である。運転者の状態は、ここに例示する指標以外の指標を含んでいてもよい。
音声出力装置16は、スピーカ161を備える。音声出力装置16は、種々の情報を音声で出力する。
上述の集中度判定装置2の構成について説明する。
集中度判定装置2は、上述の運転者の状態に基づいて運転者の運転集中度を推定し、運転者が車両1の運転に適した状態か否かを判定する。運転集中度は、運転者が車両1の運転に適した度合いである。運転集中度が高くなるにつれ、運転者は、より車両1の運転に適した状態になる。逆に、運転集中度が低くなるにつれ、運転者は、より車両1の運転に適さない状態になる。
集中度判定装置2は、上述の運転者の状態に基づいて運転者の運転集中度を推定し、運転者が車両1の運転に適した状態か否かを判定する。運転集中度は、運転者が車両1の運転に適した度合いである。運転集中度が高くなるにつれ、運転者は、より車両1の運転に適した状態になる。逆に、運転集中度が低くなるにつれ、運転者は、より車両1の運転に適さない状態になる。
図2は、一例となる集中度判定装置2の構成を示すブロック図である。
集中度判定装置2は、入出力インタフェースユニット21と、記憶ユニット22と、制御ユニット23とを備える。
集中度判定装置2は、入出力インタフェースユニット21と、記憶ユニット22と、制御ユニット23とを備える。
入出力インタフェースユニット21は、車外カメラ6、GPS受信機10、ナビゲーション装置13、自動運転制御装置14、ドライバカメラ15及び音声出力装置16それぞれを、制御ユニット23と接続する。
記憶ユニット22の構成について説明する。
記憶ユニット22は、例えば、SSD(Solid State Drive)やHDD(Hard Disk Drive)等の随時書き込み及び読み出しが可能な不揮発性メモリである。記憶ユニット22は、運転者画像データ記憶部221と、車外画像データ記憶部222と、集中度テーブル記憶部223とを備える。
記憶ユニット22は、例えば、SSD(Solid State Drive)やHDD(Hard Disk Drive)等の随時書き込み及び読み出しが可能な不揮発性メモリである。記憶ユニット22は、運転者画像データ記憶部221と、車外画像データ記憶部222と、集中度テーブル記憶部223とを備える。
運転者画像データ記憶部221は、制御ユニット23がドライバカメラ15から取得する運転者画像データを記憶する。
車外画像データ記憶部222は、制御ユニット23が車外カメラ6から取得する車外画像データを記憶する。
車外画像データ記憶部222は、制御ユニット23が車外カメラ6から取得する車外画像データを記憶する。
集中度テーブル記憶部223は、制御ユニット23が運転集中度を推定するために用いる集中度テーブルを記憶する。集中度テーブルは、各指標について、運転者の状態を、運転集中度に応じた複数のレベルに分けて対応付けている。複数のレベルは、例えば、レベル1、レベル2及びレベル3の3段階に分けられているが、これに限られるものではない。ここでは、レベルの番号が大きくなるにつれ、運転集中度が低くなるように設定されている例について説明するが、これに限られない。レベルの番号が大きくなるにつれ、運転集中度が高くなるように設定されていてもよい。
集中度テーブルに管理されている情報について、脇見を例にして説明する。
集中度テーブルは、指標となる脇見について、以下のように、運転者の状態をレベル1、レベル2及びレベル3それぞれと対応付けている。レベル1は、例えば、車両1の進行方向に対して0度以上第1の角度未満の範囲内の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル1は、運転者が脇見をしておらず、運転集中度が高い状態である。レベル2は、例えば、車両1の進行方向に対して第1の角度以上第2の角度未満の範囲内の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル2は、運転者が少し脇見をしており、レベル1よりも運転集中度が低い状態である。レベル3は、例えば、車両1の進行方向に対して第2の角度以上の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル3は、運転者が脇見をしており、レベル2よりも運転集中度が低い状態である。ここでは、脇見を例にして集中度テーブルに管理されている情報について説明したが、他の指標についても同様である。
集中度テーブルは、指標となる脇見について、以下のように、運転者の状態をレベル1、レベル2及びレベル3それぞれと対応付けている。レベル1は、例えば、車両1の進行方向に対して0度以上第1の角度未満の範囲内の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル1は、運転者が脇見をしておらず、運転集中度が高い状態である。レベル2は、例えば、車両1の進行方向に対して第1の角度以上第2の角度未満の範囲内の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル2は、運転者が少し脇見をしており、レベル1よりも運転集中度が低い状態である。レベル3は、例えば、車両1の進行方向に対して第2の角度以上の角度で傾く方向を見ている運転者の状態と対応付けられている。つまり、レベル3は、運転者が脇見をしており、レベル2よりも運転集中度が低い状態である。ここでは、脇見を例にして集中度テーブルに管理されている情報について説明したが、他の指標についても同様である。
制御ユニット23の構成について説明する。
制御ユニット23は、プロセッサ231と、メモリ232とを備える。
プロセッサ231は、例えば、コンピュータを構成するCPU(Central Processing Unit)である。プロセッサ231が備える各部の構成については後述する。なお、図2には1つのプロセッサ231を示しているが、制御ユニット23は、1以上のプロセッサを備えていてもよい。
メモリ232は、プロセッサ231が備える各部の処理をプロセッサ231に機能させるプログラムを備える。プログラムは、プロセッサ231を動作させる命令ということもできる。プログラムは、記憶ユニット22に記憶されており、記憶ユニット22からメモリ232に読み出される。メモリ232のプログラムは、プロセッサ231によって読み出される。一実施形態は、プログラムによって実現されてもよい。
制御ユニット23は、プロセッサ231と、メモリ232とを備える。
プロセッサ231は、例えば、コンピュータを構成するCPU(Central Processing Unit)である。プロセッサ231が備える各部の構成については後述する。なお、図2には1つのプロセッサ231を示しているが、制御ユニット23は、1以上のプロセッサを備えていてもよい。
メモリ232は、プロセッサ231が備える各部の処理をプロセッサ231に機能させるプログラムを備える。プログラムは、プロセッサ231を動作させる命令ということもできる。プログラムは、記憶ユニット22に記憶されており、記憶ユニット22からメモリ232に読み出される。メモリ232のプログラムは、プロセッサ231によって読み出される。一実施形態は、プログラムによって実現されてもよい。
プロセッサ231が備える各部の構成について説明する。
プロセッサ231は、監視データ取得部2311と、車外画像データ取得部2312と、経路情報取得部2313と、現在位置情報取得部2314と、状態検出部2315と、集中度推定部2316と、基準比較部2317と、信号出力部2318とを備える。なお、各部は、1以上のプロセッサに分散されていてもよい。
プロセッサ231は、監視データ取得部2311と、車外画像データ取得部2312と、経路情報取得部2313と、現在位置情報取得部2314と、状態検出部2315と、集中度推定部2316と、基準比較部2317と、信号出力部2318とを備える。なお、各部は、1以上のプロセッサに分散されていてもよい。
監視データ取得部2311は、入出力インタフェースユニット21を介して、ドライバカメラ15から運転者画像データを取得する。監視データ取得部2311は、運転者画像データを運転者画像データ記憶部221に記憶させる。
車外画像データ取得部2312は、入出力インタフェースユニット21を介して、車外カメラ6から車外画像データを取得する。車外画像データ取得部2312は、車外画像データを車外画像データ記憶部222に記憶させる。
車外画像データ取得部2312は、入出力インタフェースユニット21を介して、車外カメラ6から車外画像データを取得する。車外画像データ取得部2312は、車外画像データを車外画像データ記憶部222に記憶させる。
経路情報取得部2313は、入出力インタフェースユニット21を介して、ナビゲーション装置13から経路情報を取得する。経路情報取得部2313は、経路情報を状態検出部2315へ出力する。
現在位置情報取得部2314は、入出力インタフェースユニット21を介して、GPS受信機10から現在位置情報を取得する。現在位置情報取得部2314は、現在位置情報を状態検出部2315へ出力する。
現在位置情報取得部2314は、入出力インタフェースユニット21を介して、GPS受信機10から現在位置情報を取得する。現在位置情報取得部2314は、現在位置情報を状態検出部2315へ出力する。
状態検出部2315は、運転者画像データ記憶部221に記憶されている運転者画像データから運転者の状態を検出する。状態検出部2315は、運転者画像データの他に、例えば、車外画像データ、経路情報及び現在位置情報の少なくとも何れか1つを用いて、運転者の状態として上述の対象認知度合を検出してもよい。状態検出部2315による運転者の状態の検出例については後述する。なお、状態検出部2315は、運転者画像データ記憶部221を介することなく、監視データ取得部2311から運転者画像データを取得してもよい。この場合、記憶ユニット22は、運転者画像データ記憶部221を備えていなくてもよい。
状態検出部2315は、運転者の状態を集中度推定部2316へ出力する。
状態検出部2315は、運転者の状態を集中度推定部2316へ出力する。
集中度推定部2316は、状態検出部2315で検出された運転者の状態に基づいて運転者の運転集中度を推定する。なお、運転者の状態は上述のように運転者画像データから検出されるので、集中度推定部2316は、運転者画像データから運転者の運転集中度を推定するということもできる。
集中度推定部2316は、運転者の状態に含まれる1以上の指標に基づいて運転集中度を推定する。集中度推定部2316は、例えば、複数の指標のそれぞれに対応する運転集中度を推定してもよい。集中度推定部2316は、例えば、眠気を指標とした運転集中度を推定すると共に、脇見を指標とした運転集中度も推定する。集中度推定部2316は、例えば、複数の指標に基づいて単一の運転集中度を推定してもよい。この場合、集中度推定部2316は、各指標に適宜重みを設定することで、単一の運転集中度を推定してもよい。各指標に設定される重みは、任意に変更可能であってもよい。
一例では、集中度推定部2316は、運転集中度を割合などの数値で推定することができる。集中度推定部2316によって推定される数値は、運転集中度が高くなるにつれ大きくなってもよいし、運転集中度が高くなるにつれ小さくなってもよい。
別の例では、集中度推定部2316は、集中度テーブル記憶部223に記憶されている集中度テーブルを参照して、複数のレベルから運転者の状態に相当する運転集中度のレベルを推定することができる。なお、集中度推定部2316が運転集中度を数値で推定する場合、記憶ユニット22は、集中度テーブル記憶部223を備えていなくてもよい。
集中度推定部2316による運転集中度の推定は、機械学習やディープラーニング等のAI(Artificial Intelligence:人工知能)機能を用いて行われてもよい。この場合、集中度推定部2316は、例えば、過去の推定結果を現在の運転集中度の推定に活用することで、高精度に運転者の状態を推定することができる。
基準比較部2317の構成について説明する。
基準比較部2317は、集中度推定部2316で推定された運転集中度を基準と比較するために、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定する。基準比較部2317は、例えば、以下のように、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定する。集中度判定装置2は、運転モードが手動運転モードから自動運転モードへ切り替わる際に自動運転制御装置14から信号を受信してもよい。集中度判定装置2は、運転モードが自動運転モードから手動運転モードへ切り替わる際に自動運転制御装置14から信号を受信してもよい。信号出力部2319は、自動運転制御装置14からの信号に基づいて、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定することができる。
基準比較部2317は、集中度推定部2316で推定された運転集中度を基準と比較するために、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定する。基準比較部2317は、例えば、以下のように、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定する。集中度判定装置2は、運転モードが手動運転モードから自動運転モードへ切り替わる際に自動運転制御装置14から信号を受信してもよい。集中度判定装置2は、運転モードが自動運転モードから手動運転モードへ切り替わる際に自動運転制御装置14から信号を受信してもよい。信号出力部2319は、自動運転制御装置14からの信号に基づいて、運転モードが自動運転モードまたは手動運転モードの何れであるのかを判定することができる。
基準比較部2317は、集中度推定部2316で推定された運転集中度と基準とを比較する。基準比較部2317は、運転モードが自動運転モードである場合に集中度推定部2316で推定された運転集中度と自動運転モード用の基準とを比較する。基準比較部2317は、例えば、集中度推定部2316で推定された運転集中度と、自動運転モード用の基準となる自動運転モード用の基準値または自動運転モード用の基準レベルとを比較する。運転集中度が自動運転モード用の基準値または自動運転モード用の基準レベル以上であれば、基準比較部2317は、運転集中度が自動運転モード用の基準を満たすと判断する。
基準比較部2317は、運転モードが手動運転モードである場合に集中度推定部2316で推定された運転集中度と手動運転モード用の基準とを比較する。基準比較部2317は、例えば、集中度推定部2316で推定された運転集中度と、手動運転モード用の基準となる手動運転モード用の基準値または手動運転モード用の基準レベルとを比較する。運転集中度が手動運転モード用の基準値または手動運転モード用の基準レベル以上であれば、基準比較部2317は、運転集中度が手動運転モード用の基準を満たすと判断する。
なお、上述の自動運転モード用の基準及び手動運転モード用の基準は、共通の基準であってもよいし、互いに異なる基準であってもよい。
集中度推定部2316が複数の指標それぞれについての運転集中度を推定する場合、基準比較部2317は、複数の指標それぞれについての運転集中度を基準と比較してもよい。集中度推定部2316が複数の指標に基づいて単一の運転集中度を推定する場合、基準比較部2317は、単一の運転集中度を基準と比較する。基準比較部2317は、比較結果を信号出力部2318へ出力する。なお、基準は、任意に変更可能であってもよい。
一例として、基準比較部2317による数値で推定された運転集中度と基準との比較について説明する。
はじめに、集中度推定部2316によって推定される数値が、運転集中度が高くなるにつれ大きくなる場合について説明する。基準値は数値Aとする。集中度推定部2316によって推定される数値が基準値である数値Aよりも小さければ、基準比較部2317は、集中度推定部2316によって推定される運転集中度が基準値よりも低いと判断する。
はじめに、集中度推定部2316によって推定される数値が、運転集中度が高くなるにつれ大きくなる場合について説明する。基準値は数値Aとする。集中度推定部2316によって推定される数値が基準値である数値Aよりも小さければ、基準比較部2317は、集中度推定部2316によって推定される運転集中度が基準値よりも低いと判断する。
次に、集中度推定部2316によって推定される数値が、運転集中度が高くなるにつれ小さくなる場合について説明する。集中度推定部2316によって推定される数値が基準値である数値Aよりも大きければ、基準比較部2317は、集中度推定部2316によって推定される運転集中度が基準値よりも低いと判断する。
別の例として、基準比較部2317によるレベルで推定した運転集中度と基準との比較について説明する。
基準レベルは複数のレベルのうちから抽出されるレベルBとする。集中度推定部2316によって推定されるレベルに基準レベルであるレベルBよりも低い運転集中度が割り当てられている場合、基準比較部2317は、集中度推定部2316によって推定される運転集中度が基準レベルよりも低いと判断する。
基準レベルは複数のレベルのうちから抽出されるレベルBとする。集中度推定部2316によって推定されるレベルに基準レベルであるレベルBよりも低い運転集中度が割り当てられている場合、基準比較部2317は、集中度推定部2316によって推定される運転集中度が基準レベルよりも低いと判断する。
ここでは、上述のように集中度テーブルが、各指標について、運転者の状態を、レベル1、レベル2及びレベル3の3段階に分けて対応付けている例について具体的に説明する。例えば、基準レベルをレベル1とする。基準比較部2317は、集中度推定部2316によって推定されるレベル2またはレベル3が基準レベルであるレベル1よりも低いと判断する。他方、基準比較部2317は、集中度推定部2316によって推定されるレベル1が基準レベルであるレベル1よりも低くないと判断する。
信号出力部2318は、入出力インタフェースユニット21を介して、各部へ信号を出力する。以下では、信号出力部2318が出力するいくつかの信号の例について説明する。
信号出力部2318は、基準比較部2317からの比較結果に基づいて、運転者に対する支援の実行を指示する指示信号を支援提供装置へ出力するか否かを判断する。信号出力部2318は、自動運転モードにおいて、集中度推定部2316によって推定された運転集中度が自動運転モード用の基準を満たさない場合に、第1の時間経過後に運転者へ指示信号を出力する。他方、信号出力部2318は、手動運転モードにおいて、集中度推定部2316によって推定された運転集中度が手動運転モード用の基準を満たさない場合に、第1の時間よりも短い第2の時間経過後に指示信号を出力する。支援提供装置は、信号出力部2318から指示信号を受信すると、運転者に対して所定の支援を実行する。支援提供装置は、例えば、ナビゲーション装置13または音声出力装置16である。
信号出力部2318は、例えば、基準比較部2317によって運転集中度が基準を満たさないと判断された時点から第1の時間または第2の時間のカウントを開始してもよい。信号出力部2318は、例えば、基準比較部2317から運転集中度が基準を満たさないことを示す比較結果を受信した時点から第1の時間または第2の時間のカウントを開始してもよい。なお、信号出力部2318が第1の時間または第2の時間のカウントを開始するタイミングは、これらに限られるものではなく、任意の時点からであってもよい。
なお、第1の時間及び第2の時間の長さは限定されるものではない。第1の時間は例えば4秒から10秒程度、第2の時間は1秒から2秒程度であってもよい。
なお、第1の時間及び第2の時間の長さは限定されるものではない。第1の時間は例えば4秒から10秒程度、第2の時間は1秒から2秒程度であってもよい。
信号出力部2318は、例えば、ナビゲーション装置13及び音声出力装置16の少なくとも何れか一方へ指示信号を出力する。ナビゲーション装置13は、指示信号に基づいて、運転者へ注意を与える警告を画像または映像でディスプレイ131に表示する。音声出力装置16は、指示信号に基づいて、運転者へ注意を与える警告を音声でスピーカ161から出力する。警告は、例えば、運転集中度が低いこと、または、運転に集中する必要があることなどを運転者へ注意する内容であればよく、特定の出力態様に限定されるものではない。運転者は、警告により、運転者自身が車両1の運転に適した状態ではないことを認識し、車両1の運転に集中し直すことができる。なお、信号出力部2318は、指示信号をナビゲーション装置13及び音声出力装置16以外の支援提供装置へ出力してもよい。信号出力部2318は、例えば、運転者に振動などの外部刺激を与える支援提供装置へ指示信号を出力してもよい。運転者に対する支援とは、運転集中度に基づいて運転者に作用する出力内容であればよく、警告や注意喚起、情報提供の他、運転集中度の改善を促す種々の支援も含まれる。
信号出力部2318は、複数の指標から推定された複数の運転集中度のうちの1以上の運転集中度が基準を満たさない場合に指示信号を出力することができる。信号出力部2318は、複数の指標から推定された複数の運転集中度のうちの所定数以上の運転集中度が基準を満たさない場合に指示信号を出力するようにしてもよい。信号出力部2318は、複数の指標に基づいて推定された単一の運転集中度が基準を満たさない場合に指示信号を出力するようにしてもよい。
信号出力部2318は、運転モードを切替えるための切替信号を自動運転制御装置14へ出力してもよい。
次に、状態検出部2315による運転者画像データを用いた運転者の状態の検出例について説明する。なお、運転者の状態の検出手法は、ここで説明する例に限られるものではない。
図3は、状態検出部2315の構成を示すブロック図である。状態検出部2315は、一例として、局所状態検出部23151と、大局状態検出部23152と、運転者状態検出部23153とを備える。
図3は、状態検出部2315の構成を示すブロック図である。状態検出部2315は、一例として、局所状態検出部23151と、大局状態検出部23152と、運転者状態検出部23153とを備える。
局所状態検出部23151は、運転者画像データ中の運転者の顔に含まれる器官のうちの少なくとも1つの状態を検出する。顔に含まれる器官は、例えば、眼、口、鼻及び耳であるが、これら以外であってもよい。局所状態検出部23151が眼の状態の検出する場合、局所状態検出部23151は、例えば、運転者の眼の開閉度、視線の方向及び顔の向きなどを検出する。局所状態検出部23151は、検出結果(以下、局所的な情報とも称する)を運転者状態検出部23153へ出力する。
大局状態検出部23152は、運転者画像データ中の運転者の大局的な状態うちの少なくとも1つの状態を検出する。大局的な状態は、例えば、運転者の動作及び姿勢などであるが、これら以外であってもよい。大局状態検出部23152は、検出結果(以下、大局的な情報とも称する)を運転者状態検出部23153へ出力する。
運転者状態検出部23153は、局所状態検出部23151からの局所的な情報及び大局状態検出部23152からの大局的な情報を用いて、上述の運転者の状態を検出する。
このように、状態検出部2315は、例えば、局所的な情報及び大局的な情報を組み合わせることで、様々な運転者の状態を検出することができる。
このように、状態検出部2315は、例えば、局所的な情報及び大局的な情報を組み合わせることで、様々な運転者の状態を検出することができる。
次に、状態検出部2315による対象認知度合のいくつかの検出例について説明する。状態検出部2315は、監視データと対象の位置情報とを用いて、対象認知度合を検出することができる。
一例として、状態検出部2315は、運転者画像データの他に車外画像データを用いて、以下のように運転者の視覚による対象認知度合を検出することができる。状態検出部2315は、対象認知度合を検出するための対象を車外画像データから抽出する。対象は、例えば、標識などの設置物及び建造物などであるが、運転者が(例えば目視で)確認して意識する可能性のあるものであれば特に限定されない。状態検出部2315は、対象を抽出した車外画像データの撮影されたタイミングと略同タイミングで撮影された運転者画像データから運転者の視線及び顔の向きを検出する。運転者の視線及び顔の向きは、上述のように、局所状態検出部23151で検出される。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方と対象の位置情報とを用いて、対象認知度合を検出する。運転者の視線及び顔の向きが対象に向くにつれ、対象認知度合は高くなるといえる。
状態検出部2315は、対象認知度合の高低を検出するためのいくつかの実施例を説明する。
一実施例では、状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置と一致した状態で所定時間滞留していたことを条件に、対象認知度合が高いと検出してもよい。他方、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置を向いたが対象を認知することなく通り過ぎたような場合には、状態検出部2315は、対象認知度合が低いと検出してもよい。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置と一致した状態で滞留する時間の長さに応じて、対象認知度合を検出してもよい。
一実施例では、状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置と一致した状態で所定時間滞留していたことを条件に、対象認知度合が高いと検出してもよい。他方、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置を向いたが対象を認知することなく通り過ぎたような場合には、状態検出部2315は、対象認知度合が低いと検出してもよい。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方が対象の位置と一致した状態で滞留する時間の長さに応じて、対象認知度合を検出してもよい。
別の実施例では、状態検出部2315は、運転者が対象を認知した結果生じると想定される特定の運転操作や運転者の動作の有無に基づき、対象認知度合を推定してもよい。例えば、運転者は、車両1の前方の横断歩道付近に歩行者が存在していることを認知すると、減速操作をすると想定される。そのため、集中度判定装置2が車両1の前方の横断歩道付近に歩行者が存在していることを検出した場合に、状態検出部2315は、運転者の減速操作を検出すると、対象認知度合が高いと検出してもよい。他方、集中度判定装置2が車両1の前方の横断歩道付近に歩行者が存在していることを検出した場合に、状態検出部2315は、所定時間経過しても運転者の減速操作を検出することができなければ、対象認知度合が低いと検出してもよい。例えば、集中度判定装置2が対象となる歩行者を検出した後から運転者の減速操作を検出するまでの時間の長さに応じて、状態検出部2315は、対象認知度合を検出してもよい。
別の例として、状態検出部2315は、運転者画像データの他に経路情報及び現在位置情報を用いて、以下のように、対象認知度合の検出をすることができる。
状態検出部2315は、経路情報及び現在位置情報を参照して、車両1の近傍に位置する対象を抽出する。対象は、上述のように、例えば、標識などの設置物及び建造物などであるが、運転者が(例えば目視で)確認して意識する可能性のあるものであれば特に限定されない。状態検出部2315は、車両1が対象の近傍を通過するタイミングと略同タイミングで撮影された運転者画像データから運転者の視線及び顔の向きを検出する。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方と対象の位置情報とを用いて、対象認知度合を検出する。
状態検出部2315は、経路情報及び現在位置情報を参照して、車両1の近傍に位置する対象を抽出する。対象は、上述のように、例えば、標識などの設置物及び建造物などであるが、運転者が(例えば目視で)確認して意識する可能性のあるものであれば特に限定されない。状態検出部2315は、車両1が対象の近傍を通過するタイミングと略同タイミングで撮影された運転者画像データから運転者の視線及び顔の向きを検出する。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方と対象の位置情報とを用いて、対象認知度合を検出する。
別の例として、状態検出部2315は、対象の位置及び車両1が対象の近傍を通過するタイミングを路車間通信で得るようにしてもよい。この場合、状態検出部2315は、車両1が対象の近傍を通過するタイミングと略同タイミングで撮影された運転者画像データから運転者の視線及び顔の向きを検出する。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方と対象の位置情報とを用いて、対象認知度合を検出する。
別の例として、状態検出部2315は、ナビゲーション装置13のディスプレイ131に表示される画像または映像を対象として用いてもよい。この場合、状態検出部2315は、画像または映像がディスプレイ131に表示されるタイミングと略同タイミングで撮影された運転者画像データから運転者の視線及び顔の向きを検出する。状態検出部2315は、運転者の視線及び顔の向きの少なくとも何れか一方と対象の位置情報とを用いて、対象認知度合を検出する。
上述のように状態検出部2315が少なくとも監視データ及び対象の位置情報を用いることで、状態検出部2315は、対象認知度合を指標とした運転者の状態を適切に検出することができる。
なお、状態検出部2315は、車両1の前後左右の何れの近傍に位置している対象を用いてもよい。状態検出部2315は、車両1の前側よりも、左側または右側の近傍に位置している対象を用いた方が好ましい。対象が車両1の前側に位置していれば、運転者の視線及び顔はそれほど動かない。これに対して、対象が車両1の左側または右側の近傍に位置していれば、運転者の視線及び顔は、左側または右側へ動く。そのため、状態検出部2315は、対象認知度合を適切に検出することができる。
なお、状態検出部2315は、車両1の前後左右の何れの近傍に位置している対象を用いてもよい。状態検出部2315は、車両1の前側よりも、左側または右側の近傍に位置している対象を用いた方が好ましい。対象が車両1の前側に位置していれば、運転者の視線及び顔はそれほど動かない。これに対して、対象が車両1の左側または右側の近傍に位置していれば、運転者の視線及び顔は、左側または右側へ動く。そのため、状態検出部2315は、対象認知度合を適切に検出することができる。
(動作)
次に、以上のように構成されている集中度判定装置2の動作を説明する。図4は、集中度判定装置2による集中度判定の一例となる手順を示すフローチャートである。
次に、以上のように構成されている集中度判定装置2の動作を説明する。図4は、集中度判定装置2による集中度判定の一例となる手順を示すフローチャートである。
監視データ取得部2311は、車両1の運転者を監視するセンサから監視データを取得する(ステップS101)。ステップS101では、監視データ取得部2311は、例えば、入出力インタフェースユニット21を介して、ドライバカメラ15から運転者画像データを取得する。なお、監視データ取得部2311が監視データを取得する間隔は、状態検出部2315が運転者の状態を検出する間隔と同じであっても、これより短くてもよい。
次に、状態検出部2315は、監視データから運転者の状態を検出する(ステップS102)。ステップS102では、状態検出部2315は、例えば、運転者画像データから運転者の状態を検出する。状態検出部2315は、例えば、予め定められた一定間隔で運転者の状態を検出することができる。状態検出部2315は、自動運転モードと手動運転モードとで同じ間隔で運転者の状態を検出しても、異なる間隔で運転者の状態を検出してもよい。状態検出部2315は、任意のタイミングで運転者の状態を検出してもよい。
次に、集中度推定部2316は、監視データから運転者の運転集中度を推定する(ステップS103)。ステップ103では、集中度推定部2316は、例えば、状態検出部2315で運転者画像データから検出された運転者の状態に基づいて運転集中度を推定する。
基準比較部2317は、車両1の運転モードが自動運転モードか否かを判断する(ステップS104)。運転モードが自動運転モードである場合(ステップS104、Yes)、基準比較部2317は、運転集中度を自動運転モード用の基準と比較する(ステップS105)。運転集中度が自動運転モード用の基準を満たす場合(ステップS105、Yes)、集中度判定装置2の処理は、ステップS105からステップS101へ遷移してもよい。運転集中度が自動運転モード用の基準を満たさない場合(ステップS105、No)、信号出力部2318は、指示信号を出力するまでの時間として第1の時間を選択する(ステップS106)。
信号出力部2318は、第1の時間のカウントを開始し、第1の時間が経過したか否かを判断する(ステップS107)。例えば、基準比較部2317が複数の指標それぞれについての運転集中度が自動運転モード用の基準を満たさないと判断した場合、信号出力部2318は、指標毎に第1の時間のカウントを開始することができる。例えば、基準比較部2317が複数の指標それぞれについての運転集中度が自動運転モード用の基準を満たさないことを異なるタイミングで判断した場合、信号出力部2318は、指標毎に異なるタイミングで第1の時間のカウントを開始することができる。第1の時間が経過していない場合(ステップS107、No)、信号出力部2318は、第1の時間のカウントを続け、第1の時間の経過の監視を続ける。
第1の時間が経過した場合(ステップS107、Yes)、信号出力部2318は、指示信号を出力する(ステップS108)。つまり、ステップS108では、信号出力部2318は、自動運転モードにおいて運転集中度が自動運転モード用の基準を満たさない場合に、第1の時間経過後に指示信号を出力する。
運転モードが自動運転モードでない場合(ステップS104、No)、基準比較部2317は、運転集中度を手動運転モード用の基準と比較する(ステップS109)。ここで、運転モードが自動運転モードでない場合は、運転モードが手動運転モードである場合に相当する。運転集中度が手動運転モード用の基準を満たす場合(ステップS109、Yes)、集中度判定装置2の処理は、ステップS109からステップS101へ遷移してもよい。運転集中度が手動運転モード用の基準を満たさない場合(ステップS109、No)、信号出力部2318は、指示信号を出力するまでの時間として第2の時間を選択する(ステップS110)。
信号出力部2318は、第2の時間のカウントを開始し、第2の時間が経過したか否かを判断する(ステップS111)。例えば、基準比較部2317が複数の指標それぞれについての運転集中度が手動運転モード用の基準を満たさないと判断した場合、信号出力部2318は、指標毎に第2の時間のカウントを開始することができる。例えば、基準比較部2317が複数の指標それぞれについての運転集中度が手動運転モード用の基準を満たさないことを異なるタイミングで判断した場合、信号出力部2318は、指標毎に異なるタイミングで第2の時間のカウントを開始することができる。第2の時間が経過していない場合(ステップS111、No)、信号出力部2318は、第2の時間のカウントを続け、第2の時間の経過の監視を続ける。
第2の時間が経過した場合(ステップS111、Yes)、信号出力部2318は、指示信号を出力する(ステップS108)。つまり、ステップS108では、信号出力部2318は、手動運転モードにおいて運転集中度が手動運転モード用の基準を満たさない場合に、第2の時間経過後に指示信号を出力する。
なお、ステップS103において集中度推定部2316が運転集中度を推定する指標は特に限定されないが、集中度推定部2316は、例えば、運転者の眠気及び脇見の少なくとも何れかを指標として運転集中度を推定するようにしてもよい。眠気及び脇見は、運転の安全性への影響が大きい指標である。集中度判定装置2は、運転モードによらず運転の安全性への影響が大きい指標を用いて運転者が運転に適した状態か否かを監視することができる。これにより、運転者は、運転モードによらず、より運転に集中した状態を保つことができる。
(効果)
以上詳述したようにこの発明の一実施形態では、集中度判定装置2は、手動運転モードの場合には自動運転モードの場合よりも警告の緊急度が高いため、早く指示信号を出力することができる。
運転の安全性の観点で効果を説明する。
運転モードが手動運転モードである場合について説明する。車両1が早く警告を発しなければ、運転者は、自身の運転集中度の低下をすぐに気付くことができない。よって、手動運転モードでの運転集中度が手動運転モード用の基準を満たさない場合には、警告の緊急度は、自動運転モードの場合よりも高いといえる。
以上詳述したようにこの発明の一実施形態では、集中度判定装置2は、手動運転モードの場合には自動運転モードの場合よりも警告の緊急度が高いため、早く指示信号を出力することができる。
運転の安全性の観点で効果を説明する。
運転モードが手動運転モードである場合について説明する。車両1が早く警告を発しなければ、運転者は、自身の運転集中度の低下をすぐに気付くことができない。よって、手動運転モードでの運転集中度が手動運転モード用の基準を満たさない場合には、警告の緊急度は、自動運転モードの場合よりも高いといえる。
運転モードが自動運転モードである場合について説明する。車両1が早く警告を発しなくても、車両1は自動で制御されているので、運転の安全性が低下する可能性は低い。よって、自動運転モードでの運転集中度が自動運転モード用の基準を満たさない場合には、警告の緊急度は、手動運転モードの場合よりも低いといえる。
このように、運転者は、指示信号に基づく警告によって、手動運転モードの場合には自動運転モードの場合よりも早く運転集中度の低下を認識して運転集中度を高めることができる。したがって、運転の安全性は、運転モードによらずに保たれる。
さらに、集中度判定装置2は、自動運転モードの場合には第2の時間よりも長い第1の時間の経過を待って指示信号を出力することができる。
運転の快適性の観点で効果を説明する。
運転モードが手動運転モードである場合について説明する。運転者は、自ら車両1を操作しなければならないため、運転集中度の低下が事故を招くことを認識している。そのため、車両1が警告を頻繁に発したとしても、運転者が過剰に警告を受けていると認識する可能性は低い。
運転の快適性の観点で効果を説明する。
運転モードが手動運転モードである場合について説明する。運転者は、自ら車両1を操作しなければならないため、運転集中度の低下が事故を招くことを認識している。そのため、車両1が警告を頻繁に発したとしても、運転者が過剰に警告を受けていると認識する可能性は低い。
運転モードが自動運転モードである場合について説明する。車両1が警告を頻繁に発すると、運転者は、車両1が自動で制御されているにもかかわらず頻繁に警告を受ける。運転者は、過剰に警告を受けていると認識する可能性が高い。しかしながら、集中度判定装置2は、例えば、自動運転モードに関連付けられている第1の時間の経過前に発生した事象によっては、指示信号の出力を必要としないことがある。
一例では、車両1が第1の時間の経過前に目的地に到着した場合、集中度判定装置2は指示信号の出力を必要としない。別の例では、運転者が自動運転モードにおける警告の中止を入力した場合、集中度判定装置2は指示信号の出力を必要としない。別の例では、運転集中度が第1の時間の経過前に基準を満たすようになった場合、集中度判定装置2は指示信号の出力を必要としない。ここでは、いくつかの事象の例について説明したが、これらに限定されるものではない。
このように、集中度判定装置2は、自動運転モードの場合における過剰な指示信号の出力を減らすことができる。運転者は、自動運転モードの場合に過剰な警告を受けることがなくなるので、運転モードによらず、運転に集中した状態を快適に保つことができる。したがって、運転の快適性は、運転モードによらずに保たれる。
よって、一実施形態によれば、集中度判定装置2は、運転の安全性及び運転の快適性の双方に配慮することができる。
[他の実施形態]
以下、いくつかの他の実施形態について説明する。
はじめに、信号出力部2318は、第1の時間のカウントを開始した後から第1の時間が経過するまでの間の運転集中度に応じて、指示信号の出力の要否を監視するようにしてもよい。
以下、いくつかの他の実施形態について説明する。
はじめに、信号出力部2318は、第1の時間のカウントを開始した後から第1の時間が経過するまでの間の運転集中度に応じて、指示信号の出力の要否を監視するようにしてもよい。
一例では、信号出力部2318は、自動運転モードにおいて運転集中度が自動運転モード用の基準を満たさないと判定された場合であっても、第1の時間内に運転集中度が自動運転モード用の基準を満たした(回復した)場合、指示信号を出力しないようにしてもよい。なお、信号出力部2318は、第1の時間内に運転集中度が自動運転モード用の基準を満たした場合に、指示信号を出力しない構成になっていればよい。信号出力部2318は、例えば、第1の時間のカウントを止めることにより、指示信号の出力を中止するようにしてもよい。信号出力部2318は、例えば、指示信号の出力を直接中止するようにしてもよい。信号出力部2318は、例えば図4のステップS107の処理中に、基準比較部2317からの比較結果に基づいて、第1の時間内に運転集中度が自動運転モード用の基準を満たすことを検出してもよい。なお、信号出力部2318が指示信号の出力を中止した場合、集中度判定装置2の処理は、図4のステップS107からステップS101へ遷移してもよい。
例えば、カーナビゲーション・オーディオ操作は、自動運転モードにおいて発生し得る運転者の状態である。しかしながら、カーナビゲーション・オーディオ操作は、運転者による一時的な動作である。カーナビゲーション・オーディオ操作についての運転集中度は、一時的に基準を満たさなくなっても、すぐに基準を満たすようになる可能性が高い。そのため、カーナビゲーション・オーディオ操作に関する警告は、運転者にとって不要なものである。
この例によれば、集中度判定装置2は、不要となった指示信号の出力を中止することができる。集中度判定装置2は、自動運転モードの場合における過剰な指示信号の出力を減らすことができる。運転者は、自動運転モードの場合に過剰な警告を受けることがなくなるので、運転に集中した状態を快適に保つことができる。集中度判定装置2が指示信号の出力を中止したとしても、運転集中度は自動運転モード用の基準を満たすように回復している。したがって、自動運転モードにおける運転の安全性は保たれる。
別の例では、信号出力部2318は、第1の時間中継続して運転集中度が自動運転モード用の基準を満たさない場合、第1の時間の経過後に指示信号を出力するようにしてもよい。信号出力部2318は、例えば図4のステップS107の処理中に、基準比較部2317からの比較結果に基づいて、第1の時間中継続して運転集中度が自動運転モード用の基準を満たさないことを検出してもよい。
この例によれば、集中度判定装置2は、第1の時間の経過後に必要な指示信号を出力することができる。運転者は、運転の安全性を保つために自動運転モードにおいても運転集中度が自動運転モード用の基準を満たすように保つ必要がある。運転者は、警告によって、運転集中度の低下を認識して運転集中度を高めることができる。したがって、自動運転モードにおける運転の安全性は保たれる。さらに、警告は、第1の時間中継続して運転集中度が自動運転モード用の基準を満たさない運転者には必要なものである。運転者は、自動運転モードの場合に過剰な警告を受けることがなくなるので、運転に集中した状態を快適に保つことができる。
次に、信号出力部2318は、第2の時間のカウントを開始した後から第2の時間が経過するまでの間の運転集中度に応じて、指示信号の出力の要否を監視するようにしてもよい。
一例では、信号出力部2318は、手動運転モードにおいて運転集中度が手動運転モード用の基準を満たさないと判定された場合であっても、第2の時間内に運転集中度が手動運転モード用の基準を満たした(回復した)場合、指示信号を出力しないようにしてもよい。なお、信号出力部2318は、第2の時間内に運転集中度が手動運転モード用の基準を満たした場合に、指示信号を出力しない構成になっていればよい。信号出力部2318は、例えば、第2の時間のカウントを止めることにより、指示信号の出力を中止するようにしてもよい。信号出力部2318は、例えば、指示信号の出力を直接中止するようにしてもよい。信号出力部2318は、例えば図4のステップS111の処理中に、基準比較部2317からの比較結果に基づいて、第2の時間内に運転集中度が手動運転モード用の基準を満たすことを検出してもよい。なお、信号出力部2318が指示信号の出力を中止した場合、集中度判定装置2の処理は、図4のステップS111からステップS101へ遷移してもよい。
例えば、眼鏡・サングラスの着脱は、手動運転モードにおいて発生し得る運転者の状態である。しかしながら、眼鏡・サングラスの着脱は、運転者による一時的な動作である。眼鏡・サングラスの着脱についての運転集中度は、一時的に基準を満たさなくなっても、すぐに基準を満たすようになる可能性が高い。そのため、眼鏡・サングラスの着脱に関する警告は、運転者にとって不要なものである。
この例によれば、集中度判定装置2は、不要となった指示信号の出力を中止することができる。集中度判定装置2は、手動運転モードの場合における過剰な指示信号の出力を減らすことができる。運転者は、手動運転モードの場合に過剰な警告を受けることがなくなるので、運転に集中した状態を快適に保つことができる。集中度判定装置2が指示信号の出力を中止したとしても、運転集中度は手動運転モード用の基準を満たすように回復している。したがって、手動運転モードにおける運転の安全性は保たれる。
別の例では、信号出力部2318は、第2の時間中継続して運転集中度が手動運転モード用の基準を満たさない場合、第2の時間の経過後に指示信号を出力するようにしてもよい。信号出力部2318は、例えば図4のステップS111の処理中に、基準比較部2317からの比較結果に基づいて、第2の時間中継続して運転集中度が手動運転モード用の基準を満たさないことを検出してもよい。
この例によれば、集中度判定装置2は、第2の時間の経過後に必要な指示信号を出力することができる。運転者は、運転の安全性を保つために手動運転モードにおいても運転集中度が手動運転モード用の基準を満たすように保つ必要がある。運転者は、警告によって、運転集中度の低下を認識して運転集中度を高めることができる。したがって、手動運転モードにおける運転の安全性は保たれる。さらに、警告は、第2の時間中継続して運転集中度が手動運転モード用の基準を満たさない運転者には必要なものである。運転者は、手動運転モードの場合に過剰な警告を受けることがなくなるので、運転に集中した状態を快適に保つことができる。
次に、図4のステップS110で選択される第2の時間の長さは、運転集中度を推定する指標によらず固定値であっても、変動値であってもよい。第2の時間の長さが変動値である場合、信号出力部2318は、例えば、運転集中度を推定する指標に応じて第2の時間の長さを変更するようにしてもよい。信号出力部2318は、例えば、記憶ユニット22に記憶されている各指標と第2の時間の長さを対応付けたテーブルを参照してもよい。
ここで、警告の緊急度は、運転集中度を推定する指標によって異なる。例えば、眠気は、眼鏡・サングラスの着脱よりも警告の緊急度が高い指標である。眠気は、その度合いによっては、眼鏡・サングラスの着脱よりも手動運転モードでの運転の安全性に影響する可能性が高い。そのため、集中度判定装置2は、眠気を指標とした運転集中度が手動運転モード用の基準よりも低い場合には、眼鏡・サングラスの着脱を指標とした運転集中度が手動運転モード用の基準よりも低い場合よりも早く指示信号を出力することが好ましい。
この例によれば、集中度判定装置2は、指標毎の警告の緊急度に応じた早さで指示信号を出力することができる。運転者は、適切なタイミングで警告を受けることができるので、適切に手動運転に適した状態を保つことができる。
なお、ステップS106で選択される第1の時間の長さは、運転集中度を推定する指標によらず固定値であっても、上述の第2の時間と同様の理由により、運転集中度を推定する指標に応じた変動値であってもよい。第1の時間の長さが変動値である場合、信号出力部2318は、例えば、運転集中度を推定する指標に応じて第1の時間の長さを変更するようにしてもよい。信号出力部2318は、例えば、記憶ユニット22に記憶されている各指標と第1の時間の長さを対応付けたテーブルを参照してもよい。
次に、前記一実施形態では、集中度判定装置2は、ドライバカメラ15が撮影した運転者画像データを監視データとして用いて運転者の状態を検出し、運転集中度を推定している。しかしながら、監視データは、運転者画像データに限られない。監視データは、例えば、車両1の運転者を監視する生体センサで得られる生体データであってもよい。生体センサは、例えば、脈波センサまたは心拍センサである。生体センサは、運転者を監視することができればよく、これらに限られるものではない。なお、生体センサは、接触式センサであっても非接触式センサであってもよい。集中度判定装置2は、生体データから運転者の状態を検出することができる。生体データから検出される運転者の状態は、例えば、脈波または心拍などの指標である。
さらに、監視データは、例えば、ステアリングホイール5に設置されている運転者のステアリングホイール5を握る強度を測るセンサで得られるデータであってもよい。
さらに、監視データは、例えば、ステアリングホイール5に設置されている運転者のステアリングホイール5を握る強度を測るセンサで得られるデータであってもよい。
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合わせてもよい。
また、上記実施形態は、プロセッサ231が備える各部の処理をプロセッサ231に機能させるプログラムを記憶するROM(Read Only Memory)等の記憶媒体によって実現されてもよい。
上記の実施形態の一部または全部は、以下の付記のようにも記載され得るが、以下には限られるものではない。
(付記1)
車両の運転者を監視するセンサから監視データを取得し、
前記監視データから前記運転者の運転集中度を推定し、
前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較し、
前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力するように構成されているプロセッサと、
前記プロセッサを動作させる命令を記憶するメモリと、
を備える集中度判定装置。
(付記2)
少なくとも1つのプロセッサを用いて、車両の運転者を監視するセンサから監視データを取得する監視データ取得過程と、
前記少なくとも1つのプロセッサを用いて、前記監視データから前記運転者の運転集中度を推定する集中度推定過程と、
前記少なくとも1つのプロセッサを用いて、前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較過程と、
前記少なくとも1つのプロセッサを用いて、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力過程と、
を備える集中度判定方法。
(付記1)
車両の運転者を監視するセンサから監視データを取得し、
前記監視データから前記運転者の運転集中度を推定し、
前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較し、
前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力するように構成されているプロセッサと、
前記プロセッサを動作させる命令を記憶するメモリと、
を備える集中度判定装置。
(付記2)
少なくとも1つのプロセッサを用いて、車両の運転者を監視するセンサから監視データを取得する監視データ取得過程と、
前記少なくとも1つのプロセッサを用いて、前記監視データから前記運転者の運転集中度を推定する集中度推定過程と、
前記少なくとも1つのプロセッサを用いて、前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較過程と、
前記少なくとも1つのプロセッサを用いて、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力過程と、
を備える集中度判定方法。
1…車両、2…集中度判定装置、3…パワーユニット、4…操舵装置、5…ステアリングホイール、6…車外カメラ、7…ステアリングセンサ、8…アクセルペダルセンサ、9…ブレーキペダルセンサ、10…GPS受信機、11…ジャイロセンサ、12…車速センサ、13…ナビゲーション装置、14…自動運転制御装置、15…ドライバカメラ、16…音声出力装置、21…入出力インタフェースユニット、22…記憶ユニット、23…制御ユニット、131…ディスプレイ、161…スピーカ、221…運転者画像データ記憶部、222…車外画像データ記憶部、223…集中度テーブル記憶部、231…プロセッサ、232…メモリ、2311…監視データ取得部、2312……車外画像データ取得部、2313…経路情報取得部、2314…現在位置情報取得部、2315…状態検出部、2316…集中度推定部、2317…基準比較部、2318…信号出力部、23151…局所状態検出部、23152…大局状態検出部、23153…運転者状態検出部。
Claims (6)
- 車両の運転者を監視するセンサから監視データを取得する監視データ取得部と、
前記監視データから前記運転者の運転集中度を推定する集中度推定部と、
前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較部と、
前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力部と、
を備える集中度判定装置。 - 前記集中度推定部は、前記運転者の眠気及び脇見の少なくとも何れかを指標として前記運転集中度を推定する、請求項1に記載の集中度判定装置。
- 前記信号出力部は、前記運転集中度を推定する指標に応じて前記第1の時間の長さ及び前記第2の時間の長さの少なくとも何れか一方を変更する、請求項1または2に記載の集中度判定装置。
- 前記信号出力部は、前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさないと判定された場合であっても、前記第1の時間内に前記運転集中度が前記自動運転モード用の基準を満たした場合、前記指示信号を出力しないこと、及び、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさないと判定された場合であっても、前記第2の時間内に前記運転集中度が前記手動運転モード用の基準を満たした場合、前記指示信号を出力しないこと、の少なくとも何れか一方を行う、請求項1から3の何れか1項に記載の集中度判定装置。
- 車両の運転者を監視するセンサから監視データを取得する監視データ取得過程と、
前記監視データから前記運転者の運転集中度を推定する集中度推定過程と、
前記車両の運転モードが自動運転モードである場合に前記運転集中度を自動運転モード用の基準と比較し、前記運転モードが手動運転モードである場合に前記運転集中度を手動運転モード用の基準と比較する基準比較過程と、
前記自動運転モードにおいて前記運転集中度が前記自動運転モード用の基準を満たさない場合に第1の時間経過後に前記運転者に対する支援の実行を指示する指示信号を出力し、前記手動運転モードにおいて前記運転集中度が前記手動運転モード用の基準を満たさない場合に前記第1の時間よりも短い第2の時間経過後に前記指示信号を出力する信号出力過程と、
を備える集中度判定方法。 - 請求項1から4の何れか1項に記載の集中度判定装置が備える各部の処理をコンピュータに機能させる集中度判定のためのプログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017048187A JP2018149942A (ja) | 2017-03-14 | 2017-03-14 | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム |
| PCT/JP2017/038561 WO2018168048A1 (ja) | 2017-03-14 | 2017-10-25 | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017048187A JP2018149942A (ja) | 2017-03-14 | 2017-03-14 | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018149942A true JP2018149942A (ja) | 2018-09-27 |
| JP2018149942A5 JP2018149942A5 (ja) | 2019-04-25 |
Family
ID=63522943
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017048187A Pending JP2018149942A (ja) | 2017-03-14 | 2017-03-14 | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2018149942A (ja) |
| WO (1) | WO2018168048A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020050324A (ja) * | 2018-09-28 | 2020-04-02 | 株式会社Jvcケンウッド | 業務支援システムおよび業務支援方法 |
| JP2023146952A (ja) * | 2022-03-29 | 2023-10-12 | 株式会社小野測器 | 試験システム |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003233803A (ja) * | 2002-02-12 | 2003-08-22 | Nissan Motor Co Ltd | 運転者の状態検出装置 |
| JP2013041524A (ja) * | 2011-08-19 | 2013-02-28 | Daimler Ag | 運転支援制御装置 |
| JP2015153048A (ja) * | 2014-02-12 | 2015-08-24 | 株式会社デンソー | 運転支援装置 |
| JP2016038768A (ja) * | 2014-08-08 | 2016-03-22 | トヨタ自動車株式会社 | 車両制御装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5692350B1 (ja) * | 2013-12-20 | 2015-04-01 | 第一精工株式会社 | 電気コネクタの取付構造 |
-
2017
- 2017-03-14 JP JP2017048187A patent/JP2018149942A/ja active Pending
- 2017-10-25 WO PCT/JP2017/038561 patent/WO2018168048A1/ja not_active Ceased
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003233803A (ja) * | 2002-02-12 | 2003-08-22 | Nissan Motor Co Ltd | 運転者の状態検出装置 |
| JP2013041524A (ja) * | 2011-08-19 | 2013-02-28 | Daimler Ag | 運転支援制御装置 |
| JP2015153048A (ja) * | 2014-02-12 | 2015-08-24 | 株式会社デンソー | 運転支援装置 |
| JP2016038768A (ja) * | 2014-08-08 | 2016-03-22 | トヨタ自動車株式会社 | 車両制御装置 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020050324A (ja) * | 2018-09-28 | 2020-04-02 | 株式会社Jvcケンウッド | 業務支援システムおよび業務支援方法 |
| WO2020067009A1 (ja) * | 2018-09-28 | 2020-04-02 | 株式会社Jvcケンウッド | 業務支援システムおよび業務支援方法 |
| JP7070298B2 (ja) | 2018-09-28 | 2022-05-18 | 株式会社Jvcケンウッド | 業務支援システムおよび業務支援方法 |
| JP2023146952A (ja) * | 2022-03-29 | 2023-10-12 | 株式会社小野測器 | 試験システム |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2018168048A1 (ja) | 2018-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6627811B2 (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| JP7080598B2 (ja) | 車両制御装置および車両制御方法 | |
| CN111361552B (zh) | 自动驾驶系统 | |
| US20240000354A1 (en) | Driving characteristic determination device, driving characteristic determination method, and recording medium | |
| JP6696679B2 (ja) | 運転支援装置 | |
| WO2018168049A1 (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| JP6631570B2 (ja) | 運転状態判定装置、運転状態判定方法及び運転状態判定のためのプログラム | |
| JP2018149941A (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| JP2019159711A (ja) | 覚醒度維持装置 | |
| JPWO2015151243A1 (ja) | 車両用情報呈示装置 | |
| JP6269360B2 (ja) | 運転支援システム及び運転支援方法 | |
| JP6631569B2 (ja) | 運転状態判定装置、運転状態判定方法及び運転状態判定のためのプログラム | |
| JP2020113183A (ja) | 自動運転システム | |
| JP7107157B2 (ja) | 操作支援方法及び操作支援装置 | |
| US20190147264A1 (en) | Concentration determination apparatus, concentration determination method, and program for concentration determination | |
| CN119654667A (zh) | 驾驶员辅助装置、驾驶员辅助系统以及驾驶员辅助方法 | |
| JP6627810B2 (ja) | 運転モード切替制御装置、方法およびプログラム | |
| JP2020086907A (ja) | 漫然運転判定装置 | |
| WO2018168050A1 (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| JP2018151902A (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| WO2018168048A1 (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム | |
| JP7043795B2 (ja) | 運転支援装置、運転状況情報取得システム、運転支援方法及びプログラム | |
| JP7670009B2 (ja) | 車両用制御装置及び車両用制御方法 | |
| JP7505473B2 (ja) | 車両制御装置 | |
| WO2018168046A1 (ja) | 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190312 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190312 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200204 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200811 |