JP2020079879A - Display controller - Google Patents
Display controller Download PDFInfo
- Publication number
- JP2020079879A JP2020079879A JP2018213198A JP2018213198A JP2020079879A JP 2020079879 A JP2020079879 A JP 2020079879A JP 2018213198 A JP2018213198 A JP 2018213198A JP 2018213198 A JP2018213198 A JP 2018213198A JP 2020079879 A JP2020079879 A JP 2020079879A
- Authority
- JP
- Japan
- Prior art keywords
- display
- information
- driver
- steering wheel
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Steering Controls (AREA)
- Instrument Panels (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【課題】表示装置がステアリングホイール越しに存在し、表示装置の一部が遮られる場合でも表示情報を運転者に視認させることができる表示制御装置を提供する。【解決手段】表示制御装置は、車両のステアリングホイールの設定位置を示すステアリング情報と、少なくとも運転者の視線情報を取得する取得部と、ステアリングホイール越しに配置された表示装置の表示領域のうち少なくとのステアリングホイールを含む表示装置の周辺部材によって遮られる遮蔽領域を、ステアリング情報と少なくとも視線情報とに基づき推定する推定部と、推定した遮蔽領域に応じて、表示装置で表示し得る表示情報を表示領域における非遮蔽領域に表示するように表示調整を実行する制御部と、を備える。【選択図】図3A display control device is provided that allows a driver to visually recognize display information even when a display device exists over a steering wheel and a part of the display device is blocked. A display control device comprises at least one of: steering information indicating a set position of a steering wheel of a vehicle; an acquisition unit for acquiring at least line-of-sight information of a driver; An estimating unit that estimates a shielded area blocked by peripheral members of the display device including the steering wheel based on steering information and at least line-of-sight information; and display information that can be displayed on the display device according to the estimated shielded area. a control unit that performs display adjustment so as to display in a non-shielded area in the display area. [Selection drawing] Fig. 3
Description
本発明の実施形態は、表示制御装置に関する。 Embodiments of the present invention relate to a display control device.
従来、車両のダッシュボードには、計器盤が設けられている。計器盤には、例えば速度表示部、回転数表示部、シフト表示部、水温計、電圧計、燃料計、半ドア警告灯、シートベルト警告灯等、様々な表示部が配置されている。一般的な自動車の場合、計器盤(表示装置)は、運転席の正面で運転者がステアリングホイール越しに視認できるように配置されている。運転者の体格に応じてステアリングホイールの位置を調整できるチルトステアリング機構を備えた車両の場合も計器盤は、ステアリングホイール越しに視認できるように配置されている。そのため、運転者の体格、運転時の姿勢、運転席のシート位置やリクライニングの程度等によって、ステアリングホイールによって、計器盤の一部が遮られ、運転姿勢の運転者から表示部が視認し難い場合がある。チルトステアリング機構を備える車両の場合、チルト調整されたステアリングホイールの位置によって、表示装置の遮られる領域が変化してしまう場合がある。また、特許文献1のように、運転者の脇見や居眠りを監視するドライバーモニタシステムを備える車両の場合、運転者を監視するための撮像装置がステアリングホイールを支持するコラム上に配置されている場合があり、撮像装置によっても表示装置の一部が遮られることがある。このような場合、運転者は運転時に必要な情報を視認し難くなり、運転姿勢を変える必要が生じる。その結果、運転者に煩わしさを与えてしまう場合がある。そこで、例えば、特許文献2の構成の場合、チルトステアリン機構と計器盤とを機械的に接続して一体的に上下動作させることにより、チルト動作により表示装置の遮られる領域が変動することを軽減する構成が開示されている。
Conventionally, a dashboard of a vehicle is provided with an instrument panel. Various display units such as a speed display unit, a rotation speed display unit, a shift display unit, a water temperature gauge, a voltmeter, a fuel gauge, a half-door warning light, and a seat belt warning light are arranged on the instrument panel. In the case of a typical automobile, the instrument panel (display device) is arranged in front of the driver's seat so that the driver can visually recognize it through the steering wheel. Even in the case of a vehicle equipped with a tilt steering mechanism capable of adjusting the position of the steering wheel according to the physique of the driver, the instrument panel is arranged so as to be visible through the steering wheel. Therefore, when the driver's physique, posture during driving, seat position in the driver's seat, degree of reclining, etc., part of the instrument panel is blocked by the steering wheel, making it difficult for the driver in the driving posture to see the display. There is. In the case of a vehicle equipped with a tilt steering mechanism, the blocked area of the display device may change depending on the position of the tilt-adjusted steering wheel. Further, in the case of a vehicle including a driver monitor system for monitoring the driver's inattentiveness and dozing as in
しかしながら、特許文献2のように、チルトステアリン機構と計器盤とを連動させる場合でも、ステアリングホイール越しに計器盤(表示装置)が存在する限り、表示装置の一部がステアリングホイールによって遮られてしまう現象は発生してしまう。したがって、表示装置がステアリングホイール越しに存在し、表示装置の一部が遮られる場合でも表示情報を運転者に視認させることができる表示制御装置が提供できれば、運転者に煩わしさを感じさせ難くしつつ、表示装置の視認性の向上が図れて有意義である。 However, even when the tilt stearin mechanism and the instrument panel are interlocked as in Patent Document 2, as long as the instrument panel (display device) exists over the steering wheel, a part of the display device is blocked by the steering wheel. The phenomenon will occur. Therefore, if it is possible to provide the display control device that allows the driver to visually recognize the display information even when the display device exists over the steering wheel and a part of the display device is blocked, it is possible to make the driver less annoyed. At the same time, it is significant that the visibility of the display device can be improved.
本発明の実施形態にかかる表示制御装置は、例えば、車両のステアリングホイールの設定位置を示すステアリング情報と、少なくとも運転者の視線情報を取得する取得部と、上記ステアリングホイール越しに配置された表示装置の表示領域のうち少なくとの上記ステアリングホイールを含む上記表示装置の周辺部材によって遮られる遮蔽領域を、上記ステアリング情報と少なくとも上記視線情報とに基づき推定する推定部と、推定した上記遮蔽領域に応じて、上記表示装置で表示し得る表示情報を上記表示領域における非遮蔽領域に表示するように表示調整を実行する制御部と、を備える。この構成によれば、例えば、推定した遮蔽領域に応じて、表示装置で表示し得る表示情報が表示領域における非遮蔽領域に表示される。その結果、運転者に姿勢等の変化をさせることなく、表示装置の表示内容を十分に認識させ易くすることができる。 A display control device according to an embodiment of the present invention includes, for example, steering information indicating a setting position of a steering wheel of a vehicle, an acquisition unit that acquires at least driver's line-of-sight information, and a display device arranged over the steering wheel. Of the display area including at least the steering wheel, a shield area that is shielded by a peripheral member of the display device, based on the steering information and at least the line-of-sight information, and an estimated shield area. And a control unit that performs display adjustment so that display information that can be displayed by the display device is displayed in a non-shielding area in the display area. According to this configuration, for example, display information that can be displayed on the display device is displayed in the non-shielded area in the display area according to the estimated shielded area. As a result, it is possible to easily make the driver fully recognize the display content of the display device without changing the posture and the like.
本発明の実施形態にかかる表示制御装置の上記制御部は、例えば、上記遮蔽領域の位置にしたがい上記表示情報を上記表示領域の上下方向に移動するように表示調整を実行してもよい。この構成によれば、例えば、ステアリングホイールのチルト操作によってステアリングホイール等により表示装置における遮蔽領域が上下に変化する場合や運転者の体格や運転姿勢の変化によって運転者が表示装置を視認する場合の視線方向が上下方向に変化する場合でも、上下方向に表示調整を実行することで視認性を向上することができる。 The control unit of the display control device according to the embodiment of the present invention may perform the display adjustment so as to move the display information in the vertical direction of the display area according to the position of the shielding area. According to this configuration, for example, when the shielding region in the display device is changed up and down by the steering wheel or the like by tilting the steering wheel, or when the driver visually recognizes the display device due to a change in the physique or driving posture of the driver. Even when the line-of-sight direction changes in the vertical direction, the visibility can be improved by performing the display adjustment in the vertical direction.
本発明の実施形態にかかる表示制御装置の上記制御部は、例えば、上記遮蔽領域の位置にしたがい上記表示情報を上記表示領域の車幅方向に移動するように表示調整を実行してもよい。この構成によれば、例えば、運転者の運転姿勢が変化により、運転者が表示装置を視認する場合の視線方向が車幅方向に変化する場合でも、車幅方向に表示調整を実行することで視認性を向上することができる。 The control unit of the display control device according to the embodiment of the present invention may perform the display adjustment so as to move the display information in the vehicle width direction of the display region according to the position of the shielding region, for example. According to this configuration, for example, even if the line-of-sight direction when the driver visually recognizes the display device changes in the vehicle width direction due to a change in the driving posture of the driver, the display adjustment can be performed in the vehicle width direction. The visibility can be improved.
本発明の実施形態にかかる表示制御装置の上記制御部は、例えば、上記遮蔽領域の広さが所定値以上の場合、複数の上記表示情報のうち優先順位の高い表示情報を優先的に上記非遮蔽領域に表示するように表示調整を実行してもよい。この構成によれば、例えば、遮蔽領域の広さが所定値以上になり、非遮蔽領域で複数の表示情報の表示が不能になった場合でも、運転に必要な情報のうち優先度の高いものが表示されるので、運転者に不安感を与え難く、運転姿勢を変えることなく運転を継続させやすくすることができる。 The control unit of the display control device according to the embodiment of the present invention, for example, when the size of the shielding area is equal to or larger than a predetermined value, preferentially displays the display information having a high priority among the plurality of display information in the non-display The display adjustment may be performed so as to display in the occluded region. According to this configuration, for example, even if the size of the shielded area becomes equal to or larger than a predetermined value and the display of a plurality of pieces of display information in the non-shielded area becomes impossible, the one with high priority among the information necessary for driving Is displayed, the driver is less likely to feel uneasy, and it is possible to easily continue driving without changing the driving posture.
本発明の実施形態にかかる表示制御装置の上記取得部は、例えば、上記ステアリングホイールを支持するコラム上に配置された撮像部で撮像した撮像画像データに基づき上記視線情報を取得するようにしてもよい。この構成によれば、例えば、ステアリングホイールのチルト角の変化(ステアリング情報)と撮像部の光学中心との関連性を一定にすることができる。したがって、ステアリングホイールの上下移動と撮像画像から取得する視線情報との関連付けが容易にできる。その結果、遮蔽領域の推定処理を容易にすることができるとともに、推定精度を向上することができる。また、ステアリングホイールのチルト角の変化(ステアリング情報)と撮像部の上下移動とを連動させることができる。したがって、撮像部の撮像した撮像画像データに基づき視線情報を取得する場合に、併せて、ステアリングホイールの設定位置を示すステアリング情報を取得できる。その結果、別途、ステアリングホイールの設定位置の検出センサ等を設ける必要がなく、構成の簡略化、コストの軽減に寄与することができる。 The acquisition unit of the display control device according to the embodiment of the present invention may be configured to acquire the line-of-sight information based on, for example, captured image data captured by an imaging unit arranged on a column supporting the steering wheel. Good. With this configuration, for example, it is possible to make the relationship between the change in the tilt angle of the steering wheel (steering information) and the optical center of the imaging unit constant. Therefore, it is possible to easily associate the vertical movement of the steering wheel with the line-of-sight information acquired from the captured image. As a result, it is possible to facilitate the estimation process of the shielding area and improve the estimation accuracy. Further, the change in the tilt angle of the steering wheel (steering information) and the vertical movement of the imaging unit can be linked. Therefore, when the line-of-sight information is acquired based on the captured image data captured by the imaging unit, the steering information indicating the setting position of the steering wheel can be acquired at the same time. As a result, it is not necessary to separately provide a sensor for detecting the setting position of the steering wheel, which can contribute to simplification of the configuration and cost reduction.
本発明の実施形態にかかる表示制御装置の上記取得部は、例えば、上記視線情報に加え、上記運転者の着座姿勢における頭位置を取得し、上記制御部は、上記頭位置が所定期間以上変化しない場合に、上記表示調整を実行するようにしてもよい。この構成によれば、例えば、運転者が運転姿勢を変えて、その姿勢が所定期間継続された場合に、その運転姿勢における遮蔽領域に応じた表示調整が可能になる。したがって、例えば、瞬間的に姿勢が変わるような場合に、表示調整が過敏に実行されてしまうことが回避され、過剰に表示が調整される違和感を軽減することができる。 The acquisition unit of the display control device according to the embodiment of the present invention, for example, in addition to the line-of-sight information, acquires the head position in the sitting posture of the driver, the control unit, the head position changes for a predetermined period or more. If not, the display adjustment may be executed. According to this configuration, for example, when the driver changes the driving posture and the posture continues for a predetermined period, it is possible to perform display adjustment according to the shielding area in the driving posture. Therefore, for example, when the posture changes momentarily, it is possible to prevent the display adjustment from being performed excessively, and it is possible to reduce the discomfort that the display is excessively adjusted.
本発明の実施形態にかかる表示制御装置の上記制御部は、例えば、上記遮蔽領域が推定された場合、上記運転者の視線が上記表示装置から外れている期間に上記表示調整を実行するようにしてもよい。この構成によれば、例えば、運転者が表示装置を視認している間に、表示内容が変化することが回避され、視認時の違和感の発生を抑制することができる。 The control unit of the display control device according to the embodiment of the present invention, for example, when the shielding region is estimated, to perform the display adjustment during a period in which the line of sight of the driver is out of the display device. May be. With this configuration, for example, it is possible to prevent the display content from changing while the driver is visually recognizing the display device, and it is possible to suppress the occurrence of discomfort during visual recognition.
以下、本発明の例示的な実施形態が開示される。以下に示される実施形態の構成、ならびに当該構成によってもたらされる作用、結果、および効果は、一例である。本発明は、以下の実施形態に開示される構成以外によっても実現可能であるとともに、基本的な構成に基づく種々の効果や、派生的な効果のうち、少なくとも一つを得ることが可能である。 Hereinafter, exemplary embodiments of the present invention will be disclosed. The configurations of the embodiments shown below and the actions, results, and effects provided by the configurations are examples. The present invention can be realized by a configuration other than the configurations disclosed in the following embodiments, and at least one of various effects based on the basic configuration and derivative effects can be obtained. ..
図1に示す車両10は、例えば、内燃機関(エンジン、図示されず)を駆動源とする自動車(内燃機関自動車)であってもよいし、電動機(モータ、図示されず)を駆動源とする自動車(電気自動車、燃料電池自動車等)であってもよいし、それらの双方を駆動源とする自動車(ハイブリッド自動車)であってもよい。また、車両10は、種々の変速装置を搭載することができるし、内燃機関や電動機を駆動するのに必要な種々の装置(システム、部品等)を搭載することができる。また、車両10における車輪の駆動に関わる装置の方式や、数、レイアウト等は、種々に設定することができる。
The
図1に示されるように、車両10は、運転者(不図示)が乗車する車室10aを構成している。車室10a内には、乗員としての運転者の座席10bに臨む状態で、ステアリングホイール12等が設けられている。本実施形態では、一例として、ステアリングホイール12は、ダッシュボード14(インストルメントパネル)から突出している。また、車両10は、座席10bに着座した運転者がステアリングホイール12越しに視認できるように表示装置16が配置されている。後述するが、表示装置16には、例えば、計器盤が表示可能であり、速度表示部、回転数表示部、シフト表示部、水温計、電圧計、燃料計、半ドア警告灯、シートベルト警告灯等、様々な表示情報が表示可能である。本実施形態の表示装置16は、各表示情報の表示態様の変更(表示調整)が適宜実行変更できるように例えば、LCD(Liquid Crystal Display)や、OELD(Organic Electroluminescent Display)等で構成されている。
As shown in FIG. 1, the
また、図2に示すように、車室10aにおいて、ステアリングホイール12を支持するハンドルコラム18には、撮像部20aと、赤外線照射器20b(光源)とを含む撮像ユニット20が固定されている。赤外線照射器20bは、例えば、赤外線を照射するLED(Light Emitting Diode)ライト等とすることができる。撮像部20aは、例えば、赤外線による撮影に対応した、CCD(Charge Coupled Device)カメラ等とすることができる。
Further, as shown in FIG. 2, in the
撮像部20aは、座席10bに着座する運転者22の顔(頭)が、撮像領域内に収まるように、視野角及び設置姿勢が調整されている。また、赤外線照射器20bは、当該赤外線照射器20bが照射する光の光軸が、座席10bに着座する運転者22の顔の近傍に来るように、調整されている。
The viewing angle and the installation posture of the
赤外線照射器20bは、上述した調整の結果、車両10の座席10bに運転者22が座った場合に、当該運転者22の顔(頭)が存在する可能性がある範囲24に対して、赤外線26を照射する。赤外線26は、運転者22の眼には光として認識されない。このため、運転者22の顔の方向に照射しても、照射対象となった運転者22はまぶしいと感じない。このため、運転時の快適性を確保すると共に、撮像部20aによる、運転者22の顔の撮像が容易になる。
As a result of the above-described adjustment, the
撮像部20aは、例えば、車両10の運転が行われている間、赤外線照射器20bの照射した赤外線が照射された運転者22の顔(頭)の撮影を継続し、所定のフレームレートで動画データ(撮像画像データ)を逐次出力することができる。撮像された撮像画像データは、本実施形態において表示装置16の表示態様の調整を行うために利用する視線検出に利用することができる。なお、撮像画像データは、運転者22に対して脇見警告や居眠り警告を行ったり、運転者22の識別を行ったりするための顔検出(顔認識)に利用してもよい。
The
図2の場合、撮像ユニット20をハンドルコラム18上に配置する例を示したが、運転者22の視線情報が取得できれば、他の位置、例えば、車室10aの天井部分やダッシュボード14上に配置してもよい。また、運転者22の視線情報が取得できように顔(頭)が撮像できれば、撮像部20aと赤外線照射器20bとは分離して配置してもよい。赤外線照射器20bを用いる場合、撮像部20aは周囲の明るさの影響を受けにくく、運転者22の顔(頭)の認識を精度よく実行することができる。別の実施形態においては、赤外線照射器20bを省略するとともに、撮像部20aを可視光カメラとして構成してもよい。この場合、コスト軽減に寄与できる。
In the case of FIG. 2, an example in which the
図3は、本実施形態の表示制御装置28の構成を説明するための例示的かつ模式的なブロック図である。本実施形態では、表示制御装置28は、ハードウェアとソフトウェア(表示制御プログラム)が協働することにより、撮像部20aで撮像した撮像画像データから取得可能な少なくとも運転者22の視線情報と、ステアリングホイール12の設定位置を示すステアリング情報と、に基づき、表示装置16の視認可能領域を推定する。すなわち、表示制御装置28は、ステアリングホイール12越しに配置された表示装置16の表示領域のうち少なくとのステアリングホイール12を含む表示装置16の周辺部材によって遮られる遮蔽領域を推定する。そして、表示制御装置28は、表示領域のうち遮蔽領域以外の視認可能領域(非遮蔽領域)を決定し、当該非遮蔽領域に表示装置16で表示し得る例えば、複数の表示情報を表示するような表示調整を実行し、表示情報の視認性を向上する。
FIG. 3 is an exemplary and schematic block diagram for explaining the configuration of the
表示制御装置28は、CPU30(Central Processing Unit)やROM32(Read Only Memory)、RAM34(Random Access Memory)、SSD36(Solid State Drive、フラッシュメモリ)等の記憶部で構成されるコンピュータ上で実現することができる。なお、表示制御装置28は、車両10を制御する複数のECU(Electronic Control Unit)のうちいずれかのECUに含まれるCPUにおいて実現されてもよいし、車両制御用のECUとは別に設けられるCPUで実現されてもよいし、独立した専用のハードウェアとして表示制御装置28が構成されて車両10に搭載されてもよい。
The
CPU30は、ROM32等の不揮発性の記憶装置にインストールされ記憶された表示制御プログラムを読み出し、当該表示制御プログラムにしたがって演算処理を実行する。ROM32には、表示制御プログラムの他、表示装置16の表示調整を非遮蔽領域の広さや形状に応じて実行する際に参照する表示情報の表示態様を決めるための情報が記憶されている。例えば、非遮蔽領域に表示する速度表示部、回転数表示部、警告灯等のレイアウトや表示の際の拡縮率、非遮蔽領域の広さが所定値以下の場合、優先的に表示させる表示情報の優先順位等の情報が記憶されている。RAM34は、CPU30による表示制御プログラムの実行時のワークエリアとして使用されるとともに、CPU30での演算で用いられる各種データの一時的な格納エリアとして利用される。また、SSD36は、書き換え可能な不揮発性の記憶部であって、車両10の電源がオフされた場合にあってもデータを格納することができる。なお、CPU30や、ROM32、RAM34等は、同一パッケージ内に集積されうる。また、表示制御装置28は、CPU30に替えて、DSP(Digital Signal Processor)等の他の論理演算プロセッサや論理回路等が用いられる構成であってもよい。また、SSD36に替えてHDD(Hard Disk Drive)が設けられてもよいし、SSD36やHDDは、表示制御装置28とは別に設けられてもよい。
The
CPU30は、表示制御装置28の機能を実現するための各種モジュールを含む。例えば、CPU30は、取得部38、推定部40、表示制御部42等を実現する。また、取得部38は、ステアリング情報取得部38a、視線情報取得部38b、頭位置取得部38c等の詳細モジュールを含む。推定部40は、遮蔽領域推定部40a、非遮蔽領域決定部40b等の詳細モジュールを含む。また、表示制御部42は、レイアウト変更部42a、拡縮変更部42b、優先表示決定部42c、調整実行部42d等の詳細モジュールを含む。
The
取得部38は、表示制御装置28が遮蔽領域の推定(非遮蔽領域の決定)や表示情報の表示調整を実行するために必要な各種情報を取得する。
The
ステアリング情報取得部38aは、ステアリングホイール12の設定位置を示す設定情報を取得する。ステアリングホイール12は、例えば、運転者22の体格や座席10bの調整状態(例えば、座面の前後調整位置、上下調整位置、背面のチルト角等)に対応して最適または運転者22の望む運転姿勢を実現するために、ハンドルコラム18と一体的に移動して上下角(チルト角)を調整可能なチルトステアリング機構を備える。ステアリングホイール12は、表示装置16と運転者22との間に存在するため、ステアリングホイール12のチルト角が変化する場合、ステアリングホイール12によって遮られる運転者22の視野領域、すなわち、表示装置16の見える領域が変化する。ステアリング情報取得部38aは、ハンドルコラム18に設けられたステアリングホイールセンサ44(例えば、角度センサ)から検出値を取得することで、ステアリングホイール12の設定状態(チルト角)を取得する。なお、車両10は、ステアリングホイール12を軸方向(ステアリングホイール12の奥行き方向)に調整可能なテレスコピックステアリング機構を備える場合がある。この場合も、ステアリングホイール12が表示装置16と運転者22との間で移動するため、ステアリングホイール12によって遮られる運転者22の視野領域、すなわち、表示装置16の見える領域が変化する。そこで、ステアリング情報取得部38aは、チルト角に加えて、ステアリングホイール12の軸方向の設定位置をステアリング情報として取得してもよい。なお、以下の説明では、ステアリングホイール12が上下方向にチルト角が調整される場合の表示装置16の表示内容の調整について例示する。
The steering
本実施形態の場合、ハンドルコラム18の上に撮像ユニット20を固定している。この場合、ステアリングホイール12のチルト角の変化(ステアリング情報)と撮像部20aの光学中心との関連性が一定になる。したがって、ステアリングホイール12の上下移動と撮像部20aが撮像する撮像画像から取得する視線情報との関連付けができる。その結果、遮蔽領域を推定する場合の処理が容易になるとともに、推定精度を向上することができる。また、ステアリングホイール12のチルト角の変化(ステアリング情報)と撮像部20aの上下移動とが連動する。そこで、チルト角が基準角度0(例えば、チルト角θ=0)の場合に、撮像部20aで撮像した撮像画像に、車室10a内の固定部材、例えば、天上面に固定されたルームランプが写っている撮像画像を基準画像としてROM32等の記憶しておく。そして、ステアリングホイール12のチルト角が変化して場合に撮像部20aで撮像した撮像画像と、基準画像とを比較することにより、ステアリングホイール12のチルト角を推定することができる。つまり、撮像部20aの撮像した撮像画像に基づき視線情報を取得する場合に、併せて、ステアリング情報を取得できる。その結果、別途、ステアリングホイールセンサ44等を設ける必要がなく、構成の簡略化、コストの軽減に寄与することができる。
In the case of this embodiment, the
視線情報取得部38bは、運転者22が現在見ている方向を示す視線情報を取得する。視線情報は、運転者22の眼球の中心点と、見る対象(注視点)とを結ぶ線(視線)を示す情報である。図4に示すように、撮像ユニット20(撮像部20a)で座席10bに着座した運転者22を撮像する場合を考える。撮像ユニット20がハンドルコラム18上に固定されている場合、図5に示すように、撮像部20aの光学中心Mが定まる。視線情報取得部38bは、周知の顔認識技術等を用いて、撮像画像Pから運転者22および眼の位置(眼球中心位置Q)を検出し、当該運転者22が写り込んでいる撮像画像Pにおいて、光学中心Mと眼球中心位置Qとの距離Lを、例えば、撮像画像Pにおけるピクセル数を計測することで算出する。この場合、視線情報取得部38bは、図4に示すように、眼球中心位置Qから撮像部20aを見た場合の視線N1を視線情報として取得できるとともに、図4において、視線N1と光学中心Mの成す角度αが算出できる。また、撮像部20aの光学中心Mに対して撮像ユニット20の最上端部T1の距離は既知なので、視線情報取得部38bは、眼球中心位置Qから最上端部T1を見た場合の視線N2を視線情報として取得できる。そして、図4において、視線N2と、最上端部T1を通り光学中心Mと平行な平行線M1とが成す角度βが算出できる。さらに、撮像部20aの光学中心Mに対してステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2の距離は既知なので、視線情報取得部38bは、眼球中心位置Qから最下端部T2を見た場合の視線N3を視線情報として取得できる。そして、図4において、視線N3と、最下端部T2を通り光学中心Mと平行な平行線M2とが成す角度γが算出できる。推定部40は、視線N2,N3および角度β,γ等を用いて、運転者22がステアリングホイール12越しに見える領域(遮蔽領域以外の非遮蔽領域)を算出することができる。推定部40の詳細は後述する。
The line-of-sight
なお、視線情報取得部38bが取得する撮像画像データには、赤外線照射器20bの照射した赤外線が、運転者22の眼の角膜表面で反射した場合に写る虚像(以下、「プルキニエ像」という)を含むことができる。本実施形態の場合、撮像画像データに基づく撮像画像上におけるプルキニエ像の位置と、運転者22の瞳孔の中心位置とを用いて、周知の視線検出処理により、運転者22の視線(視線情報)の取得をより精度よく行うことができる。なお、運転者22の視線情報が取得できれば、他の技術を用いてもよい、例えば、運転者22の顔の形状に基づき推定される眼球中心の位置と瞳孔の中心位置とに基づいて、視線情報を取得してもよい。
In the captured image data acquired by the line-of-sight
頭位置取得部38cは、運転者22の着座姿勢における頭位置を取得する。頭位置取得部38cは、撮像部20aが撮像した撮像画像データに基づく撮像画像Pにおいて、周知の顔認識技術等を用いて、運転者22の頭(顔)を検出し、光学中心Mに対する頭の位置を検出する。運転者22は運転中に姿勢を変えることがある。例えば、長時間同じ運転姿勢でいることによる疲労を解消するために、姿勢を傾けたり、着座位置を変えたりすることがある。このような場合、頭位置(顔位置)が、例えば、車幅方向に変化するとともに、眼の位置(眼球中心位置Q)も同様に車幅方向に変化し、ステアリングホイール12によって遮られる表示装置16の遮蔽領域が変化する。したがって、頭位置(顔位置)の変化を考慮することで、より適切な遮蔽領域の推定、つまり非遮蔽領域の決定を行うことができる。また、周囲の確認のために顔(頭)の向きを一時的に変えることがある。このような場合は、頭(顔)は確認動作完了後に元の位置に戻る可能性が高い。頭(顔)の向きが一時的に変化した場合、ステアリングホイール12等による遮蔽領域が変化したと判定して、表示装置16の表示態様を過剰に変化させると、運転者22に煩わしさを与えてしまう場合がある。したがって、頭位置(顔位置)の位置が固定されている(所定期間動かない)場合に、表示装置16の表示調整を実行するようにすることで、より適切な表示調整を可能にしている。
The head
図6は、ステアリングホイール12越しに見える表示装置16の視認領域である非遮蔽領域46(便宜上、ハッチングで領域を表現している)を示す例示的な模式図である。図6に示されるように、ステアリングホイール12および撮像ユニット20がステアリングチルト機構の動作によって、上下方向に移動すると、非遮蔽領域46が変化する。仮に、速度表示部、回転数表示部、警告灯等が表示装置16において、固定位置で表示されている場合、移動するステアリングホイール12や撮像ユニット20によって遮られて視認できなくなる場合がある。そこで、まず、推定部40は、ステアリングホイール12を含む表示装置16の周辺部材によって遮られる表示装置16の表示可能領域における遮蔽領域を、ステアリング情報と少なくとも視線情報とに基づき推定する。
FIG. 6 is an exemplary schematic diagram showing a non-shielding region 46 (a region is represented by hatching for the sake of convenience) which is a visible region of the
遮蔽領域推定部40aは、ステアリングホイール12または撮像ユニット20の少なくとも一方で遮られる表示装置16の遮蔽領域を推定する。遮蔽領域推定部40aは、図4で説明したように、眼球中心位置Qから撮像部20aを見た場合の視線N1と、当該視線N1と光学中心Mとが成す角度αとに基づき、視線N2,N3および角度β,γを取得する。前述したように、視線N2は、眼球中心位置Qから撮像ユニット20の最上端部T1を見た場合の視線である。また角度βは、視線N2と最上端部T1を通る平行線M1とが成す角度である。視線N3は、眼球中心位置Qからステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2を見た場合の視線である。角度γは、視線N3と最下端部T2を通る平行線M2とが成す角度である。遮蔽領域推定部40aは、視線N2が表示装置16の画面と交わる点(注視点)の位置および角度βに基づき、運転者22が表示装置16を見た場合にステアリングホイール12の設定位置(チルト状態)で遮られる遮蔽領域(運転者22が視認不能となる領域)を例えば、X−Z座標軸上で推定する。この場合、ステアリングホイール12を支持するハンドルコラム18上に配置された撮像ユニット20の最上端部T1によって表示装置16の下側の遮蔽領域が決まる。同様に、遮蔽領域推定部40aは、視線N3が表示装置16の画面と交わる点(注視点)の位置および角度γに基づき、運転者22が表示装置16を見た場合にステアリングホイール12の設定位置(チルト状態)で遮られる遮蔽領域(運転者22が視認不能となる領域)を、例えばX−Z座標軸上で推定する。この場合、ステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2によって表示装置16の上側の遮蔽領域が決まる。
The shielding
遮蔽領域推定部40aが、ステアリングホイール12の設定位置(チルト状態)を示すステアリング情報と、視線情報と、に基づき遮蔽領域を推定すると、非遮蔽領域決定部40bは、表示装置16の元々の表示領域から遮蔽領域を除いた非遮蔽領域46を決定する。なお、例えば、表示装置16の表示領域がステアリングホイール12によって上下に二分割され、それぞれにある程度の広さの非遮蔽領域46が存在する場合、広い方の非遮蔽領域46を調整表示用の領域として採用してもよいし、ステアリングホイール12の下側領域または上側領域のいずれかを優先して調整用領域とするように予め定めておいてもよい。
When the shielded
表示制御部42は、推定した遮蔽領域に応じて、表示装置16で表示し得る例えば複数の表示情報を表示領域における非遮蔽領域46に表示するように表示調整を実行する。例えば、ステアリングホイール12のチルト角の変更により遮蔽領域(非遮蔽領域46)の位置が上下方向に変化する場合、遮蔽領域の位置にしたがい、表示情報を表示領域(非遮蔽領域46)の上下方向に移動するように表示調整を実行する。また、別の実施形態において、運転者22の着座姿勢や頭(顔)の位置が車幅方向に変化することにより遮蔽領域(非遮蔽領域46)の位置が車幅方向に変化する場合、表示制御部42は、遮蔽領域の位置にしたがい、表示情報を表示領域の車幅方向に移動するように表示調整を実行してもよい。
The
レイアウト変更部42aは、非遮蔽領域決定部40bが決定した非遮蔽領域46に、表示装置16において表示されうる表示情報を実質的に全て表示するように、各表示情報のレイアウトを変更することができる。表示情報のレイアウトは、非遮蔽領域決定部40bが決定した非遮蔽領域46の広さおよび形状に応じて、各表示情報のレイアウトを決定することができる。また、別の実施形態では、レイアウト変更後の視認性を考慮して、予め決めておいた表示情報のレイアウトをROM32等に記憶させておき、レイアウト変更時に読み出してきてもよい。
The
拡縮変更部42bは、レイアウト変更部42aによるレイアウト変更のみでは、各表示情報を非遮蔽領域46に納めることができない場合、少なくとの一つの表示情報の表示サイズを縮小するように変更する。また、逆に、レイアウト変更の結果、非遮蔽領域46のうち表示情報が表示されない空き領域が生じて、表示バランスが不自然になるような場合は、拡縮変更部42bは、表示情報の表示サイズを拡大して表示バランスを整えるようにしてもよい。なお、表示情報の表示サイズを縮小する場合は、車両10の運転操作を行う際に確認する表示情報として優先順位の低い表示情報から順次縮小するようにすることが望ましい。また、表示情報の表示サイズを縮小する場合、元の表示サイズと同じ態様で表示サイズを縮小してもよいし、異なる表示態様で表示サイズを縮小するようにしてもよい。例えば、元の表示サイズの速度表示部が、車速を円形領域内で指針が揺動する形態のアナログ形式で表示されている場合、縮小時には、数字を用いたデジタル形式の表示に変更し、表示サイズを縮小してもよい。回転数表示部も同様である。また,複数の警告灯がまとめて配置されたインジケータ群は、警告灯をばらばらに配置することにより非遮蔽領域46を有効活用するようにしてもよい。一方、表示情報の表示サイズを拡大する場合は、運転操作を行う際に表示情報として重要度の高い表示情報を優先的に拡大するようにしてもよい。
The scaling
優先表示決定部42cは、遮蔽領域推定部40aの推定した遮蔽領域の広さが所定値以上の場合、複数の表示情報のうち優先順位の高い表示情報を優先的に非遮蔽領域46に表示するように表示調整を実行する。優先順位の高い情報とは、車両10が正常に走行可能な状態の場合(車両10に異常がない場合)、例えば、速度情報等である。この場合、速度表示部を、数字を用いたデジタル形式の表示に変更して、走行時に運転者22が認識すべき情報の一つとして優先的に提供する。また、車両10に異常が生じている場合、例えば、冷却水の許容値以上の上昇やバッテリの電圧低下、ブレーキ異常等走行の継続が望ましくない場合の警報灯や、半ドアやシートベルト未装着等を運転者22に報知する報知灯が、優先順位の高い表示情報となる。このように、優先表示決定部42cは、撮像ユニット20の車両10の状態と、表示情報の優先順位と、にしたがい優先表示項目を決定する。したがって、優先表示決定部42cは、表示情報を表示できるスペース(非遮蔽領域46)が狭く、限定的な表示しかできいな場合でも、運転者22に提供すべき情報を優先的に提供するような表示調整を実行する。このように、運転者22に最低限の情報提供を行うように表示調整を行うことにより、広い遮蔽領域が存在する場合でも、運転者22の不安感を軽減し易くすることができる。
The priority
調整実行部42dは、表示装置16の表示画面の調整許可条件が満たされた場合に、レイアウト変更部42a、拡縮変更部42b、優先表示決定部42cのいずれかまたは、組合せで決定される表示内容で表示調整を実行する。例えば、調整実行部42dは、頭位置取得部38cにより取得される、頭位置が所定期間以上変化しない場合に調整許可条件が満たされたと判定し、表示調整を実行する。これにより、例えば、運転者22が周囲確認やオーディオ操作、同乗者との会話等により瞬間的に頭位置や姿勢を変えるような場合、つまり、姿勢変更により遮蔽領域が一時的に変化するような場合に、表示調整が実行されることを回避する。その結果、過剰な画面切替えによる煩わしさを防止することができる。また、調整実行部42dは、遮蔽領域が推定された場合、運転者22の視線が表示装置16から外れている期間に表示調整を実行することを、表示画面の調整許可条件としてもよい。これにより、運転者22が表示装置16を見ているときに、表示内容が切り替わるこという違和感を伴う表示制御を回避することができる。
When the adjustment permission condition for the display screen of the
図7〜図14は、ステアリングホイール12のチルト角に応じて変化する表示装置16の遮蔽領域(非遮蔽領域46)と、非遮蔽領域46に表示される表示情報を例示的に説明する模式図である。なお、図7〜図14の説明において、座席10bの設定状態(前後位置調整やリクライニング調整等)や運転者22の体格や着座姿勢は、同じであると仮定し、ステアリングホイール12のチルト角のみによって、表示装置16の遮蔽領域が変化する場合を説明する。
7 to 14 are schematic diagrams exemplarily illustrating the shielded area (non-shielded area 46) of the
図7、図8は、標準的な体格の運転者22が座席10b(図2参照)に着座した場合に、表示装置16で表示される全ての表示情報をステアリングホイール12越しに視認できるような標準設定位置にステアリングホイール12のチルト角(基準角度0(θ=0))が設定されている場合を示す図である。前述したように、ステアリングホイール12はハンドルコラム18と一体的に上下に移動しチルト角が設定されるとともに、ハンドルコラム18上に撮像ユニット20が固定されている。したがって、図4で説明したように、遮蔽領域推定部40aは、運転者22がステアリングホイール12越し(撮像ユニット20の最上端部T1越し)に表示装置16を見た場合に撮像ユニット20の最上端部T1によって定まる表示装置16の下側の遮蔽領域を、視線N2および角度βに基づき推定することができる。同様に、遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合にステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2によって定まる表示装置16の上側の遮蔽領域を、視線N3および角度γに基づき推定することができる。その結果、運転者22が視認できる表示装置16の表示領域16aのうち視認可能範囲48(表示装置16における非遮蔽領域46を含む範囲)となる領域が定まる。換言すれば、ステアリングホイール12の「チルト角が基準角度0(θ=0)」の場合、図7に示すように、非遮蔽領域46に表示装置16に表示されるべき表示情報、例えば、速度表示部50、回転数表示部52、インジケータ群54、各種警告灯56等を配置すれば、運転者22に視認させることができる。本実施形態の場合、図7に示すレイアウトを基本レイアウトとしてROM32等に記憶し、表示制御部42は、基本レイアウトに対して、種々のレイアウト変更、拡縮変更等を実行することができる。
7 and 8 show that all the display information displayed on the
図9、図10は、標準的な体格の運転者22が座席10b(図2参照)に着座した場合に、ステアリングホイール12を図7の標準設定位置(基準角度0(θ=0))から下方に下げてチルト角θ=θ1とした場合を示す図である。この場合、図9に示すように、ステアリングホイール12が図7の状態より下がり、ステアリングホイール12の上側のホイール(グリップ部)で遮られる領域(表示装置16の上側の表示領域16aの遮蔽領域)が図8に示す状態より広くなる。一方、ハンドルコラム18が下方に移動することによりハンドルコラム18に支持された撮像ユニット20も下がり、表示装置16より下方に移動する。その結果、図10に示すように、撮像ユニット20は、表示装置16の遮蔽に影響しなくなる。この場合も遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合に定まる表示装置16の下側の遮蔽領域(この場合、下側の遮蔽領域は、存在しない)を、視線N2および角度βに基づき推定することができる。同様に、遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合にステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2によって定まる表示装置16の上側の遮蔽領域を、視線N3および角度γに基づき推定することができる。その結果、運転者22が視認できる表示装置16の視認可能範囲48(表示装置16の非遮蔽領域46を含む範囲)が定まる。この場合、表示制御部42は、例えば、レイアウト変更部42aにより、各表示情報のレイアウトを変更して、表示装置16の上側の遮蔽領域が増えて、狭くなった非遮蔽領域46に全てが収まるように表示調整を行う。具体的には、レイアウト変更部42aは、速度表示部50、回転数表示部52、インジケータ群54、警告灯56を表示装置16の表示領域16aの下側の領域に移動させるようにレイアウトの調整を実行する。なお、図10の場合、警告灯56は上下方向に真っ直ぐに配列されるようにレイアウト変更して、レイアウト変更されたことを認識し易くしている。
9 and 10 show that the
このように、表示制御部42が表示調整を実行することで、ステアリングホイール12が下方にチルト調整されて、表示装置16の上方の遮蔽領域が広がった場合でも、非遮蔽領域46に全ての表示情報を違和感なく表示させることができる。その結果、運転者22は、姿勢を変えることなく、表示情報の視認を容易に行うことができる。
As described above, the
図11、図12は、標準的な体格の運転者22が座席10b(図2参照)に着座した場合に、ステアリングホイール12を図7の標準設定位置(基準角度0(θ=0))から上方に上げて最上設定位置であるチルト角θ=θ2とした場合を示す図である。この場合、図11に示すように、ステアリングホイール12が図7の状態より上がり、ステアリングホイール12の上側のホイール(グリップ部)で遮られる領域(表示装置16の上側の表示領域16aの遮蔽領域)が図8に示す状態より狭くなる。つまり、ステアリングホイール12が表示装置16の遮蔽にほぼ影響しなくなる。一方、ハンドルコラム18が上方に移動することによりハンドルコラム18に支持された撮像ユニット20も上がり、表示装置16をより広く遮るようになる。その結果、図12に示すように、撮像ユニット20およびハンドルコラム18は、表示装置16の下方の表示領域16aを図8の状態より広く遮ることになる。この場合も遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合に定まる表示装置16の下側の遮蔽領域を、視線N2および角度βに基づき推定することができる。同様に、遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合にステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2によって定まる表示装置16の上側の遮蔽領域を、視線N3および角度γに基づき推定することができる。その結果、運転者22が視認できる表示装置16の視認可能範囲48(表示装置16の非遮蔽領域46を含む範囲)が定まる。この場合、表示制御部42は、例えば、レイアウト変更部42aにより、各表示情報のレイアウトを変更して、表示装置16の下側の遮蔽領域が増えて、狭くなった非遮蔽領域46に全てが収まるように表示調整を行う。具体的には、レイアウト変更部42aは、速度表示部50、回転数表示部52、インジケータ群54を表示装置16の表示領域16aの上側の領域に移動させるようにレイアウトの調整を実行する。また、非遮蔽領域決定部40bは、撮像ユニット20の上方移動により狭くなった中央部の非遮蔽領域46にインジケータ群54を収められるように、インジケータ群54の縦方向のサイズを縮小し横方向のサイズを拡大する。この場合、例えば、インジケータ群54内でインジケータのレイアウトは、図8の標準時と同じでもよいし、縦横のサイズに応じて変更してもよい。
11 and 12 show that the
このように、表示制御部42が表示調整を実行することで、ステアリングホイール12が上方にチルト調整されて、表示装置16の下方の遮蔽領域が広がった場合でも、非遮蔽領域46に全ての表示情報を違和感なく表示させることができる。その結果、運転者22は、姿勢を変えることなく、表示情報の視認を容易に行うことができる。
As described above, the
図13、図14は、標準的な体格の運転者22が座席10b(図2参照)に着座した場合に、ステアリングホイール12を図7の標準設定位置(基準角度0(θ=0))から下方にさらに下げて最下設定位置であるチルト角θ=θ3とした場合を示す図である。この場合、図13に示すように、ステアリングホイール12が図10の状態よりさらに下がり、表示装置16に完全に重なる。その結果、ステアリングホイール12で遮られる表示装置16の表示領域16aはさらに増加するとともに、表示領域16aがステアリングホイール12により二分割され、大きな表示領域を必要とする標準的な表示態様に速度表示部50、回転数表示部52、インジケータ群54等の表示が困難になる。なお、ハンドルコラム18が下方にさらに移動したことによりハンドルコラム18に支持された撮像ユニット20もさらに下がり、図14に示すように、撮像ユニット20は、表示装置16の遮蔽に影響しなくなる。この場合も遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合に定まる表示装置16の下側の遮蔽領域を、視線N2および角度βに基づき推定することができる。同様に、遮蔽領域推定部40aは、運転者22がステアリングホイール12越しに表示装置16を見た場合にステアリングホイール12の上側のホイール内径(グリップ部内径)の最下端部T2によって定まる表示装置16の上側の遮蔽領域を、視線N3および角度γに基づき推定することができる。その結果、運転者22が視認できる表示装置16の視認可能範囲48(表示装置16の非遮蔽領域46を含む範囲)が定まる。この場合、表示制御部42は、遮蔽領域の広さが、表示情報のレイアウト変更や縮小変更で対応できる広さ未満であるか、対応できない広さ以上であるかの判定を行い、遮蔽領域の広さが所定値以上になったと判定した場合、優先表示決定部42cにより、優先順位の高い表示情報のみを非遮蔽領域46に表示するように表示調整を実行する。具体的には、車両10に異常がない場合、図14に示す優先表示領域58に、例えば、数字を用いたデジタル態様の車速を表示する。また、車両10に異常がある場合、その異常を運転者22に通知するための警報灯を優先表示領域58に表示する。なお、優先表示領域58に優先的に表示する表示情報の数は1個でも複数でもよい。優先表示領域58の広さは、非遮蔽領域46の広さに応じて決まるため、確保できる優先表示領域58の広さに応じて優先的に表示する表示情報の数を増加させてもよい。なお、優先表示領域58は、ステアリングホイール12より上に存在する非遮蔽領域46に設定してもよいし、ステアリングホイール12の上下に存在する非遮蔽領域46にそれぞれ優先表示領域58を設定して、表示情報を表示してもよい。
13 and 14 show the
このように、表示制御部42が表示調整を実行することで、ステアリングホイール12が最下設定位置にチルト調整されて遮蔽領域が拡大し、表示装置16の下方の限られた領域にしか非遮蔽領域46が存在しない場合でも、運転者22に認識させるべき、優先順位の高い表示情報を確実に表示させることができる。その結果、運転者22は、姿勢を変えることなく、最低限必要な表示情報の視認を容易に行うことができる。なお、図14に示すように、ステアリングホイール12が大きく下方に移動した結果、ステアリングホイール12の上方に広い表示領域16aが存在するようになった場合、この領域の広さに応じて縮小調整した、例えば速度表示部50や回転数表示部52を表示するようにしてもよい。また、レイアウトを変更したインジケータ群54を表示するようにしてもよい。このように、ステアリングホイール12によって分割された表示領域16aのそれぞれの領域の広さに応じた表示を行うことにより、限られた広さの表示領域16aを活用して、運転者22に効率的かつ効果的に情報の提供ができる。
As described above, the
図15は、他の実施形態を説明する模式的な図であり、運転者22が座席10b上で姿勢を車幅方向にずらした結果、視線が車幅方向にずれた場合に、表示制御部42が実行する表示調整の例を示す図である。例えば、運転者22が表示装置16(ステアリングホイール12)に対して姿勢を左側に傾けた状態で運転している場合、運転者22は、ステアリングホイール12および表示装置16を斜めから見ることになる。その結果、ステアリングホイール12によって遮られる表示装置16の表示領域16aの遮蔽領域が、運転者22が正面からステアリングホイール12および表示装置16を見た場合に比べて右側に移動することになる。つまり、非遮蔽領域46が表示領域16aの左側に移動することになる。この場合、頭位置取得部38cは、頭位置を取得するとともに、視線情報取得部38bは、取得された頭位置に対応する視線情報を取得する。そして、推定部40は、車幅方向の角度変化を含めた視線情報と、ステアリング情報と、に基づき、ステアリングホイール12および撮像ユニット20による遮蔽領域の推定を実行する。表示制御部42は推定された遮蔽領域に基づき決定された非遮蔽領域46に、各表示情報を収められるように、レイアウト変更や拡縮変更を実施し表示調整を実行する。図15の場合、レイアウト変更部42aが、速度表示部50、回転数表示部52、インジケータ群54を表示領域16aの左下側に移動させるとともに、警告灯56を表示領域16aの右下側にまとめるようにレイアウト変更を実施することで、各表示情報を非遮蔽領域46に収めた例である。なお、運転者22が表示装置16(ステアリングホイール12)に対して姿勢を右側に傾けた場合は、レイアウト変更部42aは、姿勢が左側に傾いた場合とは逆のレイアウトに表示調整を実行する。
FIG. 15 is a schematic diagram for explaining another embodiment. When the driver's 22 shifts his/her posture on the
このように、表示制御部42が表示調整を実行することで、運転者22の頭位置が車幅方向に移動する場合でも、非遮蔽領域46に全ての表示情報を違和感なく表示させることができる。その結果、運転者22は、姿勢を変えることなく、表示情報の視認を容易に行うことができる。
As described above, the
なお、ステアリングホイール12がテレスコピックステアリング機構を備え、ステアリングホイール12が軸方向に移動調整される場合、運転者22から表示装置16を見た場合のステアリングホイール12の位置が変化する。その結果、ステアリングホイール12によって遮られる表示領域16a(遮蔽領域)が変化する。この場合、推定部40は、軸方向の変化を反映させたステアリング情報を用いることにより、遮蔽領域の推定を適切に行うことが可能になる。そして、表示制御部42は、推定された遮蔽領域に基づき確定された非遮蔽領域46に各表示情報を収めるように表示調整を実行することができる。その結果、運転者22は、姿勢を変えることなく、表示情報の視認を容易に行うことができる。
When the
以上にように構成される表示制御装置28による表示装置16の表示調整処理の流れの一例を図16のフローチャートを用いて説明する。
An example of the flow of display adjustment processing of the
まず、表示制御装置28は、運転者22が座席10bに着座しているか否かを確認する(S100)。表示制御装置28は、例えば、座席10bに重量センサが設けられている場合、重量センサの検出結果に基づき、運転者22の着座の有無を確認することができる。また、別の例としては、ブレーキペダルが踏み込まれたことを検出した場合や、変速装置(例えばシフトレバ−)が操作された場合、イグニッションスイッチがONされた場合等、運転者22が座席10bに着座していなければ、操作されない項目を監視することで、着座の有無を確認してもよい。また、撮像部20aが撮像した撮像画像を解析することにより着座の有無を確認してもよい。運転者22の着座が確認できない場合(S100のNo)、このフローを一旦終了する。
First, the
表示制御装置28は、運転者22の着座が確認できた場合(S100のYes)、ステアリングホイール12の設定位置が確定しているか否かを確認する(S102)。表示制御装置28は、例えば、運転者22の着座が確認された後、所定期間経過した場合(例えば、20秒)、運転者22は、ステアリングホイール12を現在の設定位置で操作すると判定し、ステアリングホイール12の設定位置が確定したと判定する(S102のYes)。また、表示制御装置28は、車両10が走行を開始した場合、ステアリングホイール12の設定位置が確定していると判定してもよい。ステアリングホイール12の設定位置が確定していないと判定された場合(S102のNo)、例えば、運転者22が着座してから所定期間経過していない場合や、走行が開始されない場合は、このフローを一旦終了する。
When the seating of the
ステアリング情報取得部38aは、ステアリングホイール12の設定位置が確定されると、ステアリングホイールセンサ44の検出結果に基づき、ステアリング情報(チルト角や軸方向の位置等)を取得する(S104)。続いて、取得部38は、撮像部20aが撮像した撮像画像データを取得し(S106)、頭位置取得部38cは、座席10bに着座した運転者22の頭位置(顔位置)を取得する(S108)。表示制御装置28は、運転者22の頭位置が固定された状態で所定期間(例えば、5秒)経過していない場合(S110のNo)、つまり、頭(顔)や姿勢を頻繁に動かしている場合、推定部40は、表示装置16の表示領域16aの遮蔽領域の推定精度が低下する判定して、一旦このフローを終了する。なお、運転者22の頭位置が固定されているとは、頭(顔)の完全な静止を意味するものではなく、運転者22が実質的な姿勢を変化させていなかったり、頭(顔)の向きを側方に向けていなかったり等、大きな動きをしていないと見なせる程度の判定ができれば充分であり、予め実験等で姿勢の変化量や頭(顔)の偏向量等を検討して閾値としてROM32等に記憶させておくことができる。
When the set position of the
頭位置固定で所定期間経過したと判定された場合(S110のYes)、視線情報取得部38bは、撮像部20aの撮像した撮像画像データに基づき、視線情報の取得を開始する(S112)。表示制御装置28は、視線情報取得部38bが取得した視線情報に基づき、運転者22が表示装置16の表示領域16aを見ていないと判定した場合(S114のNo)、例えば、運転のため車両10の前方を見ている場合、表示装置16の表示調整の必要はないと判定して、一旦このフローを終了する。
When it is determined that the predetermined period has elapsed with the head position fixed (Yes in S110), the line-of-sight
一方、表示制御装置28が、視線情報に基づき、運転者22が表示装置16の表示領域16aを見ていると判定した場合(S114のYes)、遮蔽領域推定部40aは、S104で取得したステアリング情報と、S112で取得した視線情報とに基づき、表示装置16の表示領域16a上でステアリングホイール12や撮像ユニット20によって遮られている遮蔽領域を推定する。そして、非遮蔽領域決定部40bは、非遮蔽領域46を決定する(S116)。そして、表示制御部42は、遮蔽領域(非遮蔽領域46)の広さと形状に基づき、図7〜図14で説明したように、表示調整内容(レイアウト変更、拡縮変更、優先表示等)を決定する(S118)。
On the other hand, when the
そして、表示制御装置28は、運転者22が表示装置16の表示領域16aを一度見た後、表示領域16aから視線が外れているか否かを視線情報に基づき判定し、視線が表示領域16aから外れた場合(S120のYes)、その間にS118で決定した表示調整内容にしたがい、表示領域16aの非遮蔽領域46に表示する表示情報の表示調整を実行する(S122)。S120において、運転者22の視線が表示領域16aから外れない間は(S120のNo)、表示調整の実行を保留する。このように、運転者22に気づかれることなく、表示情報の全てが視認できるようなに表示調整実行する。なお、図14に示すように、遮蔽領域の広さが所定値以上となり、非遮蔽領域46が狭い場合には、優先順位の高い表示情報のみが表示されることになる。
Then, the
なお、座席10bの設定状態(前後位置調整やリクライニング調整等)や運転者22の着座姿勢が変化する場合や乗り換えにより運転者22の体格が変化する場合には、視線情報取得部38bは、その変化に対応して変化する視線情報を取得できる。したがって、表示制御装置28は、ステアリングホイール12の設定変更に加えて、座席10bの設定状態や運転者22の着座状態等が変化した場合でも、遮蔽領域の推定(非遮蔽領域46の決定)を適切に行い、表示調整を実行することができる。なお、推定部40は、座席10bの設定状態を示すシート情報や、運転者22の体格等を示す乗員情報を取得して、演算に反映させることにより、遮蔽領域の推定(非遮蔽領域46の決定)精度をさらに向上させることができる。
When the setting state of the
このように、表示制御装置28によれば、ステアリングホイール12の設定位置が変更されや場合、座席10bの設定状態が変更された場合、運転者22が入れ替わり運転者22の体格が変化した場合等でも、ステアリングホイール12越しの表示装置16に表示される表示情報の視認性を向上することが可能になる。また、運転者に姿勢等の変化をさせることなく、表示装置の表示内容を十分に認識させ易くすることができる。
As described above, according to the
なお、本実施形態では、表示装置16がステアリングホイール12の正面に配置されている例を説明した。別の実施形態では、表示装置16がステアリングホイール12の正面からずれた位置に配置されている場合でも、ステアリングホイール12や座席10bの設定位置や運転者22の体格や姿勢等で、表示領域16aにステアリングホイール12やその周辺部材によって遮蔽領域が生じるものであれば、本実施形態が適用可能であり、同様な効果を得ることができる。
In the present embodiment, the example in which the
本実施形態の表示制御装置28(CPU30)で実行される表示調整処理のための表示調整プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。 A display adjustment program for display adjustment processing executed by the display control device 28 (CPU 30) of the present embodiment is a file in an installable format or an executable format, which is a CD-ROM, a flexible disk (FD), a CD-ROM. It may be configured to be recorded and provided in a computer-readable recording medium such as an R or a DVD (Digital Versatile Disk).
さらに、表示調整表示調整プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、本実施形態で実行される表示調整プログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。 Further, the display adjustment program may be stored in a computer connected to a network such as the Internet and provided by being downloaded via the network. Further, the display adjustment program executed in the present embodiment may be provided or distributed via a network such as the Internet.
本発明の実施形態及び変形例を説明したが、これらの実施形態及び変形例は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although the embodiments and modifications of the present invention have been described, these embodiments and modifications are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and the scope equivalent thereto.
10…車両、10b…座席、12…ステアリングホイール、16…表示装置、16a…表示領域、18…ハンドルコラム、20…撮像ユニット、20a…撮像部、22…運転者、28…表示制御装置、30…CPU、32…ROM、38…取得部、38a…ステアリング情報取得部、38b…視線情報取得部、38c…頭位置取得部、40…推定部、40a…遮蔽領域推定部、40b…非遮蔽領域決定部、42…表示制御部、42a…レイアウト変更部、42b…拡縮変更部、42c…優先表示決定部、42d…調整実行部、44…ステアリングホイールセンサ、46…非遮蔽領域、48…視認可能範囲、58…優先表示領域。 10... Vehicle, 10b... Seat, 12... Steering wheel, 16... Display device, 16a... Display area, 18... Steering column, 20... Imaging unit, 20a... Imaging unit, 22... Driver, 28... Display control device, 30 ... CPU, 32... ROM, 38... Acquisition unit, 38a... Steering information acquisition unit, 38b... Line-of-sight information acquisition unit, 38c... Head position acquisition unit, 40... Estimation unit, 40a... Shielded region estimation unit, 40b... Non-shielded region Determining unit, 42... Display control unit, 42a... Layout changing unit, 42b... Enlargement/reduction changing unit, 42c... Priority display determining unit, 42d... Adjustment executing unit, 44... Steering wheel sensor, 46... Non-shielding region, 48... Visible Range, 58... Priority display area.
Claims (7)
前記ステアリングホイール越しに配置された表示装置の表示領域のうち少なくとの前記ステアリングホイールを含む前記表示装置の周辺部材によって遮られる遮蔽領域を、前記ステアリング情報と少なくとも前記視線情報とに基づき推定する推定部と、
推定した前記遮蔽領域に応じて、前記表示装置で表示し得る表示情報を前記表示領域における非遮蔽領域に表示するように表示調整を実行する制御部と、
を備える、表示制御装置。 Steering information indicating the setting position of the steering wheel of the vehicle, and an acquisition unit for acquiring at least driver's line-of-sight information,
Estimating a shielding area, which is shielded by a peripheral member of the display device including at least the steering wheel among display areas of the display device arranged over the steering wheel, based on the steering information and at least the line-of-sight information Department,
A control unit that performs display adjustment so that display information that can be displayed on the display device is displayed in a non-shielded area in the display area according to the estimated shielded area,
And a display control device.
前記制御部は、前記頭位置が所定期間以上変化しない場合に、前記表示調整を実行する、請求項1から請求項5のいずれか1項に記載の表示制御装置。 In addition to the line-of-sight information, the acquisition unit acquires the head position in the sitting posture of the driver,
The display control device according to any one of claims 1 to 5, wherein the control unit executes the display adjustment when the head position does not change for a predetermined period or longer.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018213198A JP2020079879A (en) | 2018-11-13 | 2018-11-13 | Display controller |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018213198A JP2020079879A (en) | 2018-11-13 | 2018-11-13 | Display controller |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2020079879A true JP2020079879A (en) | 2020-05-28 |
Family
ID=70801721
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018213198A Pending JP2020079879A (en) | 2018-11-13 | 2018-11-13 | Display controller |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2020079879A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022224754A1 (en) * | 2021-04-23 | 2022-10-27 | 株式会社デンソー | Vehicle display system, vehicle display method, and vehicle display program |
| CN116301451A (en) * | 2022-09-09 | 2023-06-23 | 长城汽车股份有限公司 | Display area adjustment method, device, system and vehicle |
| CN116568562A (en) * | 2020-11-02 | 2023-08-08 | 大陆汽车科技有限公司 | Display device for vehicle |
| US20230311652A1 (en) * | 2022-04-01 | 2023-10-05 | Ford Global Technologies, Llc | Guided driver positioning systems and methods |
| CN116968844A (en) * | 2023-07-17 | 2023-10-31 | 东风汽车集团股份有限公司 | A display screen layout method and device |
-
2018
- 2018-11-13 JP JP2018213198A patent/JP2020079879A/en active Pending
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116568562A (en) * | 2020-11-02 | 2023-08-08 | 大陆汽车科技有限公司 | Display device for vehicle |
| JP2023551371A (en) * | 2020-11-02 | 2023-12-08 | コンチネンタル オートモーティヴ テクロノジーズ ゲー・エム・ベー・ハー | Vehicle display device |
| WO2022224754A1 (en) * | 2021-04-23 | 2022-10-27 | 株式会社デンソー | Vehicle display system, vehicle display method, and vehicle display program |
| JPWO2022224754A1 (en) * | 2021-04-23 | 2022-10-27 | ||
| JP7616359B2 (en) | 2021-04-23 | 2025-01-17 | 株式会社デンソー | Vehicle display system, vehicle display method, and vehicle display program |
| US12515520B2 (en) | 2021-04-23 | 2026-01-06 | Denso Corporation | Vehicle display system, vehicle display method, and computer-readable non-transitory storage medium storing vehicle display program |
| US20230311652A1 (en) * | 2022-04-01 | 2023-10-05 | Ford Global Technologies, Llc | Guided driver positioning systems and methods |
| US12134318B2 (en) * | 2022-04-01 | 2024-11-05 | Ford Global Technologies, Llc | Guided driver positioning systems and methods |
| CN116301451A (en) * | 2022-09-09 | 2023-06-23 | 长城汽车股份有限公司 | Display area adjustment method, device, system and vehicle |
| CN116968844A (en) * | 2023-07-17 | 2023-10-31 | 东风汽车集团股份有限公司 | A display screen layout method and device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2020079879A (en) | Display controller | |
| US9045074B2 (en) | Driver alerts | |
| JP6454368B2 (en) | Vehicle display system and method for controlling vehicle display system | |
| CN102224443B (en) | Vehicle display device and display method | |
| US20100014711A1 (en) | Method for controlling an illumination in a vehicle interior in dependence on a head pose detected with a 3D sensor | |
| US20210197747A1 (en) | Driver monitoring device and driver monitoring method | |
| US20120002028A1 (en) | Face image pick-up apparatus for vehicle | |
| CN110053582A (en) | Seat harness fastening detection | |
| CN105711511A (en) | Method for operating a head-up display, presentation apparatus, vehicle | |
| JP2008094221A (en) | Eye state detector, and eye state detector mounting method | |
| JP6106979B2 (en) | Condition monitoring device and optical member | |
| JP2020048971A (en) | Eyeball information estimation apparatus, eyeball information estimation method, and eyeball information estimation program | |
| JP2018013811A (en) | Driver state determination device and driver state determination program | |
| US11881054B2 (en) | Device and method for determining image data of the eyes, eye positions and/or a viewing direction of a vehicle user in a vehicle | |
| US10222613B2 (en) | Display apparatus for a vehicle | |
| JP2017126151A (en) | Sight line detection device and sight line detection method | |
| WO2021166820A1 (en) | Warning control device and warning control system | |
| JP6322991B2 (en) | Gaze detection device and gaze detection method | |
| JP4857891B2 (en) | Driving support device and program | |
| US20240336192A1 (en) | Monitoring device, storage medium storing computer program for monitoring, and monitoring method | |
| JP2019095892A (en) | Vehicle drive supporting device and vehicle drive supporting program | |
| CN110316066B (en) | Anti-reflection method and device based on vehicle display terminal and vehicle | |
| JP2022040967A (en) | Travel control device and travel control method | |
| JP2023139929A (en) | Occupant condition monitoring device | |
| JP6187092B2 (en) | Car interior lighting device and vehicle interior lighting method |