JP2020097294A - 通知制御装置、電子ミラー装置、通知制御方法、通知制御プログラム - Google Patents

Abstract

【課題】電子ミラーを備えた車両における安全性を向上させること。
【解決手段】通知制御装置は、車両の後方を撮影するカメラが撮影した映像データ表示する表示部を、車両の運転者が目視したことを検出する目視情報取得部と、目視情報取得部が、車両の運転者が表示部を目視したことを検出したとき、運転者が表示部を目視したことを示す情報を、車両の外部に視覚的に通知する通知部によって通知させる通知制御部と、を備える。
【選択図】図３

Description

本発明は、通知制御装置、電子ミラー装置、通知制御方法、通知制御プログラムに関する。

光学式のルームミラーに代えて、車両の後方を撮影した映像を表示する電子ミラーに関する技術が知られている。

例えば、特許文献１には、車載カメラからの映像を表示する表示部への運転者の視線に基づいて、表示部に表示される映像中の物体を強調表示する車両用表示装置が開示されている。

特開２０１８−１６２０３０号公報

例えば、従来の光学式のルームミラーを備える車両と並行して走行するオートバイの乗員などは、ルームミラーに映される運転者の視線や顔の向きに基づいて、運転者が自身の存在を確認しているかなどの状況を判断している。この場合、オートバイの乗員は、運転者が自身の存在を確認していないと判断した場合には、車両から離れたり、車両から確認しやすい位置に移動したりすることで、安全性を高めていた。しかしながら、ルームミラーが電子化されることで、オートバイの乗員などはルームミラー越しに運転者の状況を確認することができなくなる。

本発明は、電子ミラーを備えた車両における安全性を向上させることのできる通知制御装置、電子ミラー装置、通知制御方法、通知制御プログラムを提供することを目的とする。

本発明の通知制御装置は、車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得部と、前記目視情報取得部が、前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知する通知部によって通知させる通知制御部と、を備える。

本発明の電子ミラー装置は、本発明の通知制御装置と、前記カメラと、前記車両の運転者の視線を検出し、検出された視線情報を前記目視情報取得部に出力する視線検出部と、前記通知部と、を備える。

本発明の通知制御方法は、車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得ステップと、前記目視情報取得ステップで前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を、前記車両の外部に視覚的に通知する通知部によって通知させる通知制御ステップと、を含む。

本発明の通知制御プログラムは、車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得ステップと、前記目視情報取得ステップで前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を、前記車両の外部に視覚的に通知する通知部によって通知させる通知制御ステップと、をコンピュータに実行させる。

本発明によれば、電子ミラーを備えた車両における安全性を向上させることができる。

図１は、第一実施形態に係る電子ミラー装置の構成の一例を示す模式図である。 図２は、第一実施形態に係る電子ミラー装置の構成の一例を示す模式図である。 図３は、第一実施形態に係る電子ミラー装置の構成の一例を示すブロック図である。 図４は、運転者が表示部を目視したことを示す情報を通知する方法の一例を説明するための模式図である。 図５は、運転者が表示部を目視したことを示す情報を通知する方法の一例を説明するための模式図である。 図６は、運転者が表示部を目視したことを示す情報を通知する方法の一例を説明するための模式図である。 図７は、第一実施形態に係る通知制御装置の処理の流れの一例を示すフローチャートである。 図８は、第二実施形態に係る電子ミラー装置の構成の一例を示すブロック図である。 図９は、第二実施形態に係る通知制御装置の処理の流れの一例を示すフローチャートである。

以下、添付図面を参照して、本発明に係る実施形態を詳細に説明する。なお、この実施形態により本発明が限定されるものではなく、また、実施形態が複数ある場合には、各実施形態を組み合わせて構成するものも含む。

［第一実施形態］
図１と、図２と、図３を用いて、第一実施形態に係る電子ミラー装置の構成を説明する。図１は、第一実施形態に係る電子ミラー装置の構成の一例を示す模式図である。図２は、第一実施形態に係る電子ミラー装置の構成の一例を示す模式図である。図３は、第一実施形態に係る電子ミラー装置の構成の一例を示すブロック図である。

図１から図３に示すように、電子ミラー装置１は、カメラ１０と、表示部２０と、視線検出部３０と、通知部４０と、記憶部５０と、通知制御装置（制御部）１００とを備える。

カメラ１０は、車両Ｍの後方を撮影するカメラであり、車両Ｍの後方と、左側後方と、右側後方とを撮影する。カメラ１０は、例えば、後方カメラ１１と、左サイドカメラ１２と、右サイドカメラ１３とから構成されている。

後方カメラ１１は、車両Ｍの後方に設けられている。具体的には、後方カメラ１１は、車両Ｍの後方を向くように設けられており、車両Ｍの後方を撮影する。後方カメラ１１が向く方向及び角度は、任意に設定可能である。後方カメラ１１は、撮影した後方の撮影データを通知制御装置１００の映像データ取得部１１０に出力する。

左サイドカメラ１２は、車両Ｍの左側方に設けられている。具体的には、左サイドカメラ１２は、車両Ｍの左側後方を向くように設けられており、車両Ｍの左側の後方を撮影する。左サイドカメラ１２が向く方向及び角度は、任意に設定可能である。左サイドカメラ１２は、撮影した左側の後方の撮影データを通知制御装置１００の映像データ取得部１１０に出力する。

右サイドカメラ１３は、車両Ｍの右側方に設けられている。具体的には、右サイドカメラ１３は、車両Ｍの右側後方を向くように設けられており、車両Ｍの右側の後方を撮影する。右サイドカメラ１３が向く方向及び角度は、任意に設定可能である。右サイドカメラ１３は、撮影した右側の後方の撮影データを通知制御装置１００の映像データ取得部１１０に出力する。

表示部２０は、車両Ｍの後方の映像データと、左側後方の映像データと、右側後方の映像データとを表示する。表示部２０は、例えば、後方モニタ２１と、左サイドモニタ２２と、右サイドモニタ２３とから構成されている。表示部２０を構成する後方モニタ２１と、左サイドモニタ２２と、右サイドモニタ２３は、例えば、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）または有機ＥＬ（Organic Electro-Luminescence）ディスプレイなどのディスプレイで実現することができる。

後方モニタ２１は、車両Ｍの後方の映像データを表示する。具体的には、後方モニタ２１は、例えば、表示制御部１２０の制御に従って、後方カメラ１１が撮影した映像データを表示する。後方モニタ２１は、車両Ｍの運転者が視認可能な位置に設けられている。例えば、後方モニタ２１は、車両Ｍの運転者が容易に視認できるように、ウィンドシールドＳの中央上部に設けられている。

左サイドモニタ２２は、車両Ｍの左側の後方の映像データを表示する。具体的には、左サイドモニタ２２は、例えば、表示制御部１２０の制御に従って、左サイドカメラ１２が撮影した映像データを表示する左サイドモニタ２２は、車両Ｍの運転者が視認可能な位置に設けられている。例えば、左サイドモニタ２２は、車両Ｍの運転者が容易に視認できるように、ダッシュボードＤの左側に設けられている。

右サイドモニタ２３は、車両Ｍの右側の後方の映像データを表示する。具体的には、右サイドモニタ２３は、例えば、表示制御部１２０の制御に従って、右サイドカメラ１３が撮影した映像データを表示する。右サイドモニタ２３は、車両Ｍの運転者が視認可能な位置に設けられている。例えば、右サイドモニタ２３は、車両Ｍの運転者が容易に視認できるように、ダッシュボードＤの右側に設けられている。

視線検出部３０は、車両Ｍの運転者の視線の向きを検出する。具体的には、視線検出部３０は、例えば、後方モニタ２１、左サイドモニタ２２、および右サイドモニタ２３に対する運転者の視線を検出する。視線検出部３０は、後方モニタ２１、左サイドモニタ２２、および右サイドモニタ２３に対する方向を含む運転者の視線の向きに加えて、視線が向いている時間の情報を視線情報として目視情報取得部１３０に出力する。図２においては、単数の視線検出部３０がダッシュボードＤに設けられているが、視線検出部３０は、後方モニタ２１、左サイドモニタ２２、および右サイドモニタ２３の各々の近傍に複数設けられていてもよい。

視線検出部３０は、所謂視線センサであり、既存の任意の視線検出手法が適用可能である。例えば、視線検出部３０は、赤外光発光装置と赤外光カメラとを備え、運転者の顔に赤外光を照射して、赤外光カメラで撮影した映像データを目視情報取得部１３０に出力する。また、視線検出部３０の他の例としては、運転者の顔を撮影する可視光カメラを備え、撮影した映像データを目視情報取得部１３０に出力する。

通知部４０は、種々の情報を車両Ｍの外部に通知する。通知部４０は、例えば、運転者が表示部２０を目視したことを示す情報を車両Ｍの外部に視覚的に通知する。通知部４０は、例えば、文字などを表示する表示部、光を発光する発光部、光を投射する投射部の少なくとも１つを含む。通知部４０は、通知制御部１４０の制御に従って、文字などを表示したり、光を発光したり、光を投射したりする。

通知部４０は、カメラ１０の近傍に設けられている。運転者が左サイドモニタ２２を目視したことを示す情報を通知する通知部４０は、左サイドカメラ１２の近傍に設けられる。運転者が右サイドモニタ２３を目視したことを示す情報を通知する通知部４０は、右サイドカメラ１３の近傍に設けられる。また、運転者が後方モニタ２１を目視したことを示す情報を通知する通知部４０は、後方カメラ１１の近傍に設けられる。

記憶部５０は、例えば、通知制御装置１００の各部を実現させるためのプログラムを記憶している。この場合、通知制御装置１００は、記憶部５０に記憶されているプログラムを展開して実行することで、各部の機能を実現する。記憶部５０は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ（Flash Memory）などの半導体メモリ素子、または、ハードディスク、ソリッドステートドライブ、光ディスクなどの記憶装置で実現することができる。

通知制御装置１００は、映像データ取得部１１０と、表示制御部１２０と、目視情報取得部１３０と、通知制御部１４０とを備える。通知制御装置１００は、記憶部５０に記憶されているプログラムを展開して実行することで、各部の機能を実現する。通知制御装置１００は、例えば、ＣＰＵ（Central Processing Unit）を含む電子的な回路で実現することができる。

映像データ取得部１１０は、種々の映像データを取得する。映像データ取得部１１０は、例えば、後方カメラ１１と、左サイドカメラ１２と、右サイドカメラ１３とが撮影した映像データを取得する。映像データ取得部１１０は、取得した映像データを表示制御部１２０に出力する。

映像データ取得部１１０は、視線検出部３０に、赤外光カメラまたは可視光カメラが備えられている場合は、視線検出部３０からの映像データを取得し、目視情報取得部１３０に出力することとしてもよい。

表示制御部１２０は、各種の映像データを表示部２０に表示する。表示制御部１２０は、例えば、後方カメラ１１が撮影した車両Ｍの後方の映像を後方モニタ２１に表示する。表示制御部１２０は、例えば、左サイドカメラ１２が撮影した車両Ｍの左側後方の映像を左サイドモニタ２２に表示する。表示制御部１２０は、例えば、右サイドカメラ１３が撮影した車両Ｍの右側後方の映像を右サイドモニタ２３に表示する。

目視情報取得部１３０は、視線検出部３０から運転者の視線情報を取得する。目視情報取得部１３０は、視線情報から、運転者が左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１を目視したことを検出する。具体的には、目視情報取得部１３０は、例えば、視線検出部３０から運転者を撮影した映像データを取得し、取得した映像データから目の部分を認識する。目視情報取得部１３０は、取得した映像データが可視光カメラによる映像データである場合は、例えば、認識した目の部分における目頭と虹彩との位置関係から、左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１に視線が向いているか否か、さらには左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１に視線が向いている時間を検出する。目視情報取得部１３０は、取得した映像データが赤外光カメラによる映像データである場合は、例えば、瞳孔と角膜反射との位置関係から、左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１に視線が向いているか否か、さらには左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１に視線が向いている時間を検出する。

目視情報取得部１３０は、例えば、運転者が左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１を所定時間以上目視したことを検出する。所定時間は、例えば、運転者が左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１のいずれかを目視して、目視した左サイドモニタ２２、右サイドモニタ２３又は後方モニタ２１に映っている映像を認識できる時間である。具体的には、所定時間は、例えば、０．５秒であるがこれに限定されない。所定時間は、運転者ごとに異なっていてもよい。この場合、運転者ごとの所定時間は、記憶部５０に記憶すればよい。また、所定時間は、道路状況、天候、時間帯に応じて変化させてもよい。目視情報取得部１３０は、運転者が左サイドモニタ２２、右サイドモニタ２３及び後方モニタ２１を目視したことを検出した結果を通知制御部１４０に出力する。

通知制御部１４０は、車両Ｍを運転する運転者が表示部２０を目視したことを示す情報を、通知部４０によって、車両Ｍの外部に通知する。具体的には、通知制御部１４０は、車両Ｍを運転する運転者が左サイドモニタ２２、右サイドモニタ２３又は後方モニタ２１を所定時間以上目視した場合に、運転者が左サイドモニタ２２、右サイドモニタ２３又は後方モニタ２１を目視したことを車両Ｍの外部に通知する。

図４と、図５と、図６とを用いて、運転者が表示部２０を目視したことを示す情報を車両Ｍの外部に通知する方法について説明する。図４は、運転者が表示部２０を目視したことを示す情報を車両Ｍの外部に通知する方法の一例を説明するための模式図である。図５は、運転者が表示部２０を目視したことを示す情報を車両Ｍの外部に通知する図４とは異なる方法の一例を説明するための模式図である。図６は、運転者が表示部２０を目視したことを示す情報を車両Ｍの外部に通知する図４及び図５とは異なる方法の一例を説明するための模式図である。

図４から図６は、本実施形態に係る右サイドカメラ１３を示している。図４から図６では、運転者が右サイドモニタ２３を目視したことを示す情報を車両Ｍの外部に通知する方法について説明する。なお、左サイドモニタ２２及び後方モニタ２１を目視したことを示す情報を車両Ｍの外部に通知する方法については、右サイドモニタ２３を目視した場合と同じなので、説明は省略する。

図４に示すように、右サイドカメラ１３は、例えば、撮影レンズ１３１と、発光部１３２とを備える。

撮影レンズ１３１は、例えば、入光した光を図示しない撮像素子に結像させる。これにより、右サイドモニタ２３には、映像が表示される。

発光部１３２は、通知部４０の一例であり、例えば、撮影レンズ１３１の周囲に設けられた発光素子である。発光部１３２に特に制限はないが、例えば、ＬＥＤ（Light Emitting Diode）で実現することができる。

通知制御部１４０は、運転者が右サイドモニタ２３を目視したことを示す情報を、発光部１３２を点灯させることで車両Ｍの外部に通知する。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した場合に、発光部１３２を点灯させる。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間に発光部１３２を点灯させ、１秒から２秒程度経過後に発光部１３２を消灯させる。これは、発光部１３２を点灯させる時間が１秒よりも短いと、例えば、車両Ｍの周囲を走行している、オートバイの乗員が気付かない可能性があるためである。また、発光部１３２を点灯させている時間が２秒を超えると、車両Ｍと、オートバイとの相対的な位置関係を含めた周囲の状況が変わってくる可能性があるためである。

通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視してからの経過時間に応じて、発光部１３２の点灯色を変更してもよい。この場合、通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間には青く点灯させ、経過時間に応じて黄や赤に変化させてもよい。

通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視してからの経過時間に応じて、発光部１３２の輝度を変更してもよい。この場合、通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間には最も明るく点灯させ、経過時間に応じて徐々に暗くしてもよい。

また、通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した場合でなく、所定時間の間、右サイドモニタ２３の目視を怠っていた場合に、発光部１３２を点灯させてもよい。例えば、右サイドカメラ１３がオートバイの存在を認識しているが、運転者が右サイドモニタ２３の目視を怠っている場合には、発光部１３２を黄色や赤色で点灯させ、オートバイの乗員に運転者がオートバイの存在に気付いていないことを通知してもよい。この場合、運転者による右サイドモニタ２３の目視を検出した時点で、発光部１３２の発光色を青色に変化させて、運転者が気付いたことを通知してもよい。

次に、図５を用いて、図４とは異なる方法で、運転者が右サイドモニタ２３を目視したことを示す情報を車両Ｍの外部に通知する方法について説明する。

図５に示すように、右サイドカメラ１３は、図４に示した発光部１３２に代えて、目視情報表示部１３３を備えていてもよい。

目視情報表示部１３３は、通知部４０の一例であり、右サイドカメラ１３に設けられたディスプレイである。目視情報表示部１３３に特に制限はないが、例えば、液晶ディスプレイまたは有機ＥＬディスプレイなどのディスプレイで実現することができる。

通知制御部１４０は、運転者が右サイドモニタ２３を目視したことを示す情報を、目視情報表示部１３３に表示させることで車両Ｍの外部に通知する。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した場合に、運転者が右サイドモニタ２３を目視したことを示す情報を、目視情報表示部１３３に表示させる。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間に目視情報表示部１３３に「運転者視認中」などの文字を表示する。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間に目視情報表示部１３３に文字を表示させ、１秒から２秒程度経過後に文字を消去する。通知制御部１４０が目視情報表示部１３３に表示する文字は、運転者が右サイドモニタ２３を視認していることが分かれば特に制限はない。

車両Ｍが運転者の顔の映像を撮影する図示しない運転者撮像部を備えている場合、通知制御部１４０は、例えば、運転者が右サイドモニタ２３を目視している映像を、目視情報表示部１３３に表示してもよい。この場合、通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した場合に、運転者の映像を、目視情報表示部１３３に表示させればよい。具体的には、通知制御部１４０は、運転者が右サイドモニタ２３を所定時間以上目視した瞬間に目視情報表示部１３３に運転者の顔の映像を表示し、１秒から２秒程度経過後に映像を消去する。

次に、図６を用いて、図４及び図５とは異なる方法で、運転者の右サイドモニタ２３の目視に関する情報を車両Ｍの外部に通知する方法について説明する。

図６に示すように、右サイドカメラ１３は、図４に示した発光部１３２、図５に示した目視情報表示部１３３に代えて、投射部１３４を備えていてもよい。

投射部１３４は、通知部４０の一例であり、右サイドカメラ１３に設けられており、路面に対して光を投射する。投射部１３４に特に制限はないが、例えば、指向性の高いレーザ光源で実現することができる。

通知制御部１４０は、運転者が右サイドモニタ２３を目視したことを示す情報を、投射部１３４から路面に光を投射することで車両Ｍの外部に通知する。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した場合に、運転者が右サイドモニタ２３を目視したことを示す情報を、投射部１３４に路面に投射させる。通知制御部１４０は、例えば、運転者が右サイドモニタ２３を所定時間以上目視した瞬間に投射部１３４に光を投射させ、１秒から２秒程度経過後に投射をやめさせる。

通知制御部１４０は、例えば、投射部１３４から路面に右サイドモニタ２３が目視されたことを示す図形または文字を投射する。通知制御部１４０は、例えば、路面に対して「運転者視認中」などの文字の光を投射部１３４から投射する。通知制御部１４０が投射部１３４に路面に投射させる図形や文字に特に制限はなく、運転者が右サイドモニタ２３を目視していることがわかればよい。

図４から図６では、右サイドカメラ１３には、発光部１３２と、目視情報表示部１３３と、投射部１３４とが別々に設けられている場合を説明したが、これは例示であり、本発明を限定するものではない。右サイドカメラ１３には、発光部１３２と、目視情報表示部１３３と、投射部１３４とを組み合わせて設けてもよい。

図７を用いて、通知制御装置１００の処理について説明する。図７は、通知制御装置１００の処理の流れの一例を示すフローチャートである。図７の処理は、車両Ｍが動作している期間、つまり左サイドモニタ２２又は右サイドモニタ２３に映像データが表示されている期間は、繰り返し実行される。

まず、通知制御装置１００は、左サイドモニタ２２又は右サイドモニタ２３に対する目視を検出した情報を目視情報取得部１３０から取得する（ステップＳ１０１）。そして、通知制御装置１００は、ステップＳ１０２に進む。

通知制御装置１００は、ステップＳ１０２において、取得した目視を検出した情報に基づいて、運転者が左サイドモニタ２２又は右サイドモニタ２３を所定時間以上目視したか否かを判定する。

運転者が所定時間以上左サイドモニタ２２又は右サイドモニタ２３を目視していない場合（ステップＳ１０２のＮｏ）、通知制御装置１００は、図７の処理を終了する。一方、運転者が所定時間以上左サイドモニタ２２又は右サイドモニタ２３を目視した場合（ステップＳ１０２のＹｅｓ）、通知制御装置１００は、ステップＳ１０３に進む。

次に、通知制御装置１００は、運転者が左サイドモニタ２２又は右サイドモニタ２３を目視したことを外部に通知する（ステップＳ１０３）。そして、通知制御装置１００は、ステップＳ１０４に進む。

次に、通知制御装置１００は、外部への通知を終了する（ステップＳ１０４）。そして、通知制御装置１００は、図７の処理を終了する。

上述のとおり、第一実施形態では、運転者が左サイドモニタ又は右サイドモニタで周囲の状況を確認した際に、運転者が周囲の状況を確認したことを車両の外部に通知することができる。これにより、車両の近くを走行するオートバイの乗員などの安全性をより高めることができる。

[第二実施形態]
図８を用いて、第二実施形態に係る電子ミラー装置の構成を説明する。図８は、第二実施形態に係る電子ミラー装置の構成の一例を示すブロック図である。

図８に示すように、電子ミラー装置１Ａは、カメラ１０と、表示部２０と、視線検出部３０と、通知部４０と、記憶部５０と、通知制御装置（制御部）１００Ａとを備える。通知制御装置１００Ａは、映像データ取得部１１０と、表示制御部１２０と、目視情報取得部１３０と、通知制御部１４０と、認識処理部１５０とを備える。すなわち、電子ミラー装置１Ａは、通知制御装置１００が認識処理部１５０を備えている点で、電子ミラー装置１と異なっている。

認識処理部１５０は、映像データ取得部１１０が取得した映像データに含まれる種々の対象物を認識する。認識処理部１５０は、例えば、映像データ取得部１１０が取得した映像データに含まれる通知対象物を認識する。通知対象物とは、例えば、車両Ｍの近傍を走行するオートバイや自転車である。

認識処理部１５０は、例えば、図示しない記憶部に格納された通知対象物認識辞書などの辞書データに基づいて、通知対象物を認識する。なお、認識処理部１５０は、周知の方法を用いて通知対象物を認識してもよい。

第二実施形態では、通知制御部１４０は、例えば、認識処理部１５０が通知対象物を認識している場合に、車両Ｍを運転する運転者の視線に関する情報を、通知部４０によって、車両Ｍの外部に通知する。通知制御部１４０が車両Ｍの外部に通知する方法については、第一実施形態と同じなので説明は省略する。

図９を用いて、通知制御装置１００Ａの処理について説明する。図９は、通知制御装置１００Ａの処理の流れの一例を示すフローチャートである。図９の処理は、車両Ｍが動作している期間、つまり左サイドモニタ２２又は右サイドモニタ２３に映像データが表示されている期間は、繰り返し実行される。

ステップ２０１と、ステップ２０２とは、図７に図示のステップＳ１０１と、ステップＳ１０２と同一であるため説明は省略する。

ステップＳ２０２のＹｅｓの後、通知制御装置１００Ａは、ステップＳ２０３において、映像データから通知対象物を認識したか否かを判定する。

映像データから通知対象物を認識しなかった場合（ステップＳ２０３のＮｏ）、通知制御装置１００Ａは、図９の処理を終了する。一方、映像データから通知対象物を認識した場合（ステップＳ２０３のＹｅｓ）、通知制御装置１００Ａは、ステップＳ２０４に進む。

ステップＳ２０４と、ステップＳ２０５とは、図７に図示のステップＳ１０３と、ステップＳ１０４と同じなので、説明は省略する。

上述のとおり、第二実施形態では、通知対象物が認識された場合にのみ、運転者が左サイドモニタ又は右サイドモニタで周囲の状況を確認した際に、運転者が周囲の状況を確認したことを車両の外部に通知する。これにより、車両の近くを走行するオートバイの乗員などに適切に運転者の視線に関する情報を伝えることができるので、安全性をより高めることができる。

以上、本発明の実施形態を説明したが、これら実施形態の内容により実施形態が限定されるものではない。また、前述した構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。さらに、前述した構成要素は適宜組み合わせることが可能である。さらに、前述した実施形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換又は変更を行うことができる。

１，１Ａ 電子ミラー装置
１０ カメラ
１１ 後方カメラ
１２ 左サイドカメラ
１３ 右サイドカメラ
２０ 表示部
２１ 後方モニタ
２２ 左サイドモニタ
２３ 右サイドモニタ
３０ 視線検出部
４０ 通知部
５０ 記憶部
１００，１００Ａ 通知制御装置（制御部）
１１０ 映像データ取得部
１２０ 表示制御部
１３０ 目視情報取得部
１３１ 撮影レンズ
１３２ 発光部
１３３ 目視情報表示部
１３４ 投射部
１４０ 通知制御部
１５０ 認識処理部

Claims (10)

1. 車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得部と、
   前記目視情報取得部が、前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知する通知部によって通知させる通知制御部と、
   を備える、通知制御装置。
2. 前記通知制御部は、前記カメラのレンズ周辺に設けられた発光部を発光させることで前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知させる、
   請求項１に記載の通知制御装置。
3. 前記通知制御部は、前記カメラの周辺に設けられた表示部に文字を表示させることで前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知させる、
   請求項１または２に記載の通知制御装置。
4. 前記通知制御部は、前記カメラの近傍から路面に光を投射する投射部から路面に光を投射させることで前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知させる、
   請求項１から３のいずれか１項に記載の通知制御装置。
5. 前記通知制御部は、前記投射部から路面に前記運転者が前記表示部を目視されたことを示す図形または文字を投射させる、
   請求項４に記載の通知制御装置。
6. 前記目視情報取得部は、前記車両の運転者が前記表示部を所定時間以上目視したことを検出し、
   前記通知制御部は、前記目視情報取得部が前記車両の運転者が前記表示部を所定時間以上目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知させる、
   請求項１から５のいずれか１項に記載の通知制御装置。
7. 前記カメラが撮影した映像データから通知対象物を認識する認識処理部をさらに備え、
   前記通知制御部は、前記認識処理部が通知対象物を認識している場合に、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知させる、
   請求項１から６のいずれか１項に記載の通知制御装置。
8. 請求項１から７のいずれか１項に記載の通知制御装置と、
   前記カメラと、
   前記車両の運転者の視線を検出し、検出された視線情報を前記目視情報取得部に出力する視線検出部と、
   前記通知部と、
   を備える、電子ミラー装置。
9. 車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得ステップと、
   前記目視情報取得ステップで前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知する通知部によって通知させる通知制御ステップと、
   を含む、通知制御方法。
10. 車両の後方を撮影するカメラが撮影した映像データを表示する表示部を、前記車両の運転者が目視したことを検出する目視情報取得ステップと、
    前記目視情報取得ステップで前記車両の運転者が前記表示部を目視したことを検出したとき、前記運転者が前記表示部を目視したことを示す情報を前記車両の外部に視覚的に通知する通知部によって通知させる通知制御ステップと、
    をコンピュータに実行させるための、通知制御プログラム。

Images