JP2003329463A - Object guide apparatus and method - Google Patents
Object guide apparatus and methodInfo
- Publication number
- JP2003329463A JP2003329463A JP2002135285A JP2002135285A JP2003329463A JP 2003329463 A JP2003329463 A JP 2003329463A JP 2002135285 A JP2002135285 A JP 2002135285A JP 2002135285 A JP2002135285 A JP 2002135285A JP 2003329463 A JP2003329463 A JP 2003329463A
- Authority
- JP
- Japan
- Prior art keywords
- driver
- face
- recognition
- name
- detecting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Traffic Control Systems (AREA)
- Navigation (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
(57)【要約】
【課題】 ドライブしている時に車両の外に見える山等
の名称をその場で知りたいという要望がある。
【解決手段】 運転者がリモコン8からの操作により対
象物案内モードに切り替えると、CPU24は、自車の
現在位置と走行方位とを取得するとともに、運転者の顔
面をビデオカメラ13で撮影し、運転者が、例えば「あ
の山は何?」と顔をその山に向けてマイクロホン15か
ら音声入力すると、音声認識処理部14が質問内容を認
識する。CPU24の対象物検出手段24cは、自車の
現在位置と走行方位とから運転者の顔面の方向における
質問された山の名称を地図データから読み出して、スピ
ーカ18または液晶ディスプレイ7に出力する。
(57) [Summary] [Problem] There is a demand to know on the spot the name of a mountain or the like that can be seen outside a vehicle when driving. When a driver switches to an object guidance mode by an operation of a remote controller, a CPU obtains a current position and a traveling direction of an own vehicle, and captures an image of a driver's face with a video camera. When the driver inputs a voice from the microphone 15 with his / her face directed toward the mountain, for example, "What is that mountain?", The voice recognition processing unit 14 recognizes the content of the question. The object detecting means 24c of the CPU 24 reads the name of the queried mountain in the direction of the driver's face from the map data based on the current position and the traveling direction of the vehicle, and outputs the read name to the speaker 18 or the liquid crystal display 7.
Description
【0001】[0001]
【発明の属する技術分野】本発明は、走行する車両の外
側に見える山や建物等の認識対象物の名称を表示するこ
とのできる対象物案内装置およびその方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an object guide device and method capable of displaying the name of a recognition object such as a mountain or a building visible on the outside of a traveling vehicle.
【0002】[0002]
【従来の技術】従来、この種の対象物案内装置として、
例えば特開平9−42987号公報には、車両走行時に
スキー場、ゴルフ場等を音声入力すると、音声認識処理
により対応する地図情報を読み出して該当する施設の名
称を表示する車載用地図表示装置が開示されている。ま
た、特開平8−327375号公報には、車両走行時の
進行方向の景色に係わる地形情報を記憶装置から読み出
して3次元表示する景色表示システムが開示されてい
る。2. Description of the Related Art Conventionally, as an object guide device of this type,
For example, Japanese Unexamined Patent Publication No. 9-42987 discloses a vehicle-mounted map display device that reads out the corresponding map information by voice recognition processing and displays the name of a corresponding facility when a skiing area, a golf course, or the like is voice-input while the vehicle is traveling. It is disclosed. Further, Japanese Patent Application Laid-Open No. 8-327375 discloses a landscape display system that reads out three-dimensionally the topographical information relating to the landscape in the traveling direction when the vehicle is traveling from the storage device.
【0003】[0003]
【発明が解決しようとする課題】しかしながら、上記特
開平9−42987号公報記載の対象物案内装置では、
音声認識における認識対象語を車両走行経路もしくは車
両走行域の地名に限定することにより、処理速度の低下
を防止して音声認識率を高めながら画面に表示されてい
ない地域の地図操作、情報検索を可能にしたものであ
り、車両の外側に見える山や建物の名称が分からない場
合には、表示することができなかった。また、特開平8
−327375号公報のものでは、観察者の目に写る景
色の映像を表示装置の画面に3次元表示することはでき
ても、その対象物の名称を表示することはできなかっ
た。However, in the object guide device described in the above-mentioned JP-A-9-42987,
By limiting the recognition target words in voice recognition to the vehicle travel route or the place name of the vehicle travel area, it is possible to prevent a decrease in processing speed and increase the voice recognition rate while performing map operation and information retrieval of areas not displayed on the screen. It was made possible and could not be displayed if the names of mountains and buildings visible on the outside of the vehicle were unknown. In addition, JP-A-8
According to the publication No. 327375, the image of the scenery seen by the observer can be displayed three-dimensionally on the screen of the display device, but the name of the object cannot be displayed.
【0004】本発明は、このような従来の問題を解決す
るものであり、車両の外側に見える山や建物等の名称が
分からなくても、その名称を直ちに表示することのでき
る対象物案内装置およびその方法を提供することを目的
とする。The present invention solves such a conventional problem, and even if the names of mountains, buildings, etc. visible on the outside of the vehicle are not known, the object guide device can display the names immediately. And to provide a method thereof.
【0005】上記目的を達成するために、本発明の対象
物案内装置は、認識対象物に関する語彙を入力する入力
手段と、前記認識対象物の名称と位置データを記憶する
地図データ記憶手段と、自車の現在位置を検出する現在
位置検出手段と、前記現在位置における運転者の顔面の
方向を検出する顔面検出手段と、前記運転者の顔面の方
向における前記認識対象物に関する語彙に基づいた前記
認識対象物の名称を前記地図データから検出する対象物
検出手段と、前記検出した認識対象物の名称を出力する
出力手段とを備えたものである。この構成により、運転
者が顔面を認識対象物に向けて、例えば「あれは何?」
と入力するだけで、車両の外側に見える山等の固有名称
や建造物等の一般名称を直ちに検索して出力することが
できる。In order to achieve the above object, the object guiding apparatus of the present invention comprises an input means for inputting a vocabulary relating to a recognition object, and a map data storage means for storing the name and position data of the recognition object. Current position detection means for detecting the current position of the vehicle, face detection means for detecting the direction of the driver's face at the current position, and the above-described vocabulary based on the recognition target object in the driver's face direction. An object detection means for detecting the name of the recognition object from the map data and an output means for outputting the detected name of the recognition object are provided. With this configuration, the driver turns his / her face toward the recognition target object, for example, "what is that?"
By simply inputting, it is possible to immediately search for and output a proper name such as a mountain visible on the outside of the vehicle or a general name such as a building.
【0006】また、本発明の対象物案内装置は、自車の
走行方位を検出する走行方位検出手段を備え、前記自車
の現在位置における走行方位を基準として前記運転者の
顔面の方向を検出することを特徴とするものである。こ
の構成により、運転者の顔面の方向を自車が現在走行し
ている方向から何度の方向として特定することができ
る。Further, the object guiding apparatus of the present invention comprises a traveling direction detecting means for detecting the traveling direction of the own vehicle, and detects the direction of the driver's face with reference to the traveling direction at the present position of the own vehicle. It is characterized by doing. With this configuration, the direction of the driver's face can be specified as the number of directions from the direction in which the vehicle is currently traveling.
【0007】また、本発明の対象物案内装置は、絶対方
位を検出する絶対方位検出手段を備え、前記絶対方位検
出手段により検出された絶対方位を基準として前記運転
者の顔面の方向を検出することを特徴とするものであ
る。この構成により、運転者の顔面の方向を、運転者が
頭部のヘルメットやヘアバンド等に装着した地磁気計等
から取得した絶対方位を基準として特定することができ
る。Further, the object guiding apparatus of the present invention comprises absolute azimuth detecting means for detecting an absolute azimuth, and detects the direction of the driver's face based on the absolute azimuth detected by the absolute azimuth detecting means. It is characterized by that. With this configuration, the direction of the driver's face can be specified based on the absolute azimuth obtained by the driver from the geomagnetometer or the like worn on the helmet or hair band of the head.
【0008】また、本発明の対象物案内装置は、前記運
転者の顔面を撮影するビデオカメラと、前記撮影された
運転者の顔面画像から顔面の方向を検出する画像処理手
段とを備えたことを特徴とするものである。この構成に
より、運転者の顔面の方向を容易に検出することができ
る。Further, the object guiding apparatus of the present invention comprises a video camera for photographing the driver's face and image processing means for detecting the direction of the face from the photographed driver's face image. It is characterized by. With this configuration, it is possible to easily detect the direction of the driver's face.
【0009】また、本発明の対象物案内装置は、前記運
転者の顔面を撮影するビデオカメラと、前記撮影された
運転者の顔面画像から眼球の方向を検出する画像処理手
段とを備えたことを特徴とするものである。この構成に
より、運転者の視線の方向を容易に検出することができ
る。Further, the object guiding apparatus of the present invention comprises a video camera for photographing the driver's face and image processing means for detecting the direction of the eyeball from the photographed driver's face image. It is characterized by. With this configuration, it is possible to easily detect the direction of the line of sight of the driver.
【0010】また、本発明の対象物案内装置は、前記ビ
デオカメラが赤外線カメラであることを特徴とするもの
である。この構成により、夜間等の暗い環境下において
も運転者の顔面または視線の方向を容易に検出すること
ができる。Further, the object guiding apparatus of the present invention is characterized in that the video camera is an infrared camera. With this configuration, it is possible to easily detect the direction of the driver's face or line of sight even in a dark environment such as at night.
【0011】また、本発明の対象物案内装置は、前記入
力手段が、認識対象物に関する語彙を音声で入力する音
声入力手段と、前記入力された音声を認識して前記認識
対象物の名称を抽出する音声認識手段とを備えたことを
特徴とするものである。この構成により、運転者は顔面
を認識対象物に向けながら発声することにより、ハンド
ルを操作しながら認識対象物について質問することがで
きる。Further, in the object guiding apparatus of the present invention, the input means recognizes the inputted voice by voice input means for inputting a vocabulary about the recognition object by voice, and identifies the name of the recognition object. And a voice recognition means for extracting. With this configuration, the driver can inquire about the recognition target object while operating the steering wheel by speaking while pointing the face toward the recognition target object.
【0012】また、本発明の対象物案内装置は、前記入
力手段が、押しボタンスイッチであることを特徴とする
ものである。この構成により、運転者は顔面を認識対象
物に向けながら押しボタンスイッチを押すことにより、
発声することなく認識対象物について質問することがで
きる。Further, the object guiding apparatus of the present invention is characterized in that the input means is a push button switch. With this configuration, the driver pushes the push button switch while facing the face to the recognition target,
It is possible to ask a question about the recognition target object without speaking.
【0013】また、本発明の対象物案内装置は、前記対
象物検出手段が、前記運転者の顔面の方向における認識
対象物の名称を1つだけ出力することを特徴とするもの
である。この構成により、例えば山が連なっている場合
に、その最も特徴的な山についての固有名称だけを出力
することができる。また、山の中に建物が存在する場合
には、より特徴的な方の名称を1つだけ出力することが
できる。Further, the object guiding apparatus of the present invention is characterized in that the object detecting means outputs only one name of the object to be recognized in the direction of the driver's face. With this configuration, for example, when mountains are connected, only the unique name of the most characteristic mountain can be output. Further, when a building exists in the mountain, only one more characteristic name can be output.
【0014】また、本発明の対象物案内装置は、前記対
象物検出手段が、前記運転者の顔面の方向における認識
対象物の名称を複数出力することを特徴とするものであ
る。この構成により、例えば山が連なっている場合に、
その特徴的な複数の山についてそれぞれの固有名称を出
力することができる。また、山の中に建物が存在する場
合には、山の固有名称と建物の固有名称または一般名称
を出力することができる。Further, the object guiding apparatus of the present invention is characterized in that the object detecting means outputs a plurality of names of recognition objects in the direction of the driver's face. With this configuration, for example, when mountains are connected,
It is possible to output the unique names of the characteristic mountains. When a building exists in a mountain, the mountain unique name and the building unique name or general name can be output.
【0015】また、本発明の対象物案内装置は、前記対
象物検出手段が、前記入力された認識対象物の種類に対
応する認識対象物の名称を出力することを特徴とするも
のである。この構成により、例えば「あの山は何?」と
いう質問が入力された場合には、山の中に建物が存在し
ていても山の固有名称だけを出力することができる。Further, the object guiding apparatus of the present invention is characterized in that the object detecting means outputs the name of the recognition object corresponding to the type of the inputted recognition object. With this configuration, for example, when the question "What is that mountain?" Is input, only the proper name of the mountain can be output even if there is a building in the mountain.
【0016】また、本発明の対象物案内装置は、前記対
象物検出手段が、前記入力された認識対象物の属性に対
応する認識対象物の名称を出力することを特徴とするも
のである。この構成により、例えば「あの丸くて大きい
ものは何?」という質問が入力された場合には、ガスタ
ンクのような一般名称を出力することができる。Further, the object guiding apparatus of the present invention is characterized in that the object detecting means outputs the name of the recognition object corresponding to the input attribute of the recognition object. With this configuration, for example, when a question "what is that round and big?" Is input, a general name such as a gas tank can be output.
【0017】また、本発明の対象物案内装置は、前記出
力手段が、前記検出された認識対象物の名称を音声で出
力するスピーカであることを特徴とするものである。こ
の構成により、運転者は視線を前方に向けたまま認識対
象物の名称を聴覚的に知ることができる。Further, in the object guiding apparatus of the present invention, the output means is a speaker for outputting the detected name of the recognition object by voice. With this configuration, the driver can auditorily know the name of the recognition target object while keeping the line of sight forward.
【0018】また、本発明の対象物案内装置は、前記出
力手段が、前記検出された認識対象物の名称を文字また
は絵で表示するディスプレイ装置であることを特徴とす
るものである。この構成により、ディスプレイを見るこ
とにより認識対象物の名称を視覚的に知ることができ
る。Further, the object guiding apparatus of the present invention is characterized in that the output means is a display device for displaying the detected name of the recognition object by characters or pictures. With this configuration, the name of the recognition object can be visually known by looking at the display.
【0019】また、本発明の対象物案内装置は、前記デ
ィスプレイ装置が、前記表示する認識対象物を強調表示
することを特徴とするものである。この構成により、例
えば視認対象物の文字や絵、背景等をフラッシングさせ
たり、太字で表示したり、拡大表示することにより、認
識対象物を他から明瞭に区別して知ることができる。Further, the object guiding apparatus of the present invention is characterized in that the display device highlights the recognition object to be displayed. With this configuration, for example, the recognition target object can be clearly distinguished from the others by flashing characters, pictures, backgrounds, and the like of the visual recognition target object, displaying in bold characters, or enlarged display.
【0020】また、本発明の対象物案内方法は、認識対
象物に関する語彙を入力するステップと、自車の現在位
置を検出するステップと、前記現在位置における運転者
の顔面の方向を検出するステップと、前記運転者の顔面
の方向における前記認識対象物に関する語彙に基づいた
前記認識対象物の名称を地図データから検出するステッ
プと、前記検出した認識対象物の名称を出力するステッ
プとを備えたものである。この方法により、運転者が顔
面を認識対象物に向けて、例えば「あれは何?」と入力
するだけで、車両の外側に見える山等の固有名称や建造
物等の固有名称または一般名称を直ちに検索して出力す
ることができる。Further, the object guiding method of the present invention includes the steps of inputting a vocabulary relating to the recognition object, detecting the current position of the vehicle, and detecting the direction of the driver's face at the current position. And a step of detecting from the map data a name of the recognition target object based on a vocabulary about the recognition target object in the direction of the driver's face, and a step of outputting the detected name of the recognition target object. It is a thing. With this method, the driver turns his / her face toward the recognition target object and, for example, simply inputs "What is that?", And the unique name such as a mountain visible on the outside of the vehicle or the unique name or general name of a building etc. You can search and output immediately.
【0021】また、本発明の対象物案内方法は、前記認
識対象物に関する語彙を音声で入力するステップと、前
記音声で入力された語彙の内容を音声認識するステップ
とを備えたものである。この方法により、運転者は顔面
を認識対象物に向けながら発声することにより、認識対
象物について質問することができる。Further, the object guiding method of the present invention comprises a step of inputting a vocabulary related to the recognition object by voice and a step of recognizing the content of the vocabulary input by voice. With this method, the driver can ask a question about the recognition target object by speaking while facing the recognition target object.
【0022】また、本発明の対象物案内方法は、前記運
転者の顔面をビデオカメラで撮影して運転者の顔面の方
向または眼球の方向を検出するステップを備えたもので
ある。この構成により、運転者の視線の方向を容易に検
出することができる。Further, the object guiding method of the present invention comprises the step of photographing the driver's face with a video camera and detecting the driver's face direction or eyeball direction. With this configuration, it is possible to easily detect the direction of the line of sight of the driver.
【0023】また、本発明の対象物案内方法は、前記検
出された認識対象物の名称を音声または文字または画像
またはその組み合わせで出力するステップを備えたもの
である。この構成により、運転者は認識対象物の名称を
容易に知ることができる。Further, the object guiding method of the present invention comprises a step of outputting the detected name of the recognition object as a voice, a character, an image or a combination thereof. With this configuration, the driver can easily know the name of the recognition target object.
【0024】また、本発明の対象物案内装置は、上記し
たいずれかの対象物案内装置を備えた車載ナビゲーショ
ン装置であり、ナビゲーション装置としての機能を拡張
して付加価値を高めることができる。The object guide device of the present invention is an in-vehicle navigation device equipped with any one of the above object guide devices, and the function as the navigation device can be expanded to increase the added value.
【0025】[0025]
【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して説明する。図1は本発明の対象物案内
装置を備えた車載ナビゲーション装置の構成を示してい
る。図1において、方位センサ1は、3次元ジャイロが
使用され、自車の走行方位を検出する手段である。車速
センサ2は、本装置を搭載した車両の車輪の回転数に応
じた車速パルスを発生する。各種センサ3は、リバース
スイッチ、パーキングスイッチ、ライトスイッチなどで
あり、車両の走行状態を検出する。DVD−ROMドラ
イブ4は、DVD−ROMから地図データや音声デー
タ、音声認識辞書データなどを読み出すものである。無
線送受信機5は、情報センター等との間でデータの交換
を行うものであり、携帯電話機を接続することにより情
報センター等とデータの交換を行うタイプのものでもよ
い。GPS受信機6は、GPSアンテナで受信した複数
の衛星からの電波を演算することで自車の現在位置(緯
度・経度)および方位を求めるものである。液晶ディス
プレイ7は、地図および現在の自車位置、方位、操作メ
ニューなどを表示するものであり、その表示画面前面に
タッチパネルを備えている。リモコン8は、ユーザが各
種の要求や命令を指示する操作ボタンを有する。リモコ
ン受光部9は、液晶ディスプレイ7の前面パネルの一部
に設けられて、リモコン8からの赤外線信号を受信す
る。これらDVD−ROMドライブ4、無線送受信機
5、GPS受信機6、液晶ディスプレイ7等は、一体化
されて車両のダッシュボード上に配置され、車内LAN
10を通じて装置本体11の通信インターフェース22
に接続されている。装置本体11は、車両のトランクル
ームや車内のセンターコンソールなどに設置される。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 shows the configuration of a vehicle-mounted navigation device equipped with the object guide device of the present invention. In FIG. 1, the azimuth sensor 1 is a means for detecting the traveling azimuth of the own vehicle using a three-dimensional gyro. The vehicle speed sensor 2 generates a vehicle speed pulse according to the number of rotations of the wheels of the vehicle equipped with this device. The various sensors 3 are a reverse switch, a parking switch, a light switch, etc., and detect the running state of the vehicle. The DVD-ROM drive 4 reads map data, voice data, voice recognition dictionary data, etc. from the DVD-ROM. The wireless transceiver 5 is for exchanging data with an information center or the like, and may be of a type for exchanging data with the information center or the like by connecting a mobile phone. The GPS receiver 6 obtains the current position (latitude / longitude) and azimuth of the vehicle by calculating radio waves from a plurality of satellites received by a GPS antenna. The liquid crystal display 7 displays a map and the current vehicle position, direction, operation menu, etc., and has a touch panel on the front surface of its display screen. The remote controller 8 has operation buttons for the user to instruct various requests and commands. The remote control light receiving section 9 is provided on a part of the front panel of the liquid crystal display 7, and receives an infrared signal from the remote control 8. The DVD-ROM drive 4, the wireless transmitter / receiver 5, the GPS receiver 6, the liquid crystal display 7 and the like are integrated and arranged on the dashboard of the vehicle.
Communication interface 22 of the apparatus main body 11 through 10
It is connected to the. The device main body 11 is installed in a trunk room of a vehicle or a center console in the vehicle.
【0026】装置本体11において、画像信号処理部1
2は、ビデオカメラ13が撮影した道路標識を画像処理
して道路標識画像データとして出力する。ビデオカメラ
13は、車両内の運転席前方上部のルームミラーの近傍
に取り付けられて、運転者の顔面を撮影するものであ
り、運転者の顔面を照射する照明を備えていてもよい。
音声認識処理部14は、マイクロホン15から入力され
た音声を認識処理する。マイクロホン15は、ビデオカ
メラ13の近傍に配置されている。センサ信号処理部1
6は、方位センサ1からの信号を基に車両の進行方向を
算出するとともに、車速センサ2からの車速信号から走
行距離を算出し、さらに各種センサ3からの信号を基に
車両の走行状態を検出して、制御に必要な信号を生成す
る。音声プロセッサ17は、音声認識結果を音声信号に
変換したり、検索結果や走行ルート上の音声案内、リモ
コンでの操作内容を表す音声信号をスピーカ18に出力
する。スピーカ18は、検索結果や音声認識結果、走行
ルート上の交差点案内、分岐案内、料金所案内、出口案
内などの音声案内、リモコンでの操作内容を音声で指示
したりする場合に使用される。画像プロセッサ19は、
メニューデータや地図データ、自車の現在位置データ、
建物データなどに基づき表示画像の生成処理を行う。記
憶部20は、プログラムを格納したROMや作業データ
を一時的に格納するRAM、画像データを格納するVR
AMなどから構成されている。表示制御部21は、必要
な画像データを画像プロセッサ19から読み出して描画
データを作成するとともに、画像のデフォルメ(簡略
化)処理、縮尺変更処理等を行う。通信インターフェイ
ス22は、DVD−ROMドライブ4等の外部装置と装
置本体11との通信を制御する。データ蓄積部23は、
ハードディスク装置であり、道路地図データを格納した
DVD−ROMを使用しない場合には、情報センターか
ら無線送受信機5を介して道路地図データや音声認識用
単語辞書データ等の大容量のデータをダウンロードして
蓄積する。CPU(中央処理装置)24は、装置全体を
制御し、現在位置/方位検出手段24a、経路探索手段
24b、対象物検出手段24cを制御する。In the apparatus main body 11, the image signal processing unit 1
2 performs image processing on the road sign captured by the video camera 13 and outputs it as road sign image data. The video camera 13 is attached in the vicinity of the rear-view mirror in the front upper part of the driver's seat in the vehicle to photograph the face of the driver, and may be equipped with illumination for illuminating the driver's face.
The voice recognition processing unit 14 recognizes the voice input from the microphone 15. The microphone 15 is arranged near the video camera 13. Sensor signal processing unit 1
6 calculates the traveling direction of the vehicle based on the signal from the azimuth sensor 1, calculates the traveling distance from the vehicle speed signal from the vehicle speed sensor 2, and further calculates the traveling state of the vehicle based on the signals from the various sensors 3. It detects and produces the signals required for control. The voice processor 17 converts a voice recognition result into a voice signal, and outputs a voice signal indicating a search result, voice guidance on a traveling route, and operation content of a remote controller to the speaker 18. The speaker 18 is used when a search result, a voice recognition result, voice guidance such as intersection guidance on a travel route, branch guidance, tollgate guidance, and exit guidance, and voice instructions for operation contents on the remote controller. The image processor 19
Menu data, map data, current position data of your vehicle,
A display image is generated based on building data and the like. The storage unit 20 includes a ROM storing a program, a RAM temporarily storing work data, and a VR storing image data.
It is composed of AM, etc. The display control unit 21 reads necessary image data from the image processor 19 to create drawing data, and also performs image deformation (simplification) processing, scale change processing, and the like. The communication interface 22 controls communication between an external device such as the DVD-ROM drive 4 and the device body 11. The data storage unit 23
If the hard disk drive is not a DVD-ROM storing road map data, a large amount of data such as road map data and word dictionary data for voice recognition is downloaded from the information center via the wireless transceiver 5. Accumulate. A CPU (Central Processing Unit) 24 controls the entire device and controls the current position / direction detecting means 24a, route searching means 24b, and object detecting means 24c.
【0027】次に、本実施の形態における動作につい
て、まずナビゲーション装置の基本動作について説明す
る。図1において、車両のエンジンをかけると、装置の
電源がオンになり、液晶ディスプレイ7にはメニュー画
面が表示され、CPU24が現在位置/方位検出手段2
4aのプログラムを起動させ、GPS受信機6からの位
置および方位情報と、方位センサ1および車速センサ2
からの信号をセンサ信号処理部16により処理したデー
タを基に、自車の正確な現在位置と走行方位を算出す
る。この自車位置情報に基づき、CPU24が、DVD
−ROMドライブ4を通じてDVD−ROMから該当す
る地図データを読み出し、画像プロセッサ19により画
像データに変換して記憶部20のVRAMに一旦記憶し
た後、色信号に変換して通信インターフェイス22を通
じて液晶ディスプレイ7の画面上に自車位置マークとと
もに表示する。また、マイクロホン15を通じて目的地
などの住所名を入力すると、音声認識処理部14の音声
認識機能によりその住所名を認識し、目的地が設定され
る。目的地が設定されると、CPU24は、経路探索手
段24bのプログラムを起動し、設定された目的地まで
の自車現在位置からの最適な案内経路を算出し、液晶デ
ィスプレイ7に表示された地図上に重ねて表示する。ユ
ーザが液晶ディスプレイ7に表示された案内経路に沿っ
て車両を進めると、CPU24は、現在位置情報と地図
データ上の道路ネットワークデータを基に、液晶ディス
プレイ7に表示された地図を進行方向側に順次スクロー
ルしながら自車位置マークの位置を順次更新してゆく。
車両が案内経路中の分岐点などに差し掛かると、地図デ
ータに付加された音声案内が、音声プロセッサ17によ
り合成音声として作成され、スピーカ18から出力され
る。Next, regarding the operation of this embodiment, the basic operation of the navigation device will be described first. In FIG. 1, when the vehicle engine is started, the power of the device is turned on, a menu screen is displayed on the liquid crystal display 7, and the CPU 24 causes the current position / orientation detecting means 2 to operate.
The program of 4a is started, the position and direction information from the GPS receiver 6, the direction sensor 1 and the vehicle speed sensor 2
Based on the data obtained by processing the signal from the sensor signal processing unit 16, the accurate current position and traveling direction of the own vehicle are calculated. Based on this vehicle position information, the CPU 24
-Corresponding map data is read from the DVD-ROM through the ROM drive 4, converted into image data by the image processor 19 and temporarily stored in the VRAM of the storage unit 20, and then converted into color signals, and then the liquid crystal display 7 through the communication interface 22. Is displayed together with the vehicle position mark on the screen. When an address name such as a destination is input through the microphone 15, the voice recognition function of the voice recognition processing unit 14 recognizes the address name and sets the destination. When the destination is set, the CPU 24 activates the program of the route searching means 24b, calculates an optimum guide route from the current position of the vehicle to the set destination, and displays the map displayed on the liquid crystal display 7. Display on top. When the user advances the vehicle along the guide route displayed on the liquid crystal display 7, the CPU 24 sets the map displayed on the liquid crystal display 7 to the traveling direction side based on the current position information and the road network data on the map data. While scrolling sequentially, the position of the vehicle position mark is updated sequentially.
When the vehicle approaches a branch point or the like in the guide route, the voice guidance added to the map data is created as synthesized voice by the voice processor 17 and output from the speaker 18.
【0028】次に、本実施の形態における対象物案内装
置の動作について図2を用いて説明する。運転者がリモ
コン8から対象物案内モード切替ボタンを押すと、CP
U24は、ナビゲーションモードから対象物案内モード
に切り替える(ステップS1)。次いでCPU24は、
現在位置/方位検出手段24aにより検出した自車の現
在位置と走行方位を取得し、ビデオカメラ13により運
転者の顔の撮影を開始する(ステップS2)。次に、運
転者が認識対象物、例えば山の場合、その山の方向に顔
を向けて「あれは何?」または「あの山は何?」などの
認識対象物に関する語彙をマイクロホン15から音声入
力して質問すると(ステップS3)、音声認識処理部1
4は、マイクロホン15から入力された単語の音声デー
タとDVD−ROMドライブ4により読み出した単語辞
書の音声データとを比較して類似度の高い単語を1つま
たは複数を音声認識結果としてCPU24に出力する
(ステップS4)。一方、画像信号処理部12では、運
転者の顔面を撮影した顔面画像信号を画像処理して、運
転者の視線方向を検出する(ステップS5)。Next, the operation of the object guide device according to this embodiment will be described with reference to FIG. When the driver presses the object guidance mode switching button from the remote control 8, CP
U24 switches from the navigation mode to the object guidance mode (step S1). Next, the CPU 24
The current position and running direction of the vehicle detected by the current position / direction detecting means 24a are acquired, and the video camera 13 starts photographing the driver's face (step S2). Next, if the driver is an object to be recognized, for example, a mountain, turn his or her face in the direction of the mountain, and a vocabulary about the object to be recognized such as "what is that?" Or "what is that mountain?" When inputting and asking a question (step S3), the voice recognition processing unit 1
Reference numeral 4 compares the voice data of the word input from the microphone 15 with the voice data of the word dictionary read by the DVD-ROM drive 4, and outputs one or a plurality of highly similar words to the CPU 24 as a voice recognition result. Yes (step S4). On the other hand, the image signal processing unit 12 performs image processing on the face image signal obtained by photographing the driver's face to detect the driver's line of sight (step S5).
【0029】図3は画像信号処理部12における処理を
示している。図3において、ビデオカメラ13から顔面
画像信号が入力されると(ステップS11)、不必要な
ノイズ等が除去された後、画像信号がアナログ信号から
ディジタル信号に変換される(ステップS12)。次い
で、背景差分処理により顔面の中の眼球部分の映像だけ
が抽出される(ステップS13)。顔面の中の眼球部分
は、円形であり他の部分とは明確に区別されるので、背
景差分処理部27では、眼球以外の部分を背景として、
撮影画像からその背景部分だけを除去することにより、
眼球部分のみを抽出する。抽出された眼球画像データ
は、2値化処理された後(ステップS14)、眼球画像
データの特徴量が演算される(ステップS15)。眼球
は正面から見た場合にはほぼ真円であるが、顔を傾ける
とその度合いに応じて楕円形に変化するので、その変化
量から視線方向を検出することができる。すなわち、演
算された眼球画像データの面積と、記憶部20に記憶さ
れた基準特徴量データとを比較することにより運転者の
視線方向が検出され(ステップS16)、視線方向信号
が出力される(ステップS17)。FIG. 3 shows the processing in the image signal processing section 12. In FIG. 3, when a face image signal is input from the video camera 13 (step S11), unnecessary noise and the like are removed, and then the image signal is converted from an analog signal to a digital signal (step S12). Next, only the image of the eyeball portion in the face is extracted by the background difference processing (step S13). Since the eyeball part in the face is circular and is clearly distinguished from other parts, the background difference processing unit 27 sets the part other than the eyeball as the background.
By removing only the background part from the captured image,
Extract only the eyeball part. The extracted eyeball image data is binarized (step S14), and then the feature amount of the eyeball image data is calculated (step S15). When viewed from the front, the eyeball is almost a perfect circle, but when the face is tilted, the eyeball changes to an elliptical shape according to the degree, so that the gaze direction can be detected from the amount of change. That is, the driver's line-of-sight direction is detected by comparing the calculated area of the eyeball image data with the reference feature amount data stored in the storage unit 20 (step S16), and the line-of-sight direction signal is output ( Step S17).
【0030】図2において、映像信号処理部1から視線
方向信号を受けると、CPU24の対象物検出手段24
cは、その出力された視線方向信号から、現在位置を基
準としてその視線方向に存在する山や建物の名称を1つ
または複数を記憶部20の地図データから抽出し(ステ
ップS6)、抽出した山の名称をスピーカ18から音声
で出力する(ステップS7)。In FIG. 2, when a line-of-sight direction signal is received from the video signal processing unit 1, the object detecting means 24 of the CPU 24.
From the output line-of-sight direction signal, c extracts one or more names of mountains or buildings existing in the line-of-sight direction with reference to the current position from the map data of the storage unit 20 (step S6), and extracts the name. The name of the mountain is output by voice from the speaker 18 (step S7).
【0031】このように、本実施の形態によれば、リモ
コン8からの操作により対象物案内モードに切り替える
と、CPU24は、自車の現在位置と走行方位とを取得
するとともに、運転者の顔面をビデオカメラ13で撮影
し、運転者が、例えば「あの山は何?」と顔をその山に
向けてマイクロホン15から音声入力すると、音声認識
処理部14が質問内容を認識し、CPU24の対象物検
出手段24cは、自車の現在位置と走行方位とから運転
者の顔面の方向における質問された山の名称を地図デー
タから読み出して、スピーカ18または液晶ディスプレ
イ7に出力するので、車両の外側に見える山等の名称を
直ちに検索して出力することができる。また、車載ナビ
ゲーション装置に本発明の対象物案内装置を組み込んで
あるので、各部を共有化して構成を単純化することがで
き、車載ナビゲーション装置の機能を拡大化することが
できる。As described above, according to the present embodiment, when the mode is switched to the object guide mode by the operation from the remote controller 8, the CPU 24 acquires the current position and the traveling direction of the own vehicle and the face of the driver. Is photographed by the video camera 13, and the driver inputs voice from the microphone 15 with his face facing the mountain, for example, "What is that mountain?", The voice recognition processing unit 14 recognizes the content of the question, and the target of the CPU 24. The object detecting means 24c reads out the name of the mountain in the direction of the driver's face from the map data based on the current position and traveling direction of the own vehicle and outputs it to the speaker 18 or the liquid crystal display 7, so that the outside of the vehicle. It is possible to immediately search for and output the names of mountains and the like that look like. In addition, since the object guide device of the present invention is incorporated in the vehicle-mounted navigation device, it is possible to share each part to simplify the configuration and expand the function of the vehicle-mounted navigation device.
【0032】なお、上記実施の形態では、対象物案内モ
ードに切り替えられた後に、CPU24が自車の現在位
置および走行方位を取得するとともに、ビデオカメラ1
3により運転者の顔面を撮影し、入力音声を音声認識す
るようにしているが、CPU24は、自車の現在位置お
よび走行方位を常時検出して記憶するとともに、ビデオ
カメラ13による運転者の顔面の撮影も常時行って画像
データを記憶し、タイマにより設定した所定時間後に逐
次データを更新し、対象物案内モードに切り替えられた
時点で、入力音声を音声認識するとともに、顔面画像デ
ータを画像処理して運転者の視線方向を検出するように
してもよい。In the above embodiment, the CPU 24 acquires the current position and traveling direction of the own vehicle after switching to the object guide mode, and the video camera 1
Although the driver's face is photographed by 3 and the input voice is recognized by voice, the CPU 24 constantly detects and stores the current position and traveling direction of the own vehicle, and the face of the driver by the video camera 13 is stored. The image data is stored by always taking the image, and the data is updated sequentially after the predetermined time set by the timer. When the object guidance mode is switched, the input voice is recognized and the face image data is image processed. Then, the line-of-sight direction of the driver may be detected.
【0033】また、上記実施の形態では、運転者の顔面
画像から眼球画像を抽出して運転者の視線方向を検出し
たが、運転者が認識対象物の方向に直面するように顔面
を向けることを予め装置の使用方法に決めておくことに
より、眼球画像を抽出することなく顔面の方向を視線の
方向とすることもできる。また、上記実施の形態では、
自車の現在位置における走行方位を基準として運転者の
顔面または視線の方向を検出したが、運転者が頭部に被
るヘルメットやヘアバンド等に絶対方位検出手段である
電子式の地磁気計を装着し、この地磁気計から絶対方位
信号を取得することにより、運転者の顔面または視線の
方向を絶対方位を基準として検出することができる。In the above embodiment, the eyeball image is extracted from the driver's face image to detect the driver's line-of-sight direction. However, the driver's face should be oriented so that the driver faces the recognition target. By previously determining the method of using the device, the face direction can be set as the line-of-sight direction without extracting the eyeball image. Further, in the above embodiment,
The direction of the driver's face or line of sight was detected based on the driving direction at the current position of the vehicle, but an electronic geomagnetometer, which is an absolute direction detecting means, was attached to the helmet or hairband worn by the driver on the head. However, by obtaining the absolute azimuth signal from this geomagnetometer, the direction of the driver's face or line of sight can be detected with the absolute azimuth as a reference.
【0034】また、上記実施の形態では、ビデオカメラ
で運転者の顔面を撮影したが、液晶ディスプレイ7に撮
影画像を映してモニターできるようにすることにより、
眼球の位置を撮影対象とすることができる。また、ビデ
オカメラとして赤外線カメラを使用することにより、夜
間等の暗い環境下においても運転者の顔面または視線の
方向を検出することができる。In the above embodiment, the driver's face is photographed by the video camera. However, the photographed image can be displayed on the liquid crystal display 7 so that it can be monitored.
The position of the eyeball can be taken as a shooting target. Further, by using the infrared camera as the video camera, it is possible to detect the direction of the driver's face or line of sight even in a dark environment such as at night.
【0035】また、入力手段として、認識対象物に関す
る語彙をマイクロホン15から音声入力するようにした
が、リモコン8の押しボタンスイッチまたは液晶ディス
プレイ7の前面に配置されたタッチスイッチを押して、
ナビゲーションモードから対象物案内モードに切り替え
た時に、その信号により「あれは何?」と同等の語彙が
質問として入力されたものとして、予め装置を設計して
おくことができる。また、そのような無声モードを設定
するための「名称お知らせボタン」をハンドルに取り付
けてそのボタンを押すことにより、発声することなく認
識対象物について質問することができる。Further, as the input means, the vocabulary concerning the recognition target object is inputted by voice from the microphone 15. However, the push button switch of the remote controller 8 or the touch switch arranged on the front surface of the liquid crystal display 7 is pushed,
When switching from the navigation mode to the object guidance mode, the device can be designed in advance assuming that the signal inputs a vocabulary equivalent to “what is that?” As a question. Also, by attaching a "name notification button" for setting such a silent mode to the handle and pressing the button, it is possible to ask a question about the recognition target object without uttering.
【0036】また、対象物検出手段24cは、認識対象
物の種類を含む質問があった場合には、音声認識処理部
14がその種類についての単語を出力するので、その種
類に応じた認識対象物の名称を出力することができる。
例えば「あの山は何?」という質問が入力された場合に
は、山の中に建物が存在していても山についてだけの固
有名称を出力する。また、認識対象物の属性を含む質問
があった場合には、その属性に応じた認識対象物の名称
を出力することができる。例えば「あの丸くて大きいも
のは何?」という質問が入力された場合には、ガスタン
クのような一般名称を出力する。これらを可能とするた
めには、音声認識用の単語辞書に、認識対象物の名称と
ともに、その種類および属性に関する単語も関連付けて
格納しておく必要がある。Further, the object detecting means 24c outputs the word of the type when the question including the type of the object to be recognized is received by the voice recognition processing section 14, so that the object to be recognized according to the type is recognized. The name of an item can be output.
For example, when the question "What is that mountain?" Is input, the unique name of only the mountain is output even if there is a building in the mountain. Further, when there is a question including the attribute of the recognition target object, the name of the recognition target object according to the attribute can be output. For example, when a question "What is that round and big one?" Is input, a general name such as gas tank is output. In order to make these possible, it is necessary to store the name of the recognition target object and the words related to its type and attribute in association with each other in the word dictionary for voice recognition.
【0037】また、出力手段として認識対象物の名称を
スピーカ18から音声で出力しているが、認識対象物の
名称を文字またはデフォルメ化した画像により液晶ディ
スプレイ7の画面に表示するようにしてもよい。その際
に、視認対象物の文字や画像、背景等をフラッシングさ
せたり、太字で表示したり、拡大表示することにより、
認識対象物を他から明瞭に区別して表示することができ
る。As the output means, the name of the recognition target object is output by voice from the speaker 18. However, the name of the recognition target object may be displayed on the screen of the liquid crystal display 7 by a character or a deformed image. Good. At that time, by flashing the characters and images of the visual target, the background, etc., displaying in bold type, or enlarging the display,
The recognition target can be displayed distinctly from the others.
【0038】また、検出した対象物の名称の音声データ
または文字、画像データをその位置データとともに記憶
部20またはデータ蓄積部23に記憶しておき、後日、
同じルートを走行した場合に、自車がその位置に来た時
に自動的にその山や建物の名称を出力するようにしても
よい。Further, the voice data or characters and the image data of the name of the detected object are stored in the storage unit 20 or the data storage unit 23 together with the position data, and later,
When traveling on the same route, the name of the mountain or the building may be automatically output when the vehicle arrives at that position.
【0039】また、上記説明は、車両の運転者について
説明したが、他の乗員についても同様な装置を用いて同
様な対象物案内を行えることは言うまでもない。In the above description, the driver of the vehicle has been described, but it goes without saying that the same object guidance can be performed for other occupants by using the same device.
【0040】[0040]
【発明の効果】以上説明したように、本発明の対象物案
内装置は、認識対象物に関する語彙を入力する入力手段
と、認識対象物の名称と位置データを記憶する地図デー
タ記憶手段と、自車の現在位置を検出する現在位置検出
手段と、現在位置における運転者の顔面の方向を検出す
る顔面検出手段と、運転者の顔面の方向における認識対
象物に関する語彙に基づいた認識対象物の名称を地図デ
ータから検出する対象物検出手段と、検出した認識対象
物の名称を出力する出力手段とを備えているので、運転
者が顔面を認識対象物に向けて質問するだけで、車両の
外側に見える山や建造物等の名称を直ちに検索して出力
することができ、現在位置の把握や目標物の確認に役立
てることができる。As described above, the object guiding apparatus of the present invention includes the input means for inputting the vocabulary relating to the recognition object, the map data storage means for storing the name and position data of the recognition object, and Current position detection means for detecting the current position of the vehicle, face detection means for detecting the direction of the driver's face at the current position, and name of the recognition target object based on the vocabulary of the recognition target object in the driver's face direction Is provided from the map data and output means for outputting the name of the detected recognition target object, so that the driver simply asks his / her face toward the recognition target object and the outside of the vehicle It is possible to immediately search for and output the names of mountains, buildings, and the like that can be seen, which can be useful for grasping the current position and confirming the target.
【0041】また、本発明の対象物案内方法は、認識対
象物に関する語彙を入力するステップと、自車の現在位
置を検出するステップと、現在位置における運転者の顔
面の方向を検出するステップと、運転者の顔面の方向に
おける認識対象物に関する語彙に基づいた認識対象物の
名称を地図データから検出するステップと、検出した認
識対象物の名称を出力するステップとを備えているの
で、運転者が顔面を認識対象物に向けて質問するだけ
で、車両の外側に見える山や建造物等の名称を直ちに検
索して出力することができ、現在位置の把握や目標物の
確認に役立てることができる。Further, the object guiding method of the present invention includes the steps of inputting a vocabulary relating to the recognition object, detecting the current position of the vehicle, and detecting the direction of the driver's face at the current position. , The step of detecting from the map data the name of the recognition target object based on the vocabulary relating to the recognition target object in the direction of the driver's face, and the step of outputting the name of the detected recognition target object Can immediately search and output the names of mountains, structures, etc. that are visible on the outside of the vehicle by simply asking their faces to the recognition target, which can be useful for grasping the current position and confirming the target. it can.
【図1】本発明の実施の形態における対象物案内装置を
備えた車載ナビゲーション装置の構成を示すブロック図FIG. 1 is a block diagram showing a configuration of an in-vehicle navigation device including an object guide device according to an embodiment of the present invention.
【図2】本発明の実施の形態における対象物案内処理を
示すフロー図FIG. 2 is a flowchart showing an object guidance process in the embodiment of the present invention.
【図3】本発明の実施の形態における運転者視線方向検
出処理を示すフロー図FIG. 3 is a flowchart showing a driver gaze direction detection process in the embodiment of the present invention.
1 方位センサ 2 車速センサ 3 各種センサ 4 DVD−ROMドライブ 5 無線受信機 6 GPS受信機 7 液晶ディスプレイ 8 リモコン 9 リモコン受光部 10 車内LAN 11 装置本体 12 画像信号処理部 13 ビデオカメラ 14 音声認識処理部 15 マイクロホン 16 センサ信号処理部 17 音声プロセッサ 18 スピーカ 19 画像プロセッサ 20 記憶部 21 表示制御部 22 通信インターフェイス 23 データ蓄積部 24 CPU 24a 現在位置/方位検出手段 24b 経路探索手段 24c 対象物案内手段 1 Direction sensor 2 vehicle speed sensor 3 Various sensors 4 DVD-ROM drive 5 wireless receiver 6 GPS receiver 7 LCD display 8 remote control 9 Remote receiver 10 Car LAN 11 Device body 12 Image signal processor 13 video camera 14 Speech recognition processing unit 15 microphone 16 Sensor signal processor 17 Voice Processor 18 speakers 19 Image processor 20 memory 21 Display control unit 22 Communication interface 23 Data storage unit 24 CPU 24a Current position / direction detecting means 24b Route search means 24c Object guide means
フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G10L 15/22 G10L 3/00 R 5H180 15/24 571G 15/28 571T H04N 5/225 Fターム(参考) 2F029 AA02 AB01 AC03 AC04 AC14 AC16 5B057 AA16 BA02 CE12 DA08 DB02 DB05 DB09 DC08 DC22 DC33 5C022 AA01 AA15 5D015 KK01 KK02 KK04 5D045 AB21 5H180 AA01 CC04 EE02 FF04 FF14 FF22 FF27 FF32 FF38 FF40Front page continuation (51) Int.Cl. 7 Identification code FI theme code (reference) G10L 15/22 G10L 3/00 R 5H180 15/24 571G 15/28 571T H04N 5/225 F term (reference) 2F029 AA02 AB01 AC03 AC04 AC14 AC16 5B057 AA16 BA02 CE12 DA08 DB02 DB05 DB09 DC08 DC22 DC33 5C022 AA01 AA15 5D015 KK01 KK02 KK04 5D045 AB21 5H180 AA01 CC04 EE02 FF04 FF14 FF22 FF27 FF32 FF38 FF40
Claims (20)
手段と、前記認識対象物の名称と位置データを記憶する
地図データ記憶手段と、自車の現在位置を検出する現在
位置検出手段と、前記現在位置における運転者の顔面の
方向を検出する顔面検出手段と、前記運転者の顔面の方
向における前記認識対象物に関する語彙に基づいた前記
認識対象物の名称を前記地図データから検出する対象物
検出手段と、前記検出した認識対象物の名称を出力する
出力手段とを備えた対象物案内装置。1. Input means for inputting a vocabulary relating to a recognition target object, map data storage means for storing the name and position data of the recognition target object, current position detection means for detecting the current position of the vehicle, and Face detecting means for detecting the direction of the driver's face at the current position, and object detection for detecting the name of the recognition object based on the vocabulary of the recognition object in the direction of the driver's face from the map data. An object guide device comprising means and output means for outputting the detected name of the recognition object.
手段を備え、前記自車の現在位置における走行方位を基
準として前記運転者の顔面の方向を検出することを特徴
とする請求項1記載の対象物案内装置。2. A driving direction detecting means for detecting a traveling direction of the own vehicle is provided, and the direction of the driver's face is detected with reference to the traveling direction at the present position of the own vehicle. The described object guidance device.
備え、前記絶対方位検出手段により検出された絶対方位
を基準として前記運転者の顔面の方向を検出することを
特徴とする請求項1記載の対象物案内装置。3. The absolute azimuth detecting means for detecting an absolute azimuth is provided, and the direction of the driver's face is detected based on the absolute azimuth detected by the absolute azimuth detecting means. Object guide device.
ラと、前記撮影された運転者の顔面画像から顔面の方向
を検出する画像処理手段とを備えたことを特徴とする請
求項1から3のいずれかに記載の対象物案内装置。4. A video camera for photographing the driver's face, and image processing means for detecting the direction of the face from the photographed driver's face image. The object guide device according to any one of 1.
ラと、前記撮影された運転者の顔面画像から眼球の方向
を検出する画像処理手段とを備えたことを特徴とする請
求項1から3のいずれかに記載の対象物案内装置。5. A video camera for photographing the driver's face, and image processing means for detecting the direction of the eyeball from the photographed driver's face image. The object guide device according to any one of 1.
ことを特徴とする請求項4または請求項5記載の対象物
案内装置。6. The object guide device according to claim 4, wherein the video camera is an infrared camera.
彙を音声で入力する音声入力手段と、前記入力された音
声を認識して前記認識対象物の名称を抽出する音声認識
手段とを備えたことを特徴とする請求項1から請求項6
のいずれかに記載の対象物案内装置。7. The input means comprises voice input means for inputting a vocabulary related to a recognition target object by voice, and voice recognition means for recognizing the input voice and extracting the name of the recognition target object. Claims 1 to 6 characterized in that
The object guide device according to any one of 1.
あることを特徴とする請求項1から請求項7のいずれか
に記載の対象物案内装置。8. The object guide device according to claim 1, wherein the input unit is a push button switch.
面の方向における認識対象物の名称を1つだけ出力する
ことを特徴とする請求項1から請求項8のいずれかに記
載の対象物案内装置。9. The object according to claim 1, wherein the object detecting unit outputs only one name of a recognition object in a direction of the driver's face. Object guidance device.
顔面の方向における認識対象物の名称を複数出力するこ
とを特徴とする請求項1から請求項8のいずれかに記載
の対象物案内装置。10. The object guide according to claim 1, wherein the object detection unit outputs a plurality of names of recognition objects in a direction of the driver's face. apparatus.
た認識対象物の種類に対応する認識対象物の名称を出力
することを特徴とする請求項1から請求項10のいずれ
かに記載の対象物案内装置。11. The object detecting means outputs the name of a recognition object corresponding to the type of the input recognition object, according to any one of claims 1 to 10. Object guidance device.
た認識対象物の属性に対応する認識対象物の名称を出力
することを特徴とする請求項1から請求項11のいずれ
かに記載の対象物案内装置。12. The object detecting means outputs a name of a recognition target object corresponding to an attribute of the input recognition target object, according to any one of claims 1 to 11. Object guidance device.
対象物の名称を音声で出力するスピーカであることを特
徴とする請求項1から請求項12のいずれかに記載の対
象物案内装置。13. The object guide apparatus according to claim 1, wherein the output unit is a speaker that outputs the name of the detected recognition object by voice.
対象物の名称を文字または絵で表示するディスプレイ装
置であることを特徴とする請求項1から請求項13のい
ずれかに記載の対象物案内装置。14. The object according to claim 1, wherein the output unit is a display device that displays the name of the detected object to be recognized by characters or pictures. Guidance device.
る認識対象物を強調表示することを特徴とする請求項1
4記載の対象物案内装置。15. The display device highlights the recognition target object to be displayed.
4. The object guide device described in 4.
テップと、自車の現在位置を検出するステップと、前記
現在位置における運転者の顔面の方向を検出するステッ
プと、前記運転者の顔面の方向における前記認識対象物
に関する語彙に基づいた前記認識対象物の名称を地図デ
ータから検出するステップと、前記検出した認識対象物
の名称を出力するステップとを備えた対象物案内方法。16. A step of inputting a vocabulary relating to a recognition target object, a step of detecting a current position of the vehicle, a step of detecting a direction of a driver's face at the current position, and a direction of the driver's face. In the object guidance method, the step of detecting the name of the recognition object based on the vocabulary relating to the recognition object from the map data and the step of outputting the detected name of the recognition object.
入力するステップと、前記音声で入力された語彙の内容
を音声認識するステップとを備えた請求項16記載の対
象物案内方法。17. The object guiding method according to claim 16, further comprising: a step of inputting a vocabulary related to the recognition target object by voice, and a step of recognizing the content of the vocabulary input by the voice.
影して運転者の顔面の方向または眼球の方向を検出する
ステップを備えた請求項16または請求項17記載の対
象物案内方法。18. The object guiding method according to claim 16, further comprising the step of photographing the driver's face with a video camera to detect the driver's face direction or eyeball direction.
声または文字または画像またはその組み合わせで出力す
るステップを備えた請求項16から請求項18のいずれ
かに記載の対象物案内方法。19. The object guiding method according to claim 16, further comprising the step of outputting the detected name of the recognition object by voice, characters, an image, or a combination thereof.
記載された対象物案内装置を備えた車載ナビゲーション
装置。20. An in-vehicle navigation device comprising the object guide device according to claim 1.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002135285A JP2003329463A (en) | 2002-05-10 | 2002-05-10 | Object guide apparatus and method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002135285A JP2003329463A (en) | 2002-05-10 | 2002-05-10 | Object guide apparatus and method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003329463A true JP2003329463A (en) | 2003-11-19 |
Family
ID=29697650
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002135285A Pending JP2003329463A (en) | 2002-05-10 | 2002-05-10 | Object guide apparatus and method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003329463A (en) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007248301A (en) * | 2006-03-16 | 2007-09-27 | Mitsubishi Electric Corp | Navigation device |
| EP1887321A3 (en) * | 2006-08-07 | 2009-05-27 | Pioneer Corporation | Information providing apparatus, information providing method, and computer product |
| JP2012002824A (en) * | 2011-09-20 | 2012-01-05 | Mitsubishi Electric Corp | Navigation device |
| CN103021146A (en) * | 2012-12-31 | 2013-04-03 | 浙江天地人科技有限公司 | Alarm terminal |
| WO2013054375A1 (en) * | 2011-10-12 | 2013-04-18 | 三菱電機株式会社 | Navigation device, method and program |
| JP2015041197A (en) * | 2013-08-21 | 2015-03-02 | 三菱電機株式会社 | Display control device |
| JP2017054064A (en) * | 2015-09-11 | 2017-03-16 | 株式会社Nttドコモ | Interactive device and interactive program |
| JP2020034461A (en) * | 2018-08-30 | 2020-03-05 | Zホールディングス株式会社 | Provision device, provision method, and provision program |
| JP2021162398A (en) * | 2020-03-31 | 2021-10-11 | パイオニア株式会社 | Information providing device, information providing method, information providing program and storage medium |
-
2002
- 2002-05-10 JP JP2002135285A patent/JP2003329463A/en active Pending
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007248301A (en) * | 2006-03-16 | 2007-09-27 | Mitsubishi Electric Corp | Navigation device |
| EP1887321A3 (en) * | 2006-08-07 | 2009-05-27 | Pioneer Corporation | Information providing apparatus, information providing method, and computer product |
| US7751970B2 (en) | 2006-08-07 | 2010-07-06 | Pioneer Corporation | Information providing apparatus, information providing method, and computer product |
| JP2012002824A (en) * | 2011-09-20 | 2012-01-05 | Mitsubishi Electric Corp | Navigation device |
| JP5414951B2 (en) * | 2011-10-12 | 2014-02-12 | 三菱電機株式会社 | Navigation device, method and program |
| WO2013054375A1 (en) * | 2011-10-12 | 2013-04-18 | 三菱電機株式会社 | Navigation device, method and program |
| US9476728B2 (en) | 2011-10-12 | 2016-10-25 | Mitsubishi Electric Corporation | Navigation apparatus, method and program |
| CN103021146A (en) * | 2012-12-31 | 2013-04-03 | 浙江天地人科技有限公司 | Alarm terminal |
| CN103021146B (en) * | 2012-12-31 | 2015-08-26 | 浙江天地人科技有限公司 | Alarm terminal |
| JP2015041197A (en) * | 2013-08-21 | 2015-03-02 | 三菱電機株式会社 | Display control device |
| JP2017054064A (en) * | 2015-09-11 | 2017-03-16 | 株式会社Nttドコモ | Interactive device and interactive program |
| JP2020034461A (en) * | 2018-08-30 | 2020-03-05 | Zホールディングス株式会社 | Provision device, provision method, and provision program |
| JP2021162398A (en) * | 2020-03-31 | 2021-10-11 | パイオニア株式会社 | Information providing device, information providing method, information providing program and storage medium |
| JP2024091702A (en) * | 2020-03-31 | 2024-07-05 | パイオニア株式会社 | Information Providing Device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH10176928A (en) | Viewpoint position measuring method, viewpoint position measuring device, head-up display device, and mirror adjusting device | |
| JP2003329463A (en) | Object guide apparatus and method | |
| JP2005214857A (en) | Navigation device and guide image creation method | |
| JPH0916891A (en) | In-vehicle information input device | |
| JP2003329464A (en) | Travel information recording / reproducing apparatus and method | |
| JP2002274218A (en) | Display device for vehicles | |
| JP2003016595A (en) | Traveling support device | |
| JP3892338B2 (en) | Word dictionary registration device and word registration program | |
| JP2002350145A (en) | Method and apparatus for present position detection for navigation | |
| JPH08235495A (en) | Mobile communication device | |
| JP2007133231A (en) | Map display apparatus and navigation apparatus | |
| JP2004125446A (en) | Navigation device and navigation program | |
| JP4325410B2 (en) | In-vehicle device | |
| JP7233918B2 (en) | In-vehicle equipment, communication system | |
| JP2002296062A (en) | Navigation device and method and software for navigation | |
| JP3948018B2 (en) | Information recording apparatus, information recording method, and information recording program | |
| JP3344450B2 (en) | Vehicle navigation system | |
| JP4942411B2 (en) | Navigation device | |
| JPH03175478A (en) | Map display device | |
| JP4207317B2 (en) | Destination identification support device and navigation system provided with the device | |
| JP2005024313A (en) | On-vehicle navigation device | |
| JP3171216B2 (en) | Map display method for in-vehicle navigator | |
| JP2006343829A (en) | Device and method for photographing around vehicle | |
| JPH06250586A (en) | On-vehicle navigation device | |
| KR20040025150A (en) | Route guide method in car navigation system |