JP2000181500A - 音声認識装置及びエ―ジェント装置 - Google Patents

Abstract

(57)【要約】 【課題】 車両内に発生する雑音による影響を少なくし
て、より高い認識精度を得る。 【解決手段】 エージェントが車両の運転者や同乗者等
の搭乗者の音声を認識するが、認識精度が低いと場合の
原因として、ａ窓が開いている、ｂエアコンが作動中で
ある、ｃオーディオが使用されている場合が考えられ
る。そこで、音声認識精度が低く、ａ〜ｃの雑音原因が
ある場合に、その原因に対応して、窓を閉める、エアコ
ンの風量を調整する、オーディオの音量を調節する、の
いずれかの雑音除去処理を行う。雑音除去処理を行うに
あたって、エージェントは、その処理前の状態、すなわ
ち、開いている窓の位置と開閉量、エアコンの風量、及
びオーディオの音量を学習（記憶）しておき、音声認識
処理が終了した後に、窓等の各車両機器を制御前の元の
状態に戻す車両機器状態復元処理も行われる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、音声認識装置及び
エージェント装置に係り、詳細には、音声認識の精度が
低い場合により高くなるように制御可能な音声認識装置
及びエージェント装置に関する。

【０００２】

【従来の技術】マイクロホンから入力される音声を認識
する技術が実用化され、各種分野で製品化されている。
例えば、自動車等の車両内に使用される音声認識装置で
は、認識した音声内容に対応して搭載装置各部の制御を
行うことができるようになっている。このような車両内
で使用される音声認識装置の場合、車両内に発生するオ
ーディオやナビゲーション装置、エンジン等による各種
音が雑音としてその認識率が悪くしていた。そこで、車
両内の雑音による影響を少なくし、音声認識を精度良く
行うようにした技術が特開平６−６７６８９号公報によ
り提案されている。この公報記載の音声認識装置では、
自動車の窓の開閉量に基づいてマイクのアンプのゲイン
を調整することで、認識精度を高めるようにしている。

【０００３】

【発明が解決しようとする課題】しかし、上記公報記載
の技術では、窓の開閉量とマイクのアンプのゲインとの
対応付けが困難であった。このため、車両における雑音
対策としては十分な効果が得られなかった。そこで、本
発明は車両内に発生する雑音による影響を少なくして、
より高い認識精度を得ることが可能な音声認識装置を提
供することを第１の目的とする。

【０００４】ところで、本出願人は、現在未公知である
が、車両の過去の状態などの履歴・運転者の状態に応じ
て、擬人化されたエージェントを車両内に出現させて、
運転者や同乗者とのコミュニケーションを行うと共に、
コミュニケーションの結果として各種制御を行うエージ
ェント装置について出願している。このようなエージェ
ント装置においても、車両内でエージェントが運転者等
とコミュニケーションを行うための重要な要素として音
声認識の技術が使用されており、同様に音声認識精度の
向上が望まれる。そこで、本発明は、車両内に発生する
雑音による影響を少なくして、より高い音声認識精度で
コミュニケーションを行うことが可能なエージェント装
置を提供することを第２の目的とする。

【０００５】

【課題を解決するための手段】請求項１に記載した発明
では、音声を認識する音声認識手段と、この音声認識手
段による認識精度を取得する認識精度取得手段と、この
認識精度取得手段による認識精度が所定値以下である場
合に、雑音の原因となる雑音要素の状態を検出する雑音
要素検出手段と、この雑音要素検出手段により検出され
た雑音要素の状態を制御して雑音を減少させる雑音要素
制御手段とを音声認識装置に具備させて前記第１の目的
を達成する。請求項２に記載した発明では、請求項１に
記載した音声認識装置において、前記雑音要素検出手段
で検出された雑音要素の状態を記憶する状態記憶手段を
有し、前記雑音要素制御手段は、音声認識処理が終了し
た場合に前記状態記憶手段に記憶された状態に前記雑音
要素の状態を戻す。請求項３に記載した発明では、請求
項１又は請求項２に記載した音声認識装置において、前
記雑音要素検出手段は、雑音要素の状態として窓の開閉
状態を検出し、前記雑音要素制御手段は、前記雑音要素
検出手段により窓が開いた状態が検出された場合、開い
ている窓を閉める。請求項４に記載した発明では、請求
項１又は請求項２に記載した音声認識装置において、前
記雑音要素検出手段は、雑音要素の状態としてオーディ
オの音量を検出し、前記雑音要素制御手段は、前記雑音
要素検出手段により所定値以上のオーディオの音量が検
出された場合、その音量を下げる。請求項５に記載した
発明では、請求項１又は請求項２に記載した音声認識装
置において、前記雑音要素検出手段は、雑音要素の状態
としてエアコンの風量を検出し、前記雑音要素制御手段
は、前記雑音要素検出手段により所定量以上の風量が検
出された場合、風量を下げる。請求項６に記載した発明
では、音声を認識する音声認識手段と、この音声認識手
段による認識精度を取得する認識精度取得手段と、擬人
化されたエージェントを車両内に出現させるエージェン
ト出現手段と、前記認識精度取得手段による認識精度が
所定値以下である場合に、雑音の原因となる雑音要素の
状態を検出する雑音要素検出手段と、この雑音要素検出
手段により検出された雑音要素の状態を制御して雑音を
減少させる行為を、前記エージェント出現手段により出
現されるエージェントに行わせるエージェント制御手段
とをエージェント装置に具備させた前記第２の目的を達
成する。

【０００６】

【発明の実施の形態】以下、本発明の音声認識装置及び
エージェント装置における好適な実施の形態について、
エージェント装置を例に図１から図１０を参照して詳細
に説明する。 （１）実施形態の概要 本実施形態のエージェント装置では、エージェントが、
車両の運転者や同乗者等の搭乗者の音声を認識するが、
その認識精度が低いと判断した場合には、その原因とし
て、（ａ）窓が開いている場合、（ｂ）エアコンが作動
中である場合、（ｃ）オーディオが使用されている場合
が考えられる。そこで、エージェントは、音声認識精度
が低く、（ａ）〜（ｃ）の雑音原因がある場合に、その
原因に対応して、窓を閉める、エアコンの風量を調整す
る、オーディオの音量を調節する、のいずれかの雑音除
去処理を行う。以上の雑音除去処理を行うにあたって、
エージェントは、その処理前の状態、すなわち、開いて
いる窓の位置Ｘと開閉量Ｒ１、エアコンの風量Ｒ２、及
びオーディオの音量Ｒ３を学習（記憶）しておき、音声
認識処理が終了した後に、窓等の各車両機器を制御前の
元の状態に戻す車両機器状態復元処理も行われる。本実
施形態におけるエージェントは、擬人化されたエージェ
ントであり、その画像（平面的画像、ホログラフィ等の
立体的画像等）が画像表示装置によって車両内に出現さ
れる。このエージェントの処理としては、車両自体、搭
乗者、対向車等を含む車両の状況判断と学習（状況の学
習だけでなく運転者の応答や反応等も含む）をし、各時
点での車両状況とそれまでの学習結果に基づいて、エー
ジェントが運転者や車両に対して様々なバリエーション
をもった対応（行為＝行動と音声）をする。これにより
運転者は、複数のエージェントを車両内に自由に呼びだ
してつき合う（コミュニケーションする）ことが可能に
なり、車両内での環境を快適にすることができる。ここ
で、本実施形態において擬人化されたエージェントと
は、特定の人間、生物、漫画のキャラクター等との同一
性があり、その同一性のある生物が、同一性・連続性を
保つようなある傾向の出力（動作、音声により応答）を
行うものである。また、同一性・連続性は特有の個性を
持つ人格として表現され、電子機器内の一種の疑似生命
体としてもとらえることができる。車両内に出現させる
本実施形態のエージェントは、人間と同様に判断する疑
似人格化（仮想人格化）された主体である。従って、同
一の車両状況であっても、過去の学習内容に応じてコミ
ュニケーションの内容は異なる。ときには、車両の相応
には関係ない範囲での判断ミスも有り、この判断ミスに
よる不要な（ドジな）応答をすることもある。そして運
転者の応答により、判断ミスか否かを判定し、学習す
る。

【０００７】（２）実施形態の詳細 図１は、本実施形態におけるエージェント装置の構成を
示すブロック図である。本実施形態では、エージェント
によるコミュニケーション機能全体を制御する全体処理
部１を備えている。この全体処理部は、設定した目的地
までの経路を探索して音声や画像表示によって経路案内
をするナビゲーション処理部１０、エージェント処理部
１１、ナビゲーション処理部１０とエージェント処理部
１１に対するＩ／Ｆ部１２、エージェント画像や地図画
像等の画像出力や入力画像を処理する画像処理部１３、
エージェントの音声や経路案内用の音声等の音声を出力
したり、入力される音声を音声認識辞書を使用して認識
したりする音声制御部１４、及び車両や運転者に関する
各種状況の検出データを処理する状況情報処理部１５を
有している。エージェント処理部１１は、所定容姿のエ
ージェントを車両内に出現させると共に、新たに呼ばれ
た名前のエージェントに切り替えて（容姿の画像を変更
して）車両内に出現させる。また、車両の状況や運転者
による過去の応対等を学習して適切な会話や制御を行う
ようになっている。

【０００８】またエージェント処理部１１は、音声制御
部１４によりマイク２６から入力される音声の認識精度
が低いか否かを判断し、低い場合には、雑音や騒音の原
因となっている雑音原因機器に対する調節等の制御を行
う。またエージェント処理部１１は、マイク２６から入
力される音声の音声制御部１４による認識結果に対し評
価を行い、認識精度が低い否かの判断や、認識精度を低
くする雑音の原因（窓の開閉状態、エアコンの動作状
態、オーディオの動作状態）の検出を行う。また、エー
ジェント処理部１１は、後述するように、雑音原因を除
去するための雑音除去処理を行う。

【０００９】ナビゲーション処理部１０とエージェント
処理部１１は、データ処理及び各部の動作の制御を行う
ＣＰＵ（中央処理装置）と、このＣＰＵにデータバスや
制御バス等のバスラインで接続されたＲＯＭ、ＲＡＭ、
タイマ等を備えている。両処理部１０、１１はネットワ
ーク接続されており、互いの処理データを取得すること
ができるようになっている。ＲＯＭはＣＰＵで制御を行
うための各種データやプログラムが予め格納されたリー
ドオンリーメモリであり、ＲＡＭはＣＰＵがワーキング
メモリとして使用するランダムアクセスメモリである。

【００１０】本実施形態のナビゲーション処理部１０と
エージェント処理部１１は、ＣＰＵがＲＯＭに格納され
た各種プログラムを読み込んで各種処理を実行するよう
になっている。なお、ＣＰＵは、記憶媒体駆動装置２３
にセットされた外部の記憶媒体からコンピュータプログ
ラムを読み込んで、エージェントデータ記憶装置２９や
ナビゲーションデータ記憶装置３０、図示しないハード
ディスク等のその他の記憶装置に格納（インストール）
し、この記憶装置から必要なプログラム等をＲＡＭに読
み込んで（ロードして）実行するようにしてもよい。ま
た、必要なプログラム等を記録媒体駆動装置２３からＲ
ＡＭに直接読み込んで実行するようにしてもよい。

【００１１】ナビゲーション処理部１０には、現在位置
検出装置２１とナビゲーションデータ記憶装置３０が接
続され、エージェント処理部１１にはエージェントデー
タ記憶装置２９が接続され、Ｉ／Ｆ部１２には入力装置
２２と記憶媒体駆動装置２３と通信制御装置２４と窓開
閉装置２０１とエアコン風量調節装置２０２とオーディ
オ音量調節装置２０３が接続され、画像処理部１３には
表示装置２７と撮像装置２８が接続され、音声制御部１
４には音声出力装置２５とマイク２６が接続され、状況
情報処理部１５には状況センサ部４０が接続されてい
る。

【００１２】現在位置検出装置２１は、車両の絶対位置
（緯度、経度による）を検出するためのものであり、人
工衛星を利用して車両の位置を測定するＧＰＳ（Global
Positioning System)受信装置２１１と、方位センサ２
１２と、舵角センサ２１３と、距離センサ２１４と、路
上に配置されたビーコンからの位置情報を受信するビー
コン受信装置２１５等が使用される。ＧＰＳ受信装置２
１１とビーコン受信装置２１５は単独で位置測定が可能
であるが、ＧＰＳ受信装置２１１やビーコン受信装置２
１５による受信が不可能な場所では、方位センサ２１２
と距離センサ２１４の双方を用いた推測航法によって現
在位置を検出するようになっている。なお、より正確な
現在位置を検出するために、所定の基地局から送信され
る測位誤差に対する補正信号を受信し、現在位置を補正
するＤ−ＧＰＳ（ディファレンシャルＧＰＳ）を使用す
るようにしてもよい。方位センサ２１２は、例えば、地
磁気を検出して車両の方位を求める地磁気センサ、車両
の回転角速度を検出しその角速度を積分して車両の方位
を求めるガスレートジャイロや光ファイバジャイロ等の
ジャイロ、左右の車輪センサを配置しその出力パルス差
（移動距離の差）により車両の旋回を検出することで方
位の変位量を算出するようにした車輪センサ、等が使用
される。舵角センサ２１３は、ステアリングの回転部に
取り付けた光学的な回転センサや回転抵抗ボリューム等
を用いてステアリングの角度αを検出する。距離センサ
２１４は、例えば、車輪の回転数を検出して計数し、ま
たは加速度を検出して２回積分するもの等の各種の方法
が使用される。

【００１３】入力装置２２は、エージェントの名前の読
みを入力したり、そのた、エージェント処理を行う上で
使用されるユーザ情報（年齢、性別、趣味、性格など）
を入力するためのものである。なお、これらユーザに関
する情報は、入力装置２２からユーザが入力する場合に
限らず、ユーザとのコミュニケーションが無い時間が一
定時間以上経過した場合等に、未入力の項目について例
えば、プロ野球が好きか否か、好きな球団名等に関する
各種問い合わせをエージェントがユーザに行い、ユーザ
の回答内容から取得するようにしてもよい。入力装置２
２は、本実施形態によるエージェントのその他全ての問
い合わせ等に対して運転者が応答するための１つの手段
でもある。入力装置２２は、ナビゲーション処理におけ
る走行開始時の現在地（出発地点）や目的地（到達地
点）、情報提供局へ渋滞情報等の情報の請求を発信した
い車両の所定の走行環境（発信条件）、車内で使用され
る携帯電話のタイプ（型式）などを入力するためのもの
でもある。入力装置２２には、タッチパネル（スイッチ
として機能）、キーボード、マウス、ライトペン、ジョ
イスティック、赤外線等によるリモコン、音声認識装置
などの各種の装置が使用可能である。また、赤外線等を
利用したリモコンと、リモコンから送信される各種信号
を受信する受信部を備えてもよい。リモコンには、画面
上に表示されたカーソルの移動操作等を行うジョイステ
ィックの他、メニュー指定キー（ボタン）、テンキー等
の各種キーが配置される。

【００１４】記憶媒体駆動装置２３は、ナビゲーション
処理部１０やエージェント処理部１１が各種処理を行う
ためのコンピュータプログラムを外部の記憶媒体から読
み込むのに使用される駆動装置である。記憶媒体に記録
されているコンピュータプログラムには、各種のプログ
ラムやデータ等が含まれる。ここで、記憶媒体とは、コ
ンピュータプログラムが記録される記憶媒体をいい、具
体的には、フロッピーディスク、ハードディスク、磁気
テープ等の磁気記憶媒体、メモリチップやＩＣカード等
の半導体記憶媒体、ＣＤ−ＲＯＭやＭＯ、ＰＤ（相変化
書換型光ディスク）、ＤＶＤ（ディジタル・ビデオ・デ
ィスク）等の光学的に情報が読み取られる記憶媒体、紙
カードや紙テープ、文字認識装置を使用してプログラム
を読み込むための印刷物等の用紙（および、紙に相当す
る機能を持った媒体）を用いた記憶媒体、その他各種方
法でコンピュータプログラムが記録される記憶媒体が含
まれる。

【００１５】記憶媒体駆動装置２３は、これらの各種記
憶媒体からコンピュータプログラムを読み込む他に、記
憶媒体がフロッピーディスクやＩＣカード等のように書
き込み可能な記憶媒体である場合には、ナビゲーション
処理部１０やエージェント処理部１１のＲＡＭや記憶装
置２９、３０のデータ等をその記憶媒体に書き込むこと
が可能である。例えば、ＩＣカードにエージェント機能
に関する学習内容（学習項目データ、応答データ）や、
ユーザ情報等を記憶させ、他の車両を運転する場合でも
この記憶させたＩＣカードを使用することで、自分の好
みに合わせて命名され、過去の応対の状況に応じて学習
された同一のエージェントとコミュニケーションするこ
とが可能になる。これにより、車両毎のエージェントで
はなく、運転者に固有な名前と、学習内容のエージェン
トを車両内に出現させることが可能になる。

【００１６】通信制御装置２４は、各種無線通信機器か
らなる携帯電話が接続されるようになっている。通信制
御装置２４は、電話回線による通話の他、道路の混雑状
況や交通規制等の交通情報に関するデータなどを提供す
る情報提供局との通信や、車内での通信カラオケのため
に使用するカラオケデータを提供する情報提供局との通
信を行うことができるようになっている。また、通信制
御装置２４を介して、エージェント機能に関する学習デ
ータやユーザ情報等を送受信することも可能である。

【００１７】窓開閉装置２０１は、エージェント処理部
１１による制御のもと、開いている窓を閉じると共に、
閉じた窓を元の開閉量まで開くようになっている。エア
コン風量調節装置２０２は、エージェント処理部１１に
よる制御のもと、音声認識に影響を与えない程度までエ
アコンの風量を小さくすると共に、小さくした風量を元
の風量にまで大きくするようになっている。オーディオ
音量調節装置２０３は、エージェント処理部１１による
制御のもと、音声認識に影響を与えない程度までオーデ
ィオの音量を小さくすると共に、小さくした音量を元の
音量にまで大きくするようになっている。

【００１８】音声出力装置２５は、車内に配置された複
数のスピーカで構成され、音声制御部１４で制御された
音声、例えば、音声による経路案内を行う場合の案内音
声や、エージェントの音声や音が出力されるようになっ
ている。この音声出力装置２５は、全部又は一部をオー
ディオ用のスピーカと兼用するようにしてもよい。な
お、音声制御部１４は、運転者のチューニング指示の入
力に応じて、音声出力装置２５から出力する音声の音色
やアクセント等を制御することが可能である。音声出力
装置２５は、音声制御部１４で認識した音声についての
認識内向をユーザに確認（コールバック）するために合
成された音声も出力するようになっている。

【００１９】マイク２６は、音声制御部１４における音
声認識の対象となる音声、例えば、ナビゲーション処理
における目的地等の入力音声や、エージェントとの運転
者の会話等（コールバックに対すユーザの応答等を含
む）を入力する音声入力手段として機能する。このマイ
ク２６は、通信カラオケ等のカラオケを行う際のマイク
と兼用するようにしてもよく、また、運転者の音声を的
確に収集するために指向性のある専用のマイクを使用す
るようにしてもよい。音声出力装置２５とマイク２６と
でハンズフリーユニットを形成させて、携帯電話を介さ
ずに、電話通信における通話を行えるようにしてもよ
い。

【００２０】表示装置２７には、ナビゲーション処理部
１０の処理による経路案内用の道路地図や各種画像情報
が表示されたり、エージェント処理部１１によるエージ
ェントの各種行動（動画）が表示されたりするようにな
っている。また、撮像装置２８で撮像された車両内外の
画像も画像処理部１３で処理された後に表示されるよう
になっている。表示装置２７は、液晶表示装置、ＣＲＴ
等の各種表示装置が使用される。なお、この表示装置２
７は、例えばタッチパネル等の、前記入力装置２２とし
ての機能を兼ね備えたものとすることができる。

【００２１】撮像装置２８は、画像を撮像するためのＣ
ＣＤ（電荷結合素子）を備えたカメラで構成されてお
り、運転者を撮像する車内カメラの他、車両前方、後
方、右側方、左側方を撮像する各車外カメラが配置され
ている。撮像装置２８の各カメラにより撮像された画像
は、画像処理部１３に供給され、画像認識等の処理が行
われ、各認識結果をエージェント処理部１１によるプロ
グラム番号の決定にも使用するようになっている。

【００２２】エージェントデータ記憶装置２９は、本実
施形態によるエージェント機能を実現するために必要な
各種データやプログラムが格納される記憶装置である。
このエージェントデータ記憶装置２９には、例えば、フ
ロッピーディスク、ハードディスク、ＣＤ−ＲＯＭ、光
ディスク、磁気テープ、ＩＣカード、光カード、ＤＶＤ
等の各種記憶媒体と、その駆動装置が使用される。この
場合、例えば、学習項目データ２９２、応答データ２９
３、及びユーザ情報２９７を持ち運びが容易なＩＣカー
ドやフロッピーディスクで構成し、その他のデータをハ
ードディスクで構成するというように、複数種類の異な
る記憶媒体と駆動装置で構成し、駆動装置としてそれら
の駆動装置を用いるようにしてもよい。

【００２３】エージェントデータ記憶装置２９には、エ
ージェントプログラム２９０、プログラム選択テーブル
２９１、学習項目データ２９２、応答データ２９３、エ
ージェントの容姿や行動を静止画像や動画像で画像表示
するための画像データ２９４、車両機器状態データ２９
６、運転者を特定するためのユーザ情報２９７、その他
のエージェントのための処理に必要な各種のデータが格
納されている。

【００２４】画像データ２９４には、各エージェントの
容姿と、各容姿のエージェントが様々な表情や動作を表
すための各種画像データが格納されている。ユーザは、
これら各エージェントを選択し、自由に名前を付ける
（設定する）ことができるようになっている。格納され
る容姿としては、人間（男性、女性）的な容姿である必
要はなく、例えば、ひよこや犬、猫、カエル、ネズミ等
の動物自体の容姿や人間的に図案化（イラスト化）した
動物の容姿であってもよく、更にロボット的な容姿や、
特定のキャラクタの容姿等であっても良く、これら各容
姿に対応して名前を付けることが可能である。またエー
ジェントの年齢としても一定である必要がなく、エージ
ェントの学習機能として、最初は子供の容姿とし、時間
の経過と共に成長していき容姿が変化していく（大人の
容姿に変化し、更に老人の容姿に変化していく）ように
してもよい。画像データ２９４には、これらの各種エー
ジェントの容姿の画像が格納されており、運転者の好み
によって入力装置２２等から選択することができるよう
になっている。

【００２５】ユーザ情報２９７には、ユーザの氏名、住
所、生年月日、性別、性格、趣味、好きなスポーツ、好
きなチーム、好きな食べ物、宗教、ユーザの身長、体
重、運転席（シート）の固定位置（前後位置、背もたれ
の角度）、ルームミラーの角度、視線の高さ、顔写真を
デジタル化したデータ、音声の特徴パラメータ等の各種
情報が各ユーザ毎に格納されている。ユーザ情報は、エ
ージェントがユーザと取るコミュニケーションの内容を
判断する場合に使用される他、ユーザの体重等の後者の
データ群は運転者を特定するためにも使用される。

【００２６】状態データ２９６には、車両機器制御実行
フラグと、車両機器状態データとが格納される。車両機
器制御実行フラグは、音声認識精度を高くするために雑
音除去制御を実行した車両機器を特定するためのフラグ
で、本実施形態では、窓閉め実行フラグ、風量調節フラ
グ、音量調節フラグがあり、それぞれのフラグをオン、
オフするためのフラグ領域が確保されている。そして、
車両機器状態データは車両の各機器の状態を記憶してお
くためのデータで、窓状態データ、エアコン状態デー
タ、オーディオ状態データが格納される。窓状態データ
としての開いている窓の位置Ｘと開閉量Ｒ１、エアコン
状態データとしてのエアコンの風量Ｒ２、オーディオ状
態データとしてのオーディオの音量Ｒ３が、それぞれ、
各車両機器制御実行フラグと対応して格納されるように
なっている。開いている窓が複数ある場合には、その窓
位置Ｘｎと開閉量Ｒ１ｎ（ｎ＝１，２，３…）が開いて
いる窓の数だけ格納される。各車両機器状態データは、
対応するフラグがオンされる際に格納され、音声認識処
理が終了した後に、制御した各機器を元の状態に戻すた
めに、車両機器状態データが読み出される。

【００２７】エージェントプログラム２９０には、エー
ジェント機能を実現するためのエージェント処理プログ
ラムや、エージェントと運転者とがコミュニケーション
する場合の細かな行動を表示装置２７に画像表示すると
共にその行動に対応した会話を音声出力装置２５から出
力するためのコミュニケーションプログラムがプログラ
ム番号順に格納されている。このエージェントプログラ
ム２９０には、各プログラム番号の音声に対して複数種
類の音声データが格納されており、運転者は前記エージ
ェントの容姿の選択と併せて音声を入力装置２２等から
選択することができるようになっている。エージェント
の音声としては、男性の音声、女性の音声、子供の音
声、機械的な音声、動物的な音声、特定の声優や俳優の
音声、特定のキャラクタの音声等があり、これらの中か
ら適宜運転者が選択する。なお、この音声と前記容姿の
選択は、適時変更することが可能である。

【００２８】プログラム選択テーブル２９１は、エージ
ェントプログラム２９０に格納されているコミュニケー
ションプログラムを選択するためのテーブルである。こ
のプログラム選択テーブル２９１からコミュニケーショ
ンプログラムを選択する選択条件には、状態センサ４０
により検出される車両や運転者の各種状況から決定され
る項目（時間、起動場所、冷却水温、シフトポジション
位置、アクセル開度等）と、学習項目データ２９２や応
答データ２９３に格納されている学習内容から決定され
る項目（今日のＩＧ ＯＮ回数、前回終了時からの経過
時間、通算起動回数等）とがある。

【００２９】学習項目データ２９２及び応答データ２９
３は、運転者の運転操作や応答によってエージェントが
学習した結果を格納するデータである。従って、学習項
目データ２９２と応答データ２９３は、各運転者毎にそ
のデータが格納・更新（学習）されるようになってい
る。応答データ２９３には、エージェントの行為に対す
るユーザの応答の履歴が、各コミュニケーションプログ
ラム番号毎に格納される。

【００３０】学習項目データ２９２には、プログラム選
択テーブル２９１の選択条件を決定する通算起動回数、
前回終了日時、今日のイグニッションＯＮ回数、前５回
の給油時残量等が格納され、選択条件により選択された
プログラムを起動するか否か（お休みするか否か）を決
定するためのお休み回数／日時、デフォルト値、その他
のデータが格納される。

【００３１】また、学習項目データ２９２には、音声認
識に影響を与えないエアコンの風量Ｈ２とオーディオの
音量Ｈ３が、しきい値として格納されるようになってい
る。音声認識の精度が低い場合には、エアコン風量調節
装置２０２、オーディオ音量調節装置２０３を制御し
て、しきい値Ｈ２、Ｈ３と等しくなるまで風量と音量を
下げ、このしきい値が妥当か否かについて学習される。
すなわち、格納されているしきい値Ｈ２、Ｈ３と等しい
風量、音量に下げても音声認識率が未だ低い場合には、
風量、音量をさらに所定量下げるように学習項目データ
２９２に格納されているしきい値Ｈ２、Ｈ３の値を所定
量下げるように変更する。しきい値を下げる場合、例え
ば、エアコンであれば風量が１段階弱くなるように下
げ、オーディオであれば調節可能範囲の１０％だけ音量
が下がるようにさげる。この風量と音量のしきい値Ｈ
２、Ｈ３については、ユーザによって声の大きさや音質
等が異なることから、各ユーザ情報２９７に格納されて
いる各ユーザ（運転者）毎に区別して格納されるように
なっている。

【００３２】エージェント処理部１１は、これら学習項
目データ２９２、応答データ２９３、及び状況センサ部
４０で検出される車両の各種状況に対応するプログラム
番号をプログラム選択テーブル２９１から選択し、その
プログラム番号に対応するエージェントプログラム２９
０を選択して実行することで、エージェントと運転者等
とのコミュニケーションが行われるよようになってい
る。例えば、エンジンの冷却水温度が低い場合には、エ
ンジンの調子に合わせてエージェントが「眠そうに…」
行動する。眠そうな表現として、瞼が下がった表情の画
像にしたり、あくびや伸びをした後に所定の行動（お辞
儀等）をしたり、最初に目をこすったり、動きや発声を
通常よりもゆっくりさせたりすることで表すことができ
る。これらの眠そうな表現は、常に同一にするのではな
く、行動回数等を学習することで適宜表現を変更する。
例えば、３回に１回は目をこすり（Ａ行動）、１０回に
１回はあくびをするようにし（Ｂ行動）、それ以外では
瞼を下がった表情（Ｃ行動）にする。これらの変化は、
行動Ｂや行動Ｃの付加プログラムを行動Ａの基本プログ
ラムに組み合わせることで実現される。そして、どの行
動を組み合わせるかについては、基本となる行動Ａのプ
ログラム実行回数を学習項目として計数しておき、回数
に応じて付加プログラムを組み合わせるようにする。ま
た、急ブレーキが踏まれたことを条件として、エージェ
ントが「しりもち」をついたり、「たたら」を踏んだり
する行動をとったり、驚き声をだすようなプログラムも
規定されている。エージェントによる各行動の選択は急
ブレーキに対する学習によって変化するようにし、例え
ば、最初の急ブレーキから３回目までは「しりもち」を
つき、４回目から１０回目までは「たたら」を踏み、１
０回目以降は「片足を一歩前にだすだけで踏ん張る」行
動を取るようにし、エージェントが急ブレーキに対して
段階的に慣れるようにする。そして、最後の急ブレーキ
から１週間の間隔があいた場合には、１段階後退するよ
うにする。

【００３３】ナビゲーションデータ記憶装置３０には経
路案内等で使用される各種データファイルとして、通信
地域データファイル、描画地図データファイル、道路網
データファイル、目的地まで探索した走行経路に関する
データが格納される探索データファイルが格納されるよ
うになっている。道路網データファイルには、経路探索
に使用される各種データとして、交差点データ、ノード
データ、道路データが格納される。通信地域データファ
イルには、通信制御装置２４に接続される携帯電話や、
接続せずに車内で使用される携帯電話が、車両位置にお
いて通信できる地域を表示装置２７に表示したり、その
通信できる地域を経路探索の際に使用するための通信地
域データが、携帯電話のタイプ別に格納されている。

【００３４】状況センサ部４０は、窓開き量検出センサ
４０１、エアコン風量検出センサ４０２、オーディオ音
量検出センサ４０３、及びその他のセンサ４０４を備え
ている。窓開き量検出センサ４０１は、車両に配置され
ている各窓のうち、開いている窓の位置と、その開閉量
を検出するセンサである。エアコン風量センサ４０１
は、エアコンのオン、オフ、及びオンされている場合の
風量を検出センサである。オーディオ音量検出センサ４
０３は、ＣＤ（コンパクトディスク）プレイヤー、カセ
ットテープレコーダ、ＭＤ（ミニディスク）プレイヤ
ー、ラジオ、テレビ、ビデオテープレコーダー等のオー
ディオ装置のオン、オフ、及びオンされている場合にス
ピーカ（兼用されている場合には音声出力装置２５）か
ら出力される音量を検出するセンサである。これらの各
センサによる検出値は、状態データ２９６に格納される
ようになっている。

【００３５】その他のセンサ４０４としては、車両状況
や運転者状況、車内状況等を検出する各種センサを備え
ている。これら各種センサは、それぞれのセンシング目
的に応じた所定の位置に配置されている。なお、これら
の各センサは独立したセンサとして存在しない場合に
は、他のセンサ検出信号から間接的にセンシングする場
合を含む。例えば、タイヤの空気圧低下検出センサは、
車速センサの信号の変動により間接的に空気圧の低下を
検出する。その他のセンサ４０４としては、イグニッシ
ョンのＯＮとＯＦＦを検出するイグニッションセンサ、
例えばスピードメータケーブルの回転角速度又は回転数
を検出して車速を算出する車速センサは、アクセルペダ
ルの踏み込み量を検出するアクセルセンサ、ブレーキの
踏み込み量を検出したり、踏み込み力や踏む込む速度等
から急ブレーキがかけられたか否かを検出するブレーキ
センサ、サイドブレーキがかけられているか否かを検出
するサイドブレーキ検出センサ、シフトレバー位置を検
出するシフト位置検出センサ、ウィンカの点滅及び点滅
させている方向を検出するウィンカー検出センサ、ワイ
パーの駆動状態（速度等）を検出するワイパー検出セン
サ、ヘッドランプ、テールランプ、フォグランプ、ルー
ムランプ等の各ランプの点灯状態を検出するライト検出
センサ、運転者、及び同乗者（補助席、後部座席）がシ
ートベルトを着用しているか否かを検出し、未着用の場
合にエージェントが嫌われない程度に着用を促す等のた
めのシートベルト検出センサ、運転席ドア、助手席ド
ア、後部運転席側ドア、後部助手席側ドア等の車種に応
じた各ドア毎の開閉状態を検出し、いわゆる半ドアの場
合にはエージェントがその旨を知らせる等のためのドア
開閉検出センサ、撮像装置２８で撮像された車内の画像
から検出し、または、補助席等に配置された圧力センサ
や、体重計により、助手席や後部座席に同乗者が乗って
いるか否かを検出同乗者検出センサ、室内の気温を検出
する室内温度検出センサ、車両外の気温を検出する室外
温度検出センサ、ガソリン、軽油等の燃料の残量を検出
し、給油時直前における過去５回分の検出値が学習項目
データ２９２に格納され、その平均値になった場合にエ
ージェントが給油時期であることを知らせる等のための
燃料検出センサ、冷却水の温度を検出し、イグニッショ
ンＯＮ直後においてエージェントが眠そうな行為をした
り（検出水温が低い場合）、水温が高すぎる場合でオー
バーヒートする前にエージェントが「だるそう」な行動
と共にその旨を知らせるための水温検出センサ、急ブレ
ーキによるタイヤのロックを防止し操縦性と車両安定性
を確保するＡＢＳが作動したか否かを検出するＡＢＳ検
出センサ、運転者の体重を検出し、検出した体重から、
または、体重と撮像装置２８の画像から運転者を特定
し、その運転者との関係で学習したエージェントを出現
させる等のための体重センサ、車両前方の他車両や障害
物との距離を検出する前車間距離センサ、後方の他車両
や障害物との距離を検出する後車間距離センサ、例え
ば、ハンドル表面に配置し運転者の手の状態から運転者
の体温、心拍数、発汗状態を検出する体温センサ、心拍
数センサ、発汗センサ、運転者の脳波を検出するセンサ
で、例えばα波やβ波等を検出して運転者の覚醒状態等
を調べる脳波センサ、ユーザの視線の動きを検出し、通
常運転中、車外の目的物を捜している、車内目的物をさ
がしている、覚醒状態等を判断するためのアイトレーサ
ー、ユーザの手の動きや顔の動きを検出する赤外線セン
サ、タイヤの空気圧低下検出センサ、ベルト類のゆるみ
検出センサ、窓の開閉状態センサ、クラクションセン
サ、室内湿度センサ、室外湿度センサ、油温検出セン
サ、油圧検出センサ等の各種センサを備えている。

【００３６】次に、以上のように構成された本実施形態
の動作について説明する。図２は本実施形態のエージェ
ントによる処理のメイン動作を表したフローチャートで
ある。エージェント処理部１１は、イグニッションがＯ
Ｎされたことがイグニッションセンサ４０１で検出され
ると、まず最初に初期設定を行う（ステップ１１）。初
期設定としては、ＲＡＭのクリア、各処理用のワークエ
リアをＲＡＭに設定、プログラム選択テーブル２９１の
ＲＡＭへのロード、フラグの０設定、等の処理が行われ
る。なお、本実施形態のエージェント処理では、その処
理の開始をイグニッションＯＮとしたが、例えばドア開
閉検出センサ４１１によりいずれかのドアの開閉が検出
された場合に処理を開始するようにしてもよい。

【００３７】次に、エージェント処理部１１は、主とし
てユーザ情報２９７に格納された各種データに基づい
て、運転者の特定を行う（ステップ１２）。すなわち、
エージェント処理部１１は、運転者から先に挨拶がかけ
られたときにはその声を分析して運転者を特定したり、
撮像した画像を分析することで運転者を特定したり、状
況センサ部４０の体重センサで検出した体重から運転者
を特定したり、設定されたシート位置やルームミラーの
角度から運転者を特定したりする。なお、特定した運転
者については、後述のエージェントの処理とは別個に、
「○○さんですか？」等の問い合わせをする特別のコミ
ュニケーションプログラムが起動され、運転者の確認が
行われる。

【００３８】運転者が特定されると、次にエージェント
処理部１１は、現在の状況を把握する（ステップ１
３）。すなわち、エージェント処理部１１は、状況情報
処理部１５に状況センサ部４０の各センサから供給され
る検出値や、撮像装置２８で撮像した画像の処理結果
や、現在位置検出装置２１で検出した車両の現在位置等
のデータを取得して、ＲＡＭの所定エリアに格納し、格
納したデータから現在状況の把握を行う。例えば、窓開
き量検出センサ４０１の出力から開いている窓の位置と
開閉量を把握し、エアコン風量検出センサ４０２の出力
から風量を把握し、オーディオ音量検出センサ４０３か
ら音量を把握する。また、水温検出センサで検出された
冷却水の温度がｔ１である場合、エージェント処理部１
１は、この温度ｔ１をＲＡＭに格納すると共に、ｔ１が
所定の閾値ｔ２以下であれば、車両の現在の状態として
冷却水温は低い状態であると把握する。現在の状況とし
ては、他にマイク２６からの入力に基づいて音声認識し
た運転者の要求、例えば、「○○○番に電話をしてく
れ。」や「この辺のレストランを表示してくれ。」や
「ＣＤをかけてくれ。」等の要求も現在の状況として把
握される。この場合、認識した音声に含まれるワード
「ＣＤ」「かけて」等がプログラム選択テーブル２９１
の選択条件になる。さらにエージェント処理部１１は、
現在状況として、エージェントデータ記憶装置２９の学
習項目データ２９２と応答データ２９３をチェックする
ことで、エージェントがこれまでに学習してきた状態
（学習データ）を把握する。

【００３９】エージェント処理部１１は、現在の状況を
把握すると、把握した状況に応じたエージェントの処理
を行う（ステップ１４）。ここでのエージェントの処理
としては、エージェントによる判断、行為（行動＋発
声）、制御、学習、検査等の各種処理、例えば、後述す
る雑音除去処理等も含まれるが、把握した現在の状況に
よっては何も動作しない場合も含まれる。

【００４０】次に、エージェント処理部１１は、メイン
動作の処理を終了するか否かを判断し（ステップ１
５）、終了しない場合には（ステップ１５；Ｎ）、ステ
ップ１３に戻って処理を繰り返す。一方を終了する場
合、すなわち、イグニッションがＯＦＦされたことがイ
グニッションセンサで検出され（ステップ１３）、室内
灯の消灯等の終了処理（ステップ１４）が完了した後
（ステップ１５；Ｙ）、メイン処理の動作を終了する。

【００４１】図３及び図４は、本実施形態による雑音除
去処理の処理動作を表したフローチャートである。この
雑音除去処理は、図２におけるメイン動作において、現
在の状況として把握された、音声認識スイッチの状態、
開いている窓の位置と開閉量、エアコンの風量、オーデ
ィオの音量（ステップ１３）に基づき、その把握状況に
応じたエージェントの処理（ステップ１４）として実行
される。エージェント処理部１１は、ステップ１３で把
握した現在の状況から、音声認識開始か否かを判断する
（ステップ２１）。音声認識の開始か否かについては、
例えば、ナビゲーション処理における目的地設定が選択
された場合、入力装置２２から所定の音声認識スイッチ
がオンされた場合にエージェント処理部１１は音声認識
開始と判断する。

【００４２】音声認識開始であれば（ステップ２１；
Ｙ）、さらにマイク２６から音声が入力されたか否かを
判断し（ステップ２２）、音声入力がなければ（；Ｎ）
メインルーチンにリターンする。一方、音声入力がされ
た場合（ステップ２２；Ｙ）、入力された音声の認識を
音声制御部１４において行い（ステップ２３）、さらに
認識結果を確認するためにコールバック音声を音声制御
部１４で音声合成し、音声出力装置２５から出力する
（ステップ２４）。

【００４３】このコールバックに対してユーザが「Ｏ
Ｋ」（承認）をしたか否かを確認する（ステップ２５；
認識精度取得手段）。すなわち、エージェント処理部１
１は、入力装置２２による入力結果から、承認を表す
「はい」「Ｙｅｓ」「ＯＫ」等の承認キーが選択（タッ
チパネルによるタッチやジョイスティックによる選択を
含む）されたか、それとも否認を表す「いいえ」「Ｎ
ｏ」等の否認キーが選択されたか否かを確認する。ま
た、エージェント処理部１１は、ユーザが音声により承
認を表す音声「はい」「Ｙｅｓ」「ＯＫ」「いいよ」
「あっている」等の承認音声を発したか、それとも、否
認を表す音声「いいえ」「Ｎｏ」「違う」「だめ」等の
否認音声を発したか否かについて、マイク２６から入力
される音声を音声制御部１４で認識し、その認識結果か
らもコールバックの確認をする。なお、本実施形態では
音声によるコールバックの確認をする場合のために、コ
ールバック専用の音声辞書を用意しておき、ステップ２
４のコールバックから所定時間（例えば、３秒以内、５
秒以内、等任意の時間をコールバック回答時間として設
定可能）にマイク２６から入力された音声に対しては、
コールバック専用の音声辞書を使用することで、承認か
否認かを精度良く認識することができるようになってい
る。

【００４４】コールバックに対するユーザの回答がＯＫ
でない場合、すなわち、認識結果が否認された場合（ス
テップ２５；Ｎ）、エージェント処理部１１は、車両内
の状態が音声認識精度が低い状態であると判断し、その
原因である雑音を除去するための処理を行う。エージェ
ント処理部１１は、まず、状態データ２９６の車両機器
制御実行フラグのフラグ状態から、窓閉め実行フラグ、
風量調節フラグ、音量調節フラグの全てがオンであるか
否かを確認する（ステップ２６）。全てのフラグがオン
でなければ（ステップ２６；Ｎ）、エージェント制御部
１１は、メインルーチンのステップ１３で把握した現在
の状況から、開いている窓があるか否かを確認し（ステ
ップ２７）、開いている窓があれば、その開き窓の位置
Ｘと開き量（開閉量）Ｒ１をエージェントデータ記憶装
置２９の状態データ２９６に格納する（ステップ２
８）。

【００４５】そしてエージェント処理部１１は、例え
ば、「Ｘ位置の窓を閉めてもいいですか」というよう
に、空いている窓を指定してその窓を閉めることの許可
を求める音声を音声制御部１４で合成し、音声出力装置
２５から出力する（ステップ２９）。この音声出力は、
実際にはエージェントによるユーザとのコミュニケーシ
ョンとして処理され、図５に示されるように、表示装置
２７に画像表示されているエージェントが窓を閉めて良
いか否かをユーザに問い合わせる。なお、図５に示され
ている吹き出しとその中に表示された文字について、本
実施形態ではエージェントが発声しているので表示され
ないが、ユーザが視覚的にも確認できるようにするため
に表示するようにしてもよい（以下、同じ）。

【００４６】その後エージェント処理部１１は、エージ
ェントによる音声出力に対してユーザが「ＯＫ」したか
否か、すなわち、窓を閉めることを承認したか否かを確
認する（ステップ３０）。この承認と否認についての確
認はステップ２５と同様にして行われる。ユーザが「Ｏ
Ｋ」した場合（ステップ３０；Ｙ）、エージェント処理
部１１は、インターフェース部１２を介して窓開閉装置
２０１を制御し、開いている位置Ｘの窓を閉めると共
に、状態データ２９６の車両機器制御実行フラグのうち
窓閉め実行フラグをオンにする（ステップ３１）。

【００４７】窓閉め実行（ステップ３１）の後、窓を閉
めることが否認された場合（ステップ３０；Ｎ）、又は
開いている窓がない場合（ステップ２７；Ｎ）、エージ
ェント処理部１１は、次に、メインルーチンのステップ
１３で把握した現在の状況からエアコンの風量Ｒ２を取
得すると共に、メインルーチンのステップ１２で特定し
た運転者（ユーザ）に対応するしきい値Ｈ２を学習項目
データ２９２から読み出し、両者を比較する（ステップ
３２）。エージェント処理部１１は、エアコン風量Ｒ２
がしきい値Ｈ２よりも大きい場合（ステップ３２；
Ｙ）、エアコンの風量を状態データ２９６に格納する
（ステップ３３）。

【００４８】そしてエージェント処理部１１は、例え
ば、「エアコンの風量を弱くしてもいいですか」という
ようにエアコンの風量を弱めることの許可を求める音声
を音声制御部１４で合成し、音声出力装置２５から出力
する（ステップ３４）。この音声出力は、窓閉めの許可
を求める場合（ステップ２９）と同様に、実際にはエー
ジェントによるユーザとのコミュニケーションとして処
理され、図６に示されるように、表示装置２７に画像表
示されているエージェントが風量を弱くしても良いか否
かをユーザに問い合わせる。

【００４９】その後エージェント処理部１１は、エージ
ェントによる音声出力に対してユーザが「ＯＫ」したか
否か、すなわち、風量を弱めることを承認したか否か
を、ステップ２５と同様にして確認する（ステップ３
５）。ユーザが「ＯＫ」した場合（ステップ３５；
Ｙ）、エージェント処理部１１は、インターフェース部
１２を介してエアコン風量調節装置２０２を制御し、エ
アコンの風量がしきい値Ｈ２の風量になるように調節す
ると共に、状態データ２９６の車両機器制御実行フラグ
のうち風量調節実行フラグをオンにする（ステップ３
６）。なお、風量に対するしきい値Ｈ２が最低値”０”
である場合、エージェント処理部１１は、エアコン風量
調節部２０２によりエアコンの電源をオフする。

【００５０】風量調節の実行（ステップ３６）の後、風
量を弱めることが否認された場合（ステップ３５；
Ｎ）、又はエアコン風量がしきい値Ｈ２以下である（エ
アコンが停止している場合を含む）場合（ステップ３
２；Ｎ）、エージェント処理部１１は、次に、メインル
ーチンのステップ１３で把握した現在の状況からオーデ
ィオの風量Ｒ３を取得すると共に、メインルーチンのス
テップ１２で特定した運転者（ユーザ）に対応するしき
い値Ｈ３を学習項目データ２９２から読み出し、両者を
比較する（ステップ３７）。エージェント処理部１１
は、オーディオの音量Ｒ３がしきい値Ｈ３よりも大きい
場合（ステップ３７；Ｙ）、オーディオの音量を状態デ
ータ２９６に格納する（ステップ３８）。

【００５１】そしてエージェント処理部１１は、例え
ば、「オーディオの音量を小さくしてもいいですか」と
いうようにオーディオの音量を小さくすることの許可を
求める音声を音声制御部１４で合成し、音声出力装置２
５から出力する（ステップ３９）。この音声出力も、窓
閉めの許可を求める場合（ステップ２９）と同様に、実
際にはエージェントによるユーザとのコミュニケーショ
ンとして処理され、図７に示されるように、表示装置２
７に画像表示されているエージェントが音量を小さくし
ても良いか否かをユーザに問い合わせる。

【００５２】その後エージェント処理部１１は、エージ
ェントによる音声出力に対してユーザが「ＯＫ」したか
否か、すなわち、音量を下げることを承認したか否か
を、ステップ２５と同様にして確認する（ステップ４
０）。ユーザが「ＯＫ」した場合（ステップ４０；
Ｙ）、エージェント処理部１１は、インターフェース部
１２を介してオーディオ音量調節装置２０３を制御し、
オーディオの音量がしきい値Ｈ３の音量になるように調
節すると共に、状態データ２９６の車両機器制御実行フ
ラグのうち音量調節実行フラグをオンにする（ステップ
４１）。なお、音量のしきい値が最低値”０”である場
合には、エージェント処理部１１は、オーディオ音量調
節部２０３によりオーディオの電源をオフする。

【００５３】音量調節の実行（ステップ４１）の後、音
量を下げることが否認された場合（ステップ４０；
Ｎ）、又はオーディオ音量がしきい値Ｈ３以下である
（オーディオが使用されていない場合を含む）場合（ス
テップ３７；Ｎ）、エージェント処理部１１は、ステッ
プ２１に移行する。

【００５４】以上のステップ２７からステップ４１まで
の車両機器制御処理によって雑音原因が除去された後
に、音声入力がされ（ステップ２２；Ｙ）、音声認識を
行う（ステップ２３）。そして認識結果のコールバック
に対して承認された場合、すなわち、音声の認識結果が
正しい場合に（ステップ２５；Ｙ）、エージェント処理
部１１は、認識結果に対応する命令を実行して（ステッ
プ４２）、メインルーチンにリターンする。認識結果に
対応する命令の実行としては、例えば、ナビゲーション
処理の目的地設定において、目的地を駅や遊園地等のジ
ャンルから探したい場合にユーザが「ジャンル」と発声
し、正しく認識されたものとする（ステップ２５；
Ｙ）。この場合の命令実行として、選択可能な各種のジ
ャンル名がリストされたパネルを持ってエージェントが
表示装置２７に登場する画像が表示される。なお、表示
する情報リストの画像が大きい場合には、リストの表示
を優先させて、エージェントはリストの背後に隠れるよ
うにする。

【００５５】一方、ステップ２７からステップ４１まで
の車両機器制御処理によって雑音原因を除去しても、そ
の後入力された音声に対する認識精度が未だ低い場合、
すなわち、音声認識を行い（ステップ２３）、そのコー
ルバック（ステップ２４）に対して否認された場合（ス
テップ２５；Ｎ）、車両機器制御実行フラグの全フラグ
がオンであれば（ステップ２６；Ｙ）、エージェント処
理部１１は、図８に示されるように、例えば、「静かに
してください」等の、認識率を高めるために有効なユー
ザの行為を促す音声を音声制御部１４で合成し、音声出
力装置２５から出力する（ステップ４３）。この音声出
力も、窓閉めの許可を求める場合（ステップ２９）と同
様に、実際にはエージェントによるユーザとのコミュニ
ケーションとして処理され、図８に示されるように、表
示装置２７に画像表示されているエージェントがユーザ
に対して静かにするように促すコメントをする。この認
識率を高めるために有効なユーザの行為として、運転者
以外の同乗者がいてその会話が雑音原因となっている場
合には、「静かにする」行為が該当し図８に示されるよ
うに「静かにしてください」とエージェントがコメント
する。また、運転者が１人だけで同乗者がいない場合に
は、ユーザの行為として「大きな声で話す」行為が該当
し、エージェントは「もう少し大きな声で話してくださ
い」とコメントする。なお、同乗者の有無については、
同乗者検出センサや運転席以外のシートベルトの着用状
態等からステップ１３で把握されている現在の状況に基
づいて判断される。

【００５６】次にエージェント処理部１１は、メインル
ーチンのステップ１２で特定した運転者に対する風量と
音量のしきい値Ｈ２、Ｈ３を、所定量だけ下げるように
変更する（ステップ４４）。すなわち、エアコンの風量
が１段階下がるようにしきい値Ｈ２を下げ、オーディオ
の音量が調節可能範囲の１０％だけ下がるようにしきい
値Ｈ３を下げる。なお、風量調節が数段階に調節できる
ようになっているエアコンではなく、数十段階に風量調
節できるようなエアコンや、アナログ的に任意位置に調
節できるエアコンである場合には、オーディオの場合と
同様に、調節可能範囲の１０％だけ風量を下げるように
しきい値Ｈ２も下げる。

【００５７】つぎにエージェント処理部１１は、風量調
節実行フラグと、音量調節実行フラグをオフにし（ステ
ップ４５）、ステップ２１に移行する。両フラグをオフ
にすることで、ステップ２７からステップ４１までの車
両機器制御処理により、エアコンの風量とオーディオの
音量が変更後のしきい値Ｈ２、Ｈ３となるまで更に下げ
られる。

【００５８】以上のように車両機器制御処理によって、
高い精度で音声認識が行われ、その後、音声認識が終了
か否か確認される（ステップ２１）。音声認識の終了
は、例えば、音声認識スイッチがオフされた場合、マイ
ク２６に一定時間一定レベル以上の音声が入力されない
場合や、ユーザが音声認識を必要としない別のモードを
選択した場合等に音声認識の終了と判断される。

【００５９】音声認識が終了である場合（ステップ２
１；Ｎ）、エージェント処理部１１は、車両機器制御処
理によって閉められた窓や下げられた風量、音量を元の
状態に戻す車両機器状態復元処理を実行する。すなわ
ち、エージェント処理部１１は、エージェントデータ記
憶装置２９の状態データ２９６から窓閉め実行フラグが
オンされているか否かを確認し（ステップ４６）、オン
であれば（；Ｙ）、ステップ２８で状態データ２９６に
格納した開き窓位置Ｘと開き量Ｒ１を読み出し、窓開閉
装置２０１を制御して該当位置の窓ＸをＲ１だけ開けて
元の状態に戻すと共に、窓閉め実行フラグをオフにする
（ステップ２３）。同様に、エージェント処理部１１
は、風量調節実行フラグがオンされているか確認し、オ
ンであれば（ステップ４８；Ｙ）、エアコン風量調節装
置２０２を制御してエアコンの風量を元の風量であるＲ
２に戻す（ステップ４９）。また同様に、エージェント
処理部１１は、音量調節実行フラグがオンされているか
確認し、オンであれば（ステップ５０；Ｙ）、オーディ
オ音量調節装置２０３を制御してオーディオの音量を元
の音量Ｒ３に戻し（ステップ５１）、メインルーチンに
リターンする。

【００６０】以上説明したように、本実施形態の音声認
識装置、及び、音声認識装置を適用したエージェント装
置によれば、車内での音声認識率が低い場合に、開いて
いる窓を閉める、エアコンの風量を下げる、オーディオ
の音量を下げることで、雑音の原因を除去しているの
で、低い雑音状態で音声認識が行われる、認識率が低下
することを防止することができる。

【００６１】以上本発明の好適な実施形態について説明
したが、本発明はかかる実施形態の構成に限定されるも
のではなく、各請求項に記載された発明の範囲において
他の実施形態を採用し、また、変形することが可能であ
る。例えば、説明した実施形態では、雑音を除去するた
めに窓、エアコン、及びオーディオの全てを制御対象と
しているが、本発明では、窓のみ、エアコンのみ、オー
ディオのみ、窓とエアコン、窓とオーディオ、エアコン
とオーディオのいずれか、即ち窓、エアコン、オーディ
オのうちの少なくとも１つの要素を雑音要素として制御
するようにしてもよい。

【００６２】また、説明した実施形態では、窓閉め、エ
アコン風量調節、オーディオ音量調節の全てに対して制
御を行うか否かを判断したが、制御に優先順位を付ける
ようにしてもよい。図９は、雑音除去処理における車両
機器制御処理で、各機器の制御に優先順位を付けた場合
の図４に対応するフローチャートである。なお、図４と
同一のステップ番号を付した処理は同一又は同様な処理
が行われるので、適宜説明を簡略化する。すなわち、音
声認識の精度が低いと判断された場合、エージェント処
理部１１は、雑音原因の対象として窓に注目し、開いて
いる窓を確認し（ステップ２７；Ｙ）、その窓位置Ｘと
開き量Ｒ２を取得、記憶し（ステップ２８）、エージェ
ントによりユーザに窓閉めの確認が承認された場合（ス
テップ２９、ステップ３０；Ｙ）、開いている窓を閉め
て（ステップ３１）、ステップ２１（図３）に移行して
音声認識を続行する。エアコン風量、オーディオ音量が
しきい値Ｈ２、Ｈ３よりも高いか否かの判断と調節制御
を行うことなくステップ２１に移行し、低かった音声認
識精度が窓を閉めることによって解消されれば、そのま
ま音声認識を続行する。

【００６３】一方、窓を閉めても音声認識の精度が依然
として低い場合（前回の処理で窓の閉めているのでステ
ップ２７；Ｎ）、窓を閉めることがユーザによって拒否
された場合（ステップ３０；Ｎ）、及び元々開いている
窓がない場合（ステップ２７；Ｎ）、エアコンの風量Ｒ
２がしきい値Ｈ２よりも高いか否かを判断する（ステッ
プ３２）。高い場合（ステップ３２；Ｙ）に風量Ｒ２を
記憶し（ステップ３３）、エージェントにより風量調節
の承認がされた場合（ステップ３４、ステップ３５；
Ｙ）にエアコンの風量をＨ２まで下げて（ステップ３
６）、ステップ２１に移行する。エアコンの風量をＨ２
まで下げることで、音声認識精度が高くなった場合に
は、オーディオの音量の判断と調節を行うことなく、そ
のまま音声認識を続行する。

【００６４】そして、エアコン風量をしきい値Ｈ２まで
下げても音声認識精度が低い場合（前回の処理で風量調
節しているのでステップ３２；Ｎ）、風量調節が否認さ
れた場合（ステップ３５；Ｎ）、及び、風量Ｒ２がしき
い値Ｈ２以下である場合（ステップ３２；Ｎ）、エージ
ェント処理部１１は、オーディオの音量Ｒ３がしきい値
Ｈ３よりも高いか否かを判断する（ステップ３７）。高
い場合（ステップ３７；Ｙ）に音量Ｒ３を記憶し（ステ
ップ３８）、エージェントにより音量調節の承認がされ
た場合（ステップ３９、ステップ４０；Ｙ）にオーディ
オの音量をＨ３まで下げて（ステップ４１）、ステップ
２１に移行する。オーディオの音量をＨ３まで下げるこ
とで、音声認識精度が高くなった場合には、そのまま音
声認識を続行する。

【００６５】オーディオ音量をしきい値Ｈ２にまで下げ
ても、なお音声認識精度が低い場合には、「大きな声で
話してください」や「静かにしてください」等の認識率
を高めるために有効なユーザの行為を促す音声を音声制
御部１４で合成し、エージェントによる会話として音声
出力装置２５から出力する。その後エージェント処理部
１１は、ステップ４４、４５で説明したと同様に、風量
と音量のしきい値Ｈ２、Ｈ３を下げ、両フラグをオフに
する。このように、雑音原因になっている機器の制御に
優先順位をつけて、順次制御することで、最低限必要な
機器のみを制御することで音声認識精度を上げることが
可能になる。

【００６６】また、上記した変形例では、窓閉め、エア
コン風量調節、オーディオ音量調節の順番に優先順位を
付けて制御するようにしたが、車両走行中と停止中とで
優先順位を変更するようにしてもよい。例えば、車両走
行中の優先順位を窓閉め、エアコン風量調節、オーディ
オ音量調節の順として制御するが、車両停止中の優先順
位をエアコン風量調節、オーディオ音量調節、窓閉めの
順として制御する。

【００６７】説明した実施形態では、ステップ４３から
ステップ４５の順で説明したように、認識率を高めるた
めに有効なユーザの行為を促した（ステップ４３）後
に、風量と音量のしきい値Ｈ２、Ｈ３を下げる変更（ス
テップ４４）と両フラグのオフ（ステップ４５）を行う
ようにした。これに対し、本発明では、ステップ２６で
Ｙｅｓの場合に、風量と音量のしきい値変更と両フラグ
オフを実行してステップ２１に移行し、しきい値Ｈ２、
Ｈ３が最低の値になり、エアコンとオーディオの電源が
オフされた後においてもまだ音声認識精度が低い場合
に、認識率を高めるために有効なユーザの行為を促す
（ステップ４３）ようにしてもよい。

【００６８】また、窓、エアコン、オーディオの３要素
以外にも、雑音の原因になり得る装置も雑音要素として
制御対象としてもよい。例えば、車内に配置されたカラ
オケ装置や、通信制御装置２４を介して演奏データや画
像等を取得して車内で演奏する通信カラオケが存在する
場合には、その演奏の音量やマイクから入力される歌声
の音量を調整するようにしてもよい。但し、演奏や歌声
を出力するスピーカとして、音声出力装置２５が兼用さ
れている場合には、カラオケや通信カラオケをオーディ
オに含めて制御するようにしてもよい。また、自動車電
話や携帯電話やＰＨＳ（パーソナル・ハンディーフォン
・システム）等の無線通信による電話が車内で使用され
ている場合や、アマチュア無線機やトランシーバー等の
無線通信機器が使用されている場合で、特に運転者等の
音声認識対象となっている者以外の同乗者により携帯電
話や無線機等が使用されている場合にも、インターフェ
ース部１２を介してエージェント処理部１１により制御
可能に接続されていれば、音量を下げる等の雑音低減処
理を行うようにしてもよい。これらの機器がエージェン
ト処理部１１により制御可能に接続されていない場合に
は、これらの使用音声を小さくするようにエージェント
が要求し、また、音声認識対象者に対して大きな声で発
声するように要求する。

【００６９】また、説明した実施形態では、図３のステ
ップ２５において、コールバックに対してユーザが承認
しなかった場合に、音声認識精度が低い（認識精度が所
定値以下である）と判断したが、認識精度が所定値以下
か否かについて他の判断基準を採用することも可能であ
る。例えば、認識結果のコールバックに対するユーザの
否認（ステップ２５；Ｎ）がｍ回続いた場合に音声認識
精度が所定値以下であると判断してステップ２７からス
テップ４１の車両機器制御処理を行うようにしてもよ
い。また、直前ｐ回、例えば、直前１０回の音声認識結
果のコールバックに対する承認の回数が所定回数ｑ回、
例えば、７回以下の場合に音声認識精度が低いと判断し
て、車両機器制御処理を行うようにしてもよい。さら
に、音声入力用のマイク２６のＳ／Ｎ比（信号対雑音
比）がしきい値Ｈ４以下の場合に音声認識の精度が低い
と判断して、車両機器制御処理を行うようにしてもよ
い。

【００７０】説明した実施形態では、ステップ４６から
ステップ５１の状態復元処理において、各フラグがオン
であれば無条件に元の状態に戻すようにした。これに対
して、本発明では、各フラグがオンの場合に、対応する
車両機器を元の状態に戻す前に、図１０に示されるよう
に、エージェントが元の状態に戻しても良いか否かを確
認し、承認された場合に元の状態に戻すようにしてもよ
い。確認の言葉としてエージェントは、例えば、「Ｘ位
置の窓を開けましょうか？」「Ｘ位置の窓を元の位置ま
で開けましょうか？」「エアコンの風量を元に戻します
か？」「オーディオの音量を元に戻しますか？」等のコ
メントをする。

【００７１】以上説明した実施形態では、エージェント
の行為として音声の認識および車両機器制御処理等を行
うようにしたが、本発明では、エージェントの行為とし
てではなく、音声認識装置による処理として音声認識、
認識精度の確認、車両機器制御処理、車両機器状態復元
処理を行うようにしてもよい。

【００７２】

【発明の効果】請求項１から請求項５に記載した各音声
認識装置によれば、車両内に発生する雑音による影響を
少なくして、より高い認識精度を得ることができる。ま
た、請求項６に記載したエージェント装置によれば、車
両内に発生する雑音による影響を少なくして、より高い
音声認識精度でコミュニケーションを行うことができ
る。

【図面の簡単な説明】

【図１】本発明の１実施形態におけるエージェント装置
の構成を示すブロック図である。

【図２】同上、エージェントによる処理のメイン動作を
表したフローチャートである。

【図３】同上、エージェントによる雑音除去処理の処理
動作の一部を表したフローチャートである。

【図４】同上、エージェントによる雑音除去処理の処理
動作の残りを表したフローチャートである。

【図５】同上、雑音除去処理においてエージェントによ
る窓閉めの確認状態を表した説明図である。

【図６】同上、雑音除去処理においてエージェントによ
るエアコン風量調節の確認状態を表した説明図である。

【図７】同上、雑音除去処理においてエージェントによ
るオーディオ音量調節の確認状態を表した説明図であ
る。

【図８】同上、雑音除去処理においてエージェントが認
識率を高めるために有効なユーザの行為を促す状態を表
す説明図である。

【図９】同上、雑音除去処理における車両機器制御処理
で、各機器の制御に優先順位を付けた変形例を表すフロ
ーチャートである。

【図１０】同上、雑音除去処理においてエージェントに
よる窓開けの確認状態を表した説明図である。

【符号の説明】

１ 全体処理部 １０ ナビゲーション処理部 １１ エージェント処理部 １２ Ｉ／Ｆ部 １３ 画像処理部 １４ 音声制御部 １５ 状況情報処理部 ２１ 現在位置検出装置 ２２ 入力装置 ２３ 記憶媒体駆動装置 ２４ 通信制御装置 ２０１ 窓開閉装置 ２０２ エアコン風量調節装置 ２０３ オーディオ音量調節装置 ２５ 音声出力装置 ２６ マイク ２７ 表示装置 ２８ 撮像装置 ２９ エージェントデータ記憶装置 ２９０ エージェントプログラム ２９１ プログラム選択テーブル ２９２ 学習項目データ ２９３ 応答データ ２９４ 画像データ ２９６ 状態データ ２９７ ユーザ情報 ３０ ナビゲーションデータ記憶装置 ４０ 状況センサ部 ４０１ 窓開き量検出センサ ４０２ エアコン風量検出センサ ４０３ オーディオ音量検出センサ ４０４ その他の状況センサ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 松田 学 東京都千代田区外神田２丁目19番12号 株 式会社エクォス・リサーチ内 (72)発明者 足立 和英 東京都千代田区外神田２丁目19番12号 株 式会社エクォス・リサーチ内 (72)発明者 向井 康二 東京都千代田区外神田２丁目19番12号 株 式会社エクォス・リサーチ内 Ｆターム(参考） 5D015 EE05 KK01 9A001 DD11 HH17 HH26 HZ19 JZ77 KK32 KK56

Claims (6)

【特許請求の範囲】
1. 【請求項１】 音声を認識する音声認識手段と、 この音声認識手段による認識精度を取得する認識精度取
   得手段と、 この認識精度取得手段による認識精度が所定値以下であ
   る場合に、雑音の原因となる雑音要素の状態を検出する
   雑音要素検出手段と、 この雑音要素検出手段により検出された雑音要素の状態
   を制御して雑音を減少させる雑音要素制御手段と、を具
   備することを特徴とする音声認識装置。
2. 【請求項２】 前記雑音要素検出手段で検出された雑音
   要素の状態を記憶する状態記憶手段を有し、 前記雑音要素制御手段は、音声認識処理が終了した場合
   に前記状態記憶手段に記憶された状態に前記雑音要素の
   状態を戻すことを特徴とする請求項１に記載の音声認識
   装置。
3. 【請求項３】 前記雑音要素検出手段は、雑音要素の状
   態として窓の開閉状態を検出し、 前記雑音要素制御手段は、前記雑音要素検出手段により
   窓が開いた状態が検出された場合、開いている窓を閉め
   ることを特徴とする請求項１又は請求項２に記載の音声
   認識装置。
4. 【請求項４】 前記雑音要素検出手段は、雑音要素の状
   態としてオーディオの音量を検出し、 前記雑音要素制御手段は、前記雑音要素検出手段により
   所定値以上のオーディオの音量が検出された場合、その
   音量を下げることを特徴とする請求項１又は請求項２に
   記載の音声認識装置。
5. 【請求項５】 前記雑音要素検出手段は、雑音要素の状
   態としてエアコンの風量を検出し、 前記雑音要素制御手段は、前記雑音要素検出手段により
   所定量以上の風量が検出された場合、風量を下げること
   を特徴とする請求項１又は請求項２に記載の音声認識装
   置。
6. 【請求項６】 音声を認識する音声認識手段と、この音
   声認識手段による認識精度を取得する認識精度取得手段
   と、 擬人化されたエージェントを車両内に出現させるエージ
   ェント出現手段と、 前記認識精度取得手段による認識精度が所定値以下であ
   る場合に、雑音の原因となる雑音要素の状態を検出する
   雑音要素検出手段と、 この雑音要素検出手段により検出された雑音要素の状態
   を制御して雑音を減少させる行為を、前記エージェント
   出現手段により出現されるエージェントに行わせるエー
   ジェント制御手段と、を具備することを特徴とするエー
   ジェント装置。