JP7276165B2

JP7276165B2 - エージェント装置、エージェントシステム、及びエージェントプログラム

Info

Publication number: JP7276165B2
Application number: JP2020001601A
Authority: JP
Inventors: 智景久保; 景子中野; 英一前田; 博之西澤
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2020-01-08
Filing date: 2020-01-08
Publication date: 2023-05-18
Anticipated expiration: 2040-01-08
Also published as: US11593568B2; CN113094480A; DE102020132456A1; JP2021111056A; US20210209316A1

Description

本発明は、装置の説明や操作の説明等を行うエージェント装置、エージェントシステム、及びエージェントプログラムに関する。

特許文献１には、各種車載ユニットの操作に関係のある情報を提供する車両用エージェント処理装置が開示されている。

詳細には、車両エージェント処理装置は、無線通信部で受信した信号として、肉声を含む音声情報が与えられたときは音声認識を行った後で、電子メールの場合はそのままで、それぞれ構文解析部を行って意味解釈し、自動車内の各種車載ユニットの操作に関係のある情報を取捨選択して優先的に要約し、これを音声合成してスピーカから出力する。また、各種車載ユニットの操作が必要と推定される場合は、その旨をエージェント処理部で自動的に判断し、その車載ユニットの操作案内情報を付加して音声案内する。

特開２００１－１４１５００号公報

しかしながら、ユーザが把握している機能名や、略語、視覚的な情報を用いて質問した場合に、これらを正式名称や一般名称等に置き換えて回答した場合、ユーザが正式名称を把握していないと、質問に対する回答が正しいか否かの判断できないことがある。

本発明は、上記事実を考慮して成されたもので、ユーザが正式名称や一般名称等を把握していないような場合であっても、ユーザが理解可能な回答内容を出力可能なエージェント装置、エージェントシステム、及びエージェントプログラムを提供することを目的とする。

上記目的を達成するために請求項１に記載のエージェント装置は、発話による質問内容を解析し、前記質問内容に使われている単語を統一した単語に置き換える前処理を行う音声解析部と、前記音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前記前処理により置き換えた置換単語が存在する場合に、前記回答情報内の前記置換単語が前記元の単語であることを認識可能に変更して前記回答情報を出力する出力部と、を含む。

請求項１に記載の発明によれば、音声解析部では、発話による質問内容を解析し、質問内容に使われている単語を統一した単語に置き換える前処理が行われる。そして、出力部では、音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前処理により置き換えた置換単語が存在する場合に、回答情報内の置換単語が元の単語であることを認識可能に変更して回答情報が出力される。これにより、ユーザが正式名称や一般名称等を把握していないような場合であっても、ユーザが理解可能な回答内容を出力することが可能となる。

なお、請求項２に記載の発明のように、出力部は、置換単語を元の単語に置き換えて回答情報を出力してもよい。これにより、質問時に用いた元の単語で回答情報が出力されるので、ユーザが分からない単語で回答されることがなくなる。

また、請求項３に記載の発明のように、出力部は、置換単語と元の単語とを対応付けて回答情報を出力してもよい。これにより、質問時の元の単語が置き換えられてユーザが知らない単語あっても元の単語と対応付けられるので、ユーザが理解することが可能となる。

また、請求項４に記載の発明のように、出力部は、置換単語の後に元の単語を並べる変更、または元の単語の後に置換単語を並べる変更を行って回答情報を出力してもよい。これにより、質問時の元の単語と置換単語の対応を理解することが可能となる。

また、請求項５に記載の発明のように、音声解析部は、車両のマニュアルに関係する質問内容を解析してもよい。このように、音声解析部が車両のマニュアルに特化して発話内容を認識することで、車両のマニュアルに対する発話の認識精度を向上できる。

請求項６に記載のエージェントシステムは、発話による質問内容を解析し、前記質問内容に使われている単語を統一した単語に置き換える前処理を行う音声解析部と、前記音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前記前処理により置き換えた置換単語が存在する場合に、前記回答情報内の前記置換単語が前記元の単語であることを認識可能に変更して前記回答情報を出力する出力部と、車両に搭載されて、乗員の発話を検出し、検出した発話を前記音声解析部に提供し、かつ前記出力部から出力された前記回答情報を報知する機能を有する情報提供装置と、を含む。

請求項６に記載の発明によれば、音声解析部では、発話による質問内容を解析し、質問内容に使われている単語を統一した単語に置き換える前処理が行われる。そして、出力部では、音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前処理により置き換えた置換単語が存在する場合に、回答情報内の置換単語が元の単語であることを認識可能に変更して回答情報が出力される。

また、情報提供装置は、車両に搭載され、乗員の発話を検出して、検出した発話内容を音声解析部に提供し、かつ出力部から出力された前記回答情報を報知する。

これにより、車両に搭載された情報提供装置に対して、発話によって質問することで回答を得る際に、ユーザが正式名称や一般名称等を把握していないような場合であっても、ユーザが理解可能な回答内容を得ることが可能となる。

なお、請求項７に記載の発明のように、コンピュータに、請求項１～５の何れか１項に記載のエージェント装置の各部として機能させるためのエージェントプログラムとしてもよい。

以上説明したように本発明によれば、ユーザが正式名称や一般名称等を把握していないような場合であっても、ユーザが理解可能な回答内容を出力可能なエージェント装置、エージェントシステム、及びエージェントプログラムを提供できる、という効果がある。

本実施形態に係る車両用制御装置の構成を示すブロック図である。実施形態の車両のハードウェア構成を示すブロック図である。実施形態のサーバのハードウェア構成を示すブロック図である。実施形態のマニュアル提供システムの機能を説明する機能ブロック図である。本実施形態に係るマニュアル提供システムにおけるエージェントサーバで行われる処理の流れの一例を示すフローチャートである。

以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。本実施形態では、車両のマニュアルを提供するマニュアル提供システムをエージェントシステムの一例として説明する。図１は、本実施形態に係るマニュアル提供システムの概略構成を示す図である。

図１に示されるように、本実施形態のマニュアル提供システム１０は、複数の車両１２と、複数のサーバ３０と、を含んで構成されている。各車両１２には情報提供装置としての車載器２０が搭載されている。また、サーバ３０は、Human Machine Interface（以下、「ＨＭＩ」とする）として機能するＨＭＩサーバ１４、エージェントサーバ１６、及びオーナーズマニュアル（Owner's Manual、以下「ＯＭ」と略す場合がある）サーバ１８を含んでいる。なお、エージェントサーバ１６は、エージェント装置に対応する。

各車両１２の車載器２０、ＨＭＩサーバ１４及びＯＭサーバ１８は、それぞれ、ネットワークＮ１を介して相互に接続されている。また、ＨＭＩサーバ１４とエージェントサーバ１６とは、ネットワークＮ２を通じて相互に接続されている。

（車両）
まず、車両１２のハードウェア構成について説明する。図２は、本実施形態の車両のハードウェア構成を示すブロック図である。

図２に示されるように、本実施形態に係る車両１２は、車載器２０と、複数のＥＣＵ２２と、マイク２４と、入力スイッチ２６と、モニタ２８と、を含んで構成されている。

車載器２０は、ＣＰＵ（Central Processing Unit）２０Ａ、ＲＯＭ（Read Only Memory）２０Ｂ、ＲＡＭ（Random Access Memory）２０Ｃ、車内通信Ｉ／Ｆ（Inter Face）２０Ｄ、無線通信Ｉ／Ｆ２０Ｅ、及び入出力Ｉ／Ｆ２０Ｆを含んで構成されている。ＣＰＵ２０Ａ、ＲＯＭ２０Ｂ、ＲＡＭ２０Ｃ、車内通信Ｉ／Ｆ２０Ｄ、無線通信Ｉ／Ｆ２０Ｅ、及び入出力Ｉ／Ｆ２０Ｆは、内部バス２０Ｇを介して相互に通信可能に接続されている。

ＣＰＵ２０Ａは、中央演算処理ユニットであり、各種プログラムを実行したり、各部を制御したりする。すなわち、ＣＰＵ２０Ａは、ＲＯＭ２０Ｂからプログラムを読み出し、ＲＡＭ２０Ｃを作業領域としてプログラムを実行する。

ＲＯＭ２０Ｂは、各種プログラム及び各種データを記憶している。本実施形態のＲＯＭ２０Ｂには、車載器２０を制御するための制御プログラムが記憶されている。

ＲＡＭ２０Ｃは、上述したように、ＣＰＵ２０Ａによる各種プログラムの実行時の作業領域としてプログラム又はデータを一時的に記憶する。

車内通信Ｉ／Ｆ２０Ｄは、ＥＣＵ２２と接続するためのインタフェースである。当該インタフェースは、ＣＡＮプロトコルによる通信規格が用いられる。車内通信Ｉ／Ｆ２０Ｄは、外部バス２０Ｈに対して接続されている。ＥＣＵ２２は、車両１２の機能毎に複数設けられている。本実施形態のＥＣＵ２２としては、車両制御ＥＣＵ、エンジンＥＣＵ、ブレーキＥＣＵ、ボデーＥＣＵ、カメラＥＣＵ、マルチメディアＥＣＵ等が例示される。

無線通信Ｉ／Ｆ２０Ｅは、サーバ３０と通信するための無線通信モジュールである。当該無線通信モジュールは、例えば、５Ｇ、ＬＴＥ、Ｗｉ－Ｆｉ（登録商標）等の通信規格が用いられる。無線通信Ｉ／Ｆ２０Ｅは、ネットワークＮ１に対して接続されている。

入出力Ｉ／Ｆ２０Ｆは、車両１２に搭載されるマイク２４、入力スイッチ２６、及びモニタ２８と通信するためのインタフェースである。

マイク２４は、車両１２のフロントピラーやダッシュボード等に設けられ、乗員が発した音声を集音する装置である。

入力スイッチ２６は、センタコンソールやステアリングホイール等に設けられ、乗員の手指による操作を入力するスイッチである。入力スイッチ２６としては、例えば、押しボタン式のテンキーやタッチパッド等を採用することができる。

モニタ２８は、センタコンソールやメータパネルに設けられ、オーナーズマニュアルや後述する回答情報を表示するための液晶モニタである。モニタ２８は、入力スイッチ２６を兼ねたタッチパネルとして設けてもよい。

（サーバ）
続いて、サーバ３０のハードウェア構成について説明する。図３は、本実施形態のサーバのハードウェア構成を示すブロック図である。

図３に示されるようにサーバ３０は、ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ、ストレージ３０Ｄ、及び通信Ｉ／Ｆ３０Ｅを含んで構成されている。ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ、ストレージ３０Ｄ及び通信Ｉ／Ｆ３０Ｅは、内部バス３０Ｇを介して相互に通信可能に接続されている。ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ及び通信Ｉ／Ｆ３０Ｅの機能は、上述した車載器２０のＣＰＵ２０Ａ、ＲＯＭ２０Ｂ、ＲＡＭ２０Ｃ及び無線通信Ｉ／Ｆ２０Ｅと同じである。

ストレージ３０Ｄは、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）により構成され、各種プログラム及び各種データを記憶している。

ＣＰＵ３０Ａは、ストレージ３０Ｄからプログラムを読み出し、ＲＡＭ３０Ｃを作業領域としてプログラムを実行する。

本実施形態のストレージ３０Ｄには、処理プログラム１００及びデータ群１１０が記憶されている。処理プログラム１００は、サーバ３０が有する各機能を実現するためのプログラムである。

続いて、本実施形態のマニュアル提供システム１０の機能構成について説明する。図４は、実施形態のマニュアル提供システムの機能を説明する機能ブロック図である。

（ＨＭＩサーバ）
ＨＭＩサーバ１４は、車載器２０からの質問を受け付けると共に、オーナーズマニュアルに係る質問に対する回答をエージェントサーバ１６に照会する機能を有している。

図４に示されるように本実施形態のＨＭＩサーバ１４では、ＣＰＵ３０Ａが、処理プログラム１００を実行することで、ＨＭＩ対話制御部３２として機能する。

ＨＭＩ対話制御部３２は、車載器２０との間で通信を行う。ＨＭＩ対話制御部３２は、車載器２０から送信された車両１２の乗員に係る音声情報を取得し、音声認識を行い、音声情報をテキスト情報に変換する。また、ＨＭＩ対話制御部３２は、変換されたテキスト情報を基に、乗員の発話の意図を理解する。そして、ＨＭＩ対話制御部３２は、乗員がオーナーズマニュアルに係る質問を行ったと理解した場合、当該質問に係る照会をエージェントサーバ１６に対し実行する。

（エージェントサーバ）
エージェントサーバ１６は、オーナーズマニュアルに係る質問を処理するエージェント（Owner's Manual Agent（以下、「ＯＭＡ」とする））として機能する。エージェントサーバ１６は、ＨＭＩサーバ１４から車両１２の車両情報と質問に係るテキスト情報とを取得し、ＨＭＩサーバ１４に質問に対する回答に係る回答情報を提供する。

本実施形態のエージェントサーバ１６では、ＣＰＵ３０Ａは、処理プログラム１００を実行することで、ＯＭＡ対話制御部３６及び意図推定部３８として機能する。なお、ＯＭＡ対話制御部３６は出力部に対応し、意図推定部３８は音声解析部に対応する。

また、エージェントサーバ１６のデータ群１１０は、車両ＯＭ対応データ２００、意図推定ＩＤ管理データ２１０、ＱＡデータ２２０、単語正規化データ２３０、及び学習済みモデル２４０を含む。

車両ＯＭ対応データ２００は、車両１２の車種、グレード、装備品等に係る車両情報と、オーナーズマニュアル毎に付与されたＯＭ品番を紐づけるデータである。

意図推定ＩＤ管理データ２１０は、ＯＭ品番と、ＯＭ品番に対応する意図推定エンジンＩＤとを管理するデータである。意図推定エンジンＩＤとは、後述する意図推定処理を実行する意図推定エンジン毎に付与されたＩＤである。意図推定エンジンは、類似する又は関連するオーナーズマニュアル毎に設けられている。

ＱＡデータ２２０は、回答毎に付されるインテントラベルに紐づく回答情報を保持するデータである。ここで、「インテントラベル」とは、乗員の発話内容から意図を推定した結果として提供されるラベル番号である。回答情報には、質問に対する回答に係る表示用テキスト、表示用画像、読み上げ用テキスト、オーナーズマニュアル表示用のＵＲＬ等が含まれている。

単語正規化データ２３０は、意図推定の前処理に使用する単語の正規化用のデータである。ここで前処理とは、表記のゆれや表現のゆれを予め定めた統一した単語に置き換える処理である。例えば、単語正規化データ２３０は、「オフ」と「ＯＦＦ」とが同じ語であることを示す情報であって、表記ゆれを統一させるためのデータを含む。また例えば、単語正規化データ２３０は、「タイヤ空気圧警告灯」と「空気圧警告灯」とが同一のものを指す情報であって、異なる表現を統一するためのデータを含む。また例えば、単語正規化データ２３０は、「ＬＫＡ」と「レーンキープアシスト」とが同一のものを指す情報であって、略称等を正式名称に統一するためのデータを含む。

学習済みモデル２４０は、ある質問に関連する複数の言い回しに係るテキスト情報を入力とし、当該質問の回答に係るインテントラベルを出力とする教師データを使用して機械学習を行うことによって生成されたデータである。学習済みモデル２４０は、予め、ＯＭＡ意図推定エンジン毎に学習されたものが用意されている。また、学習済みモデル２４０は、略称でも正式名称でも類似する表現でも１の回答に紐づくように学習されたものが用意されている。

ＯＭＡ対話制御部３６は、車両ＯＭ対応データ２００を参照して、車両１２の車両情報から当該車両１２に対応するＯＭ品番を検索し取得する。ＯＭＡ対話制御部３６は、ＯＭ品番を取得できなかった場合には、「サービス対象外」である旨をＨＭＩ対話制御部３２に通知する。また、ＯＭＡ対話制御部３６は、意図推定ＩＤ管理データ２１０を参照して、取得したＯＭ品番から当該車両１２に適用するＯＭＡ意図推定エンジンＩＤを検索し取得する。

また、ＯＭＡ対話制御部３６は、テキスト情報及びＯＭＡ意図推定エンジンＩＤを入力値として、意図推定部３８に照会を行い、インテントラベルを取得する。ＯＭＡ対話制御部３６は、該当するインテントラベルが一つもなかった場合には、「該当なし」である旨をＨＭＩ対話制御部３２に通知する。ＯＭＡ対話制御部３６は、ＱＡデータ２２０を参照し、取得したインテントラベル、ＯＭ品番を基に、対応する回答情報を検索し取得する。

意図推定部３８は、意図推定エンジンＩＤの意図推定エンジンを使用してインテントラベルを取得し、ＯＭＡ対話制御部３６に提供する。まず、意図推定部３８は、ＯＭＡ対話制御部３６を経由して取得したテキスト情報に係るテキストに対して前処理を行う。前処理により、表記のゆれや表現のゆれが統一される。そして、意図推定部３８は、ＯＭＡ意図推定エンジン毎に用意された学習済みモデル２４０を用いて、前処理をしたテキスト情報に対し意図推定処理を行い、テキスト情報に対応するインテントラベルを出力すると共に、当該インテントラベルに対応した確信度を算出する。そして、確信度が予め定めた値以上のインテントラベルをＯＭＡ対話制御部３６に通知する。

（ＯＭサーバ）
ＯＭサーバ１８は、オーナーズマニュアルを提供するサーバである。ＯＭサーバ１８のデータ群１１０は、オーナーズマニュアルに係るＨＴＭＬデータであるＯＭデータ３００を含む。なお、ＯＭデータ３００は、ＱＡデータ２２０が保持する回答情報に含まれるオーナーズマニュアル表示用のＵＲＬ等で指定することで読み出される。

ところで、本実施形態では、単語正規化データ２３０を用いて、表記のゆれや表現のゆれを統一する処理を行ってから意図推定部３８の処理を行うので、回答情報に含まれる単語が、ユーザが質問した際の単語と異なる単語で回答される場合がある。例えば、ユーザが「ＬＫＡって何？」のように質問した場合、意図推定部３８は、単語正規化データ２３０を用いて「ＬＫＡ」を「レーンキープアシスト」に置き換える。従って、回答情報としては、「レーンキープアシストとは～」のように、質問時の元の単語と異なる置換単語で回答される場合がある。ユーザは、「ＬＫＡ」と「レーンキープアシスト」が同じであるか分からないことがあり、質問に対する回答が正しいか否かの判断できないことがある。

そこで、本実施形態では、意図推定部３８が上述した前処理を行うことで、質問時の元の単語を置換単語に置き換えた場合は、回答情報内の置換単語が元の単語であることを認識可能に変更する処理を行う。これにより、置換単語とユーザが質問したときの元の単語とを認識できるので、分からない単語で回答されることがなくなる。一例として、本実施形態では、意図推定部３８が上述した前処理を行うことで、質問時の元の単語を置換単語に置き換えた場合は、回答内の置換単語を、ユーザが質問時に用いた元の単語に戻す処理を行う。これにより、ユーザが質問したときの単語で回答されるので、分からない単語で回答されることがなくなる。

具体的には、意図推定部３８が、単語正規化データ２３０を用いて前処理を行って単語を置換単語に置き換えた場合には、元の単語を置換単語に紐付けて元の単語の情報として一時保存する。そして、意図推定部３８が、インテントラベルを元の単語の情報と共に、ＯＭＡ対話制御部３６に通知する。ＯＭＡ対話制御部３６は、ＱＡデータ２２０を参照し、取得したインテントラベル、ＯＭ品番を基に、対応する回答情報を検索し取得する。そして、一時記憶した元の単語の情報に基づいて、回答情報内の置換単語をユーザが質問時に用いた元の単語に戻して、ＨＭＩ対話制御部３２に通知する。これにより、ＨＭＩ対話制御部３２を介して、回答情報の一覧を車載器２０に表示することが可能となる。ユーザは、自分が質問した単語で回答情報が出力されるので、分からない単語で回答されることがなくなる。

続いて、上述のように構成された本実施形態に係るマニュアル提供システム１０におけるエージェントサーバ１６で行われる具体的な処理について説明する。図５は、本実施形態に係るマニュアル提供システム１０におけるエージェントサーバ１６で行われる処理の流れの一例を示すフローチャートである。なお、図５の処理は、ＨＭＩ対話制御部３２が、乗員がオーナーズマニュアルに係る質問に係る照会をエージェントサーバ１６に対し実行して、ＯＭＡ対話制御部３６が、車両ＯＭ対応データ２００を参照して、車両１２の車両情報から当該車両１２に対応するＯＭ品番を検索し取得した場合に開始する。

ステップＳ１００では、エージェントサーバ１６のＣＰＵ３０Ａが、発話を受信して発話内容を解析してステップＳ１０２へ移行する。すなわち、ＯＭＡ対話制御部３６が、車両ＯＭ対応データ２００を参照して、車両１２の車両情報から当該車両１２に対応するＯＭ品番を検索し取得する。また、ＯＭＡ対話制御部３６が、意図推定ＩＤ管理データ２１０を参照して、取得したＯＭ品番から当該車両１２に適用するＯＭＡ意図推定エンジンＩＤを検索し取得する。そして、ＯＭＡ対話制御部３６が、ＨＭＩ対話制御部３２によって音声認識が行われて変換されたテキスト情報、及びＯＭＡ意図推定エンジンＩＤを入力値として、意図推定部３８に照会を行う。これにより、意図推定部３８が、ＯＭＡ対話制御部３６を経由して取得したテキスト情報に係るテキストに対して前処理を行う。また、意図推定部３８が、ＯＭＡ意図推定エンジン毎に用意された学習済みモデル２４０を用いて、テキスト情報に対応するインテントラベルを出力すると共に、当該インテントラベルに対応した確信度を算出し、確信度が予め定めた値以上のインテントラベルをＯＭＡ対話制御部３６に通知する。なお、ステップＳ１００は音声解析部に対応する。

ステップＳ１０２では、エージェントサーバ１６のＣＰＵ３０Ａが、発話内容の解析時に、単語を置き換えたか否かを判定する。該判定は、意図推定部３８が、ＯＭＡ対話制御部３６を経由して取得したテキスト情報に係るテキストに対して、前処理として、単語正規化データ２３０を用いて表記のゆれや表現のゆれ等を予め定めた統一した単語に置き換える処理を行って、質問時の元の単語に対して置き換えを行ったか否かを判定する。該判定が肯定された場合にはステップＳ１０４へ移行し、否定された場合にはステップＳ１０６へ移行する。

ステップＳ１０４では、エージェントサーバ１６のＣＰＵ３０Ａが、元の単語の情報を一時保存してステップＳ１０６へ移行する。例えば、質問時の元の単語を置換単語に紐付けて元の単語の情報として一時保存する。

ステップＳ１０６では、エージェントサーバ１６のＣＰＵ３０Ａが、発話内容を認識したか否かを判定する。該判定は、ＯＭＡ対話制御部３６が、意図推定部３８によって推定したインテントラベルの確信度が予め定めた閾値を超えるものがあるか否かを判定する。該判定が否定された場合にはステップＳ１０８へ移行し、肯定された場合にはステップＳ１１０へ移行する。

ステップＳ１０８では、エージェントサーバ１６のＣＰＵ３０Ａが、エラーメッセージをＨＭＩサーバ１４に出力して一連の処理を終了する。これにより、ＨＭＩサーバ１４から車載器２０に対して質問に対する回答が「該当なし」としてエラー通知される。

一方、ステップＳ１１０では、エージェントサーバ１６のＣＰＵ３０Ａが、回答情報を生成してステップＳ１１２へ移行する。すなわち、ＯＭＡ対話制御部３６が、ＱＡデータ２２０を参照し、意図推定部３８から取得したインテントラベル、及びＯＭ品番を基に、対応する回答情報を検索し取得する。質問に対する回答情報は、１つに限るものではなく、例えば、インテントラベルの確信度が閾値を超えるものが複数ある場合には、複数の回答情報が取得する。

ステップＳ１１２では、エージェントサーバ１６のＣＰＵ３０Ａが、発話内容の解析時に単語を置き換えたか否かを判定する。該判定は、上述のステップＳ１０４により元の単語の情報が一時保存されているか否かを判定する。該判定が肯定された場合にはステップＳ１１４へ移行し、否定された場合にはステップＳ１１６へ移行する。

ステップＳ１１４では、エージェントサーバ１６のＣＰＵ３０Ａが、回答情報の置換単語を元の単語に置き換えてステップＳ１１６へ移行する。すなわち、上述のステップ１０４で一時保存した元の単語の情報に基づいて、回答情報に使われる置換単語を質問時の元の単語に置き換えてステップＳ１１６へ移行する。なお、質問時の元の単語に置き換えた後に、一時保存した元の単語の情報を削除する。また、ステップＳ１１０～１１４は、出力部に対応する。

ステップＳ１１６では、エージェントサーバ１６のＣＰＵ３０Ａが、回答情報をＨＭＩ対話制御部３２に出力して一連の処理を終了する。これにより、ＨＭＩサーバ１４から車載器２０に対して質問に対する回答情報が出力される。

このように処理を行うことで、意図推定部３８において前処理を行って、単語を置き換えた場合は、回答する際に、ユーザが用いた元の単語に戻す処理を行うので、ユーザが質問したときの単語で回答され、ユーザが分からない単語で回答されることがなくなる。従って、ユーザが正式名称や一般名称等を把握していないような場合であっても、ユーザが理解可能な回答内容を出力することが可能となる。

なお、上記実施形態では、意図推定部３８において前処理を行って、単語を置き換えた場合は、回答時に、ユーザが用いた単語に戻すことで、回答情報内の置換単語が元の単語であることを認識可能に変更したが、これに限るものではない。例えば、元の単語と置き換えた単語を共に回答情報に含めて出力してもよい。具体的には、「ＬＫＡって何？」のように質問した場合に、意図推定部３８が前処理として「ＬＫＡ」を「レーンキープアシスト」に置き換えたとする。この場合、「レーンキープアシスト（ＬＫＡ）は～」のように回答情報を生成し、置き換えた単語の後に質問時の単語を括弧書き等で並べて報知可能なように出力してもよい。或いは、「ＬＫＡ（レーンキープアシスト）は～」のように、元の単語の後に、置き換えた単語を括弧書き等で並べて報知可能なように出力してもよい。

また、上記実施形態では、意図推定部３８において前処理を行う例を説明したが、これに限るものではない。例えば、ＯＭＡ対話制御部３６において前処理を行なってもよい。また、上記実施形態では、エージェントサーバ１６が意図推定部３８及びＯＭＡ対話制御部３６の機能を有する形態を一例として説明したが、これに限るものではない。例えば、意図推定部３８及びＯＭＡ対話制御部３６は１つの機能としてもよいし、更に機能を分割した形態としてもよい。

また、上記実施形態では、マニュアル提供システム１０を構成するＨＭＩサーバ１４、エージェントサーバ１６及びＯＭサーバ１８を異なるサーバ３０としているが、各サーバ３０の機能を統合したサーバ３０としてもよい。例えば、ＨＭＩサーバ１４、エージェントサーバ１６、及びＯＭサーバ１８の全てを一つに統合してもよいし、一部のサーバ３０を統合してもよい。また、エージェントサーバ１６においては、ＯＭＡ対話制御部３６及び意図推定部３８の機能をそれぞれ異なるサーバ３０に配置してもよい。

また、上記実施形態において、ＣＰＵ２０Ａ、３０Ａがソフトウェア（プログラム）を読み込んで実行する各種処理は、ＣＰＵ以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、ＦＰＧＡ（Field-Programmable Gate Array）等の製造後に回路構成を変更可能なＰＬＤ（Programmable Logic Device）、及びＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、上述したエージェントサーバ１６で行われる処理を、これらの各種のプロセッサのうちの１つで実行してもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡ、及びＣＰＵとＦＰＧＡとの組み合わせ等）で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。

また、上記実施形態において、各プログラムはコンピュータが読み取り可能な非一時的記録媒体に予め記憶（インストール）されている態様で説明した。例えば、サーバ３０における処理プログラム１００は、ストレージ３０Ｄに予め記憶されている。しかしこれに限らず、各プログラムは、ＣＤ－ＲＯＭ（Compact Disc Read Only Memory）、ＤＶＤ－ＲＯＭ（Digital Versatile Disc Read Only Memory）、及びＵＳＢ（Universal Serial Bus）メモリ等の非一時的記録媒体に記録された形態で提供されてもよい。また、プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。

上記実施形態で説明した処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。

１０マニュアル提供システム
１６エージェントサーバ（エージェント装置）
２０車載器（情報提供装置）
３６ＯＭＡ対話制御部（出力部）
３８意図推定部（音声解析部）
２００車両ＯＭ対応データ
２２０ＱＡデータ
２３０単語正規化データ
２４０学習済みモデル

Claims

発話による質問内容を解析し、前記質問内容に使われている単語を統一した単語に置き換える前処理を行う音声解析部と、
前記音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前記前処理により置き換えた置換単語が存在する場合に、前記回答情報内の前記置換単語が前記元の単語であることを認識可能に変更して前記回答情報を出力する出力部と、
を含むエージェント装置。
前記出力部は、前記置換単語を前記元の単語に置き換えて前記回答情報を出力する請求項１に記載のエージェント装置。
前記出力部は、前記置換単語と前記元の単語とを対応付けて前記回答情報を出力する請求項１に記載のエージェント装置。
前記出力部は、前記置換単語の後に前記元の単語を並べる変更、または前記元の単語の後に前記置換単語を並べる変更を行って前記回答情報を出力する請求項３に記載のエージェント装置。
前記音声解析部は、車両のマニュアルに関係する質問内容を解析する請求項１～４の何れか１項に記載のエージェント装置。
発話による質問内容を解析し、前記質問内容に使われている単語を統一した単語に置き換える前処理を行う音声解析部と、
前記音声解析部による解析結果に基づいて回答情報を生成し、元の単語から前記前処理により置き換えた置換単語が存在する場合に、前記回答情報内の前記置換単語が前記元の単語であることを認識可能に変更して前記回答情報を出力する出力部と、
車両に搭載されて、乗員の発話を検出し、検出した発話を前記音声解析部に提供し、かつ前記出力部から出力された前記回答情報を報知する機能を有する情報提供装置と、
を含むエージェントシステム。
コンピュータに、請求項１～５の何れか１項に記載のエージェント装置の各部として機能させるためのエージェントプログラム。