JP2009087074A - 機器制御システム - Google Patents

Abstract

【課題】感情の推定に加えて住宅内での利用者の行動を検出することにより各制御対象機器を的確な制御内容で自動的に制御することを可能にした機器制御システムを提供する。
【解決手段】住宅Ｍに複数種類の制御対象機器Ｌｄが配置され、宅内サーバＳｖでは、感情センサ手段Ｓｅと行動センサ手段Ｓｍとの出力を用いて利用者の感情を推定し行動を検出する。利用者の感情と行動との組合わせを制御対象機器Ｌｄの制御内容と関係付けた制御内容記憶部１４を参照し、判定部１３が制御内容を決める。この制御内容に応じて出力部１５が生成した制御信号により制御対象機器Ｌｄが制御内容に応じて動作する。
【選択図】図１

Description

本発明は、住宅に配置した複数の制御対象機器を利用者が指示することなく、利用者の気分や行動に応じて自動的に制御する機器制御システムに関するものである。

一般に、住宅に配置した照明機器、ＡＶ機器、空調機器などの機器の制御には利用者の指示を要する。タイムスケジュールに従って制御される機器もあるが、制御内容が単純に時刻に関係付けられているだけであるから、機器の動作が利用者の気分に合わない場合も生じる。たとえば、同じ時刻であっても、リラックスしていて気分にゆとりのある快適な状態と、ストレスが溜まるなどの不快感のある状態とでは、照明の光量や色調を調節することが望ましいが、タイムスケジュールのみで機器を制御しても、この種の機器制御を行うことはできない。

一方、音楽再生に限定されたものではあるが、利用者の発話音声に含まれるキーワードとプロソディ情報（韻律情報）とに基づいて、精神的状況と肉体的状況との少なくとも一方を推定し、推定結果をあらかじめ設定したカテゴリに分類し、さらにカテゴリに属する音楽データを再生する音楽再生装置が提案されている（たとえば、特許文献１参照）。特許文献１に記載された音楽再生装置では、「眠い」、「疲れた」、「疲れていて眠い」、「イライラする」、「気分が優れない」、「楽しい」、「リラックスしている」などを判断し、その状況に応じた楽曲を自動的に選択して精神的状況や肉体的状況を改善したり、音楽を再生しないようにしたりすることが提案されている。
特開２００５−４９７７３号公報

特許文献１に記載の技術は、音楽の楽曲を選択する目的で、利用者の精神的状況や肉体的状況を推定している。つまり、単一の制御対象機器（音楽再生装置）において、制御内容（楽曲）を選択する目的で用いており、しかも楽曲を選択するだけであるから、利用者の感情の推定のみを行っている。

しかしながら、住宅内において複数種類の制御対象機器が存在する場合には、楽曲の選択に比較して数多くの制御内容があるから、精神的状況や肉体的状況の推定のみでは、制御内容を特定することができない。

たとえば、利用者の存在する場所に応じて制御対象機器を変更することが必要であり、また同じ場所に複数種類の制御対象機器が存在する場合に、どの制御対象機器に制御内容を指示すべきかは、精神的状況や肉体的状況の推定のみでは決定することができない。

本発明は上記事由に鑑みて為されたものであり、その目的は、感情の推定に加えて住宅内での利用者の行動を検出することにより各制御対象機器を的確な制御内容で自動的に制御することを可能にした機器制御システムを提供することにある。

請求項１の発明は、住宅に配置した複数種類の制御対象機器と、住宅内での利用者の行動を検出する行動検出部と、利用者の感情を推定する感情推定部と、行動検出部の検出結果と感情推定部の推定結果との組合せを各制御対象機器の制御内容と関係付けた制御内容記憶部と、特定の制御対象機器に関して行動検出部の検出結果と感情推定部の推定結果との組合せに関係付けられた制御内容を制御内容記憶部から抽出する判断部と、判断部により抽出された制御内容に応じた制御信号を制御対象機器に対して出力する出力部とを備えることを特徴とする。

なお、感情とは、主として快・不快の感情を意味しており、喜怒哀楽を推定する場合には、喜楽が快適方向の感情に相当し、怒哀が不快方向の感情に相当する。また、行動とは、一つのカテゴリに分類できる一連の動作の全体を意味し、たとえば、食事、入浴、洗面、就寝などを意味する。ただし、一つのカテゴリに分類できないが一連の動作として意味付けできる場合には行動として扱うようにしてもよい。たとえば、寝室→トイレ→玄関→リビングという経路で移動する動作を行動とみなす場合もある。特定の制御対象機器とは、あらかじめ決められた制御対象機器または行動検出部により検出された行動により決められる制御対象機器を意味する。

請求項２の発明では、請求項１の発明において、前記感情推定部は、各制御対象機器の影響が及ぶ有効領域内に存在する利用者の感情を推定し、前記特定の制御対象機器は、感情推定部により感情を推定した利用者が有効領域内に存在している制御対象機器であることを特徴とする。

請求項３の発明では、請求項１または請求項２の発明において、前記感情推定部は、利用者の身体から発する情報を検出する複数個の感情センサ手段と、感情センサ手段の出力パターンを、規定した複数種類の感情のいずれかに分類する感情分類手段とを備え、感情分類手段と前記制御内容記憶部と前記判断部と前記出力部とをコンピュータサーバである宅内サーバに備え、感情センサ手段と前記制御対象機器とは宅内サーバに通信ネットワークを介して接続されていることを特徴とする。

感情センサ手段には、利用者の顔を撮像するＴＶカメラ、利用者の体温変化を非接触で検出するサーモカメラ、利用者の音声が入力されるマイクロホンなどを用いることができ、感情分類手段は、顔の表情の変化パターンから感情を分類したり、サーモカメラにより検出した体温の変化パターンから感情を検出したり、音声に含まれる音韻情報や韻律情報（プロソディ情報）から感情を分類する。

請求項４の発明では、請求項３の発明において、前記行動検出部は、前記宅内サーバが前記制御対象機器を制御する際に送信する制御情報を行動情報に用いて利用者の行動を判定する行動判定手段を備えることを特徴とする。

請求項５の発明では、請求項３または請求項４の発明において、前記行動検出部は、住宅内の複数箇所に設置された利用者の位置を検出する行動センサ手段と、前記宅内サーバに設けられ行動センサ手段での検出情報を行動情報に用いて利用者の行動を判定する行動判定手段とを備えることを特徴とする。

請求項６の発明では、請求項３ないし請求項５のいずれかの発明において、前記行動検出部は、住宅内の規定範囲内に存在する人数を計数する人数検出手段と、前記宅内サーバに設けられ人数検出手段で検出した人数を行動情報に用いて利用者の行動を判定する行動判定手段とを備えることを特徴とする。

請求項７の発明では、請求項３ないし請求項６のいずれかの発明において、前記宅内サーバは、前記判断部により抽出した制御内容を前記制御対象機器に指示する制御期間と、制御対象機器が制御された後の利用者の感情を前記感情推定部で推定し感情の変化方向を判断する評価期間とを有し、評価期間において判断された感情の変化方向が制御期間に対して不快方向であるときに制御期間において指示した制御内容を解除して従前の状態に戻すことを特徴とする。

請求項８の発明では、請求項７の発明において、前記宅内サーバは、前記評価期間において判断された感情の変化方向が制御期間に対して快適方向であるときに規定点数を加算し感情の変化方向が制御期間に対して不快方向であるときに規定点数を減算することによって得られる感情点数を制御内容に関係付けて記憶する点数記憶部を備え、前記出力部は、前記判断部が新たな制御内容を抽出したときに当該制御内容に対して点数記憶部に記憶されている感情点数が所定点数以下であると当該制御内容に応じた制御信号を前記制御対象機器に対して出力しないことを特徴とする。

請求項９の発明では、請求項７の発明において、前記宅内サーバは、前記評価期間において判断された感情の変化方向が制御期間に対して快適方向であるときに規定点数を加算し感情の変化方向が制御期間に対して不快方向であるときに規定点数を減算することによって得られる感情点数を制御内容に関係付けて記憶する点数記憶部と、前記判断部が新たな制御内容を抽出したときに当該制御内容に対して点数記憶部に記憶されている感情点数が所定点数以下であると制御内容を利用者に提示するとともに制御内容の適否を利用者に選択させる確認手段とを備えることを特徴とする。

請求項１０の発明では、請求項９の発明において、前記確認手段は、前記制御内容記憶部から抽出した制御内容に基づいて新たな制御内容を生成して利用者に提示するとともに制御内容の適否を利用者に選択させ、提示した制御内容に対して適正である旨の応答があるときには当該制御内容に応じた制御信号を前記制御対象機器に出力することを特徴とする。

請求項１の発明の構成によれば、利用者の感情と住宅内での利用者の行動との組合せをカテゴリに分類し、分類されたカテゴリに応じた制御内容で制御対象機器を制御するから、利用者の感情だけではなく行動も用いることで制御内容を的確に判断し、利用者の指示を待たずに制御対象機器を自動的にかつ的確に制御することが可能になる。

請求項２の発明の構成によれば、制御対象機器の影響が及ぶ範囲である有効領域（たとえば、制御対象機器が映像機器であれば表示された映像を視聴できる領域が有効領域であり、制御対象機器が照明器具であれば照明器具により照明される領域が有効領域になる）に存在する利用者の感情を推定して制御対象機器を制御するから、利用者の感情に応じて制御対象機器が制御されたときに、制御対象機器の制御の影響を利用者の感情にただちに反映させることができる。

請求項３の発明の構成によれば、感情センサ手段の出力パターンから感情を分類する感情分類手段と制御内容記憶部と判断部と出力部とを宅内サーバに設け、感情センサ手段と制御対象機器とを宅内サーバに通信ネットワークを介して接続しているから、宅内サーバを宅内の１箇所に配置しながらも、感情センサ手段および制御対象機器を宅内の任意の場所に配置し、種々の制御対象機器を宅内サーバによって集中的に管理制御することが可能になる。

請求項４の発明の構成によれば、宅内サーバが制御対象機器を制御する制御情報を行動情報に用いており、宅内サーバがどの制御対象機器をどのように制御したかという制御情報を、利用者がどこで何をしているかの行動情報と読み替えて用いている。この構成を採用することにより、利用者の行動を検出するためのセンサなどを用いることなく、既存の制御対象機器の動作や制御の内容から利用者の行動を検出することができる。

請求項５の発明の構成によれば、利用者の行動を検出する行動センサ手段を設けているから、利用者の行動を正確に把握することができる。

請求項６の発明の構成によれば、人数を計数することによって、利用者の行動を検出するための情報として利用することができる。たとえば、複数人が存在しているときと１人だけが存在している場合とで、利用者が談話したり食事をしたりしているのかなどを区別する際に付加的な情報として用いることができる。

請求項７の発明の構成によれば、制御対象機器を制御した後に、その制御によって利用者が快適と感じたか不快と感じたかを判断し、不快と感じたときには制御対象機器の制御を従前の状態に戻して不快感を緩和することができる。

請求項８の発明の構成によれば、感情を数値化して感情点数で表すことにより、制御の信頼性を高めることができる。また、前回の制御時の感情点数を用いるから、過去の制御内容を参考にして利用者にとってより快適になる制御が可能になる。

請求項９の発明の構成によれば、制御対象機器を制御する制御内容が抽出され、その制御内容が過去において利用者が不快と感じた制御内容であった場合に、利用者に制御内容を確認することで利用者に制御内容の可否を選択させるから、利用者にとってはより快適になる制御が可能になる。

請求項１０の発明の構成によれば、制御内容記憶部に格納された制御内容から新たな制御内容を生成して利用者に提示し、提示した制御内容の適否を利用者に選択させるとともに、利用者が適正と判断した応答があれば、その制御内容を用いて制御対象機器を制御するから、利用者の要求を取り入れることができ、利用者にとってより快適になる制御が可能になる。

本実施形態は、図２に示すように、住宅Ｍに配置した複数種類の制御対象機器Ｌｄを通信ネットワークである宅内ネットＮＴに接続し、コンピュータサーバである宅内サーバＳｖから宅内ネットＮＴを通して制御対象機器Ｌｄを制御する構成を採用している。宅内ネットＮＴには、有線あるいは無線の伝送路を持つＬＡＮの技術や電力線搬送通信の技術を用いる。

制御対象機器Ｌｄは、その動作によって利用者の気分に影響する機器類であり、照明機器、ＡＶ機器、空調機器、電動ブラインドなどがある。

たとえば、照明機器であれば、明るさ、色味、照明の位置（天井照明、壁照明など）、配光（直接照明、間接照明など）などの違いによって、利用者は神経が弛緩したり緊張したりすることになる。また、ＡＶ機器であれば内容・種類、音量、輝度などの違い、空調機器であれば温度や湿度の違いが利用者の感情に影響する。ＡＶ機器における内容とは、音楽、語学学習のプログラム、ニュースなどを意味し、種類とは、音楽であれば、クラシックかジャズかポップスか環境音楽かなどを意味する。

宅内サーバＳｖには、宅内ネットＮＴを介して制御対象機器Ｌｄではない機器を接続してもよく、冷蔵庫や洗濯機のような機器を宅内ネットＮＴに接続することにより、それらの機器の使用状態を宅内サーバＳｖが管理したり、宅内サーバＳｖを介してそれらの機器の遠隔監視制御を行うことが可能である。

宅内ネットＮＴには、行動センサ手段Ｓｍと感情センサ手段Ｓｅも接続される。行動センサ手段Ｓｍには、種々の構成を採用することが可能であるが、ここでは、住宅Ｍの中の複数箇所に設置された人感センサ、利用者の身体を撮影するＴＶカメラ、制御対象機器Ｌｄに指示を与える操作部などを含む位置センサを想定する。人感センサ、ＴＶカメラを行動センサ手段Ｓｍとして用いるときに、人感センサ、ＴＶカメラ、制御対象機器Ｌｄを設置している位置の情報を宅内サーバＳｖに登録しておくことにより、利用者の存在する位置（部屋など）を知ることができるから、人感センサ、ＴＶカメラ、制御対象機器Ｌｄの操作部は位置センサとして機能する。行動センサ手段Ｓｍの出力は、出力時刻や制御対象機器Ｌｄの操作部の操作量なども含まれる。

感情センサ手段Ｓｅには、利用者の音声が入力されるマイクロホン、利用者の顔を撮影するＴＶカメラ、利用者の体温を検出するサーモカメラなどを想定する。感情センサ手段Ｓｅは、住宅Ｍの中であって各制御対象機器Ｌｄの動作による有効領域が及ぶ範囲に設けられる。また、利用者が装着することを許容する場合には、頭部に装着する脳波センサを感情センサ手段Ｓｅに用いてもよい。

制御対象機器Ｌｄの動作による影響が及ぶ有効領域とは、制御対象機器Ｌｄが照明機器であれば照明される領域であり、制御対象機器ＬｄがＡＶ機器であれば音を聞いたり映像を見たりすることができる領域であり、制御対象機器Ｌｄが空調機器であれば温度や湿度が調節される領域になる。有効領域は住宅Ｍ内の１つの部屋に対応することが多いが、複数の部屋に跨る場合や、部屋以外の場所である場合もある。

また、利用者の行動および感情により制御される制御対象機器Ｌｄは、当該制御対象機器Ｌｄの有効領域内に利用者が存在していなくてもよい。たとえば、制御対象機器Ｌｄを浴槽に給湯する給湯器とし、利用者がリビングにいるときの感情および行動により給湯する湯温を調節するようにしてもよい。

宅内サーバＳｖには、図１に示すように、感情センサ手段Ｓｅの出力パターン（特徴量の分布や特徴量の時間変化のパターン）を用いて複数種類の感情のいずれかに分類する感情分類手段１１が設けられる。つまり、感情センサ手段Ｓｅと感情分類手段１１とにより感情推定部が構成される。

感情分類手段１１は、感情センサ手段Ｓｅにマイクロホンを用いる場合は、音韻情報からキーワード（感情を表す語彙）を抽出し韻律情報（プロソディ情報）を加味して感情を分類する。また、顔を撮像するＴＶカメラを用いる場合には、顔認識技術により顔の表情（各部位の位置関係および履歴）から感情を分類する。あるいはまた、サーモカメラを用いる場合には、体温の変化と変化した部位とから感情を分類し、脳波センサで検出される脳波の種類から感情を分類する。

本実施形態では、感情センサ手段Ｓｅとしてマイクロホンを用いる場合を例示してあり、感情分類手段１１には、マイクロホンの出力から音韻情報を抽出し、あらかじめ辞書登録されたキーワードと照合するキーワード抽出部１１ａと、マイクロホンの出力から韻律情報を抽出する韻律情報抽出部１１ｂと、キーワード抽出部１１ａにより抽出したキーワードおよび韻律情報抽出部１１ｂにより抽出した韻律情報とを組み合わせることにより感情を分類する分類部１１ｃとを備える。

キーワード抽出部１１ａにおいて、各キーワードに感情に関係する属性（喜怒哀楽など）を付与しておき、その属性と韻律情報とを分類部１１ｃに入力すれば、分類部１１ｃにおいてあらかじめ設定された感情のいずれかに分類することができる。分類部１１ｃには、たとえばニューロコンピュータを用いることができる。

ニューロコンピュータは、教師信号付きのものと、教師信号を持たない競合学習型のものとのどちらでも用いることが可能であるが、本実施形態の構成に用いる場合には、競合学習型のものでは学習データの生成がやや面倒であるから、教師信号付きのほうが望ましい。本実施形態では、分類部１１ｃで分類される感情を、快適（満足）・不快（不満足）・普通の３分類にしてある。

行動センサ手段Ｓｍの検出出力は、行動判定手段１２に入力され利用者の行動が判定される。利用者の行動は、感情と同様に複数種類のカテゴリに分類される。行動は、意味付けされた一連の動作の全体を意味している。したがって、食事、入浴、洗面、就寝などは、それぞれ行動になる。また、寝室→トイレ→玄関→リビングという経路で移動する動作も行動になる。さらに、利用者が居る場所、時間帯、利用者の姿勢、制御対象機器Ｌｄの動作（あるいは宅内サーバＳｖから制御対象機器Ｌｄへの制御情報）の少なくとも一つの情報を行動情報に用いる場合もある。

たとえば、場所が台所であり、時間帯が午後４時〜午後６時であれば料理中という行動と判断でき、場所がリビングであり、姿勢は横になるか座っている状態で動かず、テレビが点いていると、リビングでテレビを見ているという行動と判断することができる。

行動判定手段１２は、行動センサ手段Ｓｍから得られた行動情報、または制御対象機器Ｌｄに与えた制御情報を行動情報とし、行動情報から上述のように行動を分類して判定する。つまり、行動センサＳｍと行動判定手段１２とにより行動検出部が構成される。行動の判定には、移動経路を判断する場合もあるから、単位期間内の行動履歴を記憶して行動の種類を判定する機能を行動判定手段１２に設けてもよい。この場合、単位期間（一定時間）ごとの行動履歴が記憶可能になるように行動判定手段１２に設けた行動履歴記憶手段１２ａの記憶領域を確保しておき、単位期間における行動情報と行動情報の発生時刻との組を行動履歴して登録すればよい。

感情分類手段１１で推定された感情と行動判定手段１２により判定された行動とは判断部１３に入力され、感情と行動との組合せが、各制御対象機器Ｌｄの制御内容に関係付けて記憶してある制御内容記憶部１４の記憶内容と判断部１３において照合される。つまり、制御内容記憶部１４では、表１に示すように、感情分類手段１１で分類される感情と、行動判定手段１２により判定される行動との組を、あらかじめ各制御対象機機Ｌｄの制御内容に関係付けてあり、感情分類手段１１で利用者の感情が推定され、行動判定手段１２で利用者の行動が検出されると、感情と行動との組合せが判断部１３により制御内容記憶部１４と照合される。この照合結果として、判断部１３では制御内容を取得するから、出力部１５に制御内容を与え、制御内容に対応する各制御対象機器Ｌｄへの制御信号を生成する。

制御対象機器Ｌｄは、その有効領域内において、感情分類手段１１により感情の分類がなされた利用者が存在する有効領域内に存在する場合に、出力部１５から制御信号が与えられる。表１の例において、テレビ画面に表示する映像はテレビ番組であってもよいが、あらかじめ宅内サーバＳｖに蓄積されている映像であってもよい。また、宅内サーバＳｖをインターネットのような広域通信網と接続しているときには、オンデマンドで映像データを取得してもよい。音楽についても同様である。表１の例では、制御対象機器Ｌｄとして、ＡＶ機器（テレビおよびオーディオ機器）と照明機器（ヒーリングライト）とを用いている。

上述の構成により、行動と感情との組合せから各制御対象機器Ｌｄに対して的確な制御信号を与えることができ、利用者が何らかの操作を行うことなく制御対象機器Ｌｄを自動的かつ的確に作動させることが可能になる。

ところで、行動判定手段１２において用いる行動情報には、上述したように、制御対象機器Ｌｄを制御する際に宅内サーバＳｖから送信する制御情報を用いることもできる。表１の例ではテレビを見ているという行動があり、これはテレビを点けているという情報と等しく、つまりは、宅内サーバＳｖからの制御信号によりテレビを点けた、あるいは利用者がテレビを点けたことを宅内サーバＳｖが認識しているということである。

言い換えると、制御対象機器Ｌｄを制御する制御情報は、利用者がどこで何をしているかを示す行動情報として読み替えて用いることができる。あるいは、行動センサ手段Ｓｍの個数を削減することができる。しかも、既存の制御対象機器Ｌｄの動作や制御の内容から利用者の行動を検出することができる。このように制御情報を行動情報として用いることにより、人感センサやＴＶカメラのような行動センサ手段Ｓｍを用いずに行動を検出することが可能になる。

ところで、行動履歴を行動履歴記憶手段１２ａに記憶している場合には、行動情報と行動情報の発生時刻と判定した行動との組を行動イベントとし、新たな行動情報が発生したときに行動履歴記憶手段１２ａに記憶した過去の行動イベントを参照して利用者の行動を判定することが可能である。行動履歴から行動を判定する場合、行動を行っている時間帯を考慮して、現在の行動を判断することができるから、行動をより正確に検出することができる。

上述の例では行動センサ手段Ｓｍにより１人の利用者の行動を検出する場合を想定しているが、行動センサ手段ＳｍにＴＶカメラのような撮像装置を用いる場合には、コンピュータ画像処理によって利用者の人数を知ることが可能であるから、人数を行動情報に含めてもよい。この場合、コンピュータ画像処理を行う演算処理装置（コンピュータ）は宅内サーバＳｖに設けておき、この演算処理装置が人数を計数する人数検出手段として機能する。

人数を計数すれば、たとえば、リビングに１人で居る場合であって感情が快適と推定されるときには、語学学習のプログラムのような教育的映像をテレビに表示し、リビングに複数人が居る場合であって感情が快適と推定されるときにはテレビに映画を表示するなどの選択が可能になる。あるいはまた、複数人が存在しているか１人だけが存在しているかの行動情報を、行動情報としての時間帯と組み合わせると、利用者が談話しているか食事をしたりしているのかなどを推定する情報に用いることができる。

なお、複数人が存在するときには、個々の利用者の感情を評価して合意形成を行う。合意形成には、もっとも単純には感情の変化方向について快適方向と不快方向とのどちらが多いかを多数決で評価すればよい。あるいはまた、各利用者の感情を点数化するとともに利用者に重み付けを行い、重み付き加算の結果を評価することにより合意形成してもよい。この場合には、顔認識技術などを用いて利用者を個別に認識する必要がある。

感情を推定し行動を検知することにより判断部１３が取得した制御内容は、制御内容記憶部１４にあらかじめ設定された情報であり、その制御を行っても必ずしも利用者が満足するわけではない。もちろん、語学学習のプログラムをテレビに表示するなど、制御内容によっては、利用者が望むか望まないかにかかわらず、強制性をもたせる必要がある制御内容もあるが、多くの場合、利用者の満足しない制御内容が選択されることは不都合である。

判断部１３から出力された制御内容が利用者を満足させたか否かを評価するには、制御対象機器Ｌｄの制御前後での利用者の感情の変化を評価すればよい。そのため、宅内サーバＳｖの動作に、判断部１３により抽出した制御内容を制御対象機器Ｌｄに指示する制御期間と、制御対象機器Ｌｄが制御された後の利用者の感情を感情推定部（感情センサ手段Ｓｅと感情分水手段１１）で推定し感情の変化方向を判断する評価期間とを設ける。

宅内サーバＳｖには、制御期間において推定された感情を記憶するとともに、評価期間において推定された感情と比較する制御評価部１６が設けられており、制御評価部１６では、制御期間から評価期間への感情の変化方向が不快方向であるときには、制御期間において指示した制御内容を解除して従前の状態に戻す。たとえば、制御対象機器Ｌｄである空調機器を停止から運転への移行の制御内容が制御期間に選択され評価期間では不快方向と判断されたときに、空調機器を停止させるという制御を行う。

このような動作により、自動的に選択した制御内容によって利用者の感情が不快に変化したときには従前の状態に戻すことができ、利用者が不快に感じないように制御対象機器Ｌｄを制御することが可能になる。なお、制御期間において利用者の感情が快適であったのに対して、評価期間において利用者の感情が普通に変化した場合も変化方向は不快方向であるが、この場合は不快方向とはみなさない。

感情の変化方向が快適方向か不快方向かを感情点数として点数化し、感情点数に応じて制御対象機器Ｌｄへの指示を変更してもよい。この場合、制御評価部１６では、評価期間において判断された感情の変化方向が快適方向であるときに規定点数（たとえば、１点）を加算し、感情の変化方向が不快方向であるときに規定点数（たとえば、１点）を減算することによって感情点数を求め、判断部１３が選択した制御内容に関係付けて点数記憶部１７に記憶しておく。出力部１５では、判断部１３が新たな制御内容を抽出したときにその制御内容に対して点数記憶部１７に記憶されている感情点数が所定点数以下（たとえば、負数）であるときには、その制御内容に応じた制御信号を制御対象機器Ｌｄに出力しないようにする。この動作では、前回の制御時の感情点数を用いることになるから、過去の制御内容を参考にして利用者にとってより快適になる制御が可能になる。

上述の動作例では、感情点数が所定点数以下であるときに制御対象機器Ｌｄへの制御信号を出力しないようにしているが、確認手段（表示器と操作部との組合せをマンマシンインターフェイスに持つ）１８を設けておき、感情点数が所定点数以下であるときには、確認手段１８によって、制御内容を利用者に提示するとともに制御内容の適否を利用者に選択させるようにしてもよい。利用者に制御内容を確認することで利用者に制御内容の可否を選択させるから、利用者にとってはより快適になる制御が可能になる。

さらに、確認手段１８には、感情点数が所定点数以下であるときに、制御内容記憶部１４から選択した制御内容に修正を加えて新たな制御内容を生成し、新たに生成した制御内容を利用者に提示する機能を持たせてもよい。この場合、確認手段１８で新たに生成した制御内容の適否を利用者に選択させ、提示した制御内容を承諾する（つまり、制御内容が適正であると認める）選択がなされたときに、制御内容に応じた制御信号を制御対象機器Ｌｄに出力するようにしてもよい。この動作では、利用者の要求を取り入れることができ、利用者にとってより快適になる制御が可能になる。

実施形態を示すブロック図である。 同上の概略構成図である。

符号の説明

１１ 感情分類手段（感情推定部）
１２ 行動判定手段（行動判定部）
１２ａ 行動履歴記憶手段
１３ 判断部
１４ 制御内容記憶部
１５ 出力部
１７ 点数記憶部
１８ 確認手段
Ｍ 住宅
ＮＴ 通信ネットワーク
Ｌｄ 制御対象機器
Ｓｅ 感情センサ手段（感情推定部）
Ｓｍ 行動センサ手段（行動判定部）
Ｓｖ 宅内サーバ

Claims (10)

1. 住宅に配置した複数種類の制御対象機器と、住宅内での利用者の行動を検出する行動検出部と、利用者の感情を推定する感情推定部と、行動検出部の検出結果と感情推定部の推定結果との組合せを各制御対象機器の制御内容と関係付けた制御内容記憶部と、特定の制御対象機器に関して行動検出部の検出結果と感情推定部の推定結果との組合せに関係付けられた制御内容を制御内容記憶部から抽出する判断部と、判断部により抽出された制御内容に応じた制御信号を制御対象機器に対して出力する出力部とを備えることを特徴とする機器制御システム。
2. 前記感情推定部は、各制御対象機器の影響が及ぶ有効領域内に存在する利用者の感情を推定し、前記特定の制御対象機器は、感情推定部により感情を推定した利用者が有効領域内に存在している制御対象機器であることを特徴とする請求項１記載の機器制御システム。
3. 前記感情推定部は、利用者の身体から発する情報を検出する複数個の感情センサ手段と、感情センサ手段の出力パターンを、規定した複数種類の感情のいずれかに分類する感情分類手段とを備え、感情分類手段と前記制御内容記憶部と前記判断部と前記出力部とをコンピュータサーバである宅内サーバに備え、感情センサ手段と前記制御対象機器とは宅内サーバに通信ネットワークを介して接続されていることを特徴とする請求項１または請求項２記載の機器制御システム。
4. 前記行動検出部は、前記宅内サーバが前記制御対象機器を制御する際に送信する制御情報を行動情報に用いて利用者の行動を判定する行動判定手段を備えることを特徴とする請求項３記載の機器制御システム。
5. 前記行動検出部は、住宅内の複数箇所に設置された利用者の位置を検出する行動センサ手段と、前記宅内サーバに設けられ行動センサ手段での検出情報を行動情報に用いて利用者の行動を判定する行動判定手段とを備えることを特徴とする請求項３または請求項４記載の機器制御システム。
6. 前記行動検出部は、住宅内の規定範囲内に存在する人数を計数する人数検出手段と、前記宅内サーバに設けられ人数検出手段で検出した人数を行動情報に用いて利用者の行動を判定する行動判定手段とを備えることを特徴とする請求項３ないし請求項５のいずれか１項に記載の機器制御システム。
7. 前記宅内サーバは、前記判断部により抽出した制御内容を前記制御対象機器に指示する制御期間と、制御対象機器が制御された後の利用者の感情を前記感情推定部で推定し感情の変化方向を判断する評価期間とを有し、評価期間において判断された感情の変化方向が制御期間における感情に対して不快方向であるときに制御期間において指示した制御内容を解除して従前の状態に戻すことを特徴とする請求項３ないし請求項６のいずれか１項に記載の機器制御システム。
8. 前記宅内サーバは、前記評価期間において判断された感情の変化方向が制御期間に対して快適方向であるときに規定点数を加算し感情の変化方向が制御期間に対して不快方向であるときに規定点数を減算することによって得られる感情点数を制御内容に関係付けて記憶する点数記憶部を備え、前記出力部は、前記判断部が新たな制御内容を抽出したときに当該制御内容に対して点数記憶部に記憶されている感情点数が所定点数以下であると当該制御内容に応じた制御信号を前記制御対象機器に対して出力しないことを特徴とする請求項７記載の機器制御システム。
9. 前記宅内サーバは、前記評価期間において判断された感情の変化方向が制御期間に対して快適方向であるときに規定点数を加算し感情の変化方向が制御期間に対して不快方向であるときに規定点数を減算することによって得られる感情点数を制御内容に関係付けて記憶する点数記憶部と、前記判断部が新たな制御内容を抽出したときに当該制御内容に対して点数記憶部に記憶されている感情点数が所定点数以下であると制御内容を利用者に提示するとともに制御内容の適否を利用者に選択させる確認手段とを備えることを特徴とする請求項７記載の機器制御システム。
10. 前記確認手段は、前記制御内容記憶部から抽出した制御内容に基づいて新たな制御内容を生成して利用者に提示するとともに制御内容の適否を利用者に選択させ、提示した制御内容に対して適正である旨の応答があるときには当該制御内容に応じた制御信号を前記制御対象機器に出力することを特徴とする請求項９記載の機器制御システム。

Images