JPH1124603A - 情報表示装置及び情報収集装置 - Google Patents
情報表示装置及び情報収集装置Info
- Publication number
- JPH1124603A JPH1124603A JP9194744A JP19474497A JPH1124603A JP H1124603 A JPH1124603 A JP H1124603A JP 9194744 A JP9194744 A JP 9194744A JP 19474497 A JP19474497 A JP 19474497A JP H1124603 A JPH1124603 A JP H1124603A
- Authority
- JP
- Japan
- Prior art keywords
- information
- display
- line
- sight
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000007 visual effect Effects 0.000 claims abstract description 13
- 238000001514 detection method Methods 0.000 claims description 51
- 238000012790 confirmation Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000000605 extraction Methods 0.000 description 5
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
Landscapes
- Eye Examination Apparatus (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
Abstract
ムを提供するとともに、特に、所定の情報に対する人間
の視認頻度を把握することができる表示装置や情報収集
装置を提供する。 【解決手段】 表示部18の前方に向けてカメラ10が
配置され、このカメラ10により得られた画像に基づ
き、視線検出部12が人間の視線を検出する。そして、
表示部18に注視点が検出されたら、その注視点位置に
所定の情報を表示する。また、注視点が検出されたら、
そのタイミングで所定の情報を表示するようにしてもよ
い。また、注視点が検出されたら、その注視点の検出数
をカウントして収集情報記憶部16に記憶させる。
Description
する装置に関するものであり、特に、所定の情報を表示
する表示装置及び所定の情報を収集する情報収集装置に
関するものである。
が種々開発され、視線の注視位置にカーソル等を表示す
ること等が行われている。視線検出方法には、いわゆる
非接触型と接触型とに分類されるが、非接触型の代表例
としては、以下の2つがある。その1つは、特開平8−
322796号に示すものである。これは、人間の顔部
分を撮影して得た画像データに対してエッジ抽出処理を
行う。そして、目部分の切出し処理を行った上で、目に
おける黒目の位置を水平方向、垂直方向のそれぞれにつ
いて特徴抽出する。そして、水平方向標準パターンと垂
直方向標準パターンとのマッチングを行い、視線方向を
算出するのである。また、他の1つの例としては、特開
平5−205030号に示すものがある。これは、人間
の目に近赤外光を照射することにより、該近赤外光が人
間の網膜で反射する際の反射角度を算出して、視線方向
を算出するものである。また、表示装置には種々のもの
が存在し、例えば、液晶プロジェクタや大型のプラズマ
ディスプレイのような大型の表示装置が存在する。そし
て、このような大型の表示装置に所定の広告用のコマー
シャルを流すことが行われている。
装置を有効に利用した装置やシステムが要望されてい
た。また、従来の大型の表示装置等においてコマーシャ
ルを流す場合に、近くの人が見ているかどうかが不明で
あり、宣伝効果を十分把握できないという問題があっ
た。そこで、本発明は、視線検出装置を利用した新たな
装置やシステムを提供するとともに、特に、人間の視認
頻度を把握することができる表示装置や情報収集装置を
提供することを目的とするものである。
決するために創作されたものであって、第1には、所定
の情報を表示する情報表示装置であって、情報を表示す
る表示手段と、視線を検出する視線検出手段と、該視線
検出手段の検出結果に基づき、表示手段への表示を制御
する表示制御手段とを有することを特徴とする。この第
1の構成の情報表示装置においては、上記視線検出手段
が視線を検出する。そして、この検出結果に基づき、表
示制御手段が、上記表示手段への表示を制御する。よっ
て、表示手段を見る人物の視線に応じて表示を制御する
ので、該人物に確実に情報を伝えることができる。ま
た、第2には、上記第1の構成において、上記視線検出
手段が、該表示手段の視認可能位置の少なくとも一部を
撮影する撮影手段を有し、上記視線検出手段は、該撮影
手段により撮影された画像により視線を検出することを
特徴とする。
において、上記表示制御手段が、視線検出手段の検出結
果に基づき、表示される所定の情報の表示位置を制御す
ることを特徴とする。よって、その視線の人物の見やす
い位置に情報を表示する等して情報を確実に伝えること
ができる。また、第4には、上記第3の構成において、
上記表示制御手段が、検出された視線が上記表示手段上
のいずれかの位置に所定時間停留した注視点が検出され
た場合に、該注視点位置に所定の情報を表示することを
特徴とする。よって、注視点位置に情報を表示するの
で、確実にその視線の人物に情報を伝えることができ
る。
いずれかの構成において、上記表示制御手段が、視線検
出手段の検出結果に基づき、所定の情報の上記表示手段
への表示タイミングを制御することを特徴とする。よっ
て、表示タイミングを制御することにより、確実に情報
を伝えることができる。また、第6には、上記第1から
第5までのいずれかの構成において、上記表示制御手段
が、上記表示手段の表示画面と視線が検出された人物と
の間の距離を推定し、その距離に従い、表示する情報の
表示領域の大きさを制御することを特徴とする。よっ
て、表示手段からの距離が大きくなればなるほど表示領
域の大きさを大きくすることによりその視線の人物にと
ってその情報を見やすくすることができる。
いずれかの構成において、上記情報表示装置が、さら
に、上記視線検出手段により検出された視線に基づき、
所定の情報を収集する情報収集手段を有することを特徴
とする。よって、表示手段に表示された情報を何人の者
が見たか等の情報を得ることができる。また、第8に
は、上記第7の構成において、上記情報収集手段が、検
出された視線が所定時間停留した注視点の数をカウント
することを特徴とする。
報収集装置であって、任意の被写体を撮影する撮影手段
と、該撮影手段により撮影された画像により、視線を検
出する視線検出手段と、該視線検出手段の検出結果に基
づき、所定の情報を収集する情報収集手段とを有するこ
とを特徴とする。この第9の構成の情報収集装置におい
ては、撮影手段が撮影した画像により、視線検出手段が
視線を検出する。そして、情報収集装置が、その検出結
果に基づき、所定の情報を収集する。よって、上記撮影
手段の付近に所定の情報等を視認可能に配置することに
より、その情報を何人の数が見たか等の情報を得ること
ができる。
例を図面を利用して説明する。本発明に基づく情報表示
装置Aは、図1に示されるように構成され、カメラ10
と、視線検出部12と、提示情報記憶部14と、収集情
報記憶部16と、表示部18と、判断部20とを有して
いる。
10は、上記表示部18の視認可能位置の少なくとも一
部を撮影するものであり、主に表示部18の前方部分を
撮影するものである。このカメラ10は、CCDカメラ
等により構成される。また、上記視線検出部12は、上
記カメラ10により得られた画像データに人間の顔があ
り、表示部18の方を向いている場合に、その人の視線
方向を検出するものである。具体的には、撮影して得ら
れた画像データに対してエッジ抽出を行い、人間の顔が
写っている場合に、その目における黒目の方向を検出す
ることにより行う。詳しくは後述する。視線方向を検出
すると、この視線方向についての視線方向データを判断
部20に出力する。この視線検出部12は、実際には、
視線検出を行うためのプログラムを格納した記憶部と該
プログラムに従い所定の処理を行うCPU等から構成さ
れる。
示部18に表示するための情報を格納するものであり、
例えば、複数のコマーシャル用の映像等が格納されてい
る。また、上記収集情報記憶部16は、収集された情報
を格納するものである。また、表示部18は、所定の情
報を表示するためのものであり、液晶プロジェクタやプ
ラズマディスプレイ等その種類は任意である。
12により検出された視線方向に基づき、提示情報記憶
部14に記憶された情報の上記表示部18への表示を制
御し、また、上記検出された注視点に基づき収集された
所定の情報を収集情報記憶部16に格納するものであ
る。この判断部20は、表示部18への表示制御を行う
ためのプログラムや収集情報記憶部16へ所定の情報を
格納するためのプログラム等を格納する記憶部や演算処
理を行うためのCPU等により構成される。詳しい制御
の方法については後述する。この判断部20は表示制御
手段として機能する。また、上記収集情報記憶部16と
判断部20とは情報収集手段として機能する。上記視線
検出部12におけるCPUとこの判断部20におけるC
PUは1つのCPUにより構成してもよい。
カ等の音声出力部と、該音声出力部から出力するための
音声データを格納する音声データ格納部とを判断部20
に接続し、判断部20が視線検出部12からの検出結果
に従い、出力される音声を制御するようにしてもよい。
例を示すと、図2に示すように構成され、表示部18は
大型のディスプレイとして構成され、上記表示部18の
上部には、カメラ10が設置されている。この情報表示
装置Aは所定の場所に固定されている。なお、上記カメ
ラ10と上記視線検出部12とが上記視線検出手段とし
て機能する。なお、本実施例では、上記のように視線検
出手段をカメラ10と視線検出部12とにより構成する
ものとして説明したが、これには限られず、人物の視線
を検出できるものであれば他の構成としてもよい。
ついて、図3等を使用して説明する。まず、カメラ10
が所定の被写体を撮影する。本実施例の場合には、情報
表示装置Aが固定されているので、カメラ10のレンズ
系が向けられた所定の被写体を撮影する。すると、この
カメラ10により撮影された画像は視線検出部12に送
られる。視線検出部12では、撮影された画像にエッジ
抽出処理が行われる(S10)。そして、エッジ抽出処
理後に、まず、人の顔があるかどうかが検出される(S
11)。つまり、エッジ抽出処理が行われた画像と標準
パターン画像とを比較して、人の顔があるかどうかを推
定する。なお、人の顔の判定においては、肌色情報をも
考慮して行うようにしてもよい。フレーム間の差分画像
から移動した物体を検知し、その物体と標準パターン画
像とを比較して人の顔を判定するようにしてもよい。
検出する(S12)。ここでは、視線方向を検出する。
すなわち、エッジ抽出することにより得られたエッジ情
報から、検出された人の顔における目の垂直方向の位置
と水平方向の位置とを推定して目の部分の画像を切り出
し、この切り出した画像と濃淡画像とから目における黒
目の位置を水平方向及び垂直方向に抽出する。その後、
黒目の水平方向標準パターンと垂直方向標準パターンと
それぞれ比較して、視線方向を検出するのである。
8を向いているかどうかが判定される(S13)。つま
り、視線の空間位置を検出する。すなわち、撮影された
画像におけるその人の目の空間座標位置と、検出された
視線方向とにより視線の空間位置を検出し、その人が表
示部18の範囲を見ているかどうかを判定する。なお、
上記目の空間座標位置の検出は次のように行う。つま
り、図2に示すX方向、Y方向の座標については撮影さ
れた2次元画像における座標により検出可能であり、ま
た、Z方向の座標については、例えば、顔の大きさから
推定する方法や距離センサにより検知する方法等があ
る。なお、このZ方向の座標については、所定の光を照
射し、顔や目等に反射して帰ってくるまでの時間により
算出してもよい。
向とに基づき、空間内における視線の位置が決定される
ので、その視線が表示部18の表示面を通過するかどう
かを判定する。具体的には、視線が、表示部18の範囲
の角部として予め定められた座標(X1,Y1)、(X
2,Y1)、(X1,Y2)、(X2,Y2)の範囲内
を通過するかどうかにより判定する。具体的には、図2
における甲氏と乙氏は表示部18を見ていることにな
り、丙氏は表示部18を見ていないことになる。上記ス
テップS10〜ステップS13までの処理は、視線検出
部12により行われる。
いる場合には、注視点が検出されるかどうかを検出する
(S14)。つまり、表示部18のいずれかの点を向い
た視線が一定時間停留しているかどうかにより判定す
る。つまり、視線が表示部18の方を向いていたとして
も、単に視線を向けただけであるとか、表示部18以外
の別の場所に視線を向けるために単に視線方向が通過し
ただけの場合等には、表示部18のある箇所を視認して
いることにはならないため、所定時間視線方向が表示部
18上の所定位置に固定されているかどうかを判定す
る。
定の表示を表示部18に行う(S15)。この表示部1
8への所定の表示の態様については後述する。また、上
記のように注視点が検出された場合には、それをカウン
トする(S16)。カウントしたカウント数の情報は収
集情報記憶部16に格納される。
は上記の方法には限られず、他の方法であってもよい。
例えば、人の顔があるかどうかの検出は上記と同様の方
法で行い、視線方向の検出については、近赤外光を照射
してその反射角度に基づき算出するようにしてもよい。
また、上記の方法とこの近赤外光による方法とを併用し
てもよい。また、上記Z方向の座標は、近赤外光が反射
して戻ってくる到達時間により検出してもよい。また、
上記の説明では、視線が検出され、その中から注視点を
検出するものとして説明したが、これには限られず、視
線検出部12が上記注視点を視線として検出し、この視
線が検出された場合に所定の表示を表示部18に行うよ
うにしてもよい。また、注視点が検出された場合に限ら
ず、単に視線検出部12により視線が検出された場合に
も、所定の情報を表示し(S15)、また、カウントを
行うようにしてもよい(S16)。
示についてその具体例を説明する。つまり、図3のステ
ップS15についてさらに詳述する。まず、第1の具体
例について説明する。表示部18には、種々のコマーシ
ャル映像が表示されている。例えば、A社のコマーシャ
ルが放映されたら、次は、B社のコマーシャルを放映
し、該B社のコマーシャルが放映されたら次にはC社の
コマーシャルを放映するというように行う。
氏が表示部18を見て、注視点aが検出されたものとす
る。すると、図4に示すように、この注視点aを中心と
した表示エリアa−1に、視認者に所定の情報を表示す
る。つまり、注視点aが検出されたタイミングで、該所
定の情報を表示する。この所定の情報とは、注視者に最
も印象付けたい情報、例えば、商品名等が好ましい。つ
まり、この表示される所定の情報とは、表示部18全体
に表示されている映像に上書きする形で表示されること
になる。従って、音声は表示部18全体に表示されてい
る映像に合わせた音声が出力されており、表示エリアa
−1に表示される情報独自の音声は出力されない。同じ
ように、乙氏が表示部18を見て、注視点bが検出され
た場合には、この注視点bを中心とする表示エリアb−
1に同じように所定の情報を表示する。なお、注視点が
検出されなくなったら、表示エリアへの表示は停止す
る。つまり、上記の例で甲氏が視線を移動して注視点a
が移動したら表示エリアa−1への表示は停止する。な
お、該甲氏が移動した視線が他の位置で所定時間固定し
て注視点a’が検出された場合には、再度この注視点
a’の位置に上記所定の情報を表示する。なお、同じ人
の視線が表示部18上を移動する場合には、上記所定の
情報を視線の動きに追随して移動するようにしてもよ
い。このようにすれば、注視者に商品名等をより深く印
象付けることができ、宣伝効果を高めることができる。
第2具体例においては、注視点が検出された場合に、表
示を開始するものである。例えば、通常は表示部18に
背景画、風景画等の映像を流しておき(何も表示しない
状態でもよい)、ある人の注視点が検出された場合に
は、表示部18全体に所定の情報を放映する。つまり、
甲氏が表示部18の前に来て表示部18を見て、注視点
aが検出された場合には、表示部18全体に所定のコマ
ーシャル映像を表示する。例えば、図5に示すように、
A社のコマーシャルを出力し、注視点aが検出される限
り、続けて、B社のコマーシャルを出力する。音声とし
ても、このコマーシャル映像に対応した音声を出力す
る。そして、甲氏が視線を移動させたり、甲氏自身が移
動する等して注視点が検出されなくなった場合には、表
示部18への表示や音声の出力を停止する。
り表示されたコマーシャル映像が出力されている最中
に、他の乙氏の注視点が検出された場合には、甲氏の注
視点aが検出されている限り、注視点aが検出されたタ
イミングで出力を行う。よって、図5に示すように、注
視点aが検出されている間に他の注視点bが検出されて
も、注視点aの離脱よりも先に注視点bが離脱してしま
った場合には、注視点aが検出されたタイミングでその
まま出力されることになる。また、甲氏の注視点aが離
脱した場合には、その時、他の注視点が検出されれば、
再度出力を開始する。その際には、最後まで出力されな
かったコマーシャル(図5の場合にはB社のコマーシャ
ル)を最初から出力してもよいし、一方、A社のコマー
シャルから開始してもよい。
より表示されたコマーシャル映像が出力されている最中
に、他の人の注視点が検出された場合の処理として以下
のようにしてもよい。つまり、1つの注視点が検出され
ている間は、表示部18全体にコマーシャル映像を表示
し、他の注視点がさらに検出された場合には、表示エリ
アを縮小して表示するのである。つまり、甲氏の注視点
aのみが検出されている場合には、表示部18全体にコ
マーシャル映像を表示し、甲氏の注視点aが検出されて
いる間に乙氏の注視点bが検出された場合には、甲氏の
ために表示されていた映像を注視点aを中心とする表示
エリアa−2に縮小して表示し、別に乙氏の注視点bを
中心とする表示エリアb−2に乙氏のためのコマーシャ
ル映像の表示を開始する。なお、この場合には、表示エ
リアa−2への表示と表示エリアb−2への表示とは別
々のタイミングで行われるので、音声を出力しない方が
好ましい。
第3具体例においては、上記第2具体例と同様に注視点
が検出された場合に表示を開始するものであるが、以下
の点で異なる。すなわち、ある人の注視点が検出された
場合には、その注視点を中心とする所定範囲の表示エリ
アに所定の情報を表示する。例えば、通常は表示部18
に背景画、風景画等の映像を流しておき、甲氏の注視点
aが検出された場合には、この注視点aを中心とする表
示エリアa−3にコマーシャル映像を表示する。そし
て、他の乙氏の注視点bが検出された場合には、この注
視点bを中心とする表示エリアb−3を中心とする表示
エリアb−3に表示を行う。各表示エリアへの表示は、
各注視点が検知されたタイミングで行われることにな
る。
示エリアへの表示は停止する。つまり、上記の例で甲氏
が視線を移動して注視点aが移動したら表示エリアa−
3への表示は停止する。また、上記第1具体例と同様
に、該甲氏が移動した視線が他の位置で所定時間固定し
て注視点a’が検出された場合には、再度この注視点
a’の位置に上記所定の情報を表示する。なお、同じ人
の視線が表示部18上を移動する場合には、上記所定の
情報を視線の動きに追随して移動するようにしてもよ
い。
ば、表示タイミングを制御して、注視点が検出された時
点で表示を開始するので、注視者に確実に情報を伝える
ことができる。なお、上記各具体例において、注視点に
よって別々の表示エリアに情報を表示する場合に、ある
注視点の表示エリアが他の注視点の表示エリアと重なる
場合には、表示エリアが重ならないように表示をするこ
とが好ましい。例えば、上記第1具体例の場合に、図8
に示すように、注視点aと注視点aよりも後から検出さ
れた注視点cとが検出され、注視点aの表示エリアa−
1と注視点cの表示エリアc−1とが重なる場合には、
後から検出された注視点cの表示エリアを表示エリアa
−1からずらして表示する。
って別々の表示エリアに情報を表示する場合に、表示部
18の表示画面との距離に応じて表示エリアの画角を変
化させるようにしてもよい。つまり、表示部18の表示
画面との距離が長くなるに従い表示エリアの大きさを大
きくするのである。例えば、上記第3具体例の場合にお
いて、甲氏と表示部18の表示画面との距離がXで、乙
氏と表示部18の表示画面との距離がYの場合には、該
距離に応じて画角を制御する。つまり、上記距離Xの方
が距離Yよりも長い場合には、図9に示すように、甲氏
の注視点aを中心とする表示エリアa−3を乙氏の注視
点bを中心とする表示エリアb−3’よりも大きくする
のである。なお、上記甲氏や乙氏等の人物と表示画面と
の距離は、撮影された画像におけるその人物の身長や顔
の大きさから推定する方法が考えられる。
線が検出された場合には、注視位置に拘らずに、表示部
18の真ん中に1つの画像を表示するようにしてもよ
い。また、注視点の最も多い位置に画像を表示するよう
にしてもよい。以上のように、上記各具体例によれば、
注視点が検出されると、この注視点の検出に対応して所
定の情報を表示するので、注視者に効果的に情報を伝達
することができる。
て説明する。つまり、図3のステップS16についてさ
らに詳述する。このカウントは、注視点が検出された時
点でカウントしていく。よって、各コマーシャルが順次
表示される状態で注視点のカウントをしていけば、どの
程度の人数がそのコマーシャルを見ているかを知ること
ができる。つまり、図10に示すように、A社のコマー
シャルが表示されている間の注視点の数をカウントし、
また、B社のコマーシャルが表示されている間の注視点
の数をカウントするというように、順次カウントして上
記収集情報記憶部16に格納していけば各コマーシャル
を見ている人数を把握して情報を収集することができ
る。
て注視点が検出され、その後、その人が若干視線を表示
部18上の他の位置にずらして所定時間その位置に視線
を固定した場合には、新たに注視点が検出されることに
なるが、これは前回の注視点とは別の注視点としてカウ
ントする。ただし、その人の視線の移動を追跡したり、
また、その視線の人物の顔のデータを保存しておく等し
て同じ者の視線であることが分かる場合には、全体とし
て1つの注視点としてカウントしてもよい。
数の画像を表示して、注視点をカウントすることにより
情報を収集することができる。例えば、図11に示すよ
うに、表示部18にA商品の画像S1と、B商品の画像
S2と、C商品の画像S3とを表示する。そして、表示
部18を見る人の注視点がA商品の画像S1、B商品の
画像S2、C商品の画像S3のいずれにあるかをカウン
トする。そして、各商品ごとの注視点のカウント数を収
集情報記憶部16に格納していく。これにより、どの商
品に人気があるか等の情報を効果的に得ることができ
る。
いて説明する。本実施例における情報収集装置Bは、図
12に示すように、カメラ110と、視線検出部112
と、収集情報記憶部116と、判断部120とを有して
いる。ここで、上記カメラ110は、上記情報表示装置
Aと同様に、所定の被写体を撮影するものである。ま
た、上記視線検出部112は、人間の視線方向や注視点
を検出する。さらに、上記収集情報記憶部116は、収
集された情報を格納するものである。さらに、上記判断
部120は、視線検出部112により検出された注視点
により所定の情報を収集情報記憶部116に格納するも
のであり、上記収集情報記憶部116へ所定の情報を格
納するためのプログラム等を格納する記憶部や演算処理
を行うためのCPU等により構成される。
び使用状態について説明する。この情報収集装置Bにお
けるカメラ110は、例えば、図13に示すように、シ
ョーウインドウに設置される。このそして、判断部12
0には、ショーウインドウには各種商品が陳列され、判
断部120には各商品に対応する注視点の座標領域につ
いての情報が保持され、ある人の注視点によりその注視
点がその座標領域内にあるかどうかを判断することによ
り、その人がその商品を注視しているかどうかを知るこ
とができるようになっている。
置Bの動作について説明すると、図3に示すステップS
10〜S12に示す場合と同様に、人間の視線方向が検
出されたら、その視線方向が各商品についての座標領域
内を向いているかどうかが判定される。そして、いずれ
かの商品の座標領域内を向いている場合には、注視点が
検出されるかどうかが判定され、注視点が検出される場
合には、その商品についてカウントを行う。例えば、A
商品についての注視点の座標範囲内に注視点が検出され
た場合には、ある人がA商品を注視しているとして、収
集情報記憶部116におけるA商品についてのカウント
数を1加算する。つまり、注視点をグループ化して各グ
ループごとにカウントしていくのである。
を検出することにより、どの商品に人気があるか等の情
報を効果的に得ることができる。なお、上記の説明にお
いて、注視点が検出された場合として説明している箇所
は、単なる視線が検出された場合にも適用するようにし
てもよい。
示装置によれば、表示手段を見る人物の視線に応じて表
示を制御するので、該人物に確実に情報を伝えることが
できる。
置によれば、視線検出手段の検出結果に基づき、表示さ
れる所定の情報の表示位置を制御するので、その視線の
人物の見やすい位置に情報を表示する等して情報を確実
に伝えることができる。また、特に、請求項5に記載の
情報表示装置によれば、視線検出手段の検出結果に基づ
き、所定の情報の上記表示手段への表示タイミングを制
御するので、確実に情報を伝えることができる。また、
特に、請求項6に記載の情報表示装置によれば、表示手
段からの距離が大きくなればなるほど表示領域の大きさ
を大きくすることによりその視線の人物にとってその情
報を見やすくすることができる。
置によれば、上記視線検出手段により検出された視線に
基づき、所定の情報を収集する情報収集手段を有するの
で、表示手段に表示された情報を何人の者が見たか等の
情報を得ることができる。また、請求項9に記載の情報
収集装置によれば、上記撮影手段の付近に所定の情報等
を視認可能に配置することにより、その情報を何人の数
が見たか等の情報を得ることができる。
示すブロック図である。
その動作状態を説明するための説明図である。
ャートである。
説明図である。
図である。
説明図である。
説明図である。
説明図である。
説明図である。
明図である。
す説明図である。
を示すブロック図である。
状態を説明するための説明図である。
Claims (9)
- 【請求項1】 所定の情報を表示する情報表示装置であ
って、 情報を表示する表示手段と、 視線を検出する視線検出手段と、 該視線検出手段の検出結果に基づき、表示手段への表示
を制御する表示制御手段とを有することを特徴とする情
報表示装置。 - 【請求項2】 上記視線検出手段が、該表示手段の視認
可能位置の少なくとも一部を撮影する撮影手段を有し、
上記視線検出手段は、該撮影手段により撮影された画像
により視線を検出することを特徴とする請求項1に記載
の情報表示装置。 - 【請求項3】 上記表示制御手段が、視線検出手段の検
出結果に基づき、表示される所定の情報の表示位置を制
御することを特徴とする請求項1又は2に記載の情報表
示装置。 - 【請求項4】 上記表示制御手段が、検出された視線が
上記表示手段上のいずれかの位置に所定時間停留した注
視点が検出された場合に、該注視点位置に所定の情報を
表示することを特徴とする請求項3に記載の情報表示装
置。 - 【請求項5】 上記表示制御手段が、視線検出手段の検
出結果に基づき、所定の情報の上記表示手段への表示タ
イミングを制御することを特徴とする請求項1又は2又
は3又は4に記載の情報表示装置。 - 【請求項6】 上記表示制御手段が、上記表示手段の表
示画面と視線が検出された人物との間の距離を推定し、
その距離に従い、表示する情報の表示領域の大きさを制
御することを特徴とする請求項1又は2又は3又は4又
は5に記載の情報表示装置。 - 【請求項7】 上記情報表示装置が、さらに、上記視線
検出手段により検出された視線に基づき、所定の情報を
収集する情報収集手段を有することを特徴とする請求項
1又は2又は3又は4又は5又は6に記載の情報表示装
置。 - 【請求項8】 上記情報収集手段が、検出された視線が
所定時間停留した注視点の数をカウントすることを特徴
とする請求項7に記載の情報表示装置。 - 【請求項9】 所定の情報を収集する情報収集装置であ
って、 任意の被写体を撮影する撮影手段と、 該撮影手段により撮影された画像により、視線を検出す
る視線検出手段と、 該視線検出手段の検出結果に基づき、所定の情報を収集
する情報収集手段とを有することを特徴とする情報収集
装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP19474497A JP3579218B2 (ja) | 1997-07-04 | 1997-07-04 | 情報表示装置及び情報収集装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP19474497A JP3579218B2 (ja) | 1997-07-04 | 1997-07-04 | 情報表示装置及び情報収集装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1124603A true JPH1124603A (ja) | 1999-01-29 |
| JP3579218B2 JP3579218B2 (ja) | 2004-10-20 |
Family
ID=16329516
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP19474497A Expired - Fee Related JP3579218B2 (ja) | 1997-07-04 | 1997-07-04 | 情報表示装置及び情報収集装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3579218B2 (ja) |
Cited By (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004173104A (ja) * | 2002-11-21 | 2004-06-17 | Nippon Telegr & Teleph Corp <Ntt> | 画像切り出し装置、画像切り出し方法およびプログラム |
| JP2006048171A (ja) * | 2004-07-30 | 2006-02-16 | Toyota Motor Corp | 状態推定装置、状態推定方法、及びそれを用いた情報提供装置、情報提供方法 |
| JP2006293786A (ja) * | 2005-04-12 | 2006-10-26 | Biophilia Kenkyusho Kk | 視線入力装置を備えた市場調査用機器 |
| JP2008226161A (ja) * | 2007-03-15 | 2008-09-25 | Nippon Signal Co Ltd:The | 注視認識システム |
| JP2009193499A (ja) * | 2008-02-18 | 2009-08-27 | Hitachi Ltd | 注視商品データ取得方法および商品販売管理システム |
| JP2009289233A (ja) * | 2008-06-02 | 2009-12-10 | Hitachi Ltd | 商品販売装置、商品販売管理システム、顧客視線データ取得方法および顧客注視商品データ取得方法 |
| JP2009545051A (ja) * | 2006-07-28 | 2009-12-17 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 注視された商品の情報表示のための注視インタラクション |
| JP2010039094A (ja) * | 2008-08-04 | 2010-02-18 | Seiko Epson Corp | 音声出力制御装置、音声出力装置、音声出力制御方法、及び、プログラム |
| JP2010102235A (ja) * | 2008-10-27 | 2010-05-06 | V-Sync Co Ltd | 電子広告システム |
| JP2011033993A (ja) * | 2009-08-05 | 2011-02-17 | Sharp Corp | 情報提示装置、および情報提示方法 |
| JP2011053611A (ja) * | 2009-09-04 | 2011-03-17 | Ricoh Co Ltd | 電子掲示板装置及び制御プログラム |
| KR20110029123A (ko) * | 2008-05-14 | 2011-03-22 | 코닌클리즈케 필립스 일렉트로닉스 엔.브이. | 상호작용 시스템 및 방법 |
| JP2011077913A (ja) * | 2009-09-30 | 2011-04-14 | Nhk Service Center Inc | 情報伝達処理装置及び情報伝達処理システム並びにこれらに用いるコンピューター・プログラム |
| JP2011227510A (ja) * | 2011-06-13 | 2011-11-10 | Hitachi Ltd | ディスプレイ制御装置、ディスプレイ制御方法、ディスプレイ制御プログラム、およびディスプレイ |
| JP2012022632A (ja) * | 2010-07-16 | 2012-02-02 | Canon Inc | 情報処理装置およびその制御方法 |
| JP2013011669A (ja) * | 2011-06-28 | 2013-01-17 | Kyocera Corp | 電子表示装置 |
| JP2013055595A (ja) * | 2011-09-06 | 2013-03-21 | Omron Corp | 端末装置、コンテンツ表示システム、プログラム、データ構造およびコンテンツ配信サーバ |
| JP2013088291A (ja) * | 2011-10-18 | 2013-05-13 | Fuji Electric Co Ltd | 目視検査支援装置及び目視検査支援装置の制御方法 |
| JP2013248177A (ja) * | 2012-05-31 | 2013-12-12 | Jvc Kenwood Corp | 視線検出装置および視線検出方法 |
| JP2014153666A (ja) * | 2013-02-13 | 2014-08-25 | Mitsubishi Electric Corp | 広告提示装置 |
| JP2015043047A (ja) * | 2013-08-26 | 2015-03-05 | 大日本印刷株式会社 | 視線解析手段を有する表示媒体 |
| JP2017041229A (ja) * | 2016-06-08 | 2017-02-23 | 株式会社コロプラ | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム |
| JP2017040970A (ja) * | 2015-08-17 | 2017-02-23 | 株式会社コロプラ | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム |
| JP2019039999A (ja) * | 2017-08-24 | 2019-03-14 | 株式会社Jvcケンウッド | 表示装置及び表示方法 |
| WO2019163599A1 (ja) * | 2018-02-22 | 2019-08-29 | ソニー株式会社 | 情報処理装置、移動装置、および方法、並びにプログラム |
| KR20200029714A (ko) * | 2018-09-11 | 2020-03-19 | 현대자동차주식회사 | 감정 분류 장치 및 감정 분류 장치의 제어 방법 |
| JP2025031802A (ja) * | 2021-06-07 | 2025-03-07 | ナブテスコ株式会社 | 自動ドアの画像制御装置 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62245183A (ja) * | 1986-04-04 | 1987-10-26 | アプライド サイエンス グル−プ インコ−ポレ−テツド | テレビ・コマ−シヤルの視聴時間の分布を発生させる方法およびシステム |
| JPH0591394A (ja) * | 1991-09-26 | 1993-04-09 | Canon Inc | ビデオカメラ |
| JPH05204526A (ja) * | 1992-01-23 | 1993-08-13 | Nec Corp | 視点監視入力装置 |
| JPH0713497A (ja) * | 1993-06-14 | 1995-01-17 | Atr Tsushin Syst Kenkyusho:Kk | 画像表示装置 |
| JPH0744110A (ja) * | 1993-08-03 | 1995-02-14 | Nippon Telegr & Teleph Corp <Ntt> | 視線適応型表示装置 |
| JPH07140967A (ja) * | 1993-11-22 | 1995-06-02 | Matsushita Electric Ind Co Ltd | 画像表示装置 |
| JPH08322796A (ja) * | 1995-05-29 | 1996-12-10 | Sharp Corp | 視線方向検出方法及び装置及びそれを含むマンマシンインターフェース装置 |
| JPH09230928A (ja) * | 1996-02-28 | 1997-09-05 | Mitsubishi Electric Corp | 監視表示装置および監視表示方法 |
-
1997
- 1997-07-04 JP JP19474497A patent/JP3579218B2/ja not_active Expired - Fee Related
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62245183A (ja) * | 1986-04-04 | 1987-10-26 | アプライド サイエンス グル−プ インコ−ポレ−テツド | テレビ・コマ−シヤルの視聴時間の分布を発生させる方法およびシステム |
| JPH0591394A (ja) * | 1991-09-26 | 1993-04-09 | Canon Inc | ビデオカメラ |
| JPH05204526A (ja) * | 1992-01-23 | 1993-08-13 | Nec Corp | 視点監視入力装置 |
| JPH0713497A (ja) * | 1993-06-14 | 1995-01-17 | Atr Tsushin Syst Kenkyusho:Kk | 画像表示装置 |
| JPH0744110A (ja) * | 1993-08-03 | 1995-02-14 | Nippon Telegr & Teleph Corp <Ntt> | 視線適応型表示装置 |
| JPH07140967A (ja) * | 1993-11-22 | 1995-06-02 | Matsushita Electric Ind Co Ltd | 画像表示装置 |
| JPH08322796A (ja) * | 1995-05-29 | 1996-12-10 | Sharp Corp | 視線方向検出方法及び装置及びそれを含むマンマシンインターフェース装置 |
| JPH09230928A (ja) * | 1996-02-28 | 1997-09-05 | Mitsubishi Electric Corp | 監視表示装置および監視表示方法 |
Cited By (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004173104A (ja) * | 2002-11-21 | 2004-06-17 | Nippon Telegr & Teleph Corp <Ntt> | 画像切り出し装置、画像切り出し方法およびプログラム |
| JP2006048171A (ja) * | 2004-07-30 | 2006-02-16 | Toyota Motor Corp | 状態推定装置、状態推定方法、及びそれを用いた情報提供装置、情報提供方法 |
| JP2006293786A (ja) * | 2005-04-12 | 2006-10-26 | Biophilia Kenkyusho Kk | 視線入力装置を備えた市場調査用機器 |
| JP2009545051A (ja) * | 2006-07-28 | 2009-12-17 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 注視された商品の情報表示のための注視インタラクション |
| JP2008226161A (ja) * | 2007-03-15 | 2008-09-25 | Nippon Signal Co Ltd:The | 注視認識システム |
| JP2009193499A (ja) * | 2008-02-18 | 2009-08-27 | Hitachi Ltd | 注視商品データ取得方法および商品販売管理システム |
| KR20110029123A (ko) * | 2008-05-14 | 2011-03-22 | 코닌클리즈케 필립스 일렉트로닉스 엔.브이. | 상호작용 시스템 및 방법 |
| EP2285253B1 (en) * | 2008-05-14 | 2018-08-22 | Philips Lighting Holding B.V. | An interaction system and method |
| JP2011520496A (ja) * | 2008-05-14 | 2011-07-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 対話形システム及び方法 |
| JP2009289233A (ja) * | 2008-06-02 | 2009-12-10 | Hitachi Ltd | 商品販売装置、商品販売管理システム、顧客視線データ取得方法および顧客注視商品データ取得方法 |
| JP2010039094A (ja) * | 2008-08-04 | 2010-02-18 | Seiko Epson Corp | 音声出力制御装置、音声出力装置、音声出力制御方法、及び、プログラム |
| JP2010102235A (ja) * | 2008-10-27 | 2010-05-06 | V-Sync Co Ltd | 電子広告システム |
| JP2011033993A (ja) * | 2009-08-05 | 2011-02-17 | Sharp Corp | 情報提示装置、および情報提示方法 |
| JP2011053611A (ja) * | 2009-09-04 | 2011-03-17 | Ricoh Co Ltd | 電子掲示板装置及び制御プログラム |
| JP2011077913A (ja) * | 2009-09-30 | 2011-04-14 | Nhk Service Center Inc | 情報伝達処理装置及び情報伝達処理システム並びにこれらに用いるコンピューター・プログラム |
| JP2012022632A (ja) * | 2010-07-16 | 2012-02-02 | Canon Inc | 情報処理装置およびその制御方法 |
| JP2011227510A (ja) * | 2011-06-13 | 2011-11-10 | Hitachi Ltd | ディスプレイ制御装置、ディスプレイ制御方法、ディスプレイ制御プログラム、およびディスプレイ |
| JP2013011669A (ja) * | 2011-06-28 | 2013-01-17 | Kyocera Corp | 電子表示装置 |
| JP2013055595A (ja) * | 2011-09-06 | 2013-03-21 | Omron Corp | 端末装置、コンテンツ表示システム、プログラム、データ構造およびコンテンツ配信サーバ |
| JP2013088291A (ja) * | 2011-10-18 | 2013-05-13 | Fuji Electric Co Ltd | 目視検査支援装置及び目視検査支援装置の制御方法 |
| JP2013248177A (ja) * | 2012-05-31 | 2013-12-12 | Jvc Kenwood Corp | 視線検出装置および視線検出方法 |
| JP2014153666A (ja) * | 2013-02-13 | 2014-08-25 | Mitsubishi Electric Corp | 広告提示装置 |
| JP2015043047A (ja) * | 2013-08-26 | 2015-03-05 | 大日本印刷株式会社 | 視線解析手段を有する表示媒体 |
| JP2017040970A (ja) * | 2015-08-17 | 2017-02-23 | 株式会社コロプラ | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム |
| JP2017041229A (ja) * | 2016-06-08 | 2017-02-23 | 株式会社コロプラ | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム |
| JP2019039999A (ja) * | 2017-08-24 | 2019-03-14 | 株式会社Jvcケンウッド | 表示装置及び表示方法 |
| WO2019163599A1 (ja) * | 2018-02-22 | 2019-08-29 | ソニー株式会社 | 情報処理装置、移動装置、および方法、並びにプログラム |
| JPWO2019163599A1 (ja) * | 2018-02-22 | 2021-03-11 | ソニー株式会社 | 情報処理装置、移動装置、および方法、並びにプログラム |
| US11482190B2 (en) | 2018-02-22 | 2022-10-25 | Sony Corporation | Information processing apparatus, transportation apparatus, method, and program |
| KR20200029714A (ko) * | 2018-09-11 | 2020-03-19 | 현대자동차주식회사 | 감정 분류 장치 및 감정 분류 장치의 제어 방법 |
| JP2025031802A (ja) * | 2021-06-07 | 2025-03-07 | ナブテスコ株式会社 | 自動ドアの画像制御装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3579218B2 (ja) | 2004-10-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3579218B2 (ja) | 情報表示装置及び情報収集装置 | |
| US10182720B2 (en) | System and method for interacting with and analyzing media on a display using eye gaze tracking | |
| US20120133754A1 (en) | Gaze tracking system and method for controlling internet protocol tv at a distance | |
| US7574021B2 (en) | Iris recognition for a secure facility | |
| JP3565707B2 (ja) | 観察者トラッキング自動立体表示装置、画像トラッキングシステム、および画像トラッキング方法 | |
| JP4835898B2 (ja) | 映像表示方法および映像表示装置 | |
| US20170213385A1 (en) | Apparatus and method for generating 3d face model using mobile device | |
| JP6077655B2 (ja) | 撮影システム | |
| JP6424357B2 (ja) | 視認対象効果度測定装置 | |
| JP2011059528A (ja) | 表示装置および制御方法 | |
| WO2017028498A1 (zh) | 3d场景展示方法及装置 | |
| US20150253845A1 (en) | System and method for altering a perspective of a figure presented on an electronic display | |
| US20190281280A1 (en) | Parallax Display using Head-Tracking and Light-Field Display | |
| CN103514429B (zh) | 检测对象的特定部位的方法及图像处理设备 | |
| US10600218B2 (en) | Display control system, display control apparatus, display control method, and storage medium | |
| JP5370380B2 (ja) | 映像表示方法および映像表示装置 | |
| JP2009104426A (ja) | インタラクティブ看板システム | |
| WO2008132741A2 (en) | Apparatus and method for tracking human objects and determining attention metrics | |
| JP2013125985A (ja) | 表示システム | |
| JP2007265125A (ja) | コンテンツ表示装置 | |
| JP2010204823A (ja) | 視線認識装置 | |
| CN101226585B (zh) | 脸部端正度的计算方法及其计算机系统 | |
| KR20140014868A (ko) | 시선 추적 장치 및 이의 시선 추적 방법 | |
| TWI486054B (zh) | A portrait processing device, a three-dimensional image display device, a method and a program | |
| JP2009244949A (ja) | 操作対象の切替装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040629 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040715 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080723 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080723 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090723 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090723 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100723 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100723 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110723 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120723 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130723 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |