[go: up one dir, main page]

JP2002042115A - 疲労緩和システム、疲労緩和方法及び記録媒体 - Google Patents

疲労緩和システム、疲労緩和方法及び記録媒体

Info

Publication number
JP2002042115A
JP2002042115A JP2000225181A JP2000225181A JP2002042115A JP 2002042115 A JP2002042115 A JP 2002042115A JP 2000225181 A JP2000225181 A JP 2000225181A JP 2000225181 A JP2000225181 A JP 2000225181A JP 2002042115 A JP2002042115 A JP 2002042115A
Authority
JP
Japan
Prior art keywords
fatigue
operator
degree
response information
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000225181A
Other languages
English (en)
Other versions
JP2002042115A5 (ja
Inventor
Masaya Nanbu
雅也 南部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2000225181A priority Critical patent/JP2002042115A/ja
Priority to US09/789,523 priority patent/US7224834B2/en
Publication of JP2002042115A publication Critical patent/JP2002042115A/ja
Publication of JP2002042115A5 publication Critical patent/JP2002042115A5/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Data Mining & Analysis (AREA)
  • Economics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 【課題】作業者の疲労を和らげることのできる疲労緩和
システムを提供すること。 【解決手段】コンピュータ装置10は、操作者の顔の3
Dモデルを作成し、その3Dモデルを画像分析し、操作
者の疲労度を判定する。そして、コンピュータ装置10
は、操作者の疲労度に対応する応答情報を作成し、その
応答情報を対応する出力部15,16へ出力する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明はコンピュータ装置オ
ペレータの疲労を緩和する疲労緩和システム、疲労緩和
方法、及びそれの処理をコンピュータにて実行するため
のプログラムを記録した記録媒体に関するものである。
【0002】近年、インターネットの普及や、事務処理
等のコンピュータ化(OA化)によってコンピュータ装
置(表示画面を見ながらキーボードやマウスの操作を行
う装置で、所謂パソコン、オフコン等のコンピュータと
ワープロを含む)を利用する機会が増えてきている。更
に、マルチメディア等のようにコンピュータ装置の利用
範囲が拡大化してきている。それに伴って操作者(オペ
レータ)がコンピュータ装置に向かう時間が長くなって
きており、それによりオペレータの疲労度も高くなって
きている。このため、オペレータの疲労を和らげること
が重要になってきている。
【0003】
【従来の技術】コンピュータ装置の普及と共に、各オペ
レータがコンピュータ装置を操作する時間が長くなって
きている。このような状況で、オペレータの目、首、
肩、手、腰等の疲労を解消するために、定期的(例え
ば、1時間毎)に休憩、体操等を行うことが推奨されて
いる。
【0004】オペレータが表示画面を見ながらキーボー
ドやマウス等の操作に熱中していると、定期的に休憩や
体操等を行うことを忘れてしまう場合がある。このよう
なことを防止するため、表示画面を見ながらキーボード
やマウス等を操作して作業をしている間、所定時間毎に
表示画面に警報サインを表示させるようなシステムが提
案されている(例えば、特開平1−163874、特開
平4−120668)。このような、システムでは、コ
ンピュータ装置での作業に熱中していても、所定時間毎
に表示画面に警報サインが表示されるので、オペレータ
は休憩や体操等を行う時期を認識することができる。
【0005】
【発明が解決しようとする課題】しかしながら、上記の
システムでは、オペレータがコンピュータ装置の操作以
外の仕事(コピーを取る、他の人と仕事上の話しをする
等)や、単に席を離れている間でも、常に時間計測が行
われている。このような場合、オペレータが実質的に疲
労を感じていなくても、警報サインが表示画面に表示さ
れ、オペレータにとって煩わしく感じられることもあ
り、また、オペレータの疲労の程度に合わせて表示でき
ない場合があり、疲労を和らげることができなかった。
【0006】しかしながら、コンピュータ装置の操作等
では、長時間作業を行うと疲労(目、肩、腰等)すると
いう問題があった。本発明は上記問題点を解決するため
になされたものであって、その目的は作業者の疲労を和
らげることのできる疲労緩和システム、疲労緩和方法、
及びその処理をコンピュータ装置に実行させるプログラ
ムを記録した記録媒体を提供することにある。
【0007】
【課題を解決するための手段】上記目的を達成するた
め、請求項1,4,5に記載の発明によれば、画像デー
タから人の顔のモデルを作成する画像処理手段と、前記
モデルを解析して操作者の疲労度を判定する疲労度判定
手段と、前記疲労度に対応する応答情報を出力する応答
情報出力手段とを備えることで、操作者の疲労度に対応
する応答情報を出力し、操作者の疲労を緩和することが
できる。
【0008】請求項2に記載の発明によれば、前記疲労
度を判断する基準となる前記モデルの部分の情報が予め
格納された疲労度基準格納部を備え、前記疲労度判定部
は、前記疲労度基準格納部を参照して疲労度を判定す
る。これにより、的確に操作者の疲労度を判定すること
ができる。
【0009】請求項3に記載の発明によれば、前記疲労
度と対応付けられた前記応答情報及びそれの出力装置が
操作者に応じて格納された応答情報格納部を備え、前記
応答情報出力手段は、前記疲労度に対応して前記格納部
から読み出した応答情報を、該情報に対応する出力装置
に出力する。これにより、疲労度に応じて操作者の嗜好
に合わせた応答情報を出力し、操作者の疲労を緩和する
ことができる。
【0010】
【発明の実施の形態】以下、本発明を具体化した一実施
の形態を図1〜図10に従って説明する。図1は、コン
ピュータ装置の一部ブロック図であり、コンピュータ装
置に備えられたオペレータの疲労を緩和する機能を提供
する疲労緩和システムに係る部分を示す。
【0011】コンピュータ装置10は、所定時間毎にオ
ペレータの顔の3Dモデルを作成し、それに基づいてオ
ペレータの疲労度を判断する。そして、コンピュータ装
置10は疲労度に対応する応答情報を出力する。このよ
うに、オペレータの疲労度に対応する応答情報を出力す
ることで、オペレータの疲労を緩和する。
【0012】尚、本実施形態のコンピュータ装置10
は、3Dモデル及び顔の表情の分析結果に対応する画像
を表示することもできる。これにより、オペレータが現
在の自身の状態を認識することを助ける。
【0013】コンピュータ装置10は、入力部11、画
像処理部12、疲労度判定部13、応答情報出力部1
4、出力部15,16、記憶部21,22,23、疲労
度基準格納部24、応答情報格納部25を備える。
【0014】入力部11は、デジタルカメラ等の画像入
力装置であり、オペレータの顔を所定時間毎に撮影した
画像データを画像処理部12に出力する。画像処理部1
2は、入力部11からの顔画像データ21aを第1記憶
部21に記憶する。画像処理部12は、イメージモデラ
であり、第1記憶部21に記憶した顔画像データから3
Dモデルを作成し、それを疲労度判定部13に出力す
る。
【0015】画像処理部12では、画像データ21aを
解析して顔の状態を認識する。まず、顔の画像データを
解析して肌色の基準値から色差を判別して顔の領域を識
別する。次に、顔の部分である目、眼球、鼻、口等につ
いても、各部分の大きさ、形状、色差を判別して認識す
る。また、目を識別することにより、目の下の一定の略
矩形の領域を隈の部分として識別することも可能であ
る。その他に、目及び眼球の座標値を管理することによ
り、目が充血しているかどうかを判定するために、眼球
を除いた領域中の色情報を管理することも可能である。
【0016】疲労度判定部13は、3Dモデルの時間的
な変化を解析し、顔の表情の疲労感(例えば目にできる
隈、目の充血等)を認識する。詳述すると、疲労度判定
部13は、第2及び第3記憶部22,23に撮影時間の
異なる2つの3Dモデル22a,23aを記憶する。そ
して、疲労度判定部13は、2つの3Dモデル22a,
23aを比較し、オペレータの顔の時間的に変化した部
分のデータを得る。次に、疲労度判定部13は、変化し
た部分及びその部分の状態から、疲労度基準格納部24
のデータを参照してオペレータの疲労度を判定し、その
判定結果(疲労度データ)を応答情報出力部14に出力
する。
【0017】疲労度基準格納部24は、図2に示す疲労
度基準格納テーブルからなる。疲労度基準格納テーブル
24は、疲労度を判定する基準となる情報を記憶するテ
ーブルである。このテーブル24は、疲労箇所フィール
ド24a、3次元情報フィールド24b、色情報フィー
ルド24c、疲労度フィールド24dを有する複数のレ
コードによって構成される。
【0018】疲労箇所フィールド24aは、疲労度を判
断する基準となる疲労箇所である顔の部分の情報を格納
するフィールドである。3次元情報フィールド24b
は、疲労箇所の時間的変化量を格納するフィールドであ
る。色情報フィールド24cは、疲労箇所の状態(色)
を格納するフィールドである。疲労度フィールド24d
は、疲労箇所における時間的変化量と状態に対応する疲
労度の数値を格納するフィールドである。
【0019】疲労度判定部13は、テーブル24を参照
し、疲労箇所における時間的変化量及び状態に該当する
疲労度データ(数値)を読み出し、これを応答情報出力
部14に出力する。
【0020】応答情報出力部14は、疲労度判定部13
からの疲労度データに対応する応答情報を応答情報格納
部25から読み出し、それを対応する第1又は第2出力
部15,16に出力する。
【0021】応答情報格納部25は、図3に示す応答情
報テーブルからなる。応答情報テーブル25は、疲労度
と応答情報及びそれの出力装置とを対応付けるためのテ
ーブルである。このテーブル25は、疲労度フィールド
25a、出力装置フィールド25b、内容フィールド2
5cを有する複数のレコードによって構成される。
【0022】疲労度フィールド25aは、疲労度を示す
数値を格納するフィールドである。出力装置フィールド
25bは、応答情報の出力先を指定するフィールドであ
る。内容フィールド25cは、応答情報の内容を示すフ
ィールドであり、これには休息を促すメッセージや対象
者の嗜好に合った音楽(ファイル名)が格納される。
【0023】例えば、第1出力部15はCRT等の表示
装置であり、第2出力部16はスピーカである。応答情
報出力部14は、図1の疲労度判定部13から疲労度:
1のデータを受け取ると、これに対応する出力装置フィ
ールド25b及び内容フィールド25cの情報を読み出
し、応答情報:メッセージ を出力装置である画面、即
ち第1出力部15に出力する。これにより、第1出力部
15の画面には、休息を促すメッセージが表示される。
【0024】次に、コンピュータ装置10が実施する疲
労緩和処理の詳細を、図4〜図7に従って説明する。図
4は、コンピュータ装置10が実行する疲労緩和処理の
フローチャートである。
【0025】先ず、任意(10分間隔等)の時間間隔で
図1の入力部11から人(オペレータ)の顔の画像デー
タが入力される(ステップ31)。尚、画像データは静
止画及び動画のいずれであってもよい。
【0026】次に、イメージモデラー技術が利用され、
人の3Dモデルが作成される(ステップ32)。この人
の顔の3Dモデルより、目の下にできたくぼみから目の
隈を認識する等の疲れが現れる部分の特徴によって人の
疲労度が判定され(ステップ33)、その疲労度が予め
設定した基準を超えたか否かが判断される(ステップ3
4)。疲労度が基準を超えていない場合、コンピュータ
装置10はステップ31に戻り、時間待ちとなる。
【0027】疲労度が基準を超えている場合、その疲労
度に応じて休息を促すメッセージや対象者の嗜好に合っ
た音楽等の応答情報が生成され(ステップ35)、その
応答情報を画面(第1出力部15)やスピーカ(第2出
力部16)等、情報に応じた装置から応答情報が出力さ
れる(ステップ36)。
【0028】図5は、疲労度判定部13が実行する特徴
抽出処理のフローチャートである。疲労度判定部13
は、人の顔の3Dモデルから疲れが現れる部分の特徴を
抽出する。
【0029】疲労度判定部13は、画像処理部12から
人の顔の3Dモデルデータを入力し(ステップ41)、
人の顔の3Dモデルより、疲労が現れる部分のデータ
(x座標、y座標、z座標、色)を調べる(ステップ4
2)。そして、疲労度判定部13は、疲労が現れる部分
のデータ各軸の座標値)から目の隈(くぼみ)の大き
さ、肌色の変化を求め、これら疲労情報を図示しないレ
ジスタ等に出力する(ステップ43)。
【0030】図6は、疲労度判定部13が実行する判定
処理のフローチャートである。疲労度判定部13は、図
5の各ステップ41〜43により得た疲労情報に基づい
て、その人(オペレータ)の疲労度を判定する。
【0031】疲労度判定部13は、疲労情報を入力し
(ステップ44)、図2の疲労度基準格納テーブル24
を参照して疲労情報から疲労度を決定する(ステップ4
5)。そして、疲労度判定部13は、図1の応答情報出
力部14に決定した人の疲労度の情報を通知する(ステ
ップ46)。
【0032】図7は、応答情報出力部14が実行する応
答情報生成処理のフローチャートである。応答情報出力
部14は、図1の疲労度判定部13より、人の疲労度の
情報を入力し、(ステップ47)図3の応答情報格納テ
ーブル25を参照し、疲労度情報から応答情報を決定す
る(ステップ48)。そして、応答情報出力部14は、
出力部に応答情報を通知する(ステップ49)。
【0033】次に、上記のように構成されたコンピュー
タ装置10の作用を図8,9に従って説明する。今、オ
ペレータがコンピュータ装置10の操作を開始すると、
コンピュータ装置10はオペレータの顔の画像を取り込
み、図8に示すように、第1出力部15の画面に3Dモ
デル画像51及び分析結果の表示画像52を表示する。
この場合、オペレータは疲れていないので、普通の表情
を示す表示画像52を表示する。
【0034】オペレータが疲れると、コンピュータ装置
10はそれをオペレータの顔の画像から作成した3Dモ
デルに基づいて判定し、図9に示すように、疲労度に応
じて例えば音楽を第2出力部16のスピーカから出力す
る。更に、コンピュータ装置10は、その時の3Dモデ
ル画像53及び分析結果の表示画像54を第1出力部1
5の画面に表示する。この場合、オペレータは疲れてい
るので、それに対応するつかれた表情の表示画像54を
表示する。
【0035】この時、スピーカから出力される音楽は、
オペレータの嗜好に合ったものであるため、それにより
オペレータの疲労が緩和される。尚、上記したオペレー
タの疲労緩和は、パーソナルコンピュータ、ワークステ
ーション等の汎用的な目的で使用される計算機上で実行
するコンピュータプログラムにより実現することもでき
る。
【0036】即ち、図10に示すように、コンピュータ
装置60は、処理装置61、入力装置62、出力装置6
3、主記憶装置64、補助記憶装置65などから構成さ
れ、図4〜7に示すフローチャートの各ステップを含む
1つ又は複数のコンピュータプログラムを実行するもの
である。コンピュータプログラムは、フロッピー(登録
商標)ディスクやCD−ROM等の可搬型記録媒体66
やネットワーク接続された他の計算機の主記憶装置や補
助記憶装置等に格納されて提供される。
【0037】提供されたコンピュータプログラムは、可
搬型媒体66から一旦補助記憶装置65にコピーまたは
インストール後に主記憶装置64にロードされ、または
可搬型媒体66から直接計算機60の主記憶装置64に
ロードされ実行する。尚、補助記憶装置65には、図1
の画像データ21a、3Dモデルデータ22a,23
a、疲労度基準格納テーブル24、応答情報格納テーブ
ル25が記憶される。
【0038】また、コンピュータプログラムがネットワ
ーク接続された他の装置に格納されて提供された場合
も、他の装置からネットワークを経由して受信後に補助
記憶装置65にコピーまたはインストール後に主記憶装
置64にロードされ、または直接主記憶装置64にロー
ドされ実行するものである。
【0039】以上記述したように、本実施の形態によれ
ば、以下の効果を奏する。 (1)コンピュータ装置10は、操作者の顔の3Dモデ
ルを作成し、その3Dモデルを画像分析し、操作者の疲
労度を判定する。そして、コンピュータ装置10は、操
作者の疲労度に対応する応答情報を作成し、その応答情
報を対応する出力部15,16へ出力するようにした。
その結果、操作者の嗜好に合った応答情報が疲労度に応
じて出力されるため、その操作者の疲労を緩和すること
ができる。
【0040】(2)疲労判定部13は、予め疲労度を判
断する基準となる3次元モデルの部分の情報が予め格納
された疲労度基準格納部24を参照して疲労度を判定す
るようにした。その結果、的確に操作者の疲労度を判定
することができる。
【0041】(3)応答情報出力部14は、、疲労度と
対応付けられた応答情報及びそれの出力装置が操作者に
応じて格納された応答情報格納部25を参照し、疲労度
に対応してその格納部25から読み出した応答情報を、
その情報に対応する出力部15,16に出力するように
した。これにより、疲労度に応じて操作者の嗜好に合わ
せた応答情報を出力し、操作者の疲労を緩和することが
できる。
【0042】尚、前記実施形態は、以下の態様に変更し
てもよい。 ○上記実施形態において、疲労度判定部13は目の充血
を認識し、それに対応して応答情報出力部14は第1出
力部15の画面の色、輝度を変更するための応答情報を
生成し出力するようにしてもよい。
【0043】○上記実施形態において、疲労度判定部1
3は、入力装置11にて撮影された動画像によりオペレ
ータの動きの特徴を抽出し、それによりオペレータの疲
労度を判定するようにしてもよい。
【0044】○上記実施形態では、入力部11により入
力した操作者の顔画像に基づいてその操作者の疲労度を
判断したが、オペレータの体温、血圧、脈拍等その他の
情報を加えて疲労度を判断しても良く、疲労度をより詳
細に判断し、より的確な応答情報を出力することを可能
にする。この場合、コンピュータ装置は、図10に示す
ように構成される。このコンピュータ装置70は、図1
の構成に加えて、入力部71及び特徴抽出部72を備え
る。入力部71はオペレータの体温、血圧、脈拍等を検
出しその検出情報(検出値)を出力するセンサであり、
特徴抽出部72は入力部71の検出情報から疲労度に対
応する情報を抽出する。そして、疲労度判定部73は、
画像処理部12からの人の顔の3Dモデルと特徴抽出部
72からの情報に基づいて、総合的にオペレータの疲労
度を判断する。
【0045】また、入力部71としてキーの入力を検知
するセンサ(キーボード)を用い、特徴抽出部72はキ
ーストロークのバラツキ、誤入力等に基づいてオペレー
タの疲労度を判定するようにしてもよい。
【0046】○上記各実施形態において、顔画像の分析
は、目の充血、隈の大きさ等の色、領域の大きさで疲労
度を判定するものであれば、3Dモデルでなく2Dモデ
ルを作成し、それを解析して疲労度を判断するようにし
てもよい。
【0047】以上の様々な実施の形態をまとめると、以
下のようになる。 (付記1) 操作者の顔を撮影し、該顔の画像データを
出力する入力手段と、前記画像データから人の顔のモデ
ルを作成する画像処理手段と、前記モデルを解析して操
作者の疲労度を判定する疲労度判定手段と、前記疲労度
に対応する応答情報を出力する出力手段と、を備えたこ
とを特徴とする疲労緩和システム。 (付記2) 前記画像処理手段は、所定時間毎に前記モ
デルを作成し、前記疲労度判定手段は、複数の前記モデ
ルを比較し、前記複数のモデルの時間的変化に基づいて
疲労度を判定することを特徴とする付記1記載の疲労緩
和システム。 (付記3) 前記疲労度判定手段は、操作者に対応して
予め設定された疲労度基準と前記判定した疲労度を比較
し、該疲労度が前記基準を超えている場合に該疲労度情
報を前記応答情報出力手段に通知することを特徴とする
付記1又は2記載の疲労緩和システム。 (付記4) 前記疲労度を判断する基準となる前記モデ
ルの部分の情報が予め格納された疲労度基準格納部を備
え、前記疲労度判定手段は、前記疲労度基準格納部を参
照して疲労度を判定することを特徴とする付記1〜3の
うちの何れか一項に記載の疲労緩和システム。 (付記5) 前記疲労度を判断する基準となる疲労箇所
である顔の部分の情報と、該疲労箇所の時間的変化量
と、該疲労箇所の状態と、それらに対応する疲労度が予
め格納された疲労度基準格納部を備え、前記疲労度判定
手段は、前記疲労度基準格納部を参照し、疲労箇所にお
ける時間的変化量及び状態の少なくとも何れか一方に該
当する疲労度を読み出し、該疲労度を前記応答情報出力
手段に出力することを特徴とする付記1〜3のうちの何
れか一項に記載の疲労緩和システム。 (付記6) 前記疲労度と対応付けられた前記応答情報
及びそれの出力装置が操作者に応じて格納された応答情
報格納部を備え、前記応答情報出力手段は、前記疲労度
に対応して前記格納部から読み出した応答情報を、該情
報に対応する出力装置に出力することを特徴とする付記
1〜5のうちの何れか一項に記載の疲労緩和システム。 (付記7) 操作者の顔を撮影した画像データから人の
顔のモデルを作成するステップと、前記モデルを解析し
て操作者の疲労度を判定するステップと、前記疲労度に
対応する応答情報を出力するステップと、を備えたこと
を特徴とする疲労緩和方法。 (付記8) 操作者の疲労を緩和するためのプログラム
を記録したコンピュータ読み取り可能な記録媒体であっ
て、前記プログラムは、操作者の顔を撮影した画像デー
タから人の顔のモデルを作成するステップと、前記モデ
ルを解析して操作者の疲労度を判定するステップと、前
記疲労度に対応する応答情報を出力するステップと、を
有する記録媒体。
【0048】
【発明の効果】以上詳述したように、本発明によれば、
作業者の疲労を和らげることのできる疲労緩和システ
ム、疲労緩和方法、及びその処理をコンピュータ装置に
実行させるプログラムを記録した記録媒体を提供するこ
とができる。
【図面の簡単な説明】
【図1】 一実施形態のコンピュータ装置の概略構成図
である。
【図2】 疲労度基準格納テーブルの説明図である。
【図3】 応答情報テーブルの説明図である。
【図4】 疲労緩和処理のフローチャートである。
【図5】 画像処理のフローチャートである。
【図6】 疲労度判定処理のフローチャートである。
【図7】 応答情報生成処理のフローチャートである。
【図8】 応答情報表示の説明図である。
【図9】 応答情報表示の説明図である。
【図10】 コンピュータ装置のハードウェア構成を示
す概略図である。
【図11】 別の実施形態の概略構成図である。
【符号の説明】
11 入力部 12 画像処理部 13 疲労度判定部 14 応答情報出力部 15,16 出力部 24 疲労度基準格納部 25 応答情報格納部

Claims (5)

    【特許請求の範囲】
  1. 【請求項1】 操作者の顔を撮影し、該顔の画像データ
    を出力する入力手段と、 前記画像データから人の顔のモデルを作成する画像処理
    手段と、 前記モデルを解析して操作者の疲労度を判定する疲労度
    判定手段と、 前記疲労度に対応する応答情報を出力する出力手段と、
    を備えたことを特徴とする疲労緩和システム。
  2. 【請求項2】 前記疲労度を判断する基準となる前記モ
    デルの部分の情報が予め格納された疲労度基準格納部を
    備え、 前記疲労度判定部は、前記疲労度基準格納部を参照して
    疲労度を判定することを特徴とする請求項1記載の疲労
    緩和システム。
  3. 【請求項3】 前記疲労度と対応付けられた前記応答情
    報及びそれの出力装置が操作者に応じて格納された応答
    情報格納部を備え、 前記応答情報出力手段は、前記疲労度に対応して前記格
    納部から読み出した応答情報を、該情報に対応する出力
    装置に出力することを特徴とする請求項1又は2記載の
    疲労緩和システム。
  4. 【請求項4】 操作者の顔を撮影した画像データから人
    の顔のモデルを作成するステップと、 前記モデルを解析して操作者の疲労度を判定するステッ
    プと、 前記疲労度に対応する応答情報を出力するステップと、
    を備えたことを特徴とする疲労緩和方法。
  5. 【請求項5】 操作者の疲労を緩和するためのプログラ
    ムを記録したコンピュータ読み取り可能な記録媒体であ
    って、 前記プログラムは、 操作者の顔を撮影した画像データから人の顔のモデルを
    作成するステップと、 前記モデルを解析して操作者の疲労度を判定するステッ
    プと、 前記疲労度に対応する応答情報を出力するステップと、
    を有する記録媒体。
JP2000225181A 2000-07-26 2000-07-26 疲労緩和システム、疲労緩和方法及び記録媒体 Pending JP2002042115A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2000225181A JP2002042115A (ja) 2000-07-26 2000-07-26 疲労緩和システム、疲労緩和方法及び記録媒体
US09/789,523 US7224834B2 (en) 2000-07-26 2001-02-22 Computer system for relieving fatigue

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000225181A JP2002042115A (ja) 2000-07-26 2000-07-26 疲労緩和システム、疲労緩和方法及び記録媒体

Publications (2)

Publication Number Publication Date
JP2002042115A true JP2002042115A (ja) 2002-02-08
JP2002042115A5 JP2002042115A5 (ja) 2004-12-09

Family

ID=18718999

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000225181A Pending JP2002042115A (ja) 2000-07-26 2000-07-26 疲労緩和システム、疲労緩和方法及び記録媒体

Country Status (2)

Country Link
US (1) US7224834B2 (ja)
JP (1) JP2002042115A (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004151812A (ja) * 2002-10-29 2004-05-27 Yokogawa Electric Corp 顔画像処理装置
JP2014087064A (ja) * 2012-10-19 2014-05-12 Samsung Electronics Co Ltd ディスプレイ装置、ディスプレイ装置を制御する遠隔制御装置、ディスプレイ装置の制御方法、サーバーの制御方法、及び遠隔制御装置の制御方法
JP2015501997A (ja) * 2011-12-28 2015-01-19 インテル コーポレイション 座位行動期間中の活動の促進
KR102236569B1 (ko) * 2020-11-17 2021-04-06 주식회사 다이나톤 디지털 피아노를 활용한 두뇌 활동관리 시스템
KR102340715B1 (ko) * 2020-07-13 2021-12-16 김익수 스마트 IoT 연필꽂이

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003008201A (ja) 2001-06-18 2003-01-10 Nitto Denko Corp 金属箔積層体の製造方法及び配線基板の製造方法
US7692551B2 (en) * 2006-09-12 2010-04-06 Deere & Company Method and system for detecting operator alertness
US7692548B2 (en) * 2006-09-12 2010-04-06 Deere & Company Method and system for detecting operator alertness
EP1901252A3 (en) * 2006-09-12 2010-01-06 Deere & Company Method and system for detecting operator alertness
JP5056067B2 (ja) * 2007-02-26 2012-10-24 株式会社デンソー 居眠り警報装置
JP2008305107A (ja) * 2007-06-06 2008-12-18 Fujitsu Component Ltd 情報処理装置
AT506667B1 (de) * 2008-04-03 2013-06-15 Gesunde Arbeitsplatzsysteme Gmbh Verfahren zum prüfen des ermüdungsgrades einer ein gerät bedienenden person
KR101587623B1 (ko) * 2010-12-09 2016-01-21 한국전자통신연구원 시각적 피로 최소화를 지원하는 입체영상 제작시스템 및 그 방법
DE102014214214A1 (de) * 2014-07-22 2016-01-28 Robert Bosch Gmbh Verfahren und Vorrichtung zur Bestimmung eines Ermüdungsgrades eines Fahrers eines Fahrzeugs sowie Fahrzeug
FR3034560A1 (fr) * 2015-03-30 2016-10-07 Peugeot Citroen Automobiles Sa Dispositif d’avertissement d’un conducteur de vehicule au moyen d’une imagette representative de sa position de conduite
FR3034561A1 (fr) * 2015-03-30 2016-10-07 Peugeot Citroen Automobiles Sa Dispositif d’avertissement d’un conducteur de vehicule du niveau de son etat de somnolence et/ou du niveau de son etat de distraction au moyen d’imagette(s)
US9910275B2 (en) * 2015-05-18 2018-03-06 Samsung Electronics Co., Ltd. Image processing for head mounted display devices
DE102016205311A1 (de) * 2016-03-31 2017-10-05 Robert Bosch Gmbh Verfahren zum Bereitstellen eines Warnsignals und Verfahren zum Generieren eines Vorsekundenschlafmusters zum Erkennen eines drohenden Sekundenschlafs für ein Fahrzeug
US10395099B2 (en) * 2016-09-19 2019-08-27 L'oreal Systems, devices, and methods for three-dimensional analysis of eyebags
FR3063356B1 (fr) * 2017-02-28 2020-12-25 Peugeot Citroen Automobiles Sa Dispositif d’affichage d’un niveau d’etat de distraction et d’un niveau d’etat de somnolence.
CN110431569A (zh) 2017-03-21 2019-11-08 首选网络株式会社 服务器装置、已学习模型提供程序、已学习模型提供方法以及已学习模型提供系统
KR102565683B1 (ko) 2017-08-16 2023-08-11 다우 글로벌 테크놀로지스 엘엘씨 저온 열 적층을 사용하여 타일을 형성하는 방법
JP6666892B2 (ja) * 2017-11-16 2020-03-18 株式会社Subaru 運転支援装置及び運転支援方法
US11322113B2 (en) * 2019-09-12 2022-05-03 Logitech Europe S.A. Techniques for eye fatigue mitigation
US20250356751A1 (en) * 2024-05-14 2025-11-20 Giga-Byte Technology Co., Ltd. Electronic device with fatigue detection function

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0844861A (ja) * 1994-07-28 1996-02-16 Semiconductor Energy Lab Co Ltd 情報処理装置
JPH0922314A (ja) * 1995-07-05 1997-01-21 Sanyo Electric Co Ltd ストレス適応の制御装置
JPH0928679A (ja) * 1995-07-20 1997-02-04 Agency Of Ind Science & Technol 疲労特性評価装置及び疲労計測装置
JPH09267660A (ja) * 1996-04-01 1997-10-14 Mitsubishi Motors Corp 車両用覚醒度情報出力装置
JPH10960A (ja) * 1996-06-12 1998-01-06 Yazaki Corp 運転者監視装置
JPH10153946A (ja) * 1996-11-25 1998-06-09 Mitsubishi Electric Corp 感覚情報提示装置
JPH11203006A (ja) * 1998-01-20 1999-07-30 Fujitsu Ltd ユーザ状況推定装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61217879A (ja) * 1985-03-25 1986-09-27 Matsushita Electric Works Ltd 画像照合システム
JPH01163874A (ja) 1987-12-21 1989-06-28 Hitachi Ltd Cad作図システム
JPH04120668A (ja) 1990-09-11 1992-04-21 Sony Corp 画像作成システム
US6707484B1 (en) * 1994-07-28 2004-03-16 Semiconductor Energy Laboratory Co., Ltd. Information processing system
US5644642A (en) * 1995-04-03 1997-07-01 Carl Zeiss, Inc. Gaze tracking using optical coherence tomography
US5729619A (en) * 1995-08-08 1998-03-17 Northrop Grumman Corporation Operator identity, intoxication and drowsiness monitoring system and method
US5715325A (en) * 1995-08-30 1998-02-03 Siemens Corporate Research, Inc. Apparatus and method for detecting a face in a video image
US6400835B1 (en) * 1996-05-15 2002-06-04 Jerome H. Lemelson Taillight mounted vehicle security system employing facial recognition using a reflected image
US5832189A (en) * 1996-09-26 1998-11-03 Interval Research Corporation Affect-based robot communication methods and systems
JPH10289006A (ja) * 1997-04-11 1998-10-27 Yamaha Motor Co Ltd 疑似感情を用いた制御対象の制御方法
US5867587A (en) * 1997-05-19 1999-02-02 Northrop Grumman Corporation Impaired operator detection and warning system employing eyeblink analysis
JPH10334270A (ja) * 1997-05-28 1998-12-18 Mitsubishi Electric Corp 動作認識装置及び動作認識プログラムを記録した記録媒体
US6243076B1 (en) * 1998-09-01 2001-06-05 Synthetic Environments, Inc. System and method for controlling host system interface with point-of-interest data
US6087941A (en) * 1998-09-01 2000-07-11 Ferraz; Mark Warning device for alerting a person falling asleep
US6154559A (en) * 1998-10-01 2000-11-28 Mitsubishi Electric Information Technology Center America, Inc. (Ita) System for classifying an individual's gaze direction
US6748421B1 (en) * 1998-12-23 2004-06-08 Canon Kabushiki Kaisha Method and system for conveying video messages
US6401050B1 (en) * 1999-05-21 2002-06-04 The United States Of America As Represented By The Secretary Of The Navy Non-command, visual interaction system for watchstations
KR100343223B1 (ko) * 1999-12-07 2002-07-10 윤종용 화자 위치 검출 장치 및 그 방법
US6323761B1 (en) * 2000-06-03 2001-11-27 Sam Mog Son Vehicular security access system
JP3848101B2 (ja) * 2001-05-17 2006-11-22 シャープ株式会社 画像処理装置および画像処理方法ならびに画像処理プログラム
US6585521B1 (en) * 2001-12-21 2003-07-01 Hewlett-Packard Development Company, L.P. Video indexing based on viewers' behavior and emotion feedback
US6879709B2 (en) * 2002-01-17 2005-04-12 International Business Machines Corporation System and method for automatically detecting neutral expressionless faces in digital images
US6771303B2 (en) * 2002-04-23 2004-08-03 Microsoft Corporation Video-teleconferencing system with eye-gaze correction

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0844861A (ja) * 1994-07-28 1996-02-16 Semiconductor Energy Lab Co Ltd 情報処理装置
JPH0922314A (ja) * 1995-07-05 1997-01-21 Sanyo Electric Co Ltd ストレス適応の制御装置
JPH0928679A (ja) * 1995-07-20 1997-02-04 Agency Of Ind Science & Technol 疲労特性評価装置及び疲労計測装置
JPH09267660A (ja) * 1996-04-01 1997-10-14 Mitsubishi Motors Corp 車両用覚醒度情報出力装置
JPH10960A (ja) * 1996-06-12 1998-01-06 Yazaki Corp 運転者監視装置
JPH10153946A (ja) * 1996-11-25 1998-06-09 Mitsubishi Electric Corp 感覚情報提示装置
JPH11203006A (ja) * 1998-01-20 1999-07-30 Fujitsu Ltd ユーザ状況推定装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004151812A (ja) * 2002-10-29 2004-05-27 Yokogawa Electric Corp 顔画像処理装置
JP2015501997A (ja) * 2011-12-28 2015-01-19 インテル コーポレイション 座位行動期間中の活動の促進
JP2014087064A (ja) * 2012-10-19 2014-05-12 Samsung Electronics Co Ltd ディスプレイ装置、ディスプレイ装置を制御する遠隔制御装置、ディスプレイ装置の制御方法、サーバーの制御方法、及び遠隔制御装置の制御方法
JP2019083564A (ja) * 2012-10-19 2019-05-30 三星電子株式会社Samsung Electronics Co.,Ltd. ディスプレイ装置、ディスプレイ装置を制御する遠隔制御装置、ディスプレイ装置の制御方法、サーバーの制御方法、及び遠隔制御装置の制御方法
KR102340715B1 (ko) * 2020-07-13 2021-12-16 김익수 스마트 IoT 연필꽂이
KR102236569B1 (ko) * 2020-11-17 2021-04-06 주식회사 다이나톤 디지털 피아노를 활용한 두뇌 활동관리 시스템

Also Published As

Publication number Publication date
US20020015527A1 (en) 2002-02-07
US7224834B2 (en) 2007-05-29

Similar Documents

Publication Publication Date Title
JP2002042115A (ja) 疲労緩和システム、疲労緩和方法及び記録媒体
US11636859B2 (en) Transcription summary presentation
JP6900516B2 (ja) 注視点判定方法および装置、電子機器ならびにコンピュータ記憶媒体
EP2793167B1 (en) Expression estimation device, control method, control program, and recording medium
US6792144B1 (en) System and method for locating an object in an image using models
US6771277B2 (en) Image processor, image processing method, recording medium, computer program and semiconductor device
US9454220B2 (en) Method and system of augmented-reality simulations
Grammatikopoulou et al. Detecting hypomimia symptoms by selfie photo analysis: for early Parkinson disease detection
KR20190030140A (ko) 시선 추적 방법 및 이를 수행하기 위한 사용자 단말
JP6756236B2 (ja) アクション指示プログラム、アクション指示方法及び画像生成装置
KR20160114996A (ko) 사용자 맞춤형 운동 서비스 제공 방법 및 장치
KR20190067433A (ko) 텍스트-리딩 기반의 리워드형 광고 서비스 제공 방법 및 이를 수행하기 위한 사용자 단말
JP5180116B2 (ja) 国籍判定装置、方法およびプログラム
US20190020614A1 (en) Life log utilization system, life log utilization method, and recording medium
JP4201644B2 (ja) 端末装置及び端末装置の制御プログラム
CN113537155A (zh) 面部皮肤健康度的检测方法、装置、设备及存储介质
US11301615B2 (en) Information processing device using recognition difficulty score and information processing method
JP7327776B2 (ja) 表情推定装置、感情判定装置、表情推定方法及びプログラム
CN115482573A (zh) 人脸表情识别方法、装置、设备及可读存储介质
CN115546842A (zh) 一种车载手语识别方法、车载终端及车辆
TW202122040A (zh) 臉部肌肉狀態分析與評價方法
CN116909465B (zh) 一种智能触摸一体机的交互系统及方法
KR102858977B1 (ko) 투명 디스플레이를 활용한 양방향 수어 챗봇 서비스를 제공하는 전자 장치 및 이의 동작 방법
US20250265588A1 (en) Information processing based on target limb information
KR20250098215A (ko) 인공지능을 이용한 미술작품 큐레이션 전시 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060718

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061030

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20061219