[go: up one dir, main page]

JP7359201B2 - 体調検知システム - Google Patents

体調検知システム Download PDF

Info

Publication number
JP7359201B2
JP7359201B2 JP2021506791A JP2021506791A JP7359201B2 JP 7359201 B2 JP7359201 B2 JP 7359201B2 JP 2021506791 A JP2021506791 A JP 2021506791A JP 2021506791 A JP2021506791 A JP 2021506791A JP 7359201 B2 JP7359201 B2 JP 7359201B2
Authority
JP
Japan
Prior art keywords
answer
driver
physical condition
question
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021506791A
Other languages
English (en)
Other versions
JPWO2020188623A1 (ja
Inventor
眞哉 山村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimadzu Corp
Original Assignee
Shimadzu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimadzu Corp filed Critical Shimadzu Corp
Publication of JPWO2020188623A1 publication Critical patent/JPWO2020188623A1/ja
Application granted granted Critical
Publication of JP7359201B2 publication Critical patent/JP7359201B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/66Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Transportation (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Psychiatry (AREA)
  • Mechanical Engineering (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Epidemiology (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Combustion & Propulsion (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Description

本発明は、体調検知システムに関するものである。
従来、事業用車両の運転者は運転前の点呼で健康管理されている。たとえば、下記特許文献1に開示される点呼管理システムは、呼気中アルコールなどのバイタルデータを取得し、そのバイタルデータはネットワーク上で管理されている。
特開2012-159959号公報
血中アルコールに起因した運転ミスによる事故以外に、運転者が運転中に脳出血、脳梗塞または心筋梗塞などを発症して事故に至るケースがある。そのため、運転中に脳出血、脳梗塞または心筋梗塞などの症状を早期発見し、そのような症状がある場合に乗務・運行を停止させる必要がある。しかし、特許文献1は呼気中アルコールを検出することで運転の可否を判断できるが、運転中の脳出血、脳梗塞または心筋梗塞などの症状を認知できない。脳出血、脳梗塞または心筋梗塞などの症状を発見するために、血圧計などの器具を運転者が装着することは、運転に支障をきたす可能性があるため、有効ではない。
脳出血、脳梗塞または心筋梗塞に限らず、運転中に運転者の体調が変わる場合もある。病気ではなくても、運転者が運転中に疲れから眠気を催す場合もある。そのような場合も、早期に運転者の体調変化を検知し、乗務・運行を停止させ、必要であれば運転業務を変更または中止する必要がある。
本発明の目的は、運転中の体調変化に対応できる体調検知システムを提供することにある。
以上の課題を解決すべく、本発明に係る体調検知システムは、以下に述べるような構成を有する。
本発明の体調検知システムは、音声分析サーバー、運転者端末および管理者端末がネットワークによって通信可能に接続されている。前記音声分析サーバーが、運転者に対する質問を記憶した質問記憶部と、前記質問に対する運転者の音声によるモデル回答を記憶したモデル回答記憶部と、前記質問記憶部に記憶された質問を運転者端末に送信する質問送信部と、前記モデル回答と運転者の現実回答とを比較し、モデル回答と現実回答との差から運転者の体調を分析する音声分析部として機能する。前記運転者端末が、前記質問を発するスピーカーと、前記運転者の音声による現実回答を取得するマイクとして機能する。前記質問が一定時間に1または複数回おこなわれ、前記管理者端末が音声分析サーバーから運転者の体調の分析結果を取得する。
本発明によれば、運転者が運転中に音声によって質問および回答され、音声によって判断できる体調の変化を認知できる。病気および眠気などによって引き起こされる体調変化を早期に発見して運転を中止することで、事故を未然に防ぐことができる。
本願の体調検知システムの構成を示す図である。 モデル回答の一例を示す音声波形の図である。 質問から回答までの時間が長くなった現実回答の例を示す音声波形の図である。 回答の開始から終了までの時間が長くなった現実回答の例を示す音声波形の図である。 回答の振幅が大きくなった現実回答の例を示す音声波形の図である。 現実回答の音がモデル回答の音と異なった例を示す音声波形の図である。 車両の自動停止装置と連携された本願の体調検知システムの構成を示す図である。 学習機能を備えた本願の体調検知システムの構成を示す図である。
本発明の実施形態に係るその体調検知システムについて図面を参照して説明する。体調検知システムは、ハードウェアおよびソフトウェアが説明するように機能するものである。複数の実施形態を説明するが、異なる実施形態であっても同じ手段には同一の符号を付して説明を省略する場合がある。
[実施形態1]
図1に示す本願の体調検知システム10は、音声分析サーバー12、運転者端末14および管理者端末16を備える。音声分析サーバー12、運転者端末14および管理者端末16はネットワーク18によって通信可能に接続されている。音声分析サーバー12、運転者端末14および管理者端末16は互いに通信するための手段を備えており、その説明を省略する場合がある。
[音声分析サーバー]
音声分析サーバー12は質問を記憶した質問記憶部20、モデル回答を記憶したモデル回答記憶部22、運転者に質問する質問送信部24、および運転者の体調を分析する音声分析部26を備える。
運転者に対する質問が質問記憶部20に記憶される。質問は音声データである。質問の内容は任意であり、運転者から必ず回答される質問が好ましい。たとえば、運転者の名前または生年月日などが質問として挙げられる。質問は1つであってもよいし、複数であってもよい。
モデル回答記憶部22は予め運転者に対して質問しておき、運転者から得られたモデル回答を記憶しておく。モデル回答は運転者の発声した音声データである。たとえば、モデル回答28は音声による空気の振動波形であり(図2)、具体的にはモデル回答28がディジタル形式に変換されて記憶される。振幅は音声の大小によって異なり、音声の長さによって時間が異なり、波形が音声内容によって異なる。図2における振幅は電圧のデータとして記憶される。
質問から回答までの時間t1、回答を開始してから終了するまでの時間t2がモデル回答28のデータに含まれる。時間t1は質問開始から回答開始までの時間であってもよいし、質問終了から回答開始までの時間であってもよい。
モデル回答28は同一特徴の波形ごとに音素30a~30fとして分解する。音素30a~30fごとの振幅B1、各音素30a~30fの波形がモデル回答のデータに含まれる。音素30a~30fごとの振幅B1は音の大小を示し、抑揚(イントネーションおよびアクセントを含む)のデータとなる。なお、図2では音素30fに対する振幅B1のみを示しているが、すべての音素30a~30fについて個別に振幅B1のデータを記憶する。
各音素30a~30fの波形は音によって異なるため、各音素30a~30fの波形は何の音であるかを示すデータとなる。音素30a~30fの波形から音を特定し、各音素30a~30fが文字データとして記憶されてもよい。
モデル回答28の中のデータであるt1、t2、B1は一定の許容範囲を含めるようにする。運転者がいつでもモデル回答28と全く同一に発声することは難しいためである。
質問送信部24は質問記憶部20に記憶された質問を運転者端末14に送信する。質問は一定時間に複数回送信される。一定時間は1日、半日、8時間など設定可能である。決められた時間間隔で質問が送信されてもよいし、定められた複数の時間に質問が送信されてもよい。たとえば質問送信部24は1時間に1回質問を送信する。運転者が運転業務中に複数回質問に回答することになる。なお、運転者の運転業務が短時間になった場合は質問を送信する回数が1回になる場合もある。複数の質問がある場合、1回に1つの質問を送信してもよいし、複数の質問を送信してもよい。
音声分析部26は運転者が運転業務中に回答した現実回答とモデル回答記憶部22に記憶されたモデル回答28とを比較し、その差から運転者の体調を分析する。質問から回答開始までの時間、回答を開始してから終了するまでの時間、回答する運転者の音声の抑揚、回答の内容が音声分析部26で判断される。
音声分析部26による判断手法は下記の(A)~(D)である。(A)音声分析部26は、現実回答における質問から回答開始までの時間を求め、その時間をモデル回答28の時間t1と比較する。現実回答の時間がモデル回答28の上記許容範囲内であれば、運転者の体調が正常と判断する。たとえば、図3に示すように、現実回答32aにおける質問から回答開始までの時間t1xがモデル回答28の時間t1よりも長く、モデル回答28の上記許容範囲内に入っていなければ運転者の体調が異常と判断する。
質問開始から一定時間たっても回答が無い場合、現実回答32aの時間t1xが決定できない。そのため、音声分析部26は所定時間までに回答されなかった場合に運転者の体調が異常と判断する。その所定時間は上記許容範囲よりも長い時間とする。
(B)音声分析部26は現実回答の回答開始から終了までの時間を求め、その時間をモデル回答28の時間t2と比較する。現実回答の時間がモデル回答28の上記共用範囲内に入っていれば運転者の体調が正常と判断する。たとえば、図4に示すように、現実回答32bは音素30cと30d、音素30dと30eの間に音の無い時間がある。そのため、現実回答32bにおける回答を開始してから終了するまでの時間t2xが長くなり、モデル回答28の上記許容範囲内に入っていなければ運転者の体調が異常と判断する。
(C)現実回答を音素に分割し、音素ごとの波形の振幅を求める。その求めた各音素の振幅がモデル回答28の振幅B1の上記許容範囲内に入っていれば、運転者の体調が正常と判断する。たとえば、図5の現実回答32cは音素30cと30eの間にある音素30d'の振幅B1xがモデル回答28の音素30dの振幅B1よりも大きくなっている。現実回答32cにおける音素30d'の振幅B1xがモデル回答28の上記許容範囲内に入っていなければ運転者の体調が異常と判断する。
(D)モデル回答28と現実回答の各音素の波形を比較する。比較の結果、各波形が同じであれば運転者の体調が正常と判断する。波形そのものを比較するのではなく、波形から求められる音を文字データに変換し、文字データが一致するか否かで波形を比較してもよい。たとえば図2のモデル回答28の音素30dが図6の現実回答32dでは音素30gになっている。図6の現実回答32dは図2のモデル回答28と異なる波形になっており、音が異なるため、運転者の体調が異常と判断する。
上記(A)~(D)の全てで運転者の体調が正常であれば最終的に運転者の体調が正常と判断する。少なくとも1つ運転者の体調が異常であれば運転者の体調が異常と判断する。
分析結果はネットワーク18を介して管理者端末16に送信される。分析結果は管理者端末16のディスプレイに表示させる文字データであってもよいし、スピーカーから発せられる音声データであってもよい。分析結果は管理者端末16に送信する以外に運転者端末14に送信してもよい。
[運転者端末]
運転者端末14は携行可能な端末または車両34に備え付けられた装置である。携行可能な端末として、スマートフォン、携帯電話、タブレット型コンピュータが挙げられる。携行可能な端末を車両34に取り外し可能に取り付けてもよい。車両34に据え付けられた装置としては、カーナビゲーションシステム(automotive navigation system)の装置を利用してもよく、さらにカーナビゲーションシステムとスマートフォンを連携させてもよい。運転者端末14は質問を発するスピーカー36および音声を取得するマイク38として機能する。
運転者端末14は音声分析サーバー12から送られてくる質問をスピーカー36で再生する。運転者はスピーカー36から発せられる質問を聞いて回答する。回答はマイク38で集音され、音声分析サーバー12に送信される。
運転者は質問を聞いて回答するだけである。運転者はハンドルを握ったままであり、運転に支障はない。運転者が病気を発症したり眠気を催したりすると、現実回答がモデル回答28の許容範囲に入らなかったり、不正確な回答をする。
運転者が複数いる場合、運転者それぞれが運転者端末14を携行する。運転者端末14ごとに質問が質問記憶部20に記憶され、モデル回答28がモデル回答記憶部22に記憶される。すなわち運転者端末14ごとに質問とモデル回答28が紐づけされる。質問送信部24は運転者端末14ごとに異なる時間に質問を送信してもよい。
[管理者端末]
管理者端末16は携行可能な端末または据え付け型のコンピュータを含む。スマートフォン、携帯電話、タブレット型コンピュータ、ラップトップ型コンピュータ、ディスクトップ型コンピュータが管理者端末16として挙げられる。管理者端末16は音声分析サーバー12から分析結果を受信し、管理者端末16に備えられたディスプレイに分析結果を表示する。スピーカーで分析結果を発してもよい。運転者の体調が異常であった場合に管理者端末16がスピーカーで警報音を発してもよい。これらのことから、管理者は運転者の体調の変化を認知することができる。
管理者は管理者端末16のディスプレイに表示される分析結果を見て、運転者の体調が異常であれば、運転者に乗務・運行の停止を指示する。管理者端末16と運転者端末14がスマートフォンまたは携帯電話であれば、それらの通話機能で乗務・運行の停止を指示してもよい。また、管理者端末16に乗務・運行の停止指令を送信するための停止指示部40を備え、その停止指示部40から運転者端末14に乗務・運行の停止指令を送信してもよい。運転者端末14のスピーカー36から停止指示を発したり、ディスプレイに停止指示を表示させたりする。
[体調検知方法]
次に本願の体調検知システム10を使用した体調検知方法について説明する。(1)運転者への質問を予め質問記憶部20に記憶しておく。さらに、運転者に予め質問し、運転者の回答をモデル回答28としてモデル回答記憶部22に記憶しておく。音声分析サーバー12から運転者端末14に質問データを送り、運転者端末14で回答してもらうことでモデル回答28を音声分析サーバー12で取得してもよい。
(2)運転者が運転時間中に質問送信部24が質問を運転者端末14に送信する。運転者端末14が起動して音声分析サーバー12と通信されたことを合図として、質問送信部24は質問の送信を開始する。送信は一定時間に複数回おこなわれる。運転者端末14の電源がオフになって音声分析サーバー12との通信が切断されると、質問送信部24は質問送信を停止する。
(3)運転者端末14は質問を受信するとスピーカー36で発し、マイク38で運転者の回答を集音する。運転者は質問を聞いて声で回答する。
(4)音声分析サーバー12が現実回答を受信すると、音声分析部26が現実回答を分析する。上記のように現実回答がモデル回答28の許容範囲の中に入っているか否か、現実回答の内容が正しいか否かでおこなう。現実回答がモデル回答28の許容範囲に入っていない、または現実回答の内容が不正確であれば分析結果を体調異常とする。現実回答がモデル回答28の許容範囲に入り、かつ現実回答の内容が正しければ分析結果を体調正常とする。
(5)分析結果は音声分析サーバー12から管理者端末16に送信される。管理者端末16に備えられるディスプレイで分析結果が表示される。管理者はディスプレイに表示される分析結果を見て、運転者の体調の変化を認知する。その分析結果が体調異常の場合に管理者から運転者に連絡をする。運転者が脳出血、脳梗塞または心筋梗塞などの病気を発症していれば乗務・運行の停止を指示し、運転者が眠気を催していれば休憩を取るように指示する。運転停止指示は両端末14、16によって行ってもよいし、他の携帯電話などを使用して行ってもよい。
以上のように、本願は運転中の運転者の体調異常を検知して、運転者に運行・乗務の停止を指示できる。運転者の病気の発症または眠気などの運転者の体調変化を認知でき、車両事故を防止しやすくなっている。音声による質問と回答を行うため、運転に支障が無い。
[実施形態2]
図7に示すように、体調検知システム42の中で車両34の自動停止装置44が利用されてもよい。自動停止装置44への停止信号が管理者端末16の停止信号生成部46で生成される。分析結果が体調異常であった場合に、管理者が管理者端末16を操作することで停止信号生成部46が停止信号を生成し、管理者端末16から車両34の自動停止装置44に停止信号を送信する。停止信号によって車両34が自動的に停止する。管理者は、停止信号を送信する前に、停止指示部40によって運転者端末14に停止指示を送信してもよい。管理者と運転者が他の通信手段を用いて連絡を取り合って、異常がないか確認してもよい。運転者に本当に異常があった場合に停止信号を送信する。
運転状況によってはすぐに回答できなかったり、声の抑揚が変化したりする場合がある。その場合に、運転者の体調が正常であるのにかかわらず、音声分析部26の分析結果が体調異常になる場合がある。そのため、運転者端末14は現実回答をキャンセルする信号を生成するキャンセル部48を備えてもよい。キャンセル部48で生成された信号は音声分析サーバー12に送信される。キャンセル部48は運転者が特定の音声をマイク38に向けて発することで、音声を分析してキャンセル信号を生成するものであってもよい。
音声分析サーバー26が現実回答を受信後の所定時間内にキャンセル信号を受信すると、音声分析部26は分析結果をキャンセルする。分析結果が体調異常であっても、その分析結果がキャンセルされる。管理者端末16にもキャンセルされた情報を送信する。管理者が運転者に運転停止を指示する前に止めることもできる。
[実施形態3]
質問およびモデル回答28は定期的に変更されてもよい。たとえば、1ヶ月毎に質問およびモデル回答28を変更し、それらを質問記憶部20とモデル回答記憶部22に記憶する。質問は同じであってもモデル回答28のみを書き換えてもよい。時間とともに運転者の発音する音が変化し、モデル回答28が変化する場合があるためである。
[実施形態4]
図8の体調検知システム50のように、音声分析サーバー12が現実回答を蓄積し、蓄積された現実回答を学習し、モデル回答記憶部22のモデル回答28を書き換えてもよい。音声分析サーバー12は現実回答を蓄積する現実回答記憶部52、現実回答を学習する回答学習部54を備える。音声分析サーバー12は現実回答を受信するたびに現実回答記憶部52に現実回答を記憶する。
回答学習部54はAI(Artificial Intelligence)によって多数の現実回答から運転者のモデル回答28および許容範囲を作成し、モデル回答記憶部22のモデル回答28および許容範囲を書き換える。運転者がいつも一定の回答をすることは不可能であり、各回答が微妙に異なるが、一の運転者が正常時に発声した多数の現実回答を回答学習部54がAIで学習することで、運転者の正常か異常かの判断の正確性を高めることができる。
(第1項)一態様に係る体調検知システムは、音声分析サーバー、運転者端末および管理者端末がネットワークによって通信可能に接続されている。前記音声分析サーバーは、運転者に対する質問を記憶した質問記憶部と、前記質問に対する運転者の音声によるモデル回答を記憶したモデル回答記憶部と、前記質問記憶部に記憶された質問を運転者端末に送信する質問送信部と、前記モデル回答と運転者の現実回答とを比較し、モデル回答と現実回答との差から運転者の体調を分析する音声分析部として機能する。前記運転者端末は、前記質問を発するスピーカーと、前記運転者の音声による現実回答を取得するマイクとして機能する。前記質問が一定時間に1または複数回おこなわれ、前記管理者端末が音声分析サーバーから運転者の体調の分析結果を取得する。
第1項に記載の体調検知システムによれば、運転者が運転中に音声で質問され回答するだけであり、運転の妨げにならない。運転中に運転者の体調変化を早期に発見し、管理者端末で結果が表示されるため、管理者から運転者に連絡して運転を停止させることができる。運転者が事故する前に運転停止させることも可能である。
(第2項)前記モデル回答と運転者の現実回答との比較が、質問から回答開始までの時間、回答を開始してから終了するまでの時間、回答する運転者の音声の抑揚、回答の正確性の少なくとも1つを含む。
第2項に記載の体調検知システムによれば、運転者の体調変化で発声がおかしくなったことを検知できる。
(第3項)前記運転者が運転する車両に自動停止装置が備えられており、前記管理者端末が自動停止装置に停止信号を送信する停止信号生成部を備える。
第3項に記載の体調検知システムによれば、運転者が車両を停止させなくても、管理者の判断で車両を停止させることができる。
(第4項)前記運転者端末が現実回答をキャンセルする信号を生成するキャンセル部を備え、前記音声分析サーバーが現実回答を受信後の所定時間内にキャンセルする信号を受信すると、音声分析部は分析した結果をキャンセルする。
第4項に記載の体調検知システムによれば、運転状況などで運転者が正確に回答できなくて体調異常と判断されても、その結果をキャンセルすることで、体調異常と判断されなくできる。
その他、本発明は、その主旨を逸脱しない範囲で当業者の知識に基づき種々の改良、修正、変更を加えた態様で実施できるものである。
10、42、50:体調検知システム
12:音声分析サーバー
14:運転者端末
16:管理者端末
18:ネットワーク
20:質問記憶部
22:モデル回答記憶部
24:質問送信部
26:音声分析部
28:モデル回答
30a、30b、30c、30d、30d'、30e、30f、30d:音素
32a、32b、32c、32d:異常の有る現実回答
34:車両
36:スピーカー
38:マイク
40:停止指示部
44:自動停止装置
46:停止信号生成部
48:キャンセル部
52:現実回答記憶部
54:回答学習部

Claims (10)

  1. 運転者に対する質問を記憶した質問記憶部と、
    前記質問に対する運転者が発声した音声であるモデル回答を記憶するモデル回答記憶部と、
    前記質問記憶部に記憶された質問を音声として出力する質問出力部と、
    質問に対する、前記運転者の音声による、モデル回答および現実回答を取得する回答取得部と、
    前記モデル回答と運転者の現実回答とを比較し、モデル回答と現実回答との差から運転者の体調を分析する音声分析部と、を備え、
    モデル回答を記憶するとき、前記質問出力部が、前記質問記憶部に記憶された質問を音声として出力し、前記回答取得部が、質問に対する、前記運転者の音声によるモデル回答を取得し、前記モデル回答記憶部が、前記回答取得部によって取得されたモデル回答を記憶し、
    運転者の体調を分析するとき、前記質問出力部は、運転者の運転時間中に、前記質問記憶部に記憶された質問を音声として出力し、前記回答取得部は、運転者の運転時間中に、質問に対する、前記運転者の音声による現実回答を取得し、前記音声分析部は、前記モデル回答と運転者の現実回答とを比較する体調検知システム。
  2. 音声分析サーバ、運転者端末および管理者端末がネットワークによって通信可能に接続されており、
    前記音声分析サーバが、
    前記質問記憶部と、
    前記モデル回答記憶部と、
    前記質問記憶部に記憶された質問を運転者端末に送信する質問送信部と、
    前記音声分析部として機能し、
    前記運転者端末が、
    前記質問出力部としてのスピーカーと、
    前記回答取得部としてのマイクとして機能し、
    前記質問送信部が一定時間に1または複数回質問を送信し、
    前記管理者端末が音声分析サーバから運転者の体調の分析結果を取得する、請求項1に記載の体調検知システム。
  3. 前記モデル回答は、質問から回答開始までの時間およびその許容範囲を含み、
    前記音声分析部は、現実回答における質問から回答開始までの時間を求め、求めた時間を前記モデル回答における質問から回答開始までの時間と比較し、前記許容範囲内である場合、運転者の体調が正常であると判断し、前記許容範囲外である場合、運転者の体調が正常ではないと判断する、請求項1または2に記載の体調検知システム。
  4. 前記モデル回答は、現実回答の回答開始から回答終了までの時間およびその許容範囲を含み、
    前記音声分析部は、現実回答における回答開始から回答終了までの時間を求め、求めた時間を前記モデル回答における回答開始から回答終了までの時間と比較し、前記許容範囲内である場合、運転者の体調が正常であると判断し、前記許容範囲外である場合、運転者の体調が正常ではないと判断する、請求項1から3のいずれかに記載の体調検知システム。
  5. 前記モデル回答は、分割された複数の音素における振幅およびその許容範囲を含み、
    前記音声分析部は、現実回答を音素に分割し、音素ごとの波形の振幅を求め、求めた振幅を前記モデル回答における音素の振幅と比較し、前記許容範囲内である場合、運転者の体調が正常であると判断し、前記許容範囲外である場合、運転者の体調が正常ではないと判断する、請求項1から4のいずれかに記載の体調検知システム。
  6. 前記モデル回答は、分割された複数の音素の波形およびその許容範囲を含み、
    前記音声分析部は、現実回答を音素に分割し、音素ごとの波形を前記モデル回答における音素の波形と比較し、前記許容範囲内である場合、運転者の体調が正常であると判断し、前記許容範囲外である場合、運転者の体調が正常ではないと判断する、請求項1から5のいずれかに記載の体調検知システム。
  7. 前記運転者が運転する車両に自動停止装置が備えられており、
    前記音声分析部が運転者の体調が正常ではないと判断した場合に、自動停止装置に停止信号を送信する停止信号生成部を備えた請求項1から6のいずれかに記載の体調検知システム。
  8. 現実回答をキャンセルする信号を生成するキャンセル部を備え、
    現実回答を受信後の所定時間内にキャンセルする信号を受信すると、音声分析部は分析した結果をキャンセルする、請求項1から7のいずれかに記載の体調検知システム。
  9. 現実回答からモデル回答を学習し、前記モデル回答記憶部に記憶されたモデル回答を書き換える回答学習部をさらに備える、請求項1から8のいずれかに記載の体調検知システム。
  10. 請求項1から9のいずれかに記載の体調検知システムにおける音声分析サーバであって、
    前記質問記憶部と、
    前記モデル回答記憶部と、
    前記質問記憶部に記憶された質問を運転者端末に送信する質問送信部と、
    前記音声分析部として機能する、音声分析サーバ。
JP2021506791A 2019-03-15 2019-03-15 体調検知システム Active JP7359201B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/010798 WO2020188623A1 (ja) 2019-03-15 2019-03-15 体調検知システム

Publications (2)

Publication Number Publication Date
JPWO2020188623A1 JPWO2020188623A1 (ja) 2020-09-24
JP7359201B2 true JP7359201B2 (ja) 2023-10-11

Family

ID=72520654

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021506791A Active JP7359201B2 (ja) 2019-03-15 2019-03-15 体調検知システム

Country Status (2)

Country Link
JP (1) JP7359201B2 (ja)
WO (1) WO2020188623A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021205970A1 (de) 2021-06-11 2022-12-15 Volkswagen Aktiengesellschaft Verfahren zur Diagnostizierung einer Krankheit, vorzugsweise einer Atemwegserkrankung
JP2023132067A (ja) * 2022-03-10 2023-09-22 生夫 本間 呼吸による健康状態測定システム、及び該呼吸による健康状態測定システム用のプログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004314750A (ja) 2003-04-15 2004-11-11 Denso Corp 車両機器操作制御装置
JP2006235772A (ja) 2005-02-23 2006-09-07 Tamotsu Yokoyama データ収集解析表示システム
JP2006230548A (ja) 2005-02-23 2006-09-07 Matsushita Electric Ind Co Ltd 体調判定装置およびそのプログラム
WO2016129276A1 (ja) 2015-02-12 2016-08-18 パナソニックIpマネジメント株式会社 情報提供方法、サーバ、情報端末装置、システム及び音声対話システム
WO2018066023A1 (ja) 2016-10-03 2018-04-12 三菱電機株式会社 運転権限移行判定装置および運転権限移行判定方法
JP2018140741A (ja) 2017-02-28 2018-09-13 パイオニア株式会社 制御装置
WO2018230562A1 (ja) 2017-06-14 2018-12-20 日本電気株式会社 通知システム、通知方法およびプログラムが格納された非一時的なコンピュータ可読媒体

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004314750A (ja) 2003-04-15 2004-11-11 Denso Corp 車両機器操作制御装置
JP2006235772A (ja) 2005-02-23 2006-09-07 Tamotsu Yokoyama データ収集解析表示システム
JP2006230548A (ja) 2005-02-23 2006-09-07 Matsushita Electric Ind Co Ltd 体調判定装置およびそのプログラム
WO2016129276A1 (ja) 2015-02-12 2016-08-18 パナソニックIpマネジメント株式会社 情報提供方法、サーバ、情報端末装置、システム及び音声対話システム
WO2018066023A1 (ja) 2016-10-03 2018-04-12 三菱電機株式会社 運転権限移行判定装置および運転権限移行判定方法
JP2018140741A (ja) 2017-02-28 2018-09-13 パイオニア株式会社 制御装置
WO2018230562A1 (ja) 2017-06-14 2018-12-20 日本電気株式会社 通知システム、通知方法およびプログラムが格納された非一時的なコンピュータ可読媒体

Also Published As

Publication number Publication date
JPWO2020188623A1 (ja) 2020-09-24
WO2020188623A1 (ja) 2020-09-24

Similar Documents

Publication Publication Date Title
US10078871B2 (en) Systems and methods to identify and profile a vehicle operator
JP6684295B2 (ja) 管理支援システム
US20080147262A1 (en) Vehicle help system and method
US10752262B2 (en) In-vehicle haptic output
US10717443B2 (en) Occupant awareness monitoring for autonomous vehicles
JP6714036B2 (ja) 管理支援システム
EP2942012A1 (en) Driver assistance system
JP7359201B2 (ja) 体調検知システム
US10293830B2 (en) Systems and methods for recognizing and analyzing emotional states of a vehicle operator
CN113192500B (zh) 代理装置、代理系统以及非暂时性记录介质
JP7025457B2 (ja) 管理支援システム
JP2021123133A (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
JPH1044894A (ja) 車両用事故対処装置
JP7276165B2 (ja) エージェント装置、エージェントシステム、及びエージェントプログラム
US20240041372A1 (en) Psychomotor vigilance testing for persons tasked with monitoring autonomous vehicles
US20240083245A1 (en) Driver support system, driver support method, and storage medium
WO2025044417A1 (zh) 声音信号处理方法及车辆
JP7768238B2 (ja) 情報処理装置、業務管理システム、業務管理方法、及び、コンピュータプログラム
US20240317135A1 (en) Automated Motor Vehicle and Method for Controlling the Automated Motor Vehicle
JP5959784B2 (ja) 車両情報通知装置
CN114834456A (zh) 向车辆的驾驶员提供辅助信息的方法和装置
JP7708559B2 (ja) 体調管理装置、体調管理システム、車載器、体調管理方法、及び体調管理プログラム
KR100899660B1 (ko) 운전 집중도 알림 장치 및 방법
JP4936147B2 (ja) 作業監視システム
WO2025262824A1 (ja) 操作支援方法、操作支援装置、プログラム及びコンピュータ読み取り可能な記録媒体

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210910

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210910

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20220518

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220906

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230209

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230410

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230510

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230911

R151 Written notification of patent or utility model registration

Ref document number: 7359201

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151