TW201921905A - 使用語音和感測器資料擷取的緊急回應 - Google Patents
使用語音和感測器資料擷取的緊急回應 Download PDFInfo
- Publication number
- TW201921905A TW201921905A TW107129750A TW107129750A TW201921905A TW 201921905 A TW201921905 A TW 201921905A TW 107129750 A TW107129750 A TW 107129750A TW 107129750 A TW107129750 A TW 107129750A TW 201921905 A TW201921905 A TW 201921905A
- Authority
- TW
- Taiwan
- Prior art keywords
- emergency
- message
- user equipment
- service provider
- processor
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/90—Services for handling of emergency or hazardous situations, e.g. earthquake and tsunami warning systems [ETWS]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/169—Annotation, e.g. comment data or footnotes
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/016—Personal emergency signalling and security systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/50—Centralised arrangements for answering calls; Centralised arrangements for recording messages for absent or busy subscribers ; Centralised arrangements for recording messages
- H04M3/51—Centralised call answering arrangements requiring operator intervention, e.g. call or contact centers for telemarketing
- H04M3/5116—Centralised call answering arrangements requiring operator intervention, e.g. call or contact centers for telemarketing for emergency applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Emergency Management (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Marketing (AREA)
- Medical Informatics (AREA)
- Epidemiology (AREA)
- General Engineering & Computer Science (AREA)
- Primary Health Care (AREA)
- Artificial Intelligence (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Alarm Systems (AREA)
- Telephonic Communication Services (AREA)
Abstract
提出了用於使用語音和感測器資料擷取的緊急回應的方法、系統、電腦可讀取媒體和裝置。一種示例性方法包括由使用者設備將緊急撥叫請求發送到緊急服務提供者;在緊急撥叫請求被應答之前:由使用者設備記錄包括語音信號的音訊信號;並且基於語音信號從辨識出的詞語中獲得一或多個關鍵字;並且在偵測到緊急撥叫連接之後:向緊急服務提供者產生訊息,該訊息包括基於關鍵字的至少一個註釋;並且由使用者設備將該訊息發送到緊急服務提供者。
Description
本案大體而言係關於一種緊急回應系統及方法,且更特定言之係關於使用語音和感測器資料擷取的緊急回應。
個人緊急回應系統(PERS)可以由老年人、殘疾人或者處於跌倒傷害風險或具有持續或急性醫療狀況的人使用。在典型情況下,人藉由按下小型可穿戴設備上的按鈕來啟動PERS設備,該按鈕可以啟動設備本身或其家中的另一固定設備。一旦啟動,通常設備會聯絡撥叫中心,此時與患者進行對話(「你還好嗎?」、「你能夠移動嗎?」、「我們正在派遣救護車」,等等)。撥叫中心隨後基於與患者的互動(「我已經摔倒,不能起床」)做出決定。類似地,緊急排程可以藉由撥打緊急電話號碼(例如911)來完成。一旦操作者應答撥叫,她可以從撥叫者獲得關於緊急情況的性質和位置的資訊,並且派遣適當的回應者,例如員警、救護車、消防車等。
描述各種實例以用於使用語音和感測器資料擷取的緊急回應。
根據本案的一種示例性方法包括由使用者設備將緊急撥叫請求發送到緊急服務提供者;在應答緊急撥叫請求之前:由使用者設備記錄包括語音信號的音訊信號;並且基於語音信號從辨識出的詞語中獲得一或多個關鍵字;並且在偵測到緊急撥叫連接之後:向緊急服務提供者產生訊息,該訊息包括基於關鍵字的至少一個註釋;並且由使用者設備將該訊息發送到緊急服務提供者。
根據本案的一個示例性設備包括:麥克風;通訊網路介面;非暫態電腦可讀取媒體;及處理器,其與麥克風、通訊網路介面和非暫態電腦可讀取媒體通訊,處理器被配置為執行儲存在非暫態電腦可讀取媒體中的處理器可執行指令,以用於:使用通訊網路介面將緊急撥叫請求發送到緊急服務提供者;在應答緊急撥叫請求之前:記錄由麥克風獲得的音訊信號,音訊信號包括語音信號;並基於語音信號從辨識出的詞語中獲得一或多個關鍵字;在偵測到緊急撥叫連接之後:向緊急服務提供者產生訊息,該訊息包括基於關鍵字的至少一個註釋;並將該訊息發送到緊急服務提供者。
根據本案的一個示例性裝置包括用於將緊急撥叫請求發送到緊急服務提供者的構件;在緊急撥叫請求被應答之前:用於在緊急撥叫請求被應答之前記錄音訊信號的構件,音訊信號包括語音信號;及用於基於語音信號從辨識的詞語中獲得一或多個關鍵字的構件;用於在偵測到緊急撥叫連接之後向緊急服務提供者產生訊息的構件,該訊息包括基於關鍵字的至少一個註釋;及用於將訊息發送到緊急服務提供者的構件。
根據本案的一個示例性非暫態電腦可讀取媒體包括處理器可執行指令,其被配置為使處理器將緊急撥叫請求發送到緊急服務提供者;在緊急撥叫請求被應答之前:記錄音訊信號,音訊信號包括語音信號;並基於語音信號從辨識出的詞語中獲得一或多個關鍵字;在偵測到緊急撥叫連接之後:向緊急服務提供者產生訊息,該訊息包括基於關鍵字的至少一個註釋;並將該訊息發送到緊急服務提供者。
根據本案的另一示例性方法包括從使用者設備接收訊息,該訊息包括與緊急情況相關聯的至少一個註釋,該使用者設備與個人相關聯;識別與個人相關聯的醫療記錄;並基於緊急情況來更新醫療記錄。
根據本案的另一示例性設備包括通訊網路介面;非暫態電腦可讀取媒體;及處理器,其與通訊網路介面和非暫態電腦可讀取媒體通訊,處理器被配置為執行儲存在非暫態電腦可讀取媒體中的處理器可執行指令,以用於:使用通訊網路介面從使用者設備接收訊息,該訊息包括與緊急情況相關聯的至少一個註釋,該使用者設備與個人相關聯;識別與個人相關聯的醫療記錄;並基於緊急情況來更新醫療記錄。
根據本案的另一示例性裝置包括:用於從使用者設備接收訊息的構件,該訊息包括與緊急情況相關聯的至少一個註釋,該使用者設備與個人相關聯;用於辨識與個人相關聯的醫療記錄的構件;及用於基於緊急情況來更新醫療記錄的構件。
根據本案的另一示例性非暫態電腦可讀取媒體包括處理器可執行指令,其被配置為使處理器用於:使用通訊網路介面從使用者設備接收訊息,該訊息包括與緊急情況相關聯的至少一個註釋,使用者設備與個人相關聯;識別與個人相關聯的醫療記錄;並基於緊急情況來更新醫療記錄。
提及該等說明性實施例不是為了限制或限定本案的範圍,而是提供實施例以幫助理解本案。在提供了進一步的描述的具體實施方式中論述了說明性實例。藉由考察本說明書,可以進一步理解由各種實例提供的優點。
本文在使用語音和感測器資料擷取的緊急回應的上下文中描述了實例。本領域的一般技藝人士將認識到,以下描述僅是說明性的,並不意欲以任何方式進行限制。現在將詳細參考如附圖中所示的實例的實現方式。在整個附圖和以下描述中將使用相同的元件符號來代表相同或相似的項目。
為了清楚起見,並未圖示和描述本文描述的實例的所有一般特徵。當然,應該瞭解到的是,在開發任何此類實際實現方式時,必須做出許多特定於實現方式的決策,以便實現開發人員的特定目標,例如遵守與應用和傳輸量相關的約束,以及該等具體目標因實現方式而異,並且因開發人員而異。
當緊急情況出現時,PERS、911或其他緊急回應服務(「ERS」)可以從用戶或其他使用者接收語音撥叫。緊急情況可能與健康有關、與犯罪有關等。但是,當個人聯絡ERS時,在通訊開始和當ERS開始與個人通訊時之間存在時間延遲。在此間隔期間,有關緊急情況的重要資訊可用於擷取或偵測;但是,該等資訊在ERS通訊開始時就會丟失。例如,使用者可以說出與緊急情況有關的詞語或短語或緊急情況的原因,或者若沒有擷取,則可能丟失使用者語音或甚至環境聲音的各態樣。
在使用語音和感測器資料擷取的緊急回應的說明性實例中,當個人啟動與使用者設備的用於ERS的通訊時,例如藉由撥打911(或999,或另一個緊急回應號碼),或啟動專用PERS設備,使用者設備偵測到緊急通訊並立即啟動使用者設備內的麥克風並開始記錄音訊信號。另外,使用者設備亦可以開始記錄來自使用者設備內、由使用者佩戴,或者在個人或使用者設備附近可用的一或多個感測器的感測器資訊。
在該實例中,一旦個人啟動通訊,使用者設備就記錄音訊信號並對接收的音訊信號執行語音辨識。在此期間,個人可以說出指示緊急情況的特徵的詞語、短語或聲音,例如緊急情況的原因、緊急情況的性質、個人的位置、識別出現的其他個人,等等。例如,她可能會描述症狀、發生了什麼,或者可能會產生非言語的雜訊。可以包括語音資料的音訊資料被記錄和處理以識別與緊急情況相關的資訊。例如,若個人跌倒並傷到了她的臀部,她可以按下設備上的按鈕並立即開始描述發生了什麼 - 「我已經摔倒了,並且我的臀部真的很疼」 - 或者設備可以基於指示跌倒或其他事件的聲音的記錄的音訊來偵測到緊急情況。個人的語音可以由設備提示,或者其可以簡單地記錄個人在事件發生後說話時所說的任何內容。可以將該記錄的語音提供給語音辨識技術,以辨識由個人發出的詞語或用語。
隨後在語音辨識輸出中搜尋特定關鍵字或用語。當識別出此種關鍵字或用語時,其用於向ERS產生訊息並且作為「註釋」嵌入在訊息中。在該上下文中的註釋指的是與緊急情況相關的關鍵字或其他標記的任何結合,例如緊急情況的原因、緊急情況的性質等。因此,可以利用諸如日期、時間、個人姓名、個人的位置以及從辨識的語音獲得的註釋之類的邏輯資訊來建構訊息。
另外,可以將音訊信號提供給聲音辨識技術,該聲音辨識技術可以辨識聲音,例如呻吟聲、破碎玻璃、槍聲等。隨後,亦可以基於任何辨識的聲音產生註釋,並且同樣地將該註釋合併到訊息中。例如,聲音辨識可以識別聲音,例如呻吟聲,但是使用者設備可以產生指示與偵測到的呻吟聲相對應的「疼痛」的註釋,或者可以產生指示與偵測到的深呼吸相對應的「睡眠」的註釋。此外,使用者設備可以配備有一或多個感測器,或者與該等感測器通訊,並且因此此種感測器資訊可以合併到訊息中的一或多個中。
一旦聯絡了ERS並且使用者設備正在與其通訊,則使用者設備將訊息發送到ERS,其中ERS可以自主地處理該訊息以識別緊急情況的性質以及用於此類緊急情況的預設回應協定。此外,ERS可以基於註釋來修改預設回應協定。例如,註釋可以指示個體有心臟病發作,但是該個體亦是已知的阿片類藥物使用者。因此,可以修改預設的回應協定以通知任何緊急回應者準備好施用一劑或多劑Narcan®或類似的過劑量藥物。
另外,在通訊程序期間,使用者設備繼續記錄音訊信號,以及從其他感測器獲得資訊,例如脈搏率、呼吸率等。使用者設備可以繼續辨識來自個人的記錄語音的關鍵字或用語,該等可以用於產生一或多個後續訊息,包括可以提供給ERS的進一步註釋、感測器資訊等,隨後ERS可以進一步修改緊急回應協定。使用者設備亦可以存取關於使用者的醫療資訊,例如儲存在使用者設備上的緊急醫療資訊,或者可從醫療保健提供者獲得的電子健康記錄(「EHR」)。該等資訊(例如,關於慢性疾病、藥物處方等的資訊)亦可以用於決定可能的緊急情況,或者可以合併到一或多個訊息中。
在該實例中,使用者設備亦將訊息發送到個人的心臟病專家,該訊息指示該個人似乎已經遭受心臟病發作,或者向個人的配偶發送訊息,該個人的配偶可以被通知返回家中以幫助該個人。若個人參與臨床試驗,亦可以基於緊急情況的性質將其他訊息發送到其他第三方,例如個人的醫生、醫療保健提供者或甚至臨床研究組織。
提供該說明性實例以向讀者介紹本文所論述的一般標的,並且本案不限於該實例。以下部分描述了用於使用語音和感測器資料擷取的緊急回應的系統和方法的各種附加的非限制性實例和多個實例。
現在參考圖1,圖1圖示用於使用語音和感測器資料擷取的緊急回應的示例性環境100。環境100包括具有使用者設備110的個人101。該實例中的使用者設備110是蜂巢設備並且可以採用蜂巢網路來撥打和接收蜂巢式電話撥叫,瀏覽網際網路上的網頁,等等。為了提供此種功能,使用者設備110連接到蜂巢收發器120,蜂巢收發器120提供對網路130的存取,網路130繼而提供對各種其他設備和系統的存取。在該實例中,語音辨識服務112可經由網路130可用,ERS提供者或系統140、健康護理提供者150和儲存在雲儲存媒體中的個人健康記錄160亦可經由網路130可用。
在個體101經歷緊急情況(例如健康緊急情況)的情況下,她可以藉由撥打緊急號碼(例如911)或藉由按下按鈕來啟動PERS設備來聯絡ERS系統140。在使用者撥打緊急號碼之後,使用者設備110啟動其麥克風,並且在一些實例中,啟動其他感測器,例如相機、加速度計等,並開始記錄音訊信號。隨後,使用者設備110經由蜂巢收發器120和網路130將音訊信號串流式發送到語音辨識服務112。作為回應,使用者設備110從語音辨識系統112接收辨識的詞語的串流。在一些實例中,語音辨識系統112亦可以提供附加資訊,例如可以指示緊急情況的模糊語音、損壞語音或語音的其他特徵的指示。
當從語音辨識系統112接收辨識的詞語時,使用者設備110從辨識的詞語中獲得包括關鍵用語的關鍵字。在獲得關鍵字之後,使用者設備110可以產生要發送到ERS系統140的訊息,該訊息包括關鍵字,一旦其被合併到訊息中就被稱為「註釋」,並且在一些實例中,訊息亦可以包括記錄的音訊信號或一或多個已識別的緊急情況。此外,由於可以在撥叫被應答之前的一段時間內獲得多個關鍵字,因此使用者設備110可以繼續將資訊合併到訊息中,或者產生多個訊息,直到撥叫被應答為止。
在一些實例中,使用者設備110可以嘗試決定個人101所經歷的緊急情況。使用者設備110可以預先配置有與不同緊急情況相關聯的一或多個範本,並且範本可以包括與相應的緊急情況相關聯的關鍵字。因此,用於心臟病發作緊急情況的範本可以包括諸如「左臂」、「刺痛」、「胸部沉量」、「胸痛」等關鍵字。此外,關鍵字可以包括規則運算式或其他關鍵字範本,因為遇到緊急情況的一個使用者可能並不總是使用與另一使用者相同的措辭。例如,關鍵字可以表示為規則運算式,例如「左*臂」或「沉量*胸部」或「胸部*沉量」。因此,用於緊急情況的範本可以是靈活的並且涵蓋範圍廣泛的可能關鍵字。
為了偵測緊急情況,使用者設備110可以將獲得的關鍵字與緊急情況範本進行比較,以決定特定範本對應於個人緊急情況的機率。例如,每個範本不僅可以包括關鍵字而且亦可以包括加權資訊,使得當識別出一或多個關鍵字時,可以使用權重來針對範本計算分數。隨後可以對由使用者設備110存取的各種範本的分數進行比較或排序以識別最高分數。隨後可以將與所識別的範本相關聯的緊急情況合併到訊息中。
一些實例可以採用機器學習(「ML」)技術或引擎來基於所獲得的關鍵字或者根據從使用者設備110或連接到使用者設備110的其他設備(例如醫療設備或感測器)獲得的感測器資料來決定緊急情況。可以訓練ML技術以基於某些關鍵字、感測器資料或發聲(例如,呻吟聲、呼吸雜訊等)來辨識某些緊急情況。因此,可以將獲得的關鍵字提供給ML技術,ML技術可以決定可能的緊急情況。此外,隨著獲得新關鍵字或感測器資訊,ML技術可以隨時間反覆運算地執行。
在一些實例中,除了從辨識的詞語獲得關鍵字之外,使用者設備110亦可以獲得與個人101相關聯的一或多個健康記錄。例如,使用者設備110可以從健康記錄系統160存取或獲得個人的HER中的一或多個。EHR可以包括諸如慢性健康問題、最近的重大健康事件(例如,手術、心臟病發作、中風、骨折等)、過敏、藥物處方等資訊。從EHR獲得的資訊可以與獲得的關鍵字結合使用,以説明決定面對個人的緊急情況,或者可以在一或多個訊息中提供給ERS系統140。
在來自使用者設備110的緊急撥叫連接到ERS系統140之後,使用者設備110將已經產生的任何訊息發送到ERS系統140,ERS系統140隨後可以以任何方式使用訊息內的資訊。在一個實例中,ERS系統140可以使用訊息來將附加的上下文資訊提供給排程員。在一些實例中,訊息可以用於存取預定義的緊急回應範本,或者用於修改標準緊急回應。例如,若ERS系統140派遣救護車,則來自該訊息的資訊可用於指示緊急救援人員對除顫器充電,準備一劑Narcan®,或通知醫院的急診室有關潛在的中風受害者,等等。在一些實例中,訊息可以用於自動排程緊急服務。
此外,在已經與ERS系統140建立了來自使用者設備110的緊急撥叫之後,使用者設備110可以繼續記錄音訊信號並獲得關鍵字。當ERS系統140難以聽到或難以理解使用者時,例如由於品質差的音訊連接,或者若對ERS系統140的撥叫被中斷並且必須被重撥,或者在連接撥叫的閒置時段期間(例如若個人101被擱置),可以採用此種功能來輔助。使用者設備110仍然能夠獲得關鍵字並將帶有註釋的訊息發送到ERS系統140,或者提供所記錄的音訊信號,這可以幫助確保向ERS系統140提供儘可能多的關於個人的緊急情況的資訊。
在該實例中,ERS系統140是911系統,其向公眾的任何成員提供緊急服務,並且可以派遣火災、員警或醫療緊急回應者。然而,在一些實例中,ERS系統140可以是由公司或醫療保健提供者操作的專有ERS系統。例如,個人101可訂閱PERS提供者,PERS提供者提供供個人佩戴的可穿戴設備和位於個人住所內的PERS集線器。若使用者啟動可穿戴設備,則其將緊急請求發送到PERS集線器,PERS集線器繼而向PERS提供者產生緊急請求。隨後,PERS提供者可以如本文所論述的一般回應撥叫。
在一些實例中,除了聯絡ERS系統140之外,使用者設備110亦可以將一或多個訊息發送到一或多個第三方,例如個人的醫療服務提供者,包括醫生的辦公室、專家的辦公室、醫院、臨床研究組織(「CRO」)等。發送到第三方的訊息可以是發送到ERS系統140的相同訊息,或者可以包括不同的資訊,例如患者的位置,患者的位置可能已經經由另一種機制(例如E911)提供給ERS系統140;患者識別符,例如,若患者是臨床試驗的參與者;等等。
因此,圖1中所示的系統100提供了一個穩健的系統,經由該系統可以收集關於個人的緊急情況的儘可能多的資訊,該資訊可以被提供給ERS系統140。系統100允許收集此種資訊,即使沒有與ERS系統140建立連接。因此,系統100可以使ERS系統能夠定製其對個人特定緊急情況和需求的回應。
現在參考圖2,圖示用於使用語音和感測器資料擷取的緊急回應的示例性系統200。在該實例中,系統200體現在一或多個計算設備或可穿戴計算設備中,這將在下文關於圖3-圖4更詳細地論述。系統200包括多個感測器,其將感測器資訊提供給訓練的機器學習(「ML」)引擎210。訓練的ML引擎210使用所接收的資訊來產生緊急情況212。緊急情況212隨後可以被傳送到ERS系統,例如圖1中所示的ERS系統140。
如前述,經訓練的ML引擎可以接收由語音辨識技術產生的辨識的詞語,例如從語音辨識服務112接收的辨識的詞語。該實例中的ML引擎210已經使用基於不同緊急情況的典型特徵產生的標記的感測器資料集進行訓練。例如,與不同健康緊急情況相關聯的關鍵字和關鍵詞序列可以被群組在一起並作為訓練集連同相關聯的緊急情況一起提供給ML引擎210。其他類型的緊急情況,例如犯罪、火災、洪水、車輛事故等,可以以類似的方式訓練以建立經訓練的ML引擎210。合適的訓練技術可以包括監督訓練技術或連續最佳化技術。在該實例中的訓練期間,可以將ML引擎210輸出的緊急情況與期望輸出進行比較,並且可以將輸出中的任何錯誤回饋到ML引擎210中以修改ML引擎210。一旦訓練了ML引擎210,經訓練的ML引擎210從感測器中的一或多個接收感測器資訊,並將感測器資訊應用於與患者相關聯的經訓練的ML技術,以產生微活動212和巨集活動214。可根據不同實例採用任何合適的ML技術。
另外,示例性系統200可以針對個人採用一或多個EHR 240a-c,並且亦包括脈搏感測器220、血氧感測器222和ECG感測器224。可以根據不同的實例採用其他感測器或感測器類型。感測器可以合併到一或多個計算設備中,或者可以與個人的計算設備中的任何一個分開和分離。例如,個人可以佩戴固定在其皮膚上的一或多個ECG感測器,隨後一或多個ECG感測器可以經由有線或無線通訊技術與計算設備進行通訊。因此,圖2中示出的系統200可以體現在單個設備中,或者可以分佈在多個互連設備中。
圖2中所示的各種感測器將感測器資訊發送到經訓練的ML引擎210,但是可以在提供給經訓練的ML引擎210之前對信號中的一或多個進行濾波或以其他方式處理。例如,脈搏感測器220可以使用任何合適的脈搏感測器偵測個體的脈搏,例如使用紅外光發射器和偵測器來偵測個體的脈搏。隨後,脈搏感測器220可以根據不同的實例向經訓練的ML引擎210提供任何相關資訊,例如脈搏率、單個脈搏(有或沒有時間戳記)、脈搏特徵、脈搏波速度等。可替代地,脈搏感測器220可以提供來自偵測器中的一或多個的原始輸出,隨後可以由經訓練的ML引擎210或另一種技術處理該原始輸出以獲得相關的脈衝資訊。類似地,其他感測器可以將原始的、經濾波的或經處理的感測器資訊提供給經訓練的ML引擎210。
在該實例中,經訓練的ML引擎210在ERS系統140處執行,並且可以接受從使用者設備接收的資訊,包括辨識的詞語、從使用者設備內或以其他方式與個人通訊的感測器獲得的資訊。此外,經訓練的ML引擎可以接受EHR,由個人提供的EHR的部分,從一或多個EHR提取的資訊,或者在一些實例中,經訓練的ML引擎可以從醫療保健提供者請求一或多個EHR,或來自一或多個EHR的資訊。隨後,經訓練的ML引擎210處理所接收的輸入以決定緊急回應程式212,或者修改現有的緊急回應程式212。
例如,若接收到緊急撥叫但是沒有提供任何資訊,則ERS系統140可以採用派遣員警、消防車和救護車的預設緊急回應。若ERS系統140被告知醫療緊急情況,但沒有提供進一步的細節,則ERS系統140可以預設派遣救護車。但是,使用圖2的示例性系統200,ERS系統140從使用者設備接受辨識的詞語230並決定緊急情況的性質,例如特定的醫療或健康問題,並且可以修改回應以從配備有創傷中心或隨叫隨到的心臟病專家的醫院派遣救護車。在一些實例中,經訓練的ML引擎210亦可以產生要提供給回應人員的資訊,例如可能需要的特定裝備或藥物,例如給除顫器充電,準備藥物劑量或止痛藥等。由此,經訓練的ML引擎210可以基於關於特定緊急情況獲得的特定的資訊來修改或定製緊急回應程式。
然而,在一些實例中,經訓練的ML引擎210可以由使用者設備執行以決定緊急情況。經訓練的ML引擎210接受辨識的詞語作為輸入。在一些實例中,其亦可以接受可以提供或可用的感測器或EHR資訊。隨後,經訓練的ML引擎210可以決定最可能的緊急情況212或與多個緊急情況相關聯的機率,並且使用者設備可以將緊急情況212提供給ERS系統。
現在參考圖3,圖3圖示用於使用語音和感測器資料擷取的緊急回應的示例性計算設備300。示例性計算設備300包括處理器310、記憶體320、顯示器330、使用者輸入和輸出設備340、麥克風350、脈搏感測器360、ECG感測器370和血氧感測器380,其經由匯流排302彼此通訊。此外,計算設備300包括三個無線收發器312、322、332和相關聯的天線314、324、334。處理器310被配置為執行儲存在記憶體320中的處理器可執行程式碼以執行根據本案的用於使用語音和感測器資料擷取的緊急回應的一或多個方法。
在該實例中,計算設備300是智慧型電話。然而,計算設備可以是被配置為接收感測器信號並與ERS系統(例如ERS系統140)進行通訊的任何計算設備。例如,計算設備300是整合為PERS的一部分的可穿戴設備。在一個實例中,可穿戴計算設備可以直接與ERS系統140進行通訊;然而,在一些實例中,可穿戴計算設備可以與位於個人住所內的PERS集線器進行通訊。隨後,PERS集線器可以將發送的緊急請求中繼到ERS系統,該ERS系統隨後可以與PERS集線器或直接與PERS設備建立通訊。
根據本案的合適計算設備的其他實例包括膝上型電腦、桌上型電腦、平板電腦、平板電話、衛星電話、蜂巢式電話、專用視訊會議設備、IOT集線器、虛擬助理設備(諸如Alexa®、Home®,等等)、可穿戴設備(諸如智慧手錶、耳塞、耳機、Google Glass®等)等。此外,在一些實例中,計算設備300可以不包括感測器,而是可以作為計算設備操作,例如醫療保健提供者處用於ERS系統的伺服器等。
在該實例中,智慧型電話300配備有無線收發器312、322、332和相對應的天線314、324、334,天線被配置為使用任何合適的無線技術與能夠根據以下協定中的任何一個發送和接收RF信號的任何設備、系統或網路進行無線通訊:IEEE 16.11標準,或任何IEEE 802.11標準、BT標準、分碼多工存取(CDMA)、分頻多工存取(FDMA)、分時多工存取(TDMA)、行動通訊全球系統(GSM)、GSM /通用封包式無線電服務(GPRS)、增強型資料GSM環境(EDGE)、地面集群無線電(TETRA)、寬頻CDMA(W-CDMA)、進化資料最佳化(EV-DO)、1xEV-DO、EV-DO Rev A、EV-DO Rev B、高速封包存取(HSPA)、高速下行鏈路封包存取(HSDPA)、高速上行鏈路封包存取(HSUPA)、進化的高速封包存取(HSPA +)、長期進化(LTE)、AMPS,或用於在無線、蜂巢或物聯網路(IOT)網路內進行通訊的其他已知信號,例如利用3G、4G或5G或其進一步的實現方式技術的系統。另外,一或多個收發器312、322、332可以被配置為GNSS接收器,例如GPS接收器,或者由GNSS接收器替換。
儘管圖3中示出的示例性計算設備300採用無線通訊技術,但是在一些實例中,示例性計算設備300可以採用一或多個有線通訊技術,包括傳統的POTS(普通老式電話系統)來將撥叫請求發送到ERS系統140。
示例性計算設備300亦可以被配置為作為ERS系統140來操作,但是在此種配置中,其可以不包括圖3中所示的感測器,或者可以包括一或多個有線網路介面,其可以包括一或多個POTS介面。
現在參考圖4,圖4圖示用於使用語音和感測器資料擷取的緊急回應的示例性方法400。將關於圖1中示出的系統100和圖3中示出的示例性計算設備300論述圖4的方法400。然而,應當瞭解到,可以根據不同的實例而採用根據本案的任何合適的系統或計算設備。
在方塊410處,使用者設備110將緊急撥叫請求發送到緊急服務提供者,例如圖1的ERS系統140。在該實例中,個人101在他們的智慧型電話上撥打911;然而,在一些實例中,個人101可以產生文字或簡訊服務(「SMS」)訊息並將其發送到911或其他緊急號碼。在一些實例中,使用者設備101可以是PERS元件,例如可穿戴設備,其中可穿戴設備將緊急撥叫請求發送到個人住宅中的PERS集線器,PERS集線器繼而將緊急撥叫請求發送到ERS系統140。用於執行關於方塊420a-c描述的功能的構件可以包括使用者設備110、無線收發器312-332和天線314-334中的一或多個,或者上文關於圖1-3所描述的示例性計算設備300。
方法400至少進行到方塊420c,但是亦可以基本上同時進行到方塊420a或420b中的一或多個,這取決於可用的感測器或健康記錄。此外,應當瞭解到,方法400可以在實際發送緊急撥叫請求之前進行到方塊420a-c。例如,若使用者撥打911並按下「撥號」或「開始撥叫」圖示以啟動緊急撥叫,則使用者設備110可以偵測在使用者實際啟動撥叫之前正在撥打的緊急號碼。在此種實例中,方法400可以適當地立即進行到方塊420a-c。此外,若使用者撥打緊急號碼但未能啟動撥叫,則使用者設備110可以在沒有來自個人的進一步輸入的情況下自主地啟動撥叫。例如,若在方塊430處,使用者設備110偵測到緊急情況並且決定撥叫未被啟動,則使用者設備110可以在繼續執行根據本案的示例性方法的同時自主地發送緊急撥叫請求。然而,在一些實例中,使用者可能無意中開始撥打緊急號碼,但是取消撥叫 - 例如,使用者撥打911而不是919。在此種實例中,使用者設備可以在決定尚未進行緊急撥叫之後終止方法400。
在方塊420a處,使用者設備110從一或多個感測器接收一或多個感測器信號。例如,使用者設備110可以包括一或多個生理感測器或與之通訊,該生理感測器例如脈搏感測器360、ECG感測器370、血氧感測器380等。從一或多個感測器接收的感測器資訊可以被儲存或作為輸入提供到經訓練的ML引擎,或者可以合併到要提供給ERS系統140的一或多個訊息中。然而,若使用者設備110上沒有可用的感測器或者沒有感測器與使用者設備110通訊,則根據一些實例,可以跳過或不包括方塊420a。
在方塊420b處,使用者設備110獲得針對個人101的一或多個健康或醫療記錄,例如一或多個EHR。在該實例中,使用者設備110從健康記錄160雲儲存區獲得一或多個EHR。在一些實例中,使用者設備110可以保持儲存在記憶體320中的健康記錄的副本,或者可以保持從先前獲得的健康記錄或從先前輸入到使用者設備110的醫療資訊中獲得的概要資訊,例如任何慢性健康問題、處方、過敏、血型資訊、緊急連絡人等的標識,以在獲得一或多個EHR的副本時進行存取。
在方塊420c處,使用者設備110啟動使用者設備110上的一或多個麥克風並開始記錄音訊信號。記錄的音訊信號可以包括環境聲音、由個人101或附近的其他人說出的詞語、由個人101做出的雜訊等。隨後可以將記錄的音訊信號儲存在使用者設備的記憶體320中。在一些實例中,記錄的音訊信號可以被編碼或壓縮並發送到語音辨識服務112,或者可以被提供給由使用者設備110執行的語音辨識技術。根據不同實例的合適的語音辨識技術可以採用神經網路,包括深度神經網路;隱式瑪律可夫模型(「HMM」);光譜或倒譜分析技術;動態時間扭曲技術;等等。此外,在一些實例中,可以將記錄的音訊信號提供給語音辨識服務112和由使用者設備110執行的語音辨識技術兩者。
用於壓縮音訊信號的合適的編碼或壓縮技術包括任何已知的音訊或語音編碼技術,包括工業標準的半速率轉碼器(「HR」)、全速率轉碼器(「FR」)、增強的全速率編碼(「EFR」)、自我調整多速率轉碼器(「AMR」)、MPEG-1音訊層3(「MP3」)技術等。
用於執行關於方塊420a-c描述的功能的構件可以包括使用者設備110、語音辨識服務112、一或多個感測器或上文關於圖1-3描述的示例性計算設備300。
在方塊422處,使用者設備110基於來自語音辨識技術的辨識的詞語來識別一或多個關鍵字。在該實例中,使用者設備110從語音辨識服務112接收辨識的詞語,並從接收的辨識的詞語中識別關鍵字。為此,使用者設備110存取與可以指示與緊急情況相關聯的詞語或用語的不同緊急情況相關聯的一或多個範本。然而,在一些實例中,可以向使用者設備110提供關鍵字或用語的清單,而不是用於緊急情況的範本。對於任何匹配,使用者設備110可以儲存指示所識別的關鍵字的記錄。用於執行關於方塊422描述的功能的構件可以包括上文關於圖1-3描述的使用者設備110或示例性計算設備300。
在方塊430處,使用者設備110基於所識別的關鍵字來決定緊急情況。若來自方塊420a的健康記錄資訊或來自方塊420b的感測器資訊可用,則使用者設備110可以基於所識別的關鍵字以及健康記錄資訊或感測器資訊中的任一個或兩者來決定緊急情況。在該實例中,使用者設備110執行經訓練的ML技術210以決定一或多個緊急情況。然而,在一些實例中,使用者設備110可以藉由決定與一或多個緊急情況相關聯的機率來決定一或多個緊急情況。
在一個實例中,使用者設備110可以基於與緊急情況相關聯的範本來決定緊急情況的機率。例如,使用者設備110可以存取範本並從方塊422決定對應於由範本識別的詞語和用語的識別的關鍵字。隨後,使用者設備110可以從與對應於所識別的關鍵字的詞語和用語相關聯的範本存取加權資訊,並計算與緊急情況相關聯的機率分數。隨後,使用者設備110可以計算一或多個其他緊急情況的機率分數,並基於機率分數對緊急情況進行排名。
現在參考圖5,圖5圖示橫條圖,該橫條圖表示基於沿橫條圖的X軸表示的每個緊急情況的相應機率分數的緊急情況的排序。應當注意,該機率表示偵測到特定緊急情況的機率,因此,在不同實例中,所有緊急情況的總機率分數可以總和大於(或小於)100%。在該實例中,可以看出,心臟病發作緊急情況具有92%的機率,而22%的次最高機率與過敏反應相關聯。因此,在該實例中,使用者設備110可以將緊急情況識別為心臟病發作。然而,在一些實例中,若多個緊急情況具有大於參考閾值的機率,例如75%,則使用者設備110可以識別每個緊急情況。通常,使用者可能同時經歷多個緊急情況,並且因此在一些實例中可能需要識別多個緊急情況,例如中風和跌倒。
再次參考圖4,在一些實例中,使用者設備110可以不決定緊急情況,因此可以不執行或可以不包括與方塊430相關聯的功能。例如,使用者設備110可以識別來自辨識的詞語的關鍵字,並將識別的關鍵字提供給一或多個第三方,例如ERS系統140或一或多個醫療服務提供者150。用於執行關於方塊430描述的功能的構件可以包括經訓練的ML引擎210、使用者設備110或上文關於圖1-圖3描述的示例計算設備300。
然而,在一些實例中,使用者設備110可以不決定緊急情況,因此根據本案的一些示例性方法可以不包括對應的方塊430。例如,使用者設備110可以將一或多個訊息發送到ERS系統,隨後,ERS系統可以決定緊急情況,例如下文關於圖6的方法600所描述的。
在方塊440處,使用者設備110決定緊急撥叫請求是否已被應答並且撥叫是否已被連接。若是,則方法400前進到方塊450;否則其返回到方塊420a-420c。
在方塊450處,使用者設備110向ERS系統140產生包括所識別的關鍵字的訊息。在該實例中,設備僅包括所識別的關鍵字作為註釋。然而,在一些實例中,使用者設備110可以產生具有除註釋之外的資訊的訊息。例如,該訊息可以包括關於個人的資訊,例如個人的姓名;個人的位址;個人的一或多個電話號碼;有關直系親屬或個人位址處的其他居民的資訊;個人的位置,可能包括例如來自GNSS接收器的地理位置、企業名稱等;個人醫生的姓名,包括主治醫生、一名或多名專科醫生、一名或多名外科醫生等。除了有關個人的資訊外,該訊息亦可能包括在方塊420a處獲得的健康記錄資訊中的部分或全部或在方塊420b處獲得的感測器資訊中的部分或全部。若使用者設備110在方塊430決定了一或多個緊急情況,則此種緊急情況亦可以合併到訊息中。在一些實例中,訊息亦可以包括記錄的音訊信號,其可以如上文關於方塊420c所論述的一般被編碼。
用於執行關於方塊450描述的功能的構件可以包括使用者設備110,或上文關於圖1-圖3描述的示例性計算設備300。
在方塊460處,在連接撥叫之後,使用者設備110將訊息發送到ERS系統140。在一些實例中,使用者設備110亦可以將訊息發送到其他第三方,例如醫療保健提供者、醫院、個人的一或多個家庭成員等。
用於執行關於方塊460描述的功能的構件可以包括使用者設備110、示例性計算設備300或者上文關於圖1-圖3描述的一或多個無線收發器312-332或天線314-334。
隨後,方法400可以返回到方塊420a-c。應當瞭解到,當使用者設備110執行關於方塊440-460所描述的功能時,使用者設備110可以繼續執行方塊420a-c、422和430處的功能。因此,在方塊460處發送訊息之後,而圖4圖示返回到方塊420a-c之前的點的方法,該等方塊可以繼續不間斷地操作,而不管方塊440-460的功能如何。因此,即使在緊急撥叫被應答之後,使用者設備110亦可以繼續收集健康記錄資訊,接收感測器信號,並記錄音訊信號,並且隨後產生一或多個附加訊息,附加訊息可以被發送到ERS系統140或者一或多個其他第三方。
現在參考圖6,圖6圖示用於使用語音和感測器資料擷取的緊急回應的示例性方法600。在該實例中,方法600由圖1中所示的自主ERS系統140執行,並且將關於圖1中所示的系統100進行論述;然而,可以採用根據本案的任何合適的系統。
在方塊610處,ERS系統140應答來自使用者設備110的緊急服務撥叫。在該實例中,ERS系統140連接到電話系統,例如POTS,並且接收緊急服務撥叫作為傳統電話撥叫;然而,在一些實例中,ERS系統140可以根據其他通訊技術接收撥叫,該其他通訊技術包括文字或SMS訊息、視訊會議撥叫等。用於執行關於方塊610描述的功能的構件可以包括示例性計算設備300、一或多個無線收發器312-332或天線314-334或上文關於圖1-圖3描述的一或多個有線網路介面。
在方塊620處,ERS系統140從使用者設備110接收包括與緊急情況相關聯的至少一個註釋的訊息。在該實例中,註釋包括通常如上文關於圖4的方法400的方塊422所描述地獲得的一或多個關鍵字。然而,在一些實例中,該訊息可以包括其他資訊,例如上文關於圖4的方法400的方塊422一般性描述的。
在接收到訊息之後,ERS系統140從訊息中提取資訊,並且在一些實例中,在顯示螢幕(例如,用於人類ERS操作者的顯示螢幕)上顯示來自訊息的資訊中的一些或全部。在一些實例中,來自訊息的資訊用於自主地決定緊急情況或緊急回應協定,通常如下文關於方塊630所描述的。用於執行關於方塊620描述的功能的構件可以包括以上關於圖1-圖3所描述的示例性計算設備300。
在方塊630處,ERS系統140基於所接收的訊息來決定緊急回應協定。在該實例中,ERS系統140採用人工作業者,其基於在緊急撥叫期間從個人101獲得的資訊以及基於從接收的訊息接收的資訊來決定緊急情況。例如,個人101可以告訴操作者他呼吸困難並且他的手臂刺痛。另外,操作者的顯示螢幕可以顯示來自訊息的註釋中的一或多個,例如「胸痛」。操作者可以與個人確認此種資訊,或者可以簡單地採用該資訊來決定緊急情況。
然而,在一些實例中,ERS系統140可以採用經訓練的ML引擎210來決定緊急情況,通常如上文關於圖4的方法400的方塊430所論述的,並且選擇緊急回應協定。在該實例中,ERS系統140維護用於不同類型的緊急情況(例如醫療緊急情況、犯罪緊急情況、火災緊急情況等)的一或多個預設緊急回應協定。例如,用於火災緊急情況的緊急回應協定可以包括將兩個消防車和救護車派遣到撥叫者的位置,而犯罪緊急情況可能包括將兩輛警車、消防車和救護車派遣到撥叫者的位置。在該實例中,決定的緊急情況是心臟病發作。ERS系統140將心臟病發作分類為醫療緊急情況,並且因此選擇預設的醫療緊急協定。
用於執行關於方塊630描述的功能的構件可以包括上文關於圖1-3描述的示例性計算設備300。
在方塊640處,ERS系統140基於來自所接收訊息的一或多個註釋來修改用於緊急情況的緊急回應協定。在該實例中,經訓練的ML引擎210已將緊急情況決定為心臟病發作。因此,ERS系統140修改預設緊急協定以選擇專門配備用於治療心臟病發作受害者的救護車或醫療保健提供者。隨後,ERS系統140向所選實體產生排程訊息,並且包括心臟病發作專用指令,例如「排程除顫器」和「傳呼心臟病專家」。
在涉及犯罪緊急情況的實例中,ERS系統140可以修改預設緊急回應協定以指示犯罪的細節,例如「射擊」或「家庭暴力」或「入室盜竊」,並且進一步可以調整派遣的警車的數量或類型。例如,對於「射擊」緊急情況,ERS系統140可以修改預設緊急回應協定以派遣四輛警車和一輛警用直升機,以及兩輛救護車以協助受傷者。可以進一步修改預設的緊急回應協定,以將射擊的通知提供給一或多個醫院,並傳呼一或多個急診室人員,例如外科醫生,以治療受傷的人。
用於執行關於方塊640描述的功能的構件可以包括上文關於圖1-圖3描述的示例性計算設備300。
在方塊650處,ERS系統140啟動修改的緊急回應協定。在該實例中,ERS系統140藉由向所選醫院或救護車服務發出包括附加的特定於心臟病發作指令的派遣通知來啟動修改的緊急回應協定。在一些實例中,ERS系統140亦可以向一或多個第三方實體發送通知,該第三方實體例如與所選醫院或救護車服務相關聯的醫院急診室,以向其通知進入的心臟病發作患者。ERS系統140可以向與個體101相關聯的一或多個健康護理提供者150發送通知,或者向與個體101相關聯的臨床試驗相關的CRO發送通知。
在犯罪或火災緊急情況的情況下,ERS系統140可以在緊急情況的位置的閾值距離內自主地選擇消防站或警察局,並且自主地向所選擇的消防站或警察局發送包括上述緊急情況的具體指令的排程通知。
用於執行關於方塊650描述的功能的構件可以包括示例性計算設備300、一或多個無線收發器312-332或天線314-334或者上文關於圖1-圖3所描述的一或多個有線網路介面。
在一些實例中,除了執行上述方塊之外,方法600亦可以進一步訓練或改進ML引擎210,例如藉由提供將ML引擎210置於訓練模式,將相關感測器資訊連同適當的緊急情況一起饋送給ML引擎210,例如在執行方法600的程序中決定的緊急情況。在一些此種實例中,ML引擎210可以繼續自我改進。
現在參考圖7,圖7圖示使用語音和感測器資料擷取的緊急回應的示例性方法700。將關於圖1的系統100描述該示例性方法700;然而,應該理解,可以採用根據本案的任何合適的系統。
在方塊710處,健康護理提供者從使用者設備接收訊息,其中該訊息包括與緊急情況相關聯的至少一個註釋。在該實例中,個人101已經配置了她的使用者設備110,即智慧型電話,以通知她的心臟病專家任何醫療緊急情況。因此,在該實例中,健康護理提供者150,即個人110的心臟病專家辦公室從個人的智慧型電話110接收訊息。該訊息包括指示與心臟病發作相關的註釋的一或多個註釋,例如「胸痛」和「左臂刺痛」。在該實例中,健康護理提供者150執行經訓練的ML引擎210,經訓練的ML引擎210接收註釋並且決定緊急情況,通常如關於圖4的方法400的方塊430所描述的。因此,醫療保健提供者150決定個體101可能遭受心臟病發作。然而,在一些實例中,訊息可以包括對緊急情況的識別,例如由使用者設備101決定的。
在一些實例中,健康護理提供者150可以從ERS系統140接收具有註釋的一或多個訊息。例如,ERS系統140可以產生並向健康護理提供者150提供指示緊急情況的訊息、關於個人101的資訊、與修改的緊急回應協定有關的資訊,諸如接收或接納該個人的醫院或其他醫療保健提供者的識別,主治醫生的姓名等。可以提供此種資訊來代替從使用者設備110接收的一或多個訊息或者作為其附加。
用於執行關於方塊710描述的功能的構件可以包括示例性計算設備300、一或多個無線收發器312-332或天線314-334或者上文關於圖1-圖3描述的一或多個有線網路介面。
在方塊720處,健康護理提供者150識別與個體101相關聯的醫療記錄。在該實例中,健康護理提供者150基於使用者設備的電話號碼來識別醫療記錄;然而,在一些實例中,資訊可以包含在所接收的訊息中,該資訊諸如個人的姓名、位址、出生日期、社會安全號碼、患者識別號等。隨後,健康護理提供者150可以存取健康護理記錄,例如健康護理記錄160,並識別與個體101相關聯的一或多個記錄。用於執行關於方塊720描述的功能的構件可包括上文關於圖1-圖3描述的示例性計算設備300。
在方塊730處,健康護理提供者150更新所識別的醫療記錄。在該實例中,健康護理提供者150將條目添加到識別的醫療記錄,該條目指示緊急情況、通知的日期和時間,並且若提供,例如由ERS系統140,其他接納個人101的醫院的名稱或醫療保健提供者、主治醫生的姓名或從使用者設備110或ERS系統140獲得的任何其他資訊。在更新所識別的健康記錄之後,健康護理提供者150可以產生訊息並向醫生或其他醫護人員發送訊息,該訊息指示所識別的健康記錄,或將識別和修改的醫療記錄放在醫生的工作佇列中。用於執行關於方塊730描述的功能的構件可以包括上文關於圖1-圖3描述的示例性計算設備300。
應當瞭解到,圖7中所示的方法700可以反覆運算地執行,例如,若隨時間接收到具有註釋的多個訊息。
儘管本文中的方法和系統是根據在各種機器上執行的軟體來描述的,但是該方法和系統亦可以實施為專門配置的硬體,例如專門用於執行各種方法的現場可程式閘陣列(FPGA)。例如,實例可以在數位電子電路中實施,或者在電腦硬體、韌體、軟體或其組合中實施。在一個實例中,設備可以包括一或多個處理器。處理器包括電腦可讀取媒體,例如耦合到處理器的隨機存取記憶體(RAM)。處理器執行儲存在記憶體中的電腦可執行程式指令,例如執行一或多個電腦程式。此種處理器可以包括微處理器、數位訊號處理器(DSP)、特殊應用積體電路(ASIC)、現場可程式閘陣列(FPGA)和狀態機。此種處理器進一步可以包括可程式設計電子設備,例如PLC、可程式設計中斷控制器(PIC)、可程式設計邏輯設備(PLD)、可程式設計唯讀記憶體(PROM)、電子可程式設計唯讀記憶體(EPROM或EEPROM)或其他類似設備。
此種處理器可以包括媒體(例如電腦可讀取儲存媒體)或可以與媒體(例如電腦可讀取儲存媒體)通訊,該媒體可以儲存指令,當由處理器執行時,該指令可以使處理器執行本文所述的由處理器執行或由處理器協助的步驟。電腦可讀取媒體的實例可以包括但不限於能夠向處理器(例如web伺服器中的處理器)提供電腦可讀取指令的電子、光學、磁性或其他儲存設備。媒體的其他實例包括但不限於軟碟、CD-ROM、磁碟、記憶體晶片、ROM、RAM、ASIC,配置的處理器,所有光學媒體,所有磁帶或其他磁性媒體,或電腦處理器可以從其讀取的任何其他媒體。所描述的處理器和處理可以是一或多個結構,並且可以經由一或多個結構分散。處理器可以包括用於執行本文描述的方法(或方法的一部分)中的一或多個的代碼。
已經僅出於說明和描述的目的呈現了一些實例的前述描述,並且不意欲窮舉或將本案限制於所揭示的精確形式。在不脫離本案的精神和範圍的情況下,本領域技藝人士將清楚其許多修改和改動。
本文對實例或實現方式的引用意謂結合該實例描述的特定特徵、結構、操作或其他特性可以包括在本案的至少一個實現方式中。本案不限於如此描述的特定實例或實現方式。在說明書中的各個地方出現的用語「在一個實例中」、「在實例中」、「在一個實現方式中」或「在實現方式中」或其變體不一定是指相同的實例或實現方式。本說明書中關於一個實例或實現方式中描述的任何特定特徵、結構、操作或其他特性可以與關於任何其他實例或實現方式所描述的其他特徵、結構、操作或其他特性組合。
本文使用的詞語「或」意欲涵蓋包含性和排他性OR條件。換言之,A或B或C包括適合於特定用途的以下替代組合中的任一個或所有:僅A;僅B;僅C;僅A和B;僅A和C;僅B和C;及A和B和C。
100‧‧‧環境
101‧‧‧個人
110‧‧‧使用者設備
112‧‧‧語音辨識服務
120‧‧‧蜂巢收發器
130‧‧‧網路
140‧‧‧ERS系統
150‧‧‧健康護理提供者
160‧‧‧個人健康記錄
200‧‧‧系統
210‧‧‧訓練的機器學習(「ML」)引擎
212‧‧‧緊急情況
220‧‧‧脈搏感測器
222‧‧‧血氧感測器
224‧‧‧ECG感測器
230‧‧‧辨識的詞語
240a‧‧‧EHR
240b‧‧‧EHR
240c‧‧‧EHR
300‧‧‧計算設備
302‧‧‧匯流排
310‧‧‧處理器
312‧‧‧收發器
314‧‧‧天線
320‧‧‧記憶體
322‧‧‧收發器
324‧‧‧天線
330‧‧‧顯示器
332‧‧‧收發器
334‧‧‧天線
340‧‧‧使用者輸入和輸出設備
350‧‧‧麥克風
360‧‧‧脈搏感測器
370‧‧‧ECG感測器
380‧‧‧血氧感測器
400‧‧‧方法
410‧‧‧功能
420a‧‧‧功能
420b‧‧‧功能
420c‧‧‧功能
422‧‧‧功能
430‧‧‧功能
440‧‧‧功能
450‧‧‧功能
460‧‧‧功能
600‧‧‧方法
610‧‧‧功能
620‧‧‧功能
630‧‧‧功能
640‧‧‧功能
650‧‧‧功能
700‧‧‧方法
710‧‧‧功能
720‧‧‧功能
730‧‧‧功能
併入本說明書中並構成其一部分的附圖圖示一或多個特定實例,並且該附圖與實例的描述一起用於解釋某些實例的原理和實現方式。
圖1-圖2圖示用於使用語音和感測器資料擷取的緊急回應的示例性系統;
圖3圖示用於使用語音和感測器資料擷取的緊急回應的示例性計算設備;
圖4圖示使用語音和感測器資料擷取的緊急回應的示例性方法;
圖5圖示表示基於沿橫條圖的X軸表示的每個緊急情況的相應機率分數進行的緊急情況的排序的示例性橫條圖;及
圖6-圖7圖示使用語音和感測器資料擷取的緊急回應的示例性方法。
國內寄存資訊 (請依寄存機構、日期、號碼順序註記) 無
國外寄存資訊 (請依寄存國家、機構、日期、號碼順序註記) 無
Claims (34)
- 一種方法,包括以下步驟: 由一使用者設備將一緊急撥叫請求發送到一緊急服務提供者; 在該緊急撥叫請求被應答之前或在連接的緊急撥叫的一閒置時段期間: 由該使用者設備記錄包括語音信號的音訊信號;及 基於該語音信號從辨識的詞語中獲得一或多個關鍵字;及 在偵測到一緊急撥叫連接之後: 向該緊急服務提供者產生一訊息,該訊息包括基於該關鍵字的至少一個註釋;及 由該使用者設備將該訊息發送到該緊急服務提供者。
- 如請求項1所述之方法,進一步包括以下步驟:將該記錄的音訊信號發送到該緊急服務提供者。
- 如請求項1所述之方法,進一步包括以下步驟:由該使用者設備從一感測器接收一感測器信號,並且其中該訊息包括基於該感測器信號的感測器資訊。
- 如請求項1所述之方法,進一步包括以下步驟:在偵測到該緊急撥叫連接之後: 從一第二感測器接收一第二感測器信號; 由該使用者設備繼續記錄包括第二語音信號的第二音訊信號; 基於該第二語音信號從辨識的詞語中獲得一或多個第二關鍵字;及 基於該第二關鍵字和該第二感測器信號向該緊急服務提供者產生一第二訊息,該第二訊息包括一第二註釋。
- 如請求項1所述之方法,進一步包括以下步驟:在發送該緊急撥叫請求之前由該使用者設備偵測一緊急情況,並且其中該訊息包括對該緊急情況的一指示。
- 如請求項5所述之方法,其中偵測該緊急情況之步驟包括以下步驟: (i)基於該語音信號來偵測一識別出的身體部位 (ii)基於該語音信號來偵測一物件名稱; (iii)根據該語音信號來偵測一藥物名稱或藥物類型;或者 (iv)(i)至(iii)的任何組合。
- 如請求項1所述之方法,由該使用者設備輸出一音訊提示以指示一使用者開始說話。
- 如請求項1所述之方法,進一步包括以下步驟: 對於一組緊急情況之每一者緊急情況,基於該辨識的詞語來決定與該緊急情況相關聯的一機率;及 選擇具有最高機率的一緊急情況。
- 如請求項8所述之方法,其中該一組緊急情況包括(i)跌倒,(ii)心臟病發作,(iii)中風,(iv)骨折,或(v)(i)至(iv)的任何組合。
- 如請求項1所述之方法,進一步包括以下步驟:基於該語音信號來偵測模糊的語音。
- 如請求項1所述之方法,其中該使用者設備包括(i)一智慧型電話,(ii)一可穿戴設備,(iii)一藥物輸送設備,(iv)一虛擬個人助理設備,或(v)(i)至(iv)的任何組合。
- 如請求項1所述之方法,進一步包括以下步驟:獲得關於使用者的醫療資訊。
- 如請求項12所述之方法,其中該醫療資訊包括(i)一慢性醫學病症,(ii)一醫學程式,(iii)一藥物處方,(iv)參與一臨床試驗,(v)一藥物劑量時間,或(vi)(i)至(v)的任何組合。
- 如請求項1所述之方法,進一步包括以下步驟:由該使用者設備將該訊息發送到一健康服務提供者。
- 如請求項14所述之方法,其中該健康服務提供者包括(i)一醫生,(ii)一護理人員,(iii)一醫院,(iv)一保險公司,(v)一臨床研究組織,(vi)一藥物公司,或(vii)(i)至(vi)的任何組合。
- 一種設備,包括: 一麥克風; 一通訊網路介面; 一非暫態電腦可讀取媒體;及 一處理器,其與該麥克風、該通訊網路介面通訊,其中該處理器被配置為: 使用該通訊網路介面將一緊急撥叫請求發送到一緊急服務提供者; 在該緊急撥叫請求被連接之前或在連接的緊急撥叫的一閒置時段期間: 記錄由該麥克風獲得的音訊信號,該音訊信號包括語音信號;及 基於該語音信號從辨識的詞語中獲得一或多個關鍵字; 在偵測到一緊急撥叫連接之後: 向該緊急服務提供者產生一訊息,該訊息包括基於該關鍵字的至少一個註釋;及 將該訊息發送到該緊急服務提供者。
- 如請求項16所述之設備,其中該處理器進一步被配置為將該記錄的音訊信號發送到該緊急服務提供者。
- 如請求項16所述之設備,進一步包括一感測器,並且其中該處理器進一步被配置為從一感測器接收一感測器信號,並且其中該訊息包括基於該感測器信號的感測器資訊。
- 如請求項16所述之設備,其中該處理器進一步被配置為在偵測到該緊急撥叫連接之後: 從一第二感測器接收一第二感測器信號; 繼續記錄包括第二語音信號的第二音訊信號; 基於該第二語音信號從辨識的詞語中獲得一或多個第二關鍵字;及 基於該第二關鍵字和該第二感測器信號向該緊急服務提供者產生一第二訊息,該第二訊息包括一第二註釋。
- 如請求項16所述之設備,其中該處理器進一步被配置為在發送該緊急撥叫請求之前偵測一緊急情況,並且其中該訊息包括對該緊急情況的一指示。
- 如請求項20所述之設備,其中該處理器進一步被配置為: (i)基於該語音信號來偵測一識別的身體部位; (ii)基於該語音信號來偵測一物件名稱; (iii)基於該語音信號來偵測一藥物名稱或藥物類型;或者 (iv)(i)至(iii)的任何組合。
- 如請求項16所述之設備,其中該處理器進一步被配置為輸出一音訊提示以指示一使用者開始說話。
- 如請求項16所述之設備,其中該處理器進一步被配置為: 對於一組緊急情況之每一者緊急情況,基於該辨識的詞語來決定與該緊急情況相關聯的一機率;及 選擇具有最高機率的一緊急情況。
- 如請求項23所述之設備,其中該一組緊急情況包括(i)跌倒,(ii)心臟病發作,(iii)中風,(iv)骨折,或(v)(i)至(iv)的任何組合。
- 如請求項16所述之設備,其中該處理器進一步被配置為基於該語音信號來偵測模糊的語音。
- 如請求項16所述之設備,其中該設備包括(i)一智慧型電話,(ii)一可穿戴設備,(iii)一藥物輸送設備,(iv)一虛擬個人助理設備,或(v)(i)至(iv)的任何組合。
- 如請求項16所述之設備,其中該處理器進一步被配置為獲得關於與該語音信號相關聯的一個體的醫療資訊。
- 如請求項27所述之設備,其中該醫療資訊包括(i)一慢性醫學病症,(ii)一醫療程式,(iii)一藥物處方,(iv)參與一臨床試驗,(v)一藥物劑量時間,或(vi)(i)至(v)的任何組合。
- 如請求項16所述之設備,其中該處理器進一步被配置為將該訊息發送到一健康服務提供者。
- 如請求項29所述之設備,其中該健康服務提供者包括(i)一醫生,(ii)一護理人員,(iii)一醫院,(iv)一保險公司,(v)一臨床研究組織,(vi)一藥物公司,或(vii)(i)至(vi)的任何組合。
- 一種包括處理器可執行指令的非暫態電腦可讀取媒體,該處理器可執行指令被配置為使一處理器用於: 將一緊急撥叫請求發送到一緊急服務提供者; 在該緊急撥叫請求被應答之前或在連接的緊急撥叫的一閒置時段期間: 記錄音訊信號,該音訊信號包括語音信號;及 基於該語音信號從辨識的詞語中獲得一或多個關鍵字; 在偵測到一緊急撥叫連接之後: 向該緊急服務提供者產生一訊息,該訊息包括基於該關鍵字的至少一個註釋;及 將該訊息發送到該緊急服務提供者。
- 一種裝置,包括: 用於將一緊急撥叫請求發送到一緊急服務提供者的構件; 用於在該緊急撥叫請求被應答之前或在連接的緊急撥叫的一閒置時段期間記錄音訊信號的構件,該音訊信號包括語音信號;及 用於基於該語音信號從辨識的詞語中獲得一或多個關鍵字的構件; 用於在偵測到一緊急撥叫連接之後向該緊急服務提供者產生一訊息的構件,該訊息包括基於該關鍵字的至少一個註釋;及 用於將該訊息發送到該緊急服務提供者的構件。
- 一種方法,包括以下步驟: 接聽來自一使用者設備的一緊急服務撥叫; 從該使用者設備接收一訊息,該訊息包括與一緊急情況相關聯的至少一個註釋; 基於該註釋來修改該緊急情況的一緊急回應協定;及 啟動該所修改的緊急回應協定。
- 一種方法,包括以下步驟: 從一使用者設備接收一訊息,該訊息包括與一緊急情況相關聯的至少一個註釋,該使用者設備與個人相關聯; 識別與該個人相關聯的一醫療記錄;及 基於該緊急情況來更新該醫療記錄。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US15/690,087 | 2017-08-29 | ||
| US15/690,087 US20190069145A1 (en) | 2017-08-29 | 2017-08-29 | Emergency response using voice and sensor data capture |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| TW201921905A true TW201921905A (zh) | 2019-06-01 |
Family
ID=63492005
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW107129750A TW201921905A (zh) | 2017-08-29 | 2018-08-27 | 使用語音和感測器資料擷取的緊急回應 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20190069145A1 (zh) |
| EP (1) | EP3676816A1 (zh) |
| TW (1) | TW201921905A (zh) |
| WO (1) | WO2019046074A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI773506B (zh) * | 2021-05-13 | 2022-08-01 | 八維智能股份有限公司 | 緊急派遣員的虛擬助理 |
| TWI829493B (zh) * | 2022-12-30 | 2024-01-11 | 華研智能股份有限公司 | 具隱私保護的危安行為與語意之辨識系統與方法 |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102782465B1 (ko) * | 2018-10-23 | 2025-03-19 | 삼성전자주식회사 | 전자의무기록에 기반하여 대화서비스를 제공하는 전자 장치 및 방법 |
| EP3686609A1 (en) * | 2019-01-25 | 2020-07-29 | Rohde & Schwarz GmbH & Co. KG | Measurement system and method for recording context information of a measurement |
| EP3734485A1 (en) * | 2019-04-30 | 2020-11-04 | Koninklijke Philips N.V. | Access to health information during emergency call |
| PL3977763T3 (pl) * | 2019-05-29 | 2024-01-22 | Safenow Gmbh | Sposób, program komputerowy, urządzenie i system do obsługi mobilnego urządzenia radiowego |
| CN111063357B (zh) * | 2019-12-30 | 2022-07-05 | 中国银行股份有限公司 | 一种智能柜台服务方法及装置 |
| WO2021229281A1 (en) * | 2020-05-13 | 2021-11-18 | Praveen Choudhary | An integrated end to end system and method for accident and medical emergency response |
| EP3965116A1 (en) | 2020-09-02 | 2022-03-09 | Koninklijke Philips N.V. | Responding to emergency calls |
| US12508086B2 (en) * | 2020-09-10 | 2025-12-30 | Jerome Canady Research Institute for Advanced Biological and Technological Sciences | System and method for voice-control of operating room equipment |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE3529167A1 (de) * | 1985-08-14 | 1987-02-26 | Siemens Ag | Gefahrenmeldesystem fuer den schutz einer umfriedeten sicherheitszone |
| US7149774B2 (en) * | 2000-06-02 | 2006-12-12 | Bellsouth Intellectual Property Corporation | Method of facilitating access to IP-based emergency services |
| JP4396361B2 (ja) * | 2004-04-05 | 2010-01-13 | 株式会社日立製作所 | 通信端末装置 |
| CN103416100B (zh) * | 2011-03-03 | 2017-02-15 | 瑞典爱立信有限公司 | 用于支持紧急通信的重新建立的方法、设备、系统和计算机程序产品 |
| US20160071399A1 (en) * | 2014-09-08 | 2016-03-10 | On Guard LLC | Personal security system |
| US20160378950A1 (en) * | 2015-06-29 | 2016-12-29 | Bruce Reiner | Method and apparatus for tracking a pharmaceutical |
| US9648481B2 (en) * | 2015-09-29 | 2017-05-09 | Lenovo Enterprise Solutions (Singapore) Pte. Ltd. | Calling a response provider based on detection of an emergency situation |
-
2017
- 2017-08-29 US US15/690,087 patent/US20190069145A1/en not_active Abandoned
-
2018
- 2018-08-22 EP EP18765521.2A patent/EP3676816A1/en not_active Withdrawn
- 2018-08-22 WO PCT/US2018/047579 patent/WO2019046074A1/en not_active Ceased
- 2018-08-27 TW TW107129750A patent/TW201921905A/zh unknown
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI773506B (zh) * | 2021-05-13 | 2022-08-01 | 八維智能股份有限公司 | 緊急派遣員的虛擬助理 |
| TWI829493B (zh) * | 2022-12-30 | 2024-01-11 | 華研智能股份有限公司 | 具隱私保護的危安行為與語意之辨識系統與方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2019046074A1 (en) | 2019-03-07 |
| EP3676816A1 (en) | 2020-07-08 |
| US20190069145A1 (en) | 2019-02-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TW201921905A (zh) | 使用語音和感測器資料擷取的緊急回應 | |
| US20220304577A1 (en) | Method and system to reduce infrastructure costs with simplified indoor location and reliable commumications | |
| US11024142B2 (en) | Event detector for issuing a notification responsive to occurrence of an event | |
| US10044857B2 (en) | System and method for initiating an emergency response | |
| US20210153817A1 (en) | Device based responder network activation and virtual assistant integration | |
| CN110914918B (zh) | 用于健康监视和提供紧急支援的系统和方法 | |
| CN106462667A (zh) | 具有预测性紧急调度风险评估的个人紧急响应系统 | |
| US20210352176A1 (en) | System and method for performing conversation-driven management of a call | |
| Parra et al. | Multimedia sensors embedded in smartphones for ambient assisted living and e-health | |
| WO2013065113A1 (ja) | 救急支援システム | |
| WO2018128994A1 (en) | Transcription of communication sessions | |
| CN103679601A (zh) | 用户健康支持的处理方法和终端 | |
| CN114649088A (zh) | 紧急征兆早期检测、警告和响应系统及其使用方法 | |
| US12430998B2 (en) | Device based responder network activation and virtual assistant integration | |
| CN116389647B (zh) | 急诊急救一体化平台 | |
| WO2018128991A1 (en) | Device to device communication | |
| US20250235101A1 (en) | Passive assistive alerts using artificial intelligence assistants | |
| US20160135737A1 (en) | Determining treatment compliance using speech patterns captured during use of a communication system | |
| JP2016002457A (ja) | 緊急の医療カウンセリングを提供するシステムおよび方法 | |
| US11849379B1 (en) | Universal mobile alert system and method | |
| CN119207742A (zh) | 一种调度方法、确认方法、装置以及产品 | |
| US20230343443A1 (en) | Emergency medical system for hands-free medical-data extraction, hazard detection, and digital biometric patient identification | |
| US20070270662A1 (en) | Apparatus and method for monitoring end user's health status via a network | |
| JP7503313B2 (ja) | 救急出動支援システム | |
| JP7519708B2 (ja) | 救急出動支援システム |