[go: up one dir, main page]

TWI853391B - 用於泛自閉症者的自動組織選單輔助溝通系統及方法 - Google Patents

用於泛自閉症者的自動組織選單輔助溝通系統及方法 Download PDF

Info

Publication number
TWI853391B
TWI853391B TW111150381A TW111150381A TWI853391B TW I853391 B TWI853391 B TW I853391B TW 111150381 A TW111150381 A TW 111150381A TW 111150381 A TW111150381 A TW 111150381A TW I853391 B TWI853391 B TW I853391B
Authority
TW
Taiwan
Prior art keywords
vocabulary
option
options
selection
menu
Prior art date
Application number
TW111150381A
Other languages
English (en)
Other versions
TW202427493A (zh
Inventor
王譔博
Original Assignee
國立臺中科技大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立臺中科技大學 filed Critical 國立臺中科技大學
Priority to TW111150381A priority Critical patent/TWI853391B/zh
Publication of TW202427493A publication Critical patent/TW202427493A/zh
Application granted granted Critical
Publication of TWI853391B publication Critical patent/TWI853391B/zh

Links

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

本發明提供一種用於泛自閉症者的自動組織選單輔助溝通系統,包含電子裝置、資料庫以及自動組織選單介面。電子裝置包括顯示模組、語音模組以及操作模組。自動組織選單介面包括第一詞彙選取單元、第二詞彙選取單元、自動組織單元配置為將選擇的第一詞彙選項與選擇的第二詞彙選項排列組合成完整語句並呈現在顯示模組上,以及語音播放單元,其配置為將完整語句轉換為一聲音訊息,並透過語音模組發送。其中,第一詞彙選取單元以及第二詞彙選取單元以詞彙資訊、圖像資訊或其組合之方式呈現。其中,第一詞彙選項以及第二詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種。並且其中,第一詞彙選項以及第二詞彙選項的詞性不相同。其中,第一詞彙選項以及第二詞彙選項由資料庫獲取。藉由本發明之用於泛自閉症者的自動組織選單輔助溝通系統,可以協助缺乏語句組織能力的泛自閉者有效地組織正確語句,以與他人溝通並表達求助需求,並適用於語句組織能力的學習。

Description

用於泛自閉症者的自動組織選單輔助溝通系統及方法
本發明係關於一種輔助溝通系統及其方法,特別是指一種用於泛自閉症者的自動組織選單輔助溝通系統及其方法。
泛自閉症障礙(Autism Spectrum Disorder,ASD)係由大腦中異常所造成的腦部發展障礙,其通常造成泛自閉症者不易於以言語或非言語的方式表達想法,並進而造成社交與互動的障礙。尤其泛自閉症兒童常有詞彙困難、缺乏口頭組織能力而造成無法有效溝通的情況,其中缺乏組織能力、無法系統性地敘述事件、難以跟隨語言使用規則導致認知問題等,更是造成泛自閉症者難以與他人溝通交流的主因之一。此外,當泛自閉症兒童遇到困難的事件或情況時,因為沒有足夠適當的能力尋求他人的幫助等,亦會再進一步導致與他人進行有效的溝通、交流或求助的困難。
一般中度泛自閉症者的溝通問題,可以利用現有的輔助溝通系統(Augmentative and Alternative Communication,AAC)進行溝通,例如藉由依序 選擇以圖形呈現方式為主的個別字彙,進而組成一句完整的語句以進行表達與溝通交流。
然而,藉由依序選擇以圖形呈現的個別字彙而組成完整語句的方式,需要仰賴使用者對語句結構的理解、認知以及組織能力。如果泛自閉症者對句子的組成缺乏足夠的了解,在使用AAC或溝通圖形系統的過程中,尤其是在選擇的過程中是非常困難的。因為泛自閉症者難以遵循語用學、語法規則,因此在任意選擇圖像詞彙的過程中,泛自閉症者難以拼湊出正確完整的語句,導致他人難以理解泛自閉症者所欲傳達的真意。例如泛自閉症者選擇一張家庭的照片,其含意可能是「我想回家」、「帶我回家」、「我想找家人」等。因此,如何輔助泛自閉症者組織正確的語句,對於泛自閉症者表達正確的想法而言至關重要。
有鑑於此,需要一種正確組織泛自閉症者所選擇詞彙的輔助溝通系統,特別是泛自閉症者直接面對的使用介面,藉由自動組織泛自閉症者選擇的圖像或詞彙,組成完整正確文法的語句,以幫助泛自閉症者表達想法與求助、溝通的需求。
本發明之一態樣提供一種用於泛自閉症者的自動組織選單輔助溝通系統,包含:一電子裝置,包括:一顯示模組;一語音模組;以及一操作模組,其配置為接收一輸入資訊;一資料庫,電連接於電子裝置;以及一自動組織選單介面,由電子裝置所執行,自動組織選單介面包括:一第一詞彙選取單元,其配置為提供選擇至少一第一詞彙選項中的一個;一第二詞彙選取單 元,其配置為提供選擇至少一第二詞彙選項中的一個;一自動組織單元,其配置為將選擇的至少一第一詞彙選項中的一個與選擇的至少一第二詞彙選項中的一個排列組合成一完整語句,並呈現在顯示模組上;以及一語音播放單元,其配置為將完整語句轉換為一聲音訊息,並透過語音模組發送;其中,第一詞彙選取單元以及第二詞彙選取單元以詞彙資訊、圖像資訊或其組合之方式呈現,其中,至少一第一詞彙選項以及至少一第二詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,至少一第一詞彙選項以及至少一第二詞彙選項的詞性不相同,其中,至少一第一詞彙選項以及至少一第二詞彙選項由資料庫獲取。
如前所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,自動組織選單介面還包括:一第三詞彙選取單元,其配置為提供選擇至少一第三詞彙選項中的一個;以及一第四詞彙選取單元,其配置為提供選擇至少一第四詞彙選項中的一個;其中,自動組織單元進一步配置為將選擇的至少一第一詞彙選項中的一個、選擇的至少一第二詞彙選項中的一個、選擇的至少一第三詞彙選項中的一個以及選擇的至少一第四詞彙選項中的一個排列組合成完整語句,並呈現在顯示模組上,其中,第三詞彙選取單元以及第四詞彙選取單元以詞彙資訊、圖像資訊或其組合之方式呈現,其中,至少一第三詞彙選項以及至少一第四詞彙選項分別為主詞、動詞、受詞或名詞中的一種,並且其中,至少一第一詞彙選項、至少一第二詞彙選項、至少一第三詞彙選項以及至少一第四詞彙選項的詞性彼此不相同,其中,至少一第三詞彙選項以及至少一第四詞彙選項由資料庫獲取。
如前所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,自動組織選單介面還包括:一評分單元,其配置為基於自動組織單元排列組合之完整語句來產生一正確詞彙順序,並基於選擇的至少一第一詞彙選項中的一個、選擇的至少一第二詞彙選項中的一個、選擇的至少一第三詞彙選項中的一個以及選擇的至少一第四詞彙選項中的一個來產生一被選詞彙順序,藉由比對正確詞彙順序與被選詞彙順序,產生一評分結果。
如前所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,評分單元進一步配置為基於一預定時間來產生評分結果。
如前所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,評分結果以及被選詞彙順序儲存於資料庫中。
如前所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,電子裝置還包括一通訊模組,其配置為將完整語句通訊傳輸於外界。
本發明之另一態樣提供一種用於泛自閉症者的自動組織選單輔助溝通方法,使用如前所述的用於泛自閉症者的自動組織選單輔助溝通系統,用於泛自閉症者的自動組織選單輔助溝通方法包含以下步驟:提供選擇至少一第一詞彙選項中的一個;提供選擇至少一第二詞彙選項中的一個;將選擇的至少一第一詞彙選項中的一個以及選擇的至少一第二詞彙選項中的一個排列組合成完整語句,並呈現在顯示模組上;將完整語句轉換為聲音訊息,並透過語音模組發送;其中,提供選擇至少一第一詞彙選項中的一個以及提供選擇至少一第二詞彙選項中的一個的步驟,以詞彙資訊、圖像資訊或其組合之方式呈現,其中,至少一第一詞彙選項以及至少一第二詞彙選項的詞性分別為主詞、動 詞、受詞或名詞中的一種,並且其中,至少一第一詞彙選項以及至少一第二詞彙選項的詞性不相同。
如前所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:提供選擇至少一第三詞彙選項中的一個;提供選擇至少一第四詞彙選項中的一個;將選擇的至少一第一詞彙選項中的一個、選擇的至少一第二詞彙選項中的一個、選擇的至少一第三詞彙選項中的一個以及選擇的至少一第四詞彙選項中的一個排列組合成完整語句,並呈現在顯示模組上;將完整語句轉換為聲音訊息,並透過語音模組發送;其中,提供選擇至少一第一詞彙選項中的一個、提供選擇至少一第二詞彙選項中的一個、提供選擇至少一第三詞彙選項中的一個以及提供選擇至少一第四詞彙選項中的一個的步驟,以詞彙資訊、圖像資訊或其組合之方式呈現,其中,至少一第一詞彙選項、至少一第二詞彙選項、至少一第三詞彙選項以及至少一第四詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,至少一第一詞彙選項、至少一第二詞彙選項、至少一第三詞彙選項以及至少一第四詞彙選項的詞性彼此不相同。
如前所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:基於完整語句來產生正確詞彙順序;基於選擇的至少一第一詞彙選項中的一個、選擇的至少一第二詞彙選項中的一個、選擇的至少一第三詞彙選項中的一個以及選擇的至少一第四詞彙選項中的一個來產生被選詞彙順序;比對正確詞彙順序與被選詞彙順序來產生評分結果;將評分結果以及被選詞彙順序儲存於資料庫中。
如前所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:將完整語句通訊傳輸於外界。
藉由本發明之用於泛自閉症者的自動組織選單輔助溝通系統,透過自動組織選單介面提供的第一詞彙選取單元、第二詞彙選取單元或更多的詞彙選取單元,使用者可以任意且不需依照任何順序,自由且快速地選取所欲選取表達的詞彙資訊或其圖像資訊,並透過自動組織單元將使用者依照任意順序選取的詞彙選項排列組合成符合文法的完整語句。依照使用者所選詞彙重新排列組合成的完整語句透過顯示模組提供使用者視覺回饋,並透過語音模組提供使用者聽覺回饋,除了能夠正確有效地表達使用者依照所選詞彙或圖像所欲表達的完整語句給他人,達成溝通、交流互動或求助之目的之功效外,透過視覺與聽覺回饋亦可進一步提供使用者正確的語句構成以及正確的發音,達成學習語句組織、增進語言使用規則認知、增進溝通一致性,並幫助使用者理解和完成任務之功效。
10:自動組織選單輔助溝通系統
100:電子裝置
110:顯示模組
120:語音模組
130:操作模組
200:資料庫
300:自動組織選單介面
310:第一詞彙選取單元
311:第一詞彙選項
320:第二詞彙選取單元
322:第二詞彙選項
330:第三詞彙選取單元
333:第三詞彙選項
340:第四詞彙選取單元
344:第四詞彙選項
350:自動組織單元
355:完整語句
360:語音播放單元
400:自動組織選單介面
S510~S580:步驟
圖1顯示本發明一實施例中自動組織選單輔助溝通系統之示意方塊圖;圖2顯示本發明一實施例中自動組織選單輔助溝通系統之自動組織選單介面之示意圖;圖3顯示本發明一實施例中自動組織選單輔助溝通系統之自動組織選單介面之示意圖;圖4顯示本發明一實施例中自動組織選單輔助溝通系統之自動組織選單介面之示意圖;圖5顯示本發明一實施例中自動組織選單輔助溝通方法之步驟流程圖; 圖6顯示本發明一實施例中自動組織選單輔助溝通方法之步驟流程圖。
為了詳細說明本發明的技術內容、構造特徵,以下結合實施方式並配合附圖作進一步說明。
本發明提出一種用於泛自閉症者的自動組織選單輔助溝通系統,藉由提供多個詞彙選取單元,透過資料庫建置詞彙選取單元並將其分類成構成完整語句所需的特定詞性,以提供使用者依照所欲表達的內容想法隨意選取圖像詞彙時,仍能組成正確完整的語句,並提供使用者視覺與聽覺回饋,以增進學習、認知與溝通、求助之效果。
圖1顯示本發明一實施例中自動組織選單輔助溝通系統10之示意方塊圖。自動組織選單輔助溝通系統10包含電子裝置100、資料庫200以及自動組織選單介面(圖1未示)。電子裝置100包括顯示模組110、語音模組120以及操作模組130。電子裝置100為供使用者操作互動的電子裝置,其可為電腦、手機、平板、穿戴性電子裝置等。顯示模組110為提供電子裝置100使用者視覺資訊,其可為螢幕、電視、投影機、全像投影、穿戴性電子裝置等。語音模組120為提供電子裝置100使用者聲音資訊,其可為喇叭、音響、聽筒、麥克風、耳機等。操作模組130為接收使用者輸入電子裝置100的輸入資訊,以操作使用電子裝置100,其可為觸控螢幕、滑鼠、鍵盤、體感偵測、眼球偵測、語音偵測等。資料庫200電連接於電子裝置100,資料庫200可為有線或無線電連接於電子裝置100,亦可儲存於電子裝置100的多媒體儲存裝置、硬碟、記憶體、記憶卡等儲存媒介之中。
圖2顯示本發明一實施例中自動組織選單輔助溝通系統10之自動組織選單介面300之示意圖。自動組織選單介面300由電子裝置100所執行。自動組織選單介面300包括第一詞彙選取單元310,其配置為提供至少一第一詞彙選項311於第一詞彙選取單元310中,以供使用者選擇至少一第一詞彙選項311中的一個。自動組織選單介面300還包括第二詞彙選取單元320,其配置為提供至少一第二詞彙選項322於第二詞彙選取單元320中,以供使用者選擇至少一第二詞彙選項322中的一個。需注意的是,選擇至少一第一詞彙選項311以及選擇至少一第二詞彙選項322的順序並不以所述第一、第二為限,其選擇順序可為任意。自動組織選單介面300還包括自動組織單元350,其配置為將選擇的至少一第一詞彙選項311中的一個與選擇的至少一第二詞彙選項322中的一個,依據其詞性及語句的文法規則,將之排列組合成完整語句355,並呈現在顯示模組110上,以提供使用者視覺回饋,能閱讀重新排列組合過後、文法正確的完整語句355。自動組織選單介面300還包括語音播放單元360,其配置為透過例如文字語音朗讀助理、Text to Speech等來將完整語句355轉換為聲音訊息,並透過語音模組120發送,以提供使用者聽覺回饋,能聽見文法正確的完整語句355的正確發音。其中,第一詞彙選取單元310以及第二詞彙選取單元320以詞彙資訊、圖像資訊或其組合之方式呈現,使自動組織選單介面300中的詞彙能以文字、圖像或文字結合圖像的方式呈現給使用者,令使用者能較為輕易、正確地理解文字與圖像所代表的含意。其中,第一詞彙選項311以及第二詞彙選項322的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,第一詞彙選項311以及第二詞彙選項322的詞性不相同,藉此使用者在自由隨意選擇的過程中,能夠在不同的詞性分類中做選擇,令使用者學習辨別不同詞彙的詞性並了 解正確語句的構成架構,同時能夠達成建構正確的完整語句355所需的詞彙。需注意的是,所描述之第一詞彙選項311以及第二詞彙選項322的詞性分別為主詞、動詞、受詞或名詞中的一種,其詞彙選項並不以僅能有該詞性之單詞為限,例如當其詞性為主詞時,其可以包含諸如疑問句、祈使句或其他態樣,又例如當其詞性為受詞時,其可為受語、受格的任何態樣。其中,第一詞彙選項311以及第二詞彙選項322由資料庫200獲取,透過將預先蒐集不同情境、狀況、需求的詞彙資訊以及圖像資訊彙整分類並建置於資料庫200內,第一詞彙選項311以及第二詞彙選項322能夠依照不同的需求或情境提供相對應的詞彙選項。需注意的是,圖式之自動組織選單介面300僅為例示,其各要件不同之空間配置、數量配置,均屬於本發明概念之範圍內。
圖3顯示本發明一實施例中自動組織選單輔助溝通系統10之自動組織選單介面400之示意圖,自動組織選單介面400與自動組織選單介面300之配置大致相同,不同之處在於自動組織選單介面400進一步包括第三詞彙選取單元330以及第四詞彙選取單元340。其中,第三詞彙選取單元330配置為提供選擇至少一第三詞彙選項333中的一個,第四詞彙選取單元340配置為提供選擇至少一第四詞彙選項344中的一個。其中,第一詞彙選項311至第四詞彙選項344四者間彼此詞性不相同,因此第一詞彙選項311至第四詞彙選項344可以分別為主詞、動詞、受詞以及名詞。
圖4顯示本發明一實施例中自動組織選單輔助溝通系統10之自動組織選單介面400之示意圖。與圖3之實施例相比,圖4顯示之實施例之第一詞彙選項311至第四詞彙選項344以實際使用者(例如泛自閉症者兒童在學校時)可能之溝通、求助場景時使用的詞彙資訊與圖像資訊為例。當泛自閉症者兒童之 使用者使用本發明一實施例之自動組織選單輔助溝通系統10時,可以自由地在自動組織選單介面400中的第一詞彙選取單元310至第四詞彙選取單元340中,隨意選取自己心中想表達意思的詞彙或圖像,而不需受限於任何既定順序或符合正確文法結構的順序。於一實施例中,第一詞彙選項311的詞性為主詞,第二詞彙選項322的詞性為動詞,第三詞彙選項333的詞性為受詞,第四詞彙選項344的詞性為名詞。需注意的是,所描述之第一詞彙選項311以及第二詞彙選項322的詞性分別為主詞、動詞、受詞或名詞中的一種,其詞彙選項並不以僅能有該詞性之單詞為限,例如當第一詞彙選項311的詞性為主詞時,其可以包含諸如疑問句、祈使句或其他態樣,例如當主詞為「我」時,其亦可為「請帶我」、「請幫我」、「請和我」、「請問你...」等態樣。當使用者透過任意順序在第一詞彙選項311至第四詞彙選項344選取詞彙後,例如在第三詞彙選取單元330選擇了「最近的」,而後分別選擇了第四詞彙選取單元340的「廁所」、第二詞彙選取單元320的「去」以及第一詞彙選取單元310的「請帶我」,藉由自動組織單元350即可將使用者所選擇的詞彙重新排列組合成完整語句355,即「請帶我去最近的廁所」,並呈現在自動組織選單介面400上。此外,藉由語音播放單元360即可將完整語句355之「請帶我去最近的廁所」以語音的聲音訊息方式透過語音模組120播放,令使用者可以分別獲得聲音與文字的回饋,以從中學習正確的語句組織架構。同時,透過聲音訊息的播放,可以使泛自閉症者兒童的相關照顧者或其他人聽到泛自閉症者兒童所欲表達的相關訊息與可能需要的求助,進而達成表達意念、溝通、求助、與人交談之效果。
於一實施例中,自動組織選單介面300及自動組織選單介面400還包括評分單元,其配置為基於自動組織單元350排列組合之完整語句355來產 生正確詞彙順序,並基於選擇的第一詞彙選項311、選擇的第二詞彙選項322、選擇的第三詞彙選項333以及選擇的第四詞彙選項344來產生被選詞彙順序,藉由比對正確詞彙順序與被選詞彙順序,產生評分結果。例如於圖4的實施例中,當使用者按照「最近的」、「廁所」、「去」、「請帶我」的順序選擇詞彙選項時,其被選詞彙順序可以被定義為「3421」,而基於自動組織單元350排列組合之完整語句355為「請帶我去最近的廁所」,其正確詞彙順序可以被定義為「1234」,此時比對被選詞彙順序以及正確詞彙順序,產生結果為「未得分」之評分結果。又例如當使用者按照「請帶我」、「去」、「最近的」、「廁所」的順序選擇詞彙選項,則可定義其被選詞彙順序為「1234」,此時即能產生結果為「得分」之評分結果。其中,評分單元可以顯示或不顯示於顯示模組110。
於一實施例中,評分單元進一步配置為基於預定時間來產生評分結果,藉由設定時間限制來對使用者的選擇表現進行評分,例如設定預定時間為20秒,當使用者在選擇詞彙選項超過20秒未動作時,即產生結果為「未得分」之評分結果。
於一實施例中,評分結果以及被選詞彙順序儲存於資料庫200中,藉由將使用者的評分結果以及使用者所選擇的被選詞彙順序儲存於資料庫200中,可令使用者的主要照護者、家人、老師、醫療從業人員等,獲得使用者的學習狀況、語言組織能力狀況,以及所欲表達、溝通、求助的內容資訊及統計資訊等。
於一實施例中,電子裝置100還包括一通訊模組,其配置為將完整語句355通訊傳輸於外界,例如傳輸於使用者的主要照護者、家人、老師、 醫療從業人員的電子裝置,以令使用者的主要照護者、家人、老師、醫療從業人員能夠即時獲知使用者所欲表達、請求幫助的訊息,並即時做出反應。通訊模組可為有線網路、乙太網路、無線網路、藍芽傳輸、無線射頻識別等。於一實施例中,通訊模組還配置為將評分結果通訊傳輸於外界。
圖5顯示本發明一實施例中自動組織選單輔助溝通方法之步驟流程圖。本發明提供一種自動組織選單輔助溝通方法,使用如前所述的自動組織選單輔助溝通系統10,自動組織選單輔助溝通方法包含以下步驟:(S510)提供使用者選擇第一詞彙選項311中的一個;(S520)提供使用者選擇第二詞彙選項322中的一個;(S530)提供使用者選擇第三詞彙選項333中的一個;(S540)提供使用者選擇第四詞彙選項344中的一個;(S550)將選擇的第一詞彙選項311中的一個、選擇的第二詞彙選項322中的一個、選擇的第三詞彙選項333中的一個以及選擇的第四詞彙選項344中的一個排列組合成完整語句,並呈現在顯示模組110上;以及(S560)將完整語句355轉換為聲音訊息,並透過語音模組120發送。其中,提供選擇第一詞彙選項311中的一個、提供選擇第二詞彙選項322中的一個、提供選擇第三詞彙選項333中的一個以及提供選擇第四詞彙選項344中的一個的步驟,以詞彙資訊、圖像資訊或其組合之方式呈現。其中,第一詞彙選項311、第二詞彙選項322、第三詞彙選項333以及第四詞彙選項344的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,第一詞彙選項311、第二詞彙選項322、第三詞彙選項333以及第四詞彙選項344的詞性彼此不相同。當使用者以任意順序選取第一詞彙選項311、第二詞彙選項322、第三詞彙選項333以及第四詞彙選項344時,即可將所述之第一詞彙選項311至第四詞彙選項344排列組合成具有正確文法與架構的完整語句355,並分別將之以視覺及聽覺方式 呈現,達成學習語句組織結構、溝通、請求協助之效果。需注意的是,步驟流程圖並不限制其步驟順序,所揭示的步驟可以使用不同的順序操作,例如,使用者可以先選擇第四詞彙選項344中的一個,而後選擇第二詞彙選項322中的一個,其選擇第一詞彙選項311至第四詞彙選項344的順序可為任意。
圖6顯示本發明一實施例中自動組織選單輔助溝通方法之步驟流程圖。於一實施例中,自動組織選單輔助溝通方法還包含以下步驟:(S570)基於完整語句355來產生正確詞彙順序;(S571)基於選擇的第一詞彙選項311中的一個、選擇的第二詞彙選項322中的一個、選擇的第三詞彙選項333中的一個以及選擇的第四詞彙選項344中的一個來產生被選詞彙順序;(S572)比對正確詞彙順序與被選詞彙順序來產生評分結果;(S573)將評分結果以及被選詞彙順序儲存於資料庫200中;以及(S580)將完整語句355通訊傳輸於外界。藉此可將使用者選擇詞彙選項之順序與正確語句順序做比對,以獲得表示使用者選擇詞彙組織語句正確度的評分結果,並可將此評分結果以及使用者的選擇詞彙狀況儲存於資料庫200中,以供使用者的相關照護者、家人、老師、醫療從業人員了解分析使用者的學習狀況、語句組織能力等。並且,透過將使用者選擇詞彙而組成的完整語句355通訊傳輸於外界,可令使用者的相關照護者、家人、老師、醫療從業人員即時獲得使用者所欲傳達的訊息、溝通內容或請求幫助的需求。
藉由本發明上述自動組織選單輔助溝通系統10以及自動組織選單輔助溝通方法,可以使缺乏語句理解能力、缺乏語句組織能力的使用者,尤其是泛自閉症者兒童,透過提供不受選擇順序限制的圖像化詞彙選項的自動組織選單介面300、400,協助重組使用者選擇的零碎詞彙成完整組織的正確語句,進而達成幫助使用者傳達內心所欲表述的內容以進行溝通,以及幫助使用 者表達求助需求。此外,透過視覺文字以及聽覺語音呈現具有組織的正確語句,亦可以透過視覺文字刺激以及聽覺語音刺激回饋使用者,輔助使用者學習與理解語句的組織,以增進使用者的溝通一致性及語言系統性組織能力,並幫助使用者學習新詞彙與背景知識並建立學習信心。再者,透過評分單元比對使用者的選擇詞彙獲得的評分結果,亦可協助使用者的照護者、家人、老師、醫療人員蒐集、統計、理解使用者的語言組織能力及學習狀況,透過將完整語句傳達於外界亦使使用者的照護者、家人、老師、醫療人員能夠即時獲知使用者,尤其是泛自閉症者兒童所欲表達的內容與幫助需求,以在溝通的增進之外對於任何突發狀況也能即時做出回應。
本發明在上文中已以較佳實施例揭露,然熟習本項技術者應理解的是,實施例僅用於描繪本發明,而不應解讀為限制本發明之範圍。應注意的是,舉凡與實施例等效之變化與置換,均應設為涵蓋於本發明之範疇內,並所附請求項之範圍應採最廣義解釋,以將所有諸如修改、相似的安排以及流程等包含於其中。
300:自動組織選單介面
310:第一詞彙選取單元
311:第一詞彙選項
320:第二詞彙選取單元
322:第二詞彙選項
350:自動組織單元
355:完整語句
360:語音播放單元

Claims (10)

  1. 一種用於泛自閉症者的自動組織選單輔助溝通系統,包含:一電子裝置,包括:一顯示模組;一語音模組;以及一操作模組,其配置為接收一輸入資訊;一資料庫,電連接於該電子裝置;以及一自動組織選單介面,由該電子裝置所執行,該自動組織選單介面包括:一第一詞彙選取單元,其配置為提供選擇至少一第一詞彙選項中的一個;一第二詞彙選取單元,其配置為提供選擇至少一第二詞彙選項中的一個;一自動組織單元,其配置為將選擇的該至少一第一詞彙選項中的一個與選擇的該至少一第二詞彙選項中的一個排列組合成一完整語句,並將該完整語句呈現在該顯示模組上,其中,所述選擇的該至少一第一詞彙選項中的一個與所述選擇的該至少一第二詞彙選項中的一個之選擇順序可為任意順序;以及一語音播放單元,其配置為將該完整語句轉換為一聲音訊息,並透過該語音模組發送;其中,該第一詞彙選取單元以及該第二詞彙選取單元以詞彙資訊與圖像資訊的組合之方式呈現,其中,該至少一第一詞彙選項以及該至少一第二詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,該至少一第一詞彙選項以及該至少一第二詞彙選項的詞性不相同, 其中,該至少一第一詞彙選項以及該至少一第二詞彙選項由該資料庫獲取。
  2. 如請求項1所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,該自動組織選單介面還包括:一第三詞彙選取單元,其配置為提供選擇至少一第三詞彙選項中的一個;以及一第四詞彙選取單元,其配置為提供選擇至少一第四詞彙選項中的一個;其中,該自動組織單元進一步配置為將選擇的該至少一第一詞彙選項中的一個、選擇的該至少一第二詞彙選項中的一個、選擇的該至少一第三詞彙選項中的一個以及選擇的該至少一第四詞彙選項中的一個排列組合成該完整語句,並將該完整語句呈現在該顯示模組上,其中,所述選擇的該至少一第一詞彙選項中的一個、所述選擇的該至少一第二詞彙選項中的一個、所述選擇的該至少一第三詞彙選項中的一個以及所述選擇的該至少一第四詞彙選項中的一個之選擇順序可為任意順序,其中,該第三詞彙選取單元以及該第四詞彙選取單元以詞彙資訊與圖像資訊的組合之方式呈現,其中,該至少一第三詞彙選項以及該至少一第四詞彙選項分別為主詞、動詞、受詞或名詞中的一種,並且其中,該至少一第一詞彙選項、該至少一第二詞彙選項、該至少一第三詞彙選項以及該至少一第四詞彙選項的詞性彼此不相同,其中,該至少一第三詞彙選項以及該至少一第四詞彙選項由該資料庫獲取。
  3. 如請求項2所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,該自動組織選單介面還包括:一評分單元,其配置為基於該自動組織單元排列組合之該完整語句來產生一正確詞彙順序,並基於選擇的該至少一第一詞彙選項中的一個、選擇的該至少一第二詞彙選項中的一個、選擇的該至少一第三詞彙選項中的一個以及選擇的該至少一第四詞彙選項中的一個來產生一被選詞彙順序,藉由比對該正確詞彙順序與該被選詞彙順序,產生一評分結果。
  4. 如請求項3所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,該評分單元進一步配置為基於一預定時間來產生該評分結果。
  5. 如請求項3所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,該評分結果以及該被選詞彙順序儲存於該資料庫中。
  6. 如請求項1所述之用於泛自閉症者的自動組織選單輔助溝通系統,其中,該電子裝置還包括一通訊模組,其配置為將該完整語句通訊傳輸於外界。
  7. 一種用於泛自閉症者的自動組織選單輔助溝通方法,使用如請求項1所述的用於泛自閉症者的自動組織選單輔助溝通系統,該用於泛自閉症者的自動組織選單輔助溝通方法包含以下步驟:提供選擇該至少一第一詞彙選項中的一個;提供選擇該至少一第二詞彙選項中的一個;將選擇的該至少一第一詞彙選項中的一個以及選擇的該至少一第二詞彙選項中的一個排列組合成該完整語句,並將該完整語句呈 現在該顯示模組上,其中,所述選擇的該至少一第一詞彙選項中的一個與所述選擇的該至少一第二詞彙選項中的一個之選擇順序可為任意順序;將該完整語句轉換為該聲音訊息,並透過該語音模組發送;其中,提供選擇該至少一第一詞彙選項中的一個以及提供選擇該至少一第二詞彙選項中的一個的步驟,以詞彙資訊與圖像資訊的組合之方式呈現,其中,該至少一第一詞彙選項以及該至少一第二詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,該至少一第一詞彙選項以及該至少一第二詞彙選項的詞性不相同。
  8. 如請求項7所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:提供選擇該至少一第三詞彙選項中的一個;提供選擇該至少一第四詞彙選項中的一個;將選擇的該至少一第一詞彙選項中的一個、選擇的該至少一第二詞彙選項中的一個、選擇的該至少一第三詞彙選項中的一個以及選擇的該至少一第四詞彙選項中的一個排列組合成該完整語句,並將該完整語句呈現在該顯示模組上,其中,所述選擇的該至少一第一詞彙選項中的一個、所述選擇的該至少一第二詞彙選項中的一個、所述選擇的該至少一第三詞彙選項中的一個以及所述選擇的該至少一第四詞彙選項中的一個之選擇順序可為任意順序;將該完整語句轉換為該聲音訊息,並透過該語音模組發送; 其中,提供選擇該至少一第一詞彙選項中的一個、提供選擇該至少一第二詞彙選項中的一個、提供選擇該至少一第三詞彙選項中的一個以及提供選擇該至少一第四詞彙選項中的一個的步驟,以詞彙資訊與圖像資訊的組合之方式呈現,其中,該至少一第一詞彙選項、該至少一第二詞彙選項、該至少一第三詞彙選項以及該至少一第四詞彙選項的詞性分別為主詞、動詞、受詞或名詞中的一種,並且其中,該至少一第一詞彙選項、該至少一第二詞彙選項、該至少一第三詞彙選項以及該至少一第四詞彙選項的詞性彼此不相同。
  9. 如請求項7所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:基於該完整語句來產生該正確詞彙順序;基於選擇的該至少一第一詞彙選項中的一個、選擇的該至少一第二詞彙選項中的一個、選擇的該至少一第三詞彙選項中的一個以及選擇的該至少一第四詞彙選項中的一個來產生該被選詞彙順序;比對該正確詞彙順序與該被選詞彙順序來產生該評分結果;將該評分結果以及該被選詞彙順序儲存於該資料庫中。
  10. 如請求項7所述之用於泛自閉症者的自動組織選單輔助溝通方法,還包含以下步驟:將該完整語句通訊傳輸於外界。
TW111150381A 2022-12-28 2022-12-28 用於泛自閉症者的自動組織選單輔助溝通系統及方法 TWI853391B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW111150381A TWI853391B (zh) 2022-12-28 2022-12-28 用於泛自閉症者的自動組織選單輔助溝通系統及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW111150381A TWI853391B (zh) 2022-12-28 2022-12-28 用於泛自閉症者的自動組織選單輔助溝通系統及方法

Publications (2)

Publication Number Publication Date
TW202427493A TW202427493A (zh) 2024-07-01
TWI853391B true TWI853391B (zh) 2024-08-21

Family

ID=92929060

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111150381A TWI853391B (zh) 2022-12-28 2022-12-28 用於泛自閉症者的自動組織選單輔助溝通系統及方法

Country Status (1)

Country Link
TW (1) TWI853391B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201011708A (en) * 2009-10-29 2010-03-16 Hang-John Lin Word memorizing and learning system
US20120137254A1 (en) * 2010-11-29 2012-05-31 Dynavox Systems Llc Context-aware augmented communication
US9852649B2 (en) * 2001-12-13 2017-12-26 Mind Research Institute Method and system for teaching vocabulary
TW202046264A (zh) * 2019-06-14 2020-12-16 李祖寧 語言學習系統
US20210043106A1 (en) * 2019-08-08 2021-02-11 COGNITIVEBOTICS Technologies Pvt. Ltd. Technology based learning platform for persons having autism

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9852649B2 (en) * 2001-12-13 2017-12-26 Mind Research Institute Method and system for teaching vocabulary
TW201011708A (en) * 2009-10-29 2010-03-16 Hang-John Lin Word memorizing and learning system
US20120137254A1 (en) * 2010-11-29 2012-05-31 Dynavox Systems Llc Context-aware augmented communication
TW202046264A (zh) * 2019-06-14 2020-12-16 李祖寧 語言學習系統
US20210043106A1 (en) * 2019-08-08 2021-02-11 COGNITIVEBOTICS Technologies Pvt. Ltd. Technology based learning platform for persons having autism

Also Published As

Publication number Publication date
TW202427493A (zh) 2024-07-01

Similar Documents

Publication Publication Date Title
Henner et al. Unsettling languages, unruly bodyminds: A crip linguistics manifesto
KR20160077200A (ko) 언어-관련 장애들의 진단 및 치료를 위한 컴퓨팅 기술들
Mu’in et al. Language in Oral Production Perspectives
Campoy-Cubillo et al. Assessing multimodal listening
JP2024123237A (ja) 会話ベースの精神障害選別方法及びその装置
Rodriguez-Mojica From test scores to language use: Emergent bilinguals using English to accomplish academic tasks
TWI853391B (zh) 用於泛自閉症者的自動組織選單輔助溝通系統及方法
Blaiser et al. Practioner reflection that enhances interprofessional collaborative practices for serving children who are deaf/hard-of-hearing
Hanson Computing technologies for deaf and hard of hearing users
Johnson Performing deafness: Symbolic power as embodied by deaf and hearing preschoolers
Habulan et al. " As Soon as I Turned off the Camera, We Jumped to Help": Nonverbal Communication of Croatian TV Journalists in Coverage of Sudden Crises Events.
Whitesell Reading between the lines: How one deaf teacher demonstrates the reading process
Schuler et al. Making communication meaningful
Pan Conversational Humor in Intercultural Communication
Fatigante et al. Not just telling: Narratives and the construction of shared understanding in interaction
Remington-Gurney Scaffolding conversations using augmentative and alternative communication (AAC)
Xu Facilitating American Sign Language learning for hearing parents of deaf children via mobile devices
Pickering et al. Special Topics and Disorders: Across the Lifespan
Maue The effects of augmentative & alternative communication on children with autism spectrum disorder: A meta-analysis
ZAHAF et al. Difficulties of Deaf and Hard of Hearing Pupils in Learning Foreign Languages. The Case of: Boussaid Aicha and Fatima Rahmania middle schools in Ain Temouchent
Giuffre The Impact of Cluttering on the Lives of Children, Adults, and Caregivers
Alzubaidi et al. Discussion-facilitator: towards enabling students with hearing disabilities to participate in classroom discussions
Hanson Computing technologies for deaf and hard of hearing users
Grozdanovska et al. Towards a free software-based communication tool for children with disabilities
ZHANG et al. AidServer: Design and Research of a Communication Accessibility Service System for Hearing Impaired Servers in Silent Restaurants