TW200824406A - Rending and translating text-image method and system thereof - Google Patents

Description

200824406 九、發明說明： 【發明所屬之技術領域】 本發明係有關-種應用行動通訊設備翻譯影像文字的 方法及其系統，特別是有關—種藉由前端行動通絲置取 像、傳輸至後端舰H進行轉影像為文字說明並回傳文 字說明至前端的方法及其系統。 【先前技術】 目月ίι手機(Mobile Phone)或個人數位助理(pers〇nal Digital Assistant，PDA)雖然提供了翻譯功能，但由於 手機與PDA打字或手寫輸入的速度仍然不夠理想，或是介 面不夠方便’甚至手機或PDA的系統内根本沒有所要翻譯 的國家的輸人介面，因此顧手機或pM進行翻譯的使用 率偏低，而翻譯機和電腦的輸入較方便，但需要翻譯的時 候絲身邊不一定帶著翻譯機或電腦，尤其在戶外。因此 =有業者提出經由網路_，由前端的行練置提供特 定標記的影像並利用it訊網路將其影像回傳後端處理的技 術’如第1圖所示，美國專利說明書觸52漏公開揭 露有-利贿端的行動軌裝置1{)，透過前端行動通訊 裝置10所設之相機n取得一所在地特定的地理區域影 像’並透過—整體封包無線電服務（General Packet Radio Service，GPRS)網路12的無線通訊網路傳輸，經 網際網路存取13進入一網際網路14中，再由與網際網路 14聯結之光學字元辨識（Optical Characto· Reader， )祠服15轉換景>像為文字型態並與同樣連線於網際 6 200824406 網路14上的定位飼服器16内所儲存的地理 對之，再把正確的比對位置傳回至行動通訊裝置1〇上庫 雖然上述技術提出經由網路傳送處理影像的架構，惟 2=3於對輔頡取特定的地理位置影像至後端加以 來定位，而無法具有翻譯前端任意的語言文字的 功能。 【發明内容】 徂一接二上核點，本發明所要解決的技㈣題在於提 置取像’並送經後端飼服器辨識 再回傳的翻譯方法。本發明所要解決的另 :在於提供一種前端取像、後端之辨識翻譯以及 4後知連線之行_路之翻譯影像文字的系統。 所採應用行動通訊設備翻譯影像文字的方法 字之數位旦二&如下自行動通訊裝置擷取一含影像文 飼服1Ί二《再傳輸數位影像至—後端的伺服器中，由 I讀用光學文字辨識程式辨識數位影像為-對應文 二用翻譯程式翻譯對應文字為一相同i不 置明内容’再傳輸說明内容回到行動通訊裝 置中以頰不呪明内容於行動通訊裝置。 =發明的進一步改良，係在辨識數 _=:=r影像區域，後續 影像==細鴨科文字 4月的進步改良’可在行動通訊裝置揭取影像 200824406 、， ·异複數個群組中最接近標記位置的 群組，再進行辨識及翻譯作業。 :二示:顯示介面中，以翻譯最接近顯-加入標記後由制者於·界面中手動地 至後端的饲服：貧訊㈣ 本發明藉由前端的行動通訊裝置拍下欲翻譯的影像， 傳，到後端_服_識_，再將其絲回傳至行動通 ，裝置呈現。由於目前行動無線上網的速度已越來越快， 尊待傳輸的㈣不需太久，·行絲置上的取像裝置 析度也快賴高，故影料敎字或㈣可麟有效的辨 識，另整合目前已有的穩定有效的影像背景處理技術、影 像文=辨麵術及翻譯技術，可將恤器的強大資料錯存 及運算處職力與行純訊裝㈣方便性、機動性相結 合’以令使用者能隨時隨地更方便的進行崎，而不需^ 動按鍵輸人内容’翻是對於—些無法於行動通訊裝置直 接輸入的其侧家的語言（行動軌裝置無提供該國語文 輸入法的情形），亦可有效地進行翻譯作業。 【實施方式】 茲配合圖式將本發明較佳實施例詳細說明如下。 首先請參照第2圖所繪示本發明應用行動通訊設備翻 譯影像文字的系統實施例之系統方塊圖。其係包括·一無 線通訊網路20、一行動通訊裝置3〇以及一伺服器4〇。無 線通訊網路20可運用整體封包無線電服務GpRs (General Packet Radio Service)或 WiFi(Wireiess 200824406

Fidelity)無線資料傳輸技術等無線通訊技術，以提供資 料的傳輸平台。行動通訊裝置30 ,可為具有數據通訊能 力的手機（Mobile phone)、個人數位助理（pers〇nai Digital Assistant, PDA)、超級行動電腦（UUra M〇Mle PC, UMPC)或筆記型電腦(Notebooks, nb)等設備，其行動 通訊裝置30上須具有-影像掏取單元31以及一顯示單元 32，影像娜單元31可為照像機或攝影機等裝置，主要 用以擷取-含有影敎字之触雜33，並將此數位影 像33傳輸到無線通訊路20上。伺服器4〇係具有一影像 處理程式4卜-文字群組分類程式处、一文字辨識程式 43和一翻譯程式44，舰器則、與無線軌網路2〇連 ^可對行動軌裝置3〇上傳的數位影像犯進行影像文 子區域識別、文字群組分類、令全 μ , ^ MU文子觸與翻雜式處理而 產生-相同或不同語言的說明内容441 盯動通Λ衣置30的顯示單元32顯示其内容。 續凊參照第3圖所緣示本發明靡-影像文字的方、本本am 、+ 〜订動通訊設備翻譯 本發明應用行動通訊設字:第4圖所繪示的 塊示意圖。其方法的步驟包二像文于的方法實施例之方 與顯示單元32的行動树置3=輪取單元幻 =像33 (步驟副），其數位影像33所數 包中、片語或文章等資料型態;應用_J::文子可 自連線行動通訊裝置3〇傳輪數位 |^_路 〜冢至一後端的伺服器 9 200824406 4〇中（步驟S20);辨識數位影像為一對 :°);翻譯對應文字為-說明内容(步驟^ 通訊網路傳輸說明内容自 ^ 驟_;以及顯示說明内容於裝置中（步 、仃動通喊置(步驟S60)。 上述只粑例中，可更進一步改 歧財41翻灰·、提高對比等 Γ 、檢測或顏色區域分段各種影像處理技 何來找出文子的影像區域步驟，以摇古 43的辨識率。 4 I文子辨識程式 上述實補的進—步改進射在縣彻—影像處理 以41找出文字的影像區域的步驟之後，更包含·利用 字:_貝程式42 ’將文字的影像區域區分為複數 H 421、422步驟，以供後續的文字辨識程式43直接 影像贿動通訊設備翻譯 使婦彳之紛條意圖。射，本實施例在 在㈣觀裝錢顯 擷取數位马像3m化“ 41，供使用者50在 、，々心像33 ^將欲翻譯社字影像部分儘量放大 觸拜元32的中央_，再經缝通酬 :其傳到咖40上，完成數位影㈣擷取與心 200824406 尺桿譯的文字影像部分置於顯示單元32邊 1 : 人一、S域而形成數位影像33傳至祠服器40 =:δΓ的文字群組分類裎式42，計算最接近 ★ 4=,央區域的一個群'组421，即為欲翻譯之群 Γ之旦/俊ί此群組421進行文字_作業，將群組421 内之衫像文子產生對應文字431再進行翻譯作聿翻譯為對 ==^441’之後再將__441經無線通訊網 ^傳至行_訊裝置30，由其顯示單元32顯示出 再請參照第6圖所繪示之太恭 譯影像βu =㈣躺摘通訊設備翻 豕又子的方法另-貫施例之動作示意圖 中取在=者5。利用行動通訊裝置3。 元

^取一文字輯來科，更可紗朗者5Q 裝置30顯示單元32的展；μ曰5 _ ^σί1 影像文字範園内，再將包含標:：=::於:翻譯之 电八姑服1140中，配合前述的文字群 33的文字影像區域區分為複數 ^ 3、424’計算數位影像33最接近標記3犯位置 ==，即為欲翻譯之群㈣ 座進订文子辨識作業，將群組似内之影像文字產生對 431再進行翻譯作業_為對應的說明内容441， 之後再將說明内容441經無線通 訊裝置30,由顯示單元32顯示出來。口傳至仃動通 另，上述各實施例中，在獲取一含影像文字之數位影 200824406 ^於—具—影像錄單與-顯示單S32的行動 =3°中之步驟及後續的應用-無線通訊網路20 : 邊位衫像33至—後端的器4〇中步驟，可包' 二種運作方法，—種係包含在數位影像&全部存動 通訊裝置30的記憶體後再進行岸 動 輪數位麵至-彳输觸1中^== 働位影像33掏取一部份影像的同包

0中湘L朗數位影像33 傳輸到刪4G中重組為完整物_ 33為止P 麟雜記齡翻輕簡決_所採用的 叮手奴之ϋ魏方式或實施辆& 發明專财紋範目。g卩凡 翻德疋本 符，或依本㈣利中請範圍文義相 發明專利範麟涵蓋。 ；寻、欠化與修飾，皆為本 【圖式簡單說明】 第1 Γ圖錢前技術之觸行動通絲置的位系統方 :備翻譯影像文字的系統 第2圖緣示本發8月翻彳f動通訊氣 實施例之系統方塊圖； 1 第3圖繪示本發明應用行叙 — 、 仃動通訊設備翻譯影像文字的方法 貫施例之流程示意圖，· 第4圖繪示本發明翻行 、au又備翻澤影像文字的方法 200824406 實施例之方塊示意圖； 第5圖繪示本發明應用行動通訊設備翻譯影像文字的方法 實施例之動作示意圖；以及 第6圖繪示本發明應用行動通訊設備翻譯影像文字的方法 另一實施例之動作示意圖。 【主要元件符號說明】 [先前技術部分] 10 11 行動通訊裝置 相機 12 13 14 15 16 [本發明部分] 20 30 31 32 33 341 342 整體封包無線電服務網路 網際網路存取 網際網路 光學字元辨識伺服器 定位伺服器 無線通訊網路 行動通訊裝置 衫像揭取單元 顯示單元 數位影像 邊界標記 標記 40 伺服器 200824406 41 42 421，422, 423, 424 43 431 44 441 50 S10 S20 S30 S40 S50 S60 影像處理程式 文字群組分類程式 群組 文字辨識程式 對應文字 翻譯程式 說明内容 使用者 獲取一含影像文字之數位影像於 一具一影像榻取單元與一顯示單 元的行動通訊裝置中 應用一無線通訊網路傳輸數位影 像至一後端的伺服器中 辨識數位影像為一對應文字 翻譯對應文字為一說明内容 應用無線通訊網路傳輸說明内容 自伺服器回到行動通訊裝置中 顯示說明内容於行動通訊裝置 14

Claims (1)

1. 200824406 十、申請專利範圍： 法，其步驟包 1. 一種應用行動通訊設備翻譯影像文字的方 含· 具一影像擷取單 獲取一含影像文字之數位影像於， 元與一頒示單元的行動通訊裝置中· 應用-無線通訊網路傳輸該數位影像至一舰 中； 辨識該數位影像為一對應文字· 翻譯該對應文字為一說明内容； 應用該無線通訊網路傳輪該說日㈣容自該舰器回 到該行動通訊裝置中；以及 顯示該說_容於該行動通訊裝置顯示單元。 2^申請專魏，項所述之應用彳亍動通細 的方法，其中該說_容_對應文字係包含同 石吾έ或不同語言。 1申請專利細第1項所述之翻行動通訊設備翻譯影 其中該數位影像所含的影像文字包含單 2申請專利範圍第i項所述之翻_通訊設備翻譯影 像文字的方法，其巾_賴數位影料—對庫文字牛 t前’更包含預先利細侧⑽—影像處理料 払出文字的影像區域步驟。 5·如申請專職圍第4撕述之翻彳揭通訊設備 像文字的方法’其中該影像處理程式標出文字的:像： 200824406 域係包含影像去背景技術、邊緣檢測技術或顏色區域八 段技術。 刀 6.如申請專利範圍第4項所述之應用行動通訊設備翻譯影 像文字的方法，其中在該預先利用該伺服器内的一影^ 處理程式找出文字的影像區域步驟之後更包含：利用該 伺服器内之-文字群組分類程式，將該文字的影像區域 區分為複數個群組之步驟。 申明專利|!圍第6 j：貞所述之應用行動通訊設備翻譯景多 ^文字的方法，其巾該獲取—含影像文字之數位影像^ 具影像擷取能力的行動通訊裝置中步驟前，更包含於 不單摘界面巾顯示—邊界標記，且該辨識該數位 影像為-對應文字步驟係辨識最靠近邊界標記區域中央 的群組。 、 8.如巾請專利範圍第6項所述之應用行動通訊設備翻譯影 予的方法，其中該獲取一含影像文字之數位影像於 —具影細取能力的行_絲财步驟前，更包含使 f者於其顯示單元的界面恼加—標記於欲翻譯之該影 2予範圍内，且該無線傳輸該數位影像於一後端飼服 y驟中’更包含傳送該標記位置資訊，並計算該些 ，組之最靠近該標記位置之群組’以進行後續對該群二 辨識為一對應文字之步驟。 =申請專利範圍第丨項所述之翻行動通減備翻譯影 $字的綠，其帽取—含影像文字之數位影像於_ 影像操取單元與一顯示單元的行動通訊裝置令步 16 200824406 驟 ，係包含在概位影像全部存域__裝 體，再進行該應用—無線通訊網路傳輪該數位影像至二 後端的伺服器中步驟。 、 二^的方法，其中獲取—含影像文字之數位影像 於一具-影像榻取單元與一顯示單元的行動通訊裝置 :步驟，係包含在賴㈣像擷取_部份影像的同 時’即進行該應用-無線通訊網路傳輪該部份的數位 影像至一後端的伺服器中步驟，直到該數位影像全部 擷取並全部傳輸到該伺服器中。 11·如申請專職财1項所述之顧行動通訊設備翻譯 影像文字的方法，其中該無線通訊網路係包含整體封 包無線電服務(General Packet Radio Service， 或無線資料傳輸技術WiFi(Wireless Fidelity)。 12.如申請專利範圍第1項所述之應用行動通訊設備翻譯 影像文字的方法，其中該行動通訊裝置之該數位影像 擷取係取自相機或攝影機。 13·如申請專利範圍第1項所述之應用行動通訊設備翻譯 影像文字的方法，其中該行動通訊裝置包含具有數據 通訊能力之手機（Mobile Phone)、個人數位助理 (Personal Digital Assistant, PDA)、超級行動電腦 (Ultra Mobile PC, UMPC)或筆記型電腦（N〇teb〇〇ks， NB)。 14. 一種應用行動通訊設備翻譯影像文字的系統，包括·· 17 200824406 一無線通訊網路； —行動通訊裝置與該無線通訊網路連通，其 有-影像擷取單元以及一顯示單元，該影像擁取= =操取-含有影像文字之數⑽像，麟輪 線通訊路上；以及 …、 一伺服器與該無線通訊網路連通，其係具 a 像處理程式、-文字群組分類程式、_文字辨= :―翻譯程式，可對該行動通絲置上傳之該數= 進订影像文字區域識別、文字群級分 。 與翻譯處理，產生-說明内容，並文子辨識 =該說明内容至該行動通訊裝置，由該顯示單: 翔範_14項所叙翻行麵訊設備翻課 衫像文予的祕，其中該無線通訊網路係包含整 包無線電服務或無線資料傳輸技術。 且、 16.^請專概圍第14韻述之_行麵訊設備翻譯 衫像文子的糸統，其中該行動通訊楚置 通訊能力之手機、個人數位助理、超针⑽有数據 記型電腦。 ‘及仃動電腦或筆 Η.=請專利範圍第14項所述之應用行麵訊設備翻譯 ^象文子的糸統’其中該行動通訊裝置之該影像操取 早兀係包含相機或攝影機。 18