JP2004343354A

JP2004343354A - 携帯通信装置

Info

Publication number: JP2004343354A
Application number: JP2003136418A
Authority: JP
Inventors: Miho Kagei; 美帆景井
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2003-05-14
Filing date: 2003-05-14
Publication date: 2004-12-02

Abstract

【課題】電話帳データの登録を短時間でかつ容易に行うことができる携帯通信装置を提供する。
【解決手段】携帯電話機１の撮像部３で他の携帯電話機２０の表示部１０に表示される画像を撮像し、撮像された画像の中の文字列を、画像処理部４によって抽出する。画像処理部４によって抽出された文字列は、文字コード変換部５によって文字コードデータに変換する。文字コードデータは、データ分類部６によって所定の項目毎に分類し、分類データを生成する。携帯電話機１は、生成される分類データを電話帳データ２２として電話帳データ記憶部１１に記憶し、電話帳データ２２に基づいて発信および着信を行う。これによって、携帯電話機１にユーザが手動で電話帳データ２２を入力する必要がなくなり、電話帳データ２２の登録を短時間でかつ容易に行うことができる。
【選択図】図１

Description

【０００１】
【発明の属する技術分野】
本発明は、いわゆるカメラ付携帯電話機のように、画像を撮像する撮像部を備える携帯通信装置に関する。
【０００２】
【従来の技術】
従来、名刺の管理を行う場合は、名刺の枚数が増えるにつれて管理が煩雑になるため、名刺に各種各様に記載されている文字データ、たとえば所属組織、肩書、姓名、住所および電話番号を、ユーザがキーボードを用いてコンピュータに手動で入力して、記憶させている。
【０００３】
また、最近の携帯電話機の用途は、単に通話だけではなく、電子的な電話帳およびスケジュール帳、電子メールの送受信、インターネット接続など、様々な用途に広がってきており、携帯電話機付属の電子的な電話帳（以下、「電子電話帳」と表記する場合がある）へ姓名、電話番号および電子メールのメールアドレスなどの電話帳データを記憶させるときは、ユーザが操作キーを用いて手動で入力操作を行っている。
【０００４】
しかし、コンピュータに入力する文字データおよび携帯電話機に入力する電話帳データの項目が増えるにつれて、データの入力操作は煩雑になり、ユーザにとって大きな負担になる。このため、ユーザの入力負荷を軽減する技術の開発が進められている。
【０００５】
第１の従来技術は、名刺に記載の文字データ、たとえば所属組織、肩書、姓名、住所および電話番号をスキャナで読取り、読取った前記文字データに基づいてデータベースを作成して、記憶する（たとえば、特許文献１参照）。
【０００６】
第２の従来技術は、文字読取り部および文字認識部を備える携帯電話機において、ユーザが電話帳などの紙面上に記載された電話番号の文字上を、文字読取り部を用いてなぞることによって、文字読取り部は前記電話番号を文字形状イメージとして読取る。読取った文字形状イメージは、文字認識部によって文字コードに変換し、文字コードに基づいて認識した電話番号をメモリに記憶する（たとえば、特許文献２参照）。
【０００７】
第３の従来技術は、カメラ機能を備える携帯電話機において、電話番号が記載された電話帳などの紙媒体をカメラで撮像し、撮像した画像情報を携帯電話機の表示部に表示する。この表示された画像情報の中から電話番号の画像情報がユーザによって選択されると、選択された画像情報を文字情報に変換し、メモリに記憶する（たとえば、特許文献３参照）。
【０００８】
【特許文献１】
特開昭５９−４７６４１号公報
【特許文献２】
特開平６−３０３２９８号公報
【特許文献３】
特開２００１−１７７６２２号公報
【０００９】
【発明が解決しようとする課題】
前述の第２および第３の従来技術では、紙面上の電話番号の文字情報を読取り、文字認識を行うことによって、携帯電話機の電子電話帳への電話番号の登録操作を簡略化している。しかし、前述の第２および第３の従来技術は、複数の電話帳データ、たとえば電話番号、姓名および電子メールのメールアドレスなどの文字情報を一度に読取り、文字認識を行うことによって、前記複数の電話帳データを携帯電話機の電子電話帳に登録できる構成になっていない。したがって、第２および第３の従来技術における携帯電話機の電子電話帳へ複数の電話帳データを登録するときには、各電話帳データの各文字情報を個々に読取り、文字認識を行わなければならないので、電話帳データの登録は非常に手間がかかるとともに、多くの時間を要するという問題がある。
【００１０】
本発明の目的は、電話帳データの登録を短時間でかつ容易に行うことができる携帯通信装置を提供することである。
【００１１】
【課題を解決するための手段】
本発明は、画像を撮像する撮像部と、
前記撮像部によって撮像された画像の中から文字列を抽出する画像処理部と、
前記画像処理部によって抽出された文字列を文字コードデータに変換する文字コード変換部と、
前記文字コードデータを所定の項目毎に分類した分類データを生成するデータ分類部と、
前記データ分類部によって生成された分類データを電話帳データとして記憶する電話帳データ記憶部と、
前記電話帳データ記憶部に記憶された電話帳データに基づいて発信および着信が可能な通信部と、
前記撮像部、電話帳データ記憶部および通信部からの画像関連データを選択的に表示する表示部とを含むことを特徴とする携帯通信装置である。
【００１２】
本発明に従えば、撮像部によって撮像された画像の中の文字列が、画像処理部によって抽出される。画像処理部によって抽出された文字列は、文字コード変換部によって文字コードデータに変換される。文字コードデータは、データ分類部によって所定の項目毎に分類され、分類データが生成される。携帯通信装置は、前記分類データを電話帳データとして電話帳データ記憶部に記憶し、この電話帳データに基づいて発信および着信を行う。
【００１３】
この結果、携帯通信装置にキー操作などによってユーザが手動で電話帳データを入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話帳データの誤入力を防止することができる。また、本発明の携帯通信装置は、撮像部によって撮像された画像の中に複数の文字列がある場合でも、一度に画像内のすべての文字列に対して文字認識処理を行い、文字認識処理された複数の文字列を電話帳データとして電話帳データ記憶部に記憶することができる。
【００１４】
これによって、電話帳データ記憶部に記憶する電話帳データのデータ数が多い場合でも、比較的短時間でかつ容易に電話帳データの登録を行うことができる。したがって、本発明の携帯通信装置は、従来技術の携帯通信装置に比べて、利便性が向上する。
【００１５】
また本発明は、漢字、平仮名および片仮名を識別するための日本語辞書データベースと、
複数のフォントを識別するための日本語フォントデータベースとを含むことを特徴とする。
【００１６】
本発明に従えば、携帯通信装置は、漢字、平仮名および片仮名を識別するための日本語辞書データベースを含んで構成されるので、画像処理部によって抽出された文字列に含まれる文字種別、たとえば漢字、平仮名および片仮名は、日本語辞書データベースに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。また、携帯通信装置は、日本語フォントデータベースを含んで構成されるので、画像処理部によって抽出された文字列のフォント、たとえば明朝体、ゴシック体および行書体などは、日本語フォントデータベースに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。
【００１７】
また本発明は、前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列を電話番号識別情報であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする。
【００１８】
本発明に従えば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列は、電話番号と識別するための電話番号識別情報、たとえば姓名であると判断されて、電話帳データ記憶部に記憶される。この結果、ユーザが電話番号識別情報を入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話番号識別情報の誤入力を防止することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００１９】
また本発明は、前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が半角片仮名のみの文字列である場合、前記文字列を読み仮名であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする。
【００２０】
本発明に従えば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が半角片仮名のみの文字列である場合、前記文字列は読み仮名であると判断されて、電話帳データ記憶部に記憶される。この結果、ユーザが読み仮名を入力する必要がなくなるので、ユーザの入力の手間が省け、かつ読み仮名の誤入力を防止することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００２１】
また本発明は、前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が零から始まる連続した数字であり、かつ連続した数字に英字が含まれていない場合、前記文字列を電話番号であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする。
【００２２】
本発明に従えば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が零から始まる連続した数字であり、かつ連続した数字に英字が含まれていない場合、前記文字列は電話番号であると判断され、前記電話帳データ記憶部に記憶される。この結果、ユーザが電話番号を入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話番号の誤入力を防止することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００２３】
また本発明は、前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が半角英字で始まる場合または前記文字列に予め定める記号が含まれている場合、前記文字列を電子メールのメールアドレスであると判断し、前記電話帳データ記憶部に記憶させることを特徴とする。
【００２４】
本発明に従えば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が半角英字で始まる場合または前記文字列に予め定める記号が含まれている場合、前記文字列は電子メールのメールアドレスであると判断され、前記電話帳データ記憶部に記憶される。この結果、ユーザが電子メールのメールアドレスを入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電子メールのメールアドレスの誤入力を防止することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００２５】
また本発明は、前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列に基づいて、前記文字列に続く第２の文字列が姓名、読み仮名、電話番号および電子メールのメールアドレスのいずれであるかを判断し、前記電話帳データ記憶部に記憶させることを特徴とする。
【００２６】
本発明に従えば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列に基づいて、前記文字列に続く第２の文字列が姓名、読み仮名、電話番号および電子メールのメールアドレスのいずれであるかが判断されて、電話帳データ記憶部に記憶される。この結果、ユーザが姓名、読み仮名、電話番号および電子メールのメールアドレスを入力する必要がなくなるので、ユーザの入力の手間が省け、かつ姓名、読み仮名、電話番号および電子メールのメールアドレスの誤入力を防止することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００２７】
また本発明は、前記電話帳データ記憶部は、複数の電話番号および複数の電子メールのメールアドレスを記憶可能であることを特徴とする。
【００２８】
本発明に従えば、電話帳データ記憶部には、複数の電話番号および複数の電子メールのメールアドレスを記憶させることができる。ユーザは、電話帳データ記憶部に記憶された複数の電話番号および複数の電子メールのメールアドレスの中から、電話を掛けたい相手の電話番号または電子メールを送信したい相手のメールアドレスを選択するだけで、容易に前記電話番号に発信または前記メールアドレス宛てに電子メールを送信することができる。したがって、本発明の携帯通信装置の利便性が向上する。
【００２９】
【発明の実施の形態】
図１は、本発明の実施の一形態である携帯電話機１の電気的構成を示すブロック図である。携帯電話機１は、無線電波を介して基地局と無線通信を行い、音響データだけでなく、文字データおよび画像データなどを送受信する。携帯電話機１は、通信部２、撮像部３、画像処理部４、文字コード変換部５、データ分類部６、中央制御部７、音声入出力部８、キー操作部９、表示部１０、電話帳データ記憶部１１およびＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）１２を含んで構成される。画像処理部４は、画像記憶部４ａを含む。ＲＯＭ１２は、日本語辞書データベース１２ａおよび日本語フォントデータベース１２ｂを含む。
【００３０】
通信部２は、無線電話網の基地局との無線通信における制御処理と、無線通信によって送受信されるデータの変復調処理とを行う。撮像部３は、入射した光を電気信号に変換して画像を撮像する。撮像部３は、たとえばデジタルカメラによって実現される。
【００３１】
画像処理部４は、撮像部３によって撮像された画像の中から文字列を抽出する。また、画像処理部４は、抽出した文字列のうち表示部１０の予め定める表示領域に表示された文字列を識別し、電話帳データ記憶部１１に記憶させる。画像記憶部４ａは、たとえばＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）によって実現され、撮像部３によって撮像された画像を記憶する。文字コード変換部５は、画像処理部４によって抽出された文字列を、コンピュータで取扱うことができるようにするために、個々に割振られた文字、数字および記号を含む文字コードデータに変換する。
【００３２】
データ分類部６は、文字コード変換部５によって生成された文字コードデータを所定の項目毎に分類して、分類データを生成する。中央制御部７は、携帯電話機１を構成する上記の通信部２、撮像部３、音声入出力部８、キー操作部９、表示部１０および電話帳データ記憶部１１を含むハードウェア資源を制御する。特に、通信部２、撮像部３、音声入出力部８、キー操作部９、表示部１０および電話帳データ記憶部１１からのデータ出力と通信部２、撮像部３、音声入出力部８、キー操作部９、表示部１０および電話帳データ記憶部１１へのデータ入力とを制御する。
【００３３】
音声入出力部８は、マイクロフォンおよびスピーカを含む。音声入出力部８は、音響のデータをスピーカによって音響化させる処理と、音響をマイクロフォンで受けてデータ化させる処理とを行う。キー操作部９は、１以上のキーを含み、携帯電話機１への操作指示のためにユーザによって操作される。キー操作部９は、たとえば電話番号および名前などを入力するためのテンキーと、撮像部３で画像を撮像する撮像モード、撮像部３で撮像して読取った電話番号などの文字列を電話帳データとして電話帳データ記憶部１１に記憶する電話帳登録モードならびに電話帳データに基づいてユーザが指定した電話番号への発信およびユーザが指定したメールアドレス宛ての電子メールの送信を行う発信モードなどの種々のモードを設定するための機能キーとを含む。
【００３４】
表示部１０は、通信部２、撮像部３および電話帳データ記憶部１１からの画像関連データを選択的に表示する。ここで、画像関連データは、他の携帯電話機から送信され、通信部２で受信した文字データおよび画像データ、撮像部３によって撮像され、画像処理が施された画像データならびに電話帳データ記憶部１１に記憶された文字データおよび画像データを含む。
【００３５】
電話帳データ記憶部１１は、たとえばＲＡＭによって実現される。電話帳データ記憶部１１は、データ分類部６によって生成された分類データ、たとえば姓名データ、読み仮名データ、電話番号データおよび電子メールのメールアドレスデータを電話帳データとして記憶する。日本語辞書データベース１２ａは、漢字、平仮名、片仮名、数字、英字、記号および絵記号の各文字のデータを含む。日本語フォントデータベース１２ｂは、漢字、平仮名、片仮名および英字などの各文字のフォントデータ、たとえば明朝体、ブロック体および行書体などのデータを含む。
【００３６】
図２は、携帯電話機１の使用状態の一例を示す図である。図２（ａ）は、他の携帯電話機２０における表示部１０の表示例を示す図である。図２（ｂ）は、携帯電話機１の撮像部３で他の携帯電話機２０の表示部１０を撮像したとき、携帯電話機１の表示部１０に表示される画像の表示例を示す図である。図３は、撮像部３で撮像した画像内の文字列の抽出および文字列の識別・同定処理の手順の一例を示すフローチャートである。なお、他の携帯電話機２０において、携帯電話機１と同様の構成部分については、同様の参照符を付して、説明を省略する。
【００３７】
他の携帯電話機２０の表示部１０には、たとえば図２（ａ）に示すように、携帯電話機２０付属の電子的な電話帳（以下、「電子電話帳」と表記する場合がある）、たとえば電子電話帳の項目２１および前記項目２１に対応する電話帳データ２２が表示される。携帯電話機１のユーザは、撮像部３で他の携帯電話機２０の表示部１０に表示される電子電話帳の画像を撮像する場合に、予めキー操作部９の所定の機能キーを用いて、撮像モードに設定する。
【００３８】
前記撮像モードに設定した後に、図３のステップＡ１において、ユーザは、他の携帯電話機２０の電子電話帳が表示されている表示部１０に撮像部３を向けて、前記電子電話帳が表示されている表示部１０の画像を撮像する。ユーザは、たとえば図２（ｂ）に示すように、電子電話帳の電話帳データ２２のみを撮像する。
【００３９】
ステップＡ２では、撮像部３で撮像した電話帳データ２２の画像（以下、「撮像画像」と表記する場合がある）を、画像記憶部４ａに記憶する。ここで、撮像部３で画像を撮像して読取った文字列を電話帳データとして電話帳データ記憶部１１に記憶する場合、携帯電話機１のユーザは、予めキー操作部９の所定の機能キーを用いて、電話帳登録モードに設定する。
【００４０】
電話帳登録モードに設定した後に、ステップＡ３では、画像処理部４において、画像記憶部４ａに記憶した撮像画像の中から文字列を抽出する処理を行う。文字列の抽出処理は、たとえば光学文字認識（ＯｐｔｉｃａｌＣｈａｒａｃｔｅｒＲｅｃｏｇｎｉｔｉｏｎ；略称：ＯＣＲ）技術を用いて行う。
【００４１】
ステップＡ４では、画像処理部４において、撮像画像の中から抽出された文字列の中から、姓名を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図２（ｂ）に示す携帯電話機１の表示部１０の最上部に表示される文字列「景井美帆」を、姓名を示す文字列として抽出する。
【００４２】
ステップＡ５では、姓名を示す文字列として抽出した文字列の左端の文字「景」が、漢字、平仮名および全角片仮名のうちいずれか１つであるかどうかの識別・同定を行う。具体的には、文字コード変換部５において、ＲＯＭ１２に格納されている日本語辞書データベース１２ａおよび日本語フォントデータベース１２ｂを用いて、前記左端の文字を文字コードデータに変換して、前記左端の文字に対する文字認識処理を行うことによって、識別・同定を行う。前記左端の文字が、漢字、平仮名および全角片仮名のうちいずれか１つであると同定された場合は、ステップＡ５において、前記姓名を示す文字列の各文字を、前述と同様に文字コードデータに変換して、前記各文字に対する文字認識処理を行うことによって、識別・同定を行う。
【００４３】
ステップＡ６では、ステップＡ５において姓名を示す文字列として識別・同定された文字列を、データ分類部６において姓名データに分類する。
【００４４】
ステップＡ７では、画像処理部４において、撮像画像の中から抽出された文字列の中から、読み仮名を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図２（ｂ）に示す携帯電話機１の表示部１０において、姓名を示す文字列が表示される行の１行下の行に表示される文字列「カゲイミホ」を、読み仮名を示す文字列として抽出する。
【００４５】
ステップＡ８では、読み仮名を示す文字列として抽出した文字列の左端の文字「カ」が、半角片仮名であるかどうかの識別・同定を行う。具体的には、文字コード変換部５において、ＲＯＭ１２に格納されている日本語辞書データベース１２ａおよび日本語フォントデータベース１２ｂを用いて、前記左端の文字を文字コードデータに変換して、前記左端の文字に対する文字認識処理を行うことによって、識別・同定を行う。前記左端の文字が、半角片仮名であると同定された場合は、ステップＡ８において、前記読み仮名を示す文字列の各文字を、前述と同様に文字コードデータに変換して、前記各文字に対する文字認識処理を行うことによって、識別・同定を行う。
【００４６】
ステップＡ９では、ステップＡ８において読み仮名を示す文字列として識別・同定された文字列を、データ分類部６において読み仮名データに分類する。
【００４７】
ステップＡ１０では、画像処理部４において、撮像画像の中から抽出された文字列の中から、電話番号を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図２（ｂ）に示す携帯電話機１の表示部１０において、読み仮名を示す文字列が表示される行の１行下の行に表示される文字列「０９０１２３４５６」を、電話番号を示す文字列として抽出する。
【００４８】
ステップＡ１１では、電話番号を示す文字列として抽出した文字列が、零から始まる連続した数字であり、かつ連続した数字に英字が含まれていないかどうかの識別・同定を行う。
【００４９】
ステップＡ１２では、ステップＡ１１において電話番号を示す文字列として識別・同定された文字列を、データ分類部６において電話番号データに分類する。
【００５０】
ステップＡ１３では、画像処理部４において、撮像画像の中から抽出された文字列の中から、電子メールのメールアドレス（以下、単に「メールアドレス」と表記する場合がある）を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図２（ｂ）に示す携帯電話機１の表示部１０において、電話番号を示す文字列が表示される行の１行下の行に表示される文字列「ａｂ＠ｃｄ．ｃｏｍ」を、メールアドレスを示す文字列として抽出する。
【００５１】
ステップＡ１４では、メールアドレスを示す文字列として抽出した文字列が、半角英字で始まるか、または前記文字列に予め定める記号、たとえばアットマーク「＠」などの記号が含まれているかどうかの識別・同定を行う。
【００５２】
ステップＡ１５では、ステップＡ１４においてメールアドレスを示す文字列として識別・同定された文字列を、データ分類部６においてメールアドレスデータに分類する。ステップＡ１６では、データ分類部６においてそれぞれ分類された姓名データ、読み仮名データ、電話番号データおよびメールアドレスデータを電話帳データ２２として、電話帳データ記憶部１１に記憶する。
【００５３】
前述のように本実施形態によれば、ユーザが他の携帯電話機２０の表示部１０に表示される電話帳データ２２を、携帯電話機１の撮像部３で撮像すると、撮像部３によって撮像された電話帳データ２２の画像が、携帯電話機１の画像記憶部４ａに記憶される。画像記憶部４ａに記憶された画像内の文字列が、画像処理部４によって抽出される。画像処理部４によって抽出された文字列は、文字コード変換部５によって文字コードデータに変換される。文字コードデータは、データ分類部６によって所定の項目毎に分類され、分類データ、たとえば姓名データ、読み仮名データ、電話番号データおよびメールアドレスデータが生成される。携帯電話機１は、前記分類データを電話帳データ２２として電話帳データ記憶部１１に記憶し、この電話帳データ２２に基づいて発信および着信を行う。
【００５４】
この結果、携帯電話機１に、キー操作部９のテンキーなどによってユーザが手動で電話帳データ２２を入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話帳データ２２の誤入力を防止することができる。また、携帯電話機１は、撮像部３によって撮像された画像の中に複数の文字列がある場合でも、一度に画像内のすべての文字列に対して文字認識処理を行い、文字認識処理された複数の文字列を電話帳データ２２として電話帳データ記憶部１１に記憶することができる。
【００５５】
これによって、電話帳データ記憶部１１に記憶する電話帳データ２２のデータ数が多い場合でも、比較的短時間でかつ容易に電話帳データ２２の登録を行うことができる。したがって、携帯電話機１は、従来技術の携帯電話機に比べて、利便性が向上する。
【００５６】
また携帯電話機１は、前述のように他の携帯電話機２０が所有している情報が表示される表示部１０を撮像することによって、他の携帯電話機２０が所有し、かつユーザが必要な情報を容易に取得して、電話帳データ記憶部１１などに登録することができるので、携帯電話機１の利用用途がさらに広がる。
【００５７】
また、前述のように、図３に示すステップＡ５およびステップＡ８では、画像処理部４によって、撮像画像内から抽出された文字列に含まれる文字種別、たとえば漢字、平仮名および片仮名は、日本語辞書データベース１２ａに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。また、画像処理部４によって、撮像画像内から抽出された文字列のフォント、たとえば明朝体、ゴシック体および行書体などは、日本語フォントデータベース１２ｂに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。
【００５８】
また本実施形態において、電話帳データ記憶部１１に記憶された電話番号への発信を行う場合および電話帳データ記憶部１１に記憶されたメールアドレス宛てに電子メールを送信する場合、ユーザは、電話帳データ記憶部１１に記憶された電話番号および電子メールのメールアドレスの中から、電話を掛けたい相手の電話番号および電子メールを送信したい相手のメールアドレスを選択するだけで、容易に前記電話番号に発信または前記メールアドレス宛てに電子メールを送信することができる。したがって、携帯電話機１の利便性が向上する。
【００５９】
なお、ユーザが電話帳データ記憶部１１に記憶された電話帳データ２２に基づいて指定した電話番号に発信を行う場合および前記指定したメールアドレス宛てに電子メールの送信を行う場合には、予めキー操作部９の所定の機能キーを用いて、発信モードに設定しておく。
【００６０】
また本実施形態において、通話または電子メールを着信したときには、電話をかけてきた相手の電話番号データおよび電子メールを送信してきた相手のメールアドレスデータが電話帳データ記憶部１１に記憶されているか否かを判断する。前記相手の電話番号データおよび相手のメールアドレスデータが電話帳データ記憶部１１に記憶されていると判断したときには、通話および電子メールの着信に応じて、表示部１０に相手の電話番号データおよびメールアドレスデータを表示させる。また、電話番号データおよびメールアドレスデータに関連付けて電話帳データ記憶部１１に記憶されている関連データ、たとえば姓名データなどがある場合には、電話番号データおよびメールアドレスデータと、関連データとを併せて表示部１０に表示させるようにしてもよい。
【００６１】
図４は、携帯電話機１の使用状態の一例を示す図である。図４（ａ）は、他の携帯電話機２０における表示部１０の表示例を示す図である。図４（ｂ）は、携帯電話機１の撮像部３で他の携帯電話機２０の表示部１０を撮像したとき、携帯電話機１の表示部１０に表示される画像の表示例を示す図である。図５は、撮像部３で撮像した画像内の文字列の抽出および文字列の識別・同定処理の手順の一例を示すフローチャートである。なお、他の携帯電話機２０において、携帯電話機１と同様の構成部分については、同様の参照符を付して、説明を省略する。
【００６２】
他の携帯電話機２０の表示部１０には、たとえば図４（ａ）に示すように、携帯電話機２０付属の電子的な電話帳（以下、「電子電話帳」と表記する場合がある）、たとえば電子電話帳の項目２１および前記項目２１に対応する電話帳データ２２が表示される。携帯電話機１のユーザは、撮像部３で他の携帯電話機２０の表示部１０に表示される電子電話帳の画像を撮像する場合に、予めキー操作部９の所定の機能キーを用いて、撮像モードに設定する。
【００６３】
前記撮像モードに設定した後に、図５のステップＢ１において、ユーザは、他の携帯電話機２０の電子電話帳が表示されている表示部１０に撮像部３を向けて、前記電子電話帳が表示されている表示部１０の画像を撮像する。ユーザは、たとえば図４（ｂ）に示すように、電子電話帳の項目２１および電話帳データ２２を撮像する。
【００６４】
ステップＢ２では、撮像部３で撮像した電話帳データ２２の画像（以下、「撮像画像」と表記する場合がある）を、画像記憶部４ａに記憶する。ここで、撮像部３で画像を撮像して読取った文字列を電話帳データとして電話帳データ記憶部１１に記憶する場合、携帯電話機１のユーザは、予めキー操作部９の所定の機能キーを用いて、電話帳登録モードに設定する。
【００６５】
電話帳登録モードに設定した後に、ステップＢ３では、画像処理部４において、画像記憶部４ａに記憶した撮像画像の中から文字列を抽出する処理を行う。文字列の抽出処理は、たとえば光学文字認識（ＯｐｔｉｃａｌＣｈａｒａｃｔｅｒＲｅｃｏｇｎｉｔｉｏｎ；略称：ＯＣＲ）技術を用いて行う。
【００６６】
ステップＢ４では、画像処理部４において、撮像画像の中から抽出された文字列の中から、姓名を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図４（ｂ）に示す携帯電話機１の表示部１０の最上部に表示される文字列「名前」を、姓名を示す文字列として抽出する。なお、ステップＢ４では、図４（ｂ）に示す携帯電話機１の表示部１０の最上部に表示される文字列が「名前」以外の文字列、たとえば「氏名」または「名称」などの場合も、姓名を示す文字列として抽出する。
【００６７】
ステップＢ５では、姓名を示す文字列として抽出した文字列の右側に位置する文字「景」が、漢字、平仮名および全角片仮名のうちいずれか１つであるかどうかの識別・同定を行う。具体的には、文字コード変換部５において、ＲＯＭ１２に格納されている日本語辞書データベース１２ａおよび日本語フォントデータベース１２ｂを用いて、前記右側に位置する文字を文字コードデータに変換して、前記右側に位置する文字に対する文字認識処理を行うことによって、識別・同定を行う。前記右側に位置する文字が、漢字、平仮名および全角片仮名のうちいずれか１つであると同定された場合は、ステップＢ５において、前記姓名を示す文字列の右側に位置する文字列の各文字を、前述と同様に文字コードデータに変換して、前記各文字に対する文字認識処理を行うことによって、識別・同定を行う。
【００６８】
ステップＢ６では、ステップＢ５において識別・同定された文字列を、データ分類部６において姓名データに分類する。
【００６９】
ステップＢ７では、画像処理部４において、撮像画像の中から抽出された文字列の中から、読み仮名を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図４（ｂ）に示す携帯電話機１の表示部１０において、姓名を示す文字列が表示される行の１行下の行に表示される文字列「カナ」を、読み仮名を示す文字列として抽出する。なお、ステップＢ７では、図４（ｂ）に示す携帯電話機１の表示部１０において、姓名を示す文字列が表示される行の１行下の行に表示される文字列が「カナ」以外の文字列、たとえば「フリガナ」などの場合も、読み仮名を示す文字列として抽出する。
【００７０】
ステップＢ８では、読み仮名を示す文字列として抽出した文字列の右側に位置する文字「カ」が、半角片仮名であるかどうかの識別・同定を行う。具体的には、文字コード変換部５において、ＲＯＭ１２に格納されている日本語辞書データベース１２ａおよび日本語フォントデータベース１２ｂを用いて、前記右側に位置する文字を文字コードデータに変換して、前記右側に位置する文字に対する文字認識処理を行うことによって、識別・同定を行う。前記右側に位置する文字が、半角片仮名であると同定された場合は、ステップＢ８において、前記読み仮名を示す文字列の右側に位置する文字列の各文字を、前述と同様に文字コードデータに変換して、前記各文字に対する文字認識処理を行うことによって、識別・同定を行う。
【００７１】
ステップＢ９では、ステップＢ８において識別・同定された文字列を、データ分類部６において読み仮名データに分類する。
【００７２】
ステップＢ１０では、画像処理部４において、撮像画像の中から抽出された文字列の中から、電話番号を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図４（ｂ）に示す携帯電話機１の表示部１０において、読み仮名を示す文字列が表示される行の１行下の行に表示される文字列「番号」を、電話番号を示す文字列として抽出する。なお、ステップＢ１０では、図４（ｂ）に示す携帯電話機１の表示部１０において、読み仮名を示す文字列が表示される行の１行下の行に表示される文字列が「番号」以外の文字列、たとえば「電話番号」などの場合も、電話番号を示す文字列として抽出する。
【００７３】
ステップＢ１１では、電話番号を示す文字列として抽出した文字列の右側に位置する文字列が、零から始まる連続した数字であり、かつ連続した数字に英字が含まれていないかどうかの識別・同定を行う。
【００７４】
ステップＢ１２では、ステップＢ１１において識別・同定された文字列を、データ分類部６において電話番号データに分類する。
【００７５】
ステップＢ１３では、画像処理部４において、撮像画像の中から抽出された文字列の中から、電子メールのメールアドレス（以下、単に「メールアドレス」と表記する場合がある）を示す文字列を抽出する処理を行う。前記撮像画像の中から抽出された文字列のうち表示部１０の予め定める領域、たとえば図４（ｂ）に示す携帯電話機１の表示部１０において、電話番号を示す文字列が表示される行の１行下の行に表示される文字列「アドレス」を、メールアドレスを示す文字列として抽出する。なお、ステップＢ１３では、図４（ｂ）に示す携帯電話機１の表示部１０において、電話番号を示す文字列が表示される行の１行下の行に表示される文字列が「アドレス」以外の文字列、たとえば「メールアドレス」などの場合も、メールアドレスを示す文字列として抽出する。
【００７６】
ステップＢ１４では、メールアドレスを示す文字列として抽出した文字列の右側に位置する文字列が、半角英字で始まるか、または前記文字列に予め定める記号、たとえばアットマーク「＠」などの記号が含まれているかどうかの識別・同定を行う。
【００７７】
ステップＢ１５では、ステップＢ１４において識別・同定された文字列を、データ分類部６においてメールアドレスデータに分類する。ステップＢ１６では、データ分類部６においてそれぞれ分類された姓名データ、読み仮名データ、電話番号データおよびメールアドレスデータを電話帳データ２２として、電話帳データ記憶部１１に記憶する。
【００７８】
前述のように本実施形態によれば、ユーザが他の携帯電話機２０の表示部１０に表示される電話帳データ２２を、携帯電話機１の撮像部３で撮像すると、撮像部３によって撮像された電話帳データ２２の画像が、携帯電話機１の画像記憶部４ａに記憶される。画像記憶部４ａに記憶された画像内の文字列が、画像処理部４によって抽出される。画像処理部４によって抽出された文字列は、文字コード変換部５によって文字コードデータに変換される。文字コードデータは、データ分類部６によって所定の項目毎に分類され、分類データ、たとえば姓名データ、読み仮名データ、電話番号データおよびメールアドレスデータが生成される。携帯電話機１は、前記分類データを電話帳データ２２として電話帳データ記憶部１１に記憶し、この電話帳データ２２に基づいて発信および着信を行う。
【００７９】
この結果、携帯電話機１に、キー操作部９のテンキーなどによってユーザが手動で電話帳データ２２を入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話帳データ２２の誤入力を防止することができる。また、携帯電話機１は、撮像部３によって撮像された画像の中に複数の文字列がある場合でも、一度に画像内のすべての文字列に対して文字認識処理を行い、文字認識処理された複数の文字列を電話帳データ２２として電話帳データ記憶部１１に記憶することができる。
【００８０】
これによって、電話帳データ記憶部１１に記憶する電話帳データ２２のデータ数が多い場合でも、比較的短時間でかつ容易に電話帳データ２２の登録を行うことができる。したがって、携帯電話機１は、従来技術の携帯電話機に比べて、利便性が向上する。
【００８１】
また携帯電話機１は、前述のように他の携帯電話機２０が所有している情報が表示される表示部１０を撮像することによって、他の携帯電話機２０が所有し、かつユーザが必要な情報を容易に取得して、電話帳データ記憶部１１などに登録することができるので、携帯電話機１の利用用途がさらに広がる。
【００８２】
また、前述のように、図５に示すステップＢ５およびステップＢ８では、画像処理部４によって、撮像画像内から抽出された文字列に含まれる文字種別、たとえば漢字、平仮名および片仮名は、日本語辞書データベース１２ａに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。また、画像処理部４によって、撮像画像内から抽出された文字列のフォント、たとえば明朝体、ゴシック体および行書体などは、日本語フォントデータベース１２ｂに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。
【００８３】
また本実施形態において、電話帳データ記憶部１１に記憶された電話番号への発信を行う場合および電話帳データ記憶部１１に記憶されたメールアドレス宛てに電子メールを送信する場合、ユーザは、電話帳データ記憶部１１に記憶された電話番号および電子メールのメールアドレスの中から、電話を掛けたい相手の電話番号および電子メールを送信したい相手のメールアドレスを選択するだけで、容易に前記電話番号に発信または前記メールアドレス宛てに電子メールを送信することができる。したがって、携帯電話機１の利便性が向上する。
【００８４】
なお、ユーザが電話帳データ記憶部１１に記憶された電話帳データ２２に基づいて指定した電話番号に発信を行う場合および前記指定したメールアドレス宛てに電子メールの送信を行う場合には、予めキー操作部９の所定の機能キーを用いて、発信モードに設定しておく。
【００８５】
また、本実施形態において、通話または電子メールを着信したときには、電話を掛けてきた相手の電話番号データおよび電子メールを送信してきた相手のメールアドレスデータが電話帳データ記憶部１１に記憶されているか否かを判断する。前記相手の電話番号データおよび相手のメールアドレスデータが電話帳データ記憶部１１に記憶されていると判断したときには、通話および電子メールの着信に応じて、表示部１０に相手の電話番号データおよびメールアドレスデータを表示させる。また、電話番号データおよびメールアドレスデータに関連付けて電話帳データ記憶部１１に記憶されている関連データ、たとえば姓名データなどがある場合には、電話番号データおよびメールアドレスデータと、関連データとを併せて表示部１０に表示させるようにしてもよい。
【００８６】
さらに、前述の実施の形態では、姓名、読み仮名、電話番号およびメールアドレスとして抽出された文字列の右側に位置する文字列について、姓名、読み仮名、電話番号およびメールアドレスであるか否かの識別・同定処理を行う構成にしているが、この処理を省略するようにしてもよい。
【００８７】
前述の実施形態は、本発明の例示に過ぎず、本発明の範囲内において構成を変更することができる。前述の実施形態では、電話帳データとして、姓名データ、読み仮名データ、電話番号データおよびメールアドレスデータを例に挙げて述べたが、電話帳データはこれらに限らず、たとえば郵便番号データおよび住所データなどの他のデータを電話帳データとしてもよい。
【００８８】
また、前述の実施形態では、携帯電話機１に本発明を適用した場合の構成について述べたが、本発明は携帯電話機１に限らず、画像を撮像する撮像部、撮像部によって撮像された画像の中から文字列を抽出する画像処理部、画像処理部によって抽出された文字列を文字コードデータに変換する文字コード変換部、文字コードデータを所定の項目毎に分類した分類データを生成するデータ分類部およびデータ分類部によって生成された分類データを記憶する記憶部を含む携帯通信装置であれば、同様に実施可能である。
【００８９】
【発明の効果】
以上のように本発明によれば、携帯通信装置にキー操作などによってユーザが手動で電話帳データを入力する必要がなくなるので、ユーザの入力の手間が省け、かつ電話帳データの誤入力を防止することができる。また、撮像部によって撮像された画像の中に複数の文字列がある場合でも、一度に画像内のすべての文字列に対して文字認識処理を行い、文字認識処理された複数の文字列を電話帳データとして電話帳データ記憶部に記憶することができる。これによって、電話帳データ記憶部に記憶する電話帳データのデータ数が多い場合でも、比較的短時間でかつ容易に電話帳データの登録を行うことができる。したがって、携帯通信装置の利便性が向上する。
【００９０】
また本発明によれば、画像処理部によって抽出された文字列に含まれる文字種別、たとえば漢字、平仮名および片仮名は、日本語辞書データベースに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。また、画像処理部によって抽出された文字列のフォント、たとえば明朝体、ゴシック体および行書体などは、日本語フォントデータベースに基づいて正確に識別されるので、前記抽出された文字列を的確な文字コードデータに変換することができる。
【００９１】
また本発明によれば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列は、電話番号と識別するための電話番号識別情報、たとえば姓名であると判断されて、電話帳データ記憶部に記憶される。これによって、ユーザの入力の手間が省け、かつ電話番号識別情報の誤入力を防止することができる。したがって、携帯通信装置の利便性が向上する。
【００９２】
また本発明によれば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が半角片仮名のみの文字列である場合、前記文字列は読み仮名であると判断されて、電話帳データ記憶部に記憶される。これによって、ユーザの入力の手間が省け、かつ読み仮名の誤入力を防止することができる。したがって、携帯通信装置の利便性が向上する。
【００９３】
また本発明によれば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が零から始まる連続した数字であり、かつ連続した数字に英字が含まれていない場合、前記文字列は電話番号であると判断され、前記電話帳データ記憶部に記憶される。これによって、ユーザの入力の手間が省け、かつ電話番号の誤入力を防止することができる。したがって、携帯通信装置の利便性が向上する。
【００９４】
また本発明によれば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列が半角英字で始まる場合または前記文字列に予め定める記号が含まれている場合、前記文字列は電子メールのメールアドレスであると判断され、前記電話帳データ記憶部に記憶される。これによって、ユーザの入力の手間が省け、かつ電子メールのメールアドレスの誤入力を防止することができる。したがって、携帯通信装置の利便性が向上する。
【００９５】
また本発明によれば、画像処理部によって抽出された文字列のうち表示部の予め定める表示領域に表示された文字列に基づいて、前記文字列に続く第２の文字列が姓名、読み仮名、電話番号および電子メールのメールアドレスのいずれであるかが判断されて、電話帳データ記憶部に記憶される。これによって、ユーザの入力の手間が省け、かつ姓名、読み仮名、電話番号および電子メールのメールアドレスの誤入力を防止することができる。したがって、携帯通信装置の利便性が向上する。
【００９６】
また本発明によれば、ユーザは、電話帳データ記憶部に記憶された複数の電話番号および複数の電子メールのメールアドレスの中から、電話を掛けたい相手の電話番号または電子メールを送信したい相手のメールアドレスを選択するだけで、容易に前記電話番号に発信または前記メールアドレス宛てに電子メールを送信することができる。
【図面の簡単な説明】
【図１】本発明の実施の一形態である携帯電話機１の電気的構成を示すブロック図である。
【図２】携帯電話機１の使用状態の一例を示す図である。
【図３】撮像部３で撮像した画像内の文字列の抽出および文字列の識別・同定処理の手順の一例を示すフローチャートである。
【図４】携帯電話機１の使用状態の一例を示す図である。
【図５】撮像部３で撮像した画像内の文字列の抽出および文字列の識別・同定処理の手順の一例を示すフローチャートである。
【符号の説明】
１，２０携帯電話機
２通信部
３撮像部
４画像処理部
４ａ画像記憶部
５文字コード変換部
６データ分類部
７中央制御部
８音声入出力部
９キー操作部
１０表示部
１１電話帳データ記憶部
１２ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）
１２ａ日本語辞書データベース
１２ｂ日本語フォントデータベース

Claims

画像を撮像する撮像部と、
前記撮像部によって撮像された画像の中から文字列を抽出する画像処理部と、
前記画像処理部によって抽出された文字列を文字コードデータに変換する文字コード変換部と、
前記文字コードデータを所定の項目毎に分類した分類データを生成するデータ分類部と、
前記データ分類部によって生成された分類データを電話帳データとして記憶する電話帳データ記憶部と、
前記電話帳データ記憶部に記憶された電話帳データに基づいて発信および着信が可能な通信部と、
前記撮像部、電話帳データ記憶部および通信部からの画像関連データを選択的に表示する表示部とを含むことを特徴とする携帯通信装置。
漢字、平仮名および片仮名を識別するための日本語辞書データベースと、
複数のフォントを識別するための日本語フォントデータベースとを含むことを特徴とする請求項１記載の携帯通信装置。
前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列を電話番号識別情報であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする請求項１記載の携帯通信装置。
前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が半角片仮名のみの文字列である場合、前記文字列を読み仮名であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする請求項１記載の携帯通信装置。
前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が零から始まる連続した数字であり、かつ連続した数字に英字が含まれていない場合、前記文字列を電話番号であると判断し、前記電話帳データ記憶部に記憶させることを特徴とする請求項１記載の携帯無線端末装置。
前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列が半角英字で始まる場合または前記文字列に予め定める記号が含まれている場合、前記文字列を電子メールのメールアドレスであると判断し、前記電話帳データ記憶部に記憶させることを特徴とする請求項１記載の携帯通信装置。
前記画像処理部は、抽出した文字列のうち前記表示部の予め定める表示領域に表示された文字列に基づいて、前記文字列に続く第２の文字列が姓名、読み仮名、電話番号および電子メールのメールアドレスのいずれであるかを判断し、前記電話帳データ記憶部に記憶させることを特徴とする請求項１記載の携帯通信装置。
前記電話帳データ記憶部は、複数の電話番号および複数の電子メールのメールアドレスを記憶可能であることを特徴とする請求項１記載の携帯通信装置。