JP2004118563A - 文字画像処理方法および装置並びにプログラム - Google Patents

Abstract

【課題】紙等の文字媒体に記載された文字を情報として簡易に取得する。
【解決手段】カメラ付き携帯電話３により紙等の文字が記載された文字媒体を撮影して文字画像データＳ０を得、これを文字画像処理装置２に送信する。補正手段２２によりカメラ付き携帯電話３のカメラ３１のレンズ収差等を補正して補正文字画像データＳ１を得、文字認識手段２３によりこれにＯＣＲ技術による文字認識処理を行って文字コードデータＴ０を得、これをカメラ付き携帯電話３に送信する。カメラ付き携帯電話３において、文字コードデータＴ０をテキスト文書として液晶モニタ３２に表示する。
【選択図】　　　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、文字画像を表す文字画像データに対して処理を施す文字画像処理方法および装置並びに文字画像処理方法をコンピュータに実行させるためのプログラムに関するものである。
【０００２】
【従来の技術】
デジタルカメラ等の撮像デバイスにより取得された画像データや、写真フイルムに記録された画像をスキャナにより読み取ることにより得られた画像データを、プリンタやモニタのような出力デバイスを用いて再生するシステムが知られている。ここで、画像データを再生する際には、画像データに対して濃度変換処理、ホワイトバランス調整処理、階調変換処理、彩度強調処理、シャープネス処理等の種々の画像処理を施すことにより、再生画像の画質を向上させることができる。
【０００３】
ところで、携帯電話の普及には目覚ましいものがあるが、近年、撮影により画像データを取得する撮影手段を有するカメラ付き携帯電話等のカメラ付き携帯端末装置が普及しつつある（例えば特開平６−２３３０２０号公報、同９−３２２１１４号公報、同１０−１５０５２３号公報、特開２０００−２５３２９０号公報等）。このようなカメラ付き携帯端末装置を用いることにより、撮影により取得した自分の好みの画像データを携帯端末装置の待ち受け画面に設定できる。また、撮影により取得した画像データを電子メールに添付して友人が有する携帯電話やＰＤＡ等の携帯端末装置に送信することができるため、約束をキャンセルせざるを得ないような状況になったとき、あるいは待ち合わせ時刻に遅刻しそうなときに、申し訳なさそうな自分の表情を撮影して友人に送信する等、現在の自分の状況を友人に知らせることができることから、友人とのコミュニケーションを図るのに便利である。
【０００４】
また、カメラ付き携帯電話において取得された画像データに対して、種々の画像処理を施して処理済み画像データを得る画像処理装置を備えた画像サーバが提案されている。このような画像サーバは、カメラ付き携帯端末装置から送信された画像データを受信し、受信した画像データに対して画像処理を施し、画像処理により得られた処理済み画像データをカメラ付き携帯端末装置においてユーザにより指示された送信先に送信するものである。さらに、画像サーバにおいて画像データを保管しておき、カメラ付き携帯端末装置からの要求に応じてカメラ付き携帯端末装置に画像データを送信することもできる。このような画像サーバにおいて画像データに対して画像処理を行うことにより、高画質の画像を待ち受け画面に設定したり、友人に送信できることとなる。
【０００５】
【発明が解決しようとする課題】
ところで、紙や黒板等の文字が記録された媒体（以下文字媒体とする）に記載された文字を情報として出力する場合には、文字をタイプしてテキストデータを生成したり、文字媒体を撮影して文字画像データを生成している。しかしながら、文字をタイプするのは非常に面倒な作業である。また、文字画像データはそれを再生することにより文字画像に含まれる文字を読むことができるが、文字画像データに対してホワイトバランスのような画像処理を施すと、画像に含まれる文字が却って見にくくなるという問題がある。
【０００６】
また、文字画像データにはサイズの制限があるため、例えば黒板のような大きなサイズの文字媒体を撮影した場合、文字画像中に含まれる文字が非常に小さくなり、文字が読めなくなるという問題もある。
【０００７】
本発明は上記事情に鑑みなされたものであり、紙等の文字媒体に記載された文字を情報として簡易に出力することを目的とする。
【０００８】
【課題を解決するための手段】
本発明による文字画像処理方法は、文字が記載された文字媒体を撮影することにより得られた文字画像を表す文字画像データの入力を受け付け、
前記文字画像データに対して文字認識処理を施して、前記文字画像に含まれる文字をコード化して文字コードデータを取得し、
該文字コードデータを出力することを特徴とするものである。
【０００９】
「文字認識処理」としては、文字画像に対してパターン認識を行って文字コードを得るＯＣＲ技術を用いることができる。
【００１０】
なお、本発明による文字画像変換方法においては、前記文字画像データを、前記文字媒体を分割して撮影することにより得られた複数の分割文字画像データが合成されてなるものとしてもよい。
【００１１】
また、本発明による文字画像変換方法においては、前記文字画像データを、前記文字媒体を動画撮影することにより得られた動画像データから切り出した、複数の所定のフレームをそれぞれ表すフレーム画像データが合成されてなるものとしてもよい。
【００１２】
「所定のフレーム」とは、フレーム画像データを合成することにより文字媒体の全体を表す画像データを得ることが可能なフレームのことをいう。
【００１３】
また、本発明による文字画像変換方法においては、前記文字画像データを保存し、
前記文字コードデータとともに、該文字コードデータを取得した前記文字画像データの保存場所を表すリンク情報を出力するようにしてもよい。
【００１４】
また、本発明による文字画像変換方法においては、前記文字コードデータを音声データに変換し、
該音声データを前記文字コードデータに代えてまたは前記文字コードデータとともに出力するようにしてもよい。
【００１５】
また、本発明による文字画像変換方法においては、カメラ付き携帯端末装置において前記文字画像を撮影することにより取得され、該カメラ付き携帯端末装置から送信された前記文字画像データを受信し、
前記文字コードデータを前記カメラ付き携帯端末装置に送信するようにしてもよい。
【００１６】
本発明による文字画像変換装置は、文字が記載された文字媒体を撮影することにより得られた文字画像を表す文字画像データの入力を受け付ける入力手段と、
前記文字画像データに対して文字認識処理を施して、前記文字画像に含まれる文字をコード化して文字コードデータを取得する文字認識手段と、
該文字コードデータを出力する出力手段とを備えたことを特徴とするものである。
【００１７】
なお、本発明による文字画像変換装置においては、前記文字媒体を分割して撮影することにより得られた複数の分割文字画像データを合成して前記文字画像データを得る合成手段をさらに備えるものとしてもよい。
【００１８】
また、本発明による文字画像変換装置においては、前記文字媒体を動画撮影することにより得られた動画像データから複数の所定のフレームを切り出す切り出し手段と、
該切り出し手段により切り出された前記複数の所定のフレームをそれぞれ表す複数のフレーム画像データを合成して前記文字画像データを得る合成手段とをさらに備えるものとしてもよい。
【００１９】
また、本発明による文字画像変換装置においては、前記文字画像データを保存する保存手段と、
前記文字コードデータとともに、該文字コードデータを取得した前記文字画像データの保存場所を表すリンク情報を生成するリンク情報生成手段とをさらに備えるものとし、
前記出力手段を、前記リンク情報をも出力する手段としてもよい。
【００２０】
また、本発明による文字画像変換装置においては、前記文字コードデータを音声データに変換する音声変換手段をさらに備えるものとし、
前記出力手段を、該音声データを前記文字コードデータに代えてまたは前記文字コードデータとともに出力する手段としてもよい。
【００２１】
また、本発明による文字画像変換装置においては、カメラ付き携帯端末装置において前記文字画像を撮影することにより取得され、該カメラ付き携帯端末装置から送信された前記文字画像データを受信し、前記文字コードデータを前記カメラ付き携帯端末装置に送信する通信手段をさらに備えるものとしてもよい。
【００２２】
なお、本発明による文字画像処理方法をコンピュータに実行させるためのプログラムとして提供してもよい。
【００２３】
【発明の効果】
本発明によれば、文字画像データの入力が受け付けられ、文字画像データに対して文字認識処理が施されて文字画像に含まれる文字がコード化されて文字コードデータが取得され、この文字コードデータが出力される。したがって、紙や黒板等の文字媒体に記載された文字を、デジタルカメラ等により撮影して文字画像データを取得しさえすれば、文字画像データに対して本発明による文字画像変換方法を適用することにより、文字媒体に記載された文字を文字コードデータにより表されるテキスト情報として出力することができ、その結果、文字媒体に記載された文字をテキスト文書として表示することができる。
【００２４】
また、文字画像データを、文字媒体を分割して撮影することにより得られた複数の分割文字画像データを合成して取得することにより、例えば黒板のように非常に広い範囲に亘って文字が記載された文字媒体については、分割して撮影を行うことにより、文字媒体の全体に記載された文字を文字コードデータとして取得することができる。
【００２５】
また、文字画像データを、文字媒体を動画撮影することにより得られた動画像データから複数の所定のフレームを切り出し、切り出した複数の所定のフレームをそれぞれ表すフレーム画像データを合成して取得することにより、例えば黒板のように非常に広い範囲に亘って文字が記載された文字媒体については、動画像として撮影を行うことにより、文字媒体の全体に記載された文字を文字コードデータとして取得することができる。
【００２６】
また、文字コードデータとともに、文字コードデータを取得した文字画像データの保存場所を表すリンク情報を出力することにより、リンク情報に基づいて文字コードデータを取得した文字画像データを参照することができる。したがって、文字画像データにより表される文字画像と、文字コードデータにより表されるテキスト文書との読み合わせを行うことができ、これにより、文字コードデータに誤りがないか否かの確認を容易に行うことができる。
【００２７】
また、文字コードデータを音声データに変換し、音声データを文字コードデータに代えて出力することにより、文字が読めない場合であっても、文字媒体に記載された文字の内容を把握することができる。
【００２８】
また、カメラ付き携帯端末装置において文字媒体を撮影して文字画像データを取得することにより、手軽に文字媒体を撮影し、撮影した文字画像の文字コードデータを取得することができる。
【００２９】
【発明の実施の形態】
以下図面を参照して本発明の実施形態について説明する。図１は本発明の第１の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図である。図１に示すように、第１の実施形態による文字画像通信システムは、文字画像処理装置２と、カメラ付き携帯電話３との間で携帯電話通信網４を介してデータのやりとりを行うものである。
【００３０】
文字画像処理装置２は、カメラ付き携帯電話３と携帯電話通信網４を介したデータ通信を行う通信手段２１と、後述するようにカメラ付き携帯電話３から送信された文字画像データＳ０に対してカメラ付き携帯電話３に設けられたカメラのレンズ収差等により、文字画像データＳ０により表される文字画像に生じる像の歪みを補正して補正文字画像データＳ１を得る補正手段２２と、補正文字画像データＳ１に対して文字認識処理を施して、補正文字画像データＳ１により表される文字画像に含まれる文字をコード化して文字コードデータＴ０を取得する文字認識手段２３と、補正文字画像データＳ１等の種々の情報を記憶する記憶手段２４と、記憶手段２４に補正文字画像データＳ１が記憶される際に、補正文字画像データＳ１のＵＲＬを表すリンク情報Ｌ０を生成するリンク情報生成手段２５とを備える。
【００３１】
なお、カメラ付き携帯電話３から送信されるのは文字画像データＳ０のみならず、人物や風景等の画像データも含まれる。このため、カメラ付き携帯電話３からは、送信した画像データが文字画像である旨を表す文字情報Ｃ０が文字画像データＳ０とともに送信される。したがって、文字画像処理装置２においては、送信された画像データが文字情報Ｃ０とともに送信されている場合に、送信された画像データが文字画像データＳ０である旨を認識して、文字認識処理を行うことができる。なお、文字情報Ｃ０にはカメラ付き携帯電話３の機種情報も含まれる。
【００３２】
補正手段２２は、カメラ付き携帯電話３のカメラのレンズ収差等によって文字画像に生じる像の歪みを補正する。ここで、記憶手段２４にカメラ付き携帯電話３の種類に応じた像の補正情報が記憶されており、補正手段２２は、文字画像データＳ０とともにカメラ付き携帯電話３から送信された文字情報Ｃ０に含まれるカメラ付き携帯電話３の機種情報に基づいて、文字画像データＳ０を得たカメラ付き携帯電話３に対応する補正情報を取得する。そしてこの補正情報に基づいて、文字画像データＳ０により表される文字画像の像の歪みを補正して補正文字画像データＳ１を取得する。
【００３３】
文字認識手段２３は、パターン認識により文字コードを得るＯＣＲ技術を用いて文字画像データＳ１から文字コードデータＴ０を取得する。
【００３４】
文字コードデータＴ０は補正文字画像データＳ１の保存場所を表すＵＲＬからなるリンク情報Ｌ０とともに通信手段２１により携帯電話通信網４を介してカメラ付き携帯電話３に送信され、ここで、テキスト文書として表示される。
【００３５】
カメラ付き携帯電話３は、被写体を撮像して被写体を表す画像データを得るカメラ３１と、画像や操作コマンド等の表示を行う液晶モニタ３２と、テンキー等からなる操作ボタン３３と、種々の情報を記憶するメモリ３４とを備える。
【００３６】
カメラ付き携帯電話３のユーザは、紙や黒板等の文字媒体に記載された文字を撮像して文字画像を表す文字画像データＳ０を取得する。そして、ユーザが操作ボタン３３を用いて送信操作を行うことにより、文字画像データＳ０が携帯電話通信網４を介して文字画像処理装置２に送信される。また、この際、文字画像データＳ０とともに、送信する画像データが文字画像データＳ０である旨を表す文字情報Ｃ０も送信される。
【００３７】
なお、文字画像処理装置２から送信された文字コードデータＴ０はテキスト文書として液晶モニタ３２に表示される。また、リンク情報Ｌ０はＵＲＬとして液晶モニタ３２に表示される。
【００３８】
次いで、第１の実施形態の動作について説明する。図２は第１の実施形態において行われる処理を示すフローチャートである。まず、カメラ付き携帯電話３において、紙や黒板等の文字媒体に記載された文字の撮影が行われて文字画像データＳ０が取得される（ステップＳ１）。続いて、送信の操作がなされたか否かの監視が開始され（ステップＳ２）、ステップＳ２が肯定されると、文字画像データＳ０および文字情報Ｃ０が携帯電話通信網４を介して文字画像処理装置２に送信される（ステップＳ３）。
【００３９】
文字画像処理装置２においては、通信手段２１により文字画像データＳ０および文字情報Ｃ０が受信される（ステップＳ４）。そして、補正手段２２により、カメラ付き携帯電話３の機種に応じた補正情報が記憶手段２４から読み出されて、カメラのレンズ収差等によって文字画像に生じる像の歪みが補正されて補正文字画像データＳ１が取得される（ステップＳ５）。そして、文字認識手段２３により、補正文字画像データＳ１に対してパターン認識が行われて文字コードを表す文字コードデータＴ０が取得される（ステップＳ６）。一方、補正文字画像データＳ１が記憶手段２４に記憶されるとともに（ステップＳ７）、リンク情報生成手段２５により補正文字画像データＳ１の保存場所を表すＵＲＬからなるリンク情報Ｌ０が生成される（ステップＳ８）。続いて、文字コードデータＴ０およびリンク情報Ｌ０が、通信手段２１により携帯電話通信網４を介してカメラ付き携帯電話３に送信される（ステップＳ９）。
【００４０】
カメラ付き携帯電話３においては、文字コードデータＴ０およびリンク情報Ｌ０が受信され（ステップＳ１０）、文字コードデータＴ０により表されるテキスト文書が液晶モニタ３２に表示される（ステップＳ１１）。一方、操作ボタン３３からリンク情報Ｌ０により表されるＵＲＬの表示指示がなされたか否かの監視が開始され（ステップＳ１２）、ステップＳ１２が肯定されるとリンク情報Ｌ０により表されるＵＲＬが液晶モニタ３２に表示され（ステップＳ１３）、処理を終了する。
【００４１】
このように、第１の実施形態によれば、文字画像処理装置２において、文字画像データＳ１に対して文字認識処理を施して、文字画像データＳ０により表される文字画像に含まれる文字をコード化して文字コードデータＴ０を取得し、この文字コードデータＴ０をカメラ付き携帯電話３に送信するようにしたため、カメラ付き携帯電話３において、紙等の文字媒体に記載された文字を撮影しさえすれば、文字をタイプすることなく、テキスト文書として文字を液晶モニタ３２に表示することができる。また、文字画像を表示する場合は、画像処理により文字が見にくくなる場合があるが、本実施形態においては、文字をテキスト文書として表示できるため、文字が見にくいという問題も回避することができる。
【００４２】
また、文字コードデータＴ０とともに、文字コードデータＴ０を取得した文字画像データＳ０を補正して得られた補正文字画像データＳ１のリンク情報Ｌ０を出力することにより、リンク情報Ｌ０により表されるＵＲＬにアクセスすれば、補正文字画像データＳ１を参照することができる。したがって、補正文字画像データＳ１により表される補正文字画像と、文字コードデータＴ０により表されるテキスト文書との読み合わせを行うことができ、これにより、文字コードデータＴ０に誤りがないか否かの確認を容易に行うことができる。
【００４３】
次いで、本発明の第２の実施形態について説明する。図３は本発明の第２の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図である。なお、第２の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、詳細な説明は省略する。第２の実施形態においては、文字コードデータＴ０を音声データＶ０に変換する音声変換手段２７を文字画像処理装置２に設けた点が第１の実施形態と異なる。
【００４４】
音声変換手段２７は、文字コードデータＴ０により表される文字を人間の声を模倣した音声を表す音声データＶ０に変換する。なお、この際の声の種類（例えば、男性、女性、著名なキャラクターの声等）をカメラ付き携帯電話３の指示により変更できるようにしてもよい。
【００４５】
次いで、第２の実施形態の動作について説明する。図４は第２の実施形態において行われる処理を示すフローチャートである。まず、カメラ付き携帯電話３において、紙や黒板等の文字媒体に記載された文字の撮影が行われて文字画像データＳ０が取得される（ステップＳ２１）。続いて、送信の操作がなされたか否かの監視が開始され（ステップＳ２２）、ステップＳ２２が肯定されると、文字画像データＳ０および文字情報Ｃ０が携帯電話通信網４を介して文字画像処理装置２に送信される（ステップＳ２３）。
【００４６】
文字画像処理装置２においては通信手段２１により文字画像データＳ０および文字情報Ｃ０が受信される（ステップＳ２４）。そして、補正手段２２により、カメラ付き携帯電話３の機種に応じた補正情報が記憶手段２４から読み出されて、カメラのレンズ収差等によって文字画像に生じる像の歪みが補正されて補正文字画像データＳ１が取得される（ステップＳ２５）。そして、文字認識手段２３により、補正文字画像データＳ１に対してパターン認識が行われて文字コードを表す文字コードデータＴ０が取得される（ステップＳ２６）。さらに、音声変換手段２７により文字コードデータＴ０が音声データＶ０に変換される（ステップＳ２７）。
【００４７】
一方、補正文字画像データＳ１が記憶手段２４に記憶されるとともに（ステップＳ２８）、リンク情報生成手段２５により補正文字画像データＳ１の保存場所を表すＵＲＬからなるリンク情報Ｌ０が生成される（ステップＳ２９）。続いて、文字コードデータＴ０、リンク情報Ｌ０および音声データＶ０が、通信手段２１により携帯電話通信網４を介してカメラ付き携帯電話３に送信される（ステップＳ３０）。
【００４８】
カメラ付き携帯電話３においては、文字コードデータＴ０、リンク情報Ｌ０および音声データＶ０が受信され（ステップＳ３１）、文字コードデータＴ０により表されるテキスト文書が液晶モニタ３２に表示されるとともに（ステップＳ３２）、音声データＶ０が音声として再生される（ステップＳ３３）。一方、操作ボタン３３からリンク情報Ｌ０により表されるＵＲＬの表示指示がなされたか否かの監視が開始され（ステップＳ３４）、ステップＳ３４が肯定されるとリンク情報Ｌ０により表されるＵＲＬが液晶モニタ３２に表示され（ステップＳ３５）、処理を終了する。
【００４９】
このように、第２の実施形態においては、文字コードデータＴ０およびリンク情報Ｌ０とともに、音声データＶ０をカメラ付き携帯電話３に送信し、文字コードデータＴ０により表されるテキスト文書を液晶モニタ３２に表示するとともに、音声データＶ０を再生するようにしたため、液晶モニタ３２に表示されたテキスト文書が読み上げられることとなる。このため、文字が読めない場合であっても、文字画像の内容を把握することができる。
【００５０】
次いで、本発明の第３の実施形態について説明する。図５は本発明の第３の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図である。なお、第３の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、詳細な説明は省略する。第３の実施形態においては、カメラ付き携帯電話３により、紙や黒板等の文字媒体を分割して撮影して複数の分割文字画像データＤＳ０を取得してこれらを文字画像処理装置２に送信するようにし、これら複数の分割文字画像データＤＳ０をそれぞれ補正して得られた補正分割文字画像データＤＳ１を合成して１つの文字画像データＳ２を生成する合成手段２８を備えた点が第１の実施形態と異なる。
【００５１】
なお、カメラ付き携帯電話３においては、分割文字画像データＤＳ０とともに、分割撮影がどのように行われたかを表す分割情報Ｄ０が生成されて文字画像処理装置２に送信される。図６は分割情報Ｄ０の生成を説明するための図である。図６（ａ）に示すように、文字媒体が領域Ａ１〜Ａ４の４つの領域に分割されて撮影された場合において、カメラ付き携帯電話３においては、各領域Ａ１〜Ａ４の画像を表す分割文字画像データＤＳ０のタグ情報に、その分割文字画像データＤＳ０を得た領域を表す情報（例えばＡ１等の符号）を付与する。一方、分割情報Ｄ０は図６（ｂ）に示すように、分割された画像が合成された場合の全領域の範囲および各領域に挿入される分割文字画像データＤＳ０を特定する符号が付与された画像を表すものとなっている。なお、タグ情報は分割文字画像データＤＳ０を補正して得られた補正分割文字画像データＤＳ１にも付与された状態が維持される。
【００５２】
そして、合成手段２８は、分割情報Ｄ０および各補正分割文字画像データＤＳ１に付与されたタグ情報を参照して分割文字画像データＤＳ１を合成することにより、撮影した紙や黒板等の文字媒体の全体に記載された文字を含む文字画像を表す文字画像データＳ２を得る。
【００５３】
次いで、第３の実施形態の動作について説明する。図７は第３の実施形態において行われる処理を示すフローチャートである。まず、カメラ付き携帯電話３において、紙や黒板等の文字媒体に記載された文字の分割撮影が行われて分割文字画像データＤＳ０が取得される（ステップＳ４１）。続いて、送信の操作がなされたか否かの監視が開始され（ステップＳ４２）、ステップＳ４２が肯定されると、分割文字画像データＤＳ０、文字情報Ｃ０および分割情報Ｄ０が携帯電話通信網４を介して文字画像処理装置２に送信される（ステップＳ４３）。
【００５４】
文字画像処理装置２においては通信手段２１により分割文字画像データＤＳ０、文字情報Ｃ０および分割情報Ｄ０が受信される（ステップＳ４４）。そして、補正手段２２により、カメラ付き携帯電話３の機種に応じた補正情報が記憶手段２４から読み出されて、カメラのレンズ収差等によって文字画像に生じる像の歪みが補正されて補正分割文字画像データＤＳ１が取得される（ステップＳ４５）。さらに、合成手段２８により分割情報Ｄ０に基づいて補正分割文字画像データＤＳ１が合成されて、文字画像データＳ２が取得される（ステップＳ４６）。
【００５５】
そして、文字認識手段２３により、文字画像データＳ２に対してパターン認識が行われて文字コードを表す文字コードデータＴ０が取得される（ステップＳ４７）。
【００５６】
一方、文字画像データＳ２が記憶手段２４に記憶されるとともに（ステップＳ４８）、リンク情報生成手段２５により文字画像データＳ２の保存場所を表すＵＲＬからなるリンク情報Ｌ０が生成される（ステップＳ４９）。続いて、文字コードデータＴ０およびリンク情報Ｌ０が、通信手段２１により携帯電話通信網４を介してカメラ付き携帯電話３に送信される（ステップＳ５０）。
【００５７】
カメラ付き携帯電話３においては、文字コードデータＴ０およびリンク情報Ｌ０が受信され（ステップＳ５１）、文字コードデータＴ０により表されるテキスト文書が液晶モニタ３２に表示される（ステップＳ５２）。一方、操作ボタン３３からリンク情報Ｌ０により表されるＵＲＬの表示指示がなされたか否かの監視が開始され（ステップＳ５３）、ステップＳ５３が肯定されるとリンク情報Ｌ０により表されるＵＲＬが液晶モニタ３２に表示され（ステップＳ５４）、処理を終了する。
【００５８】
このように、第３の実施形態においては、文字媒体を分割して撮影することにより得られた複数の分割文字画像データＤＳ０を合成して文字画像データＳ２を取得し、これに対して文字認識を行って文字コードデータＴ０を取得するようにしたため、例えば黒板のように非常に広い範囲に亘って文字が記載されている文字媒体についても、文字媒体を分割して撮影すれば、文字媒体の全体に記載された文字を文字コードデータＴ０として取得することができる。
【００５９】
次いで、本発明の第４の実施形態について説明する。図８は本発明の第４の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図である。なお、第４の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、詳細な説明は省略する。第４の実施形態においては、カメラ付き携帯電話３により、紙や黒板等の文字媒体に記載された文字を動画として撮影して文字動画像データＭ０を取得し、これを文字画像処理装置２に送信して文字認識を行うようにしたものである。このため、文字画像処理装置２に、文字動画像データＭ０から文字画像を合成するために必要な複数のフレームデータＤＳ３を切り出す切り出し手段４１と、複数のフレームデータＤＳ３を合成して１つの文字画像データＳ３を生成する合成手段４２とを備えた点が第１の実施形態と異なる。
【００６０】
なお、カメラ付き携帯電話３においては、文字動画像データＭ０にフレームデータＤＳ３の切り出しに必要なマークが付与され、マークが付与された文字動画像データＭ０が文字画像処理装置２に送信される。図９はマークの付与を説明するための図である。図９（ａ）に示すように、文字媒体は「あいうえおかきくけこ…」の順に文字をなぞるように撮影がなされて文字動画像データＭ０が取得される。この際、カメラ付き携帯電話３のファインダに表示されるフレームＦが領域Ａ１〜Ａ４の中心位置に移動した際に、操作ボタン３３からの指示により文字動画像データＭ０にマークが付与される。
【００６１】
そして、切り出し手段４１はマークが付与されたフレームを切り出して、文字画像データＳ３の合成に必要な複数のフレームデータＤＳ３を生成する。
【００６２】
合成手段４２は、複数のフレームデータＤＳ３を合成することにより、撮影した紙や黒板等の文字媒体の全体に記載された文字を含む文字画像を表す文字画像データＳ３を取得する。
【００６３】
次いで、第４の実施形態の動作について説明する。図１０は第４の実施形態において行われる処理を示すフローチャートである。まず、カメラ付き携帯電話３において、紙や黒板等の文字媒体に記載された文字の動画撮影が行われて文字動画像データＭ０が取得される（ステップＳ６１）。続いて、送信の操作がなされたか否かの監視が開始され（ステップＳ６２）、ステップＳ６２が肯定されると、文字動画像データＭ０および文字情報Ｃ０が携帯電話通信網４を介して文字画像処理装置２に送信される（ステップＳ６３）。
【００６４】
文字画像処理装置２においては通信手段２１により文字動画像データＭ０および文字情報Ｃ０が受信される（ステップＳ６４）。そして、補正手段２２により、カメラ付き携帯電話３の機種に応じた補正情報が記憶手段２４から読み出されて、カメラのレンズ収差等によって文字画像に生じる像の歪みが補正されて補正文字動画像データＭ１が取得される（ステップＳ６５）。そして、切り出し手段４１により、補正文字動画像データＭ１に付与されたマークに基づいて、複数のフレームデータＤＳ３が切り出される（ステップＳ６６）。さらに、合成手段４２により複数のフレームデータＤＳ３が合成されて、文字画像データＳ３が取得される（ステップＳ６７）。
【００６５】
そして、文字認識手段２３により、文字画像データＳ３に対してパターン認識が行われて文字コードを表す文字コードデータＴ０が取得される（ステップＳ６８）。
【００６６】
一方、文字画像データＳ３が記憶手段２４に記憶されるとともに（ステップＳ６９）、リンク情報生成手段２５により文字画像データＳ３の保存場所を表すＵＲＬからなるリンク情報Ｌ０が生成される（ステップＳ７０）。続いて、文字コードデータＴ０およびリンク情報Ｌ０が、通信手段２１により携帯電話通信網４を介してカメラ付き携帯電話３に送信される（ステップＳ７１）。
【００６７】
カメラ付き携帯電話３においては、文字コードデータＴ０およびリンク情報Ｌ０が受信され（ステップＳ７２）、文字コードデータＴ０により表されるテキスト文書が液晶モニタ３２に表示される（ステップＳ７３）。一方、操作ボタン３３からリンク情報Ｌ０により表されるＵＲＬの表示指示がなされたか否かの監視が開始され（ステップＳ７４）、ステップＳ７４が肯定されるとリンク情報Ｌ０により表されるＵＲＬが液晶モニタ３２に表示され（ステップＳ７５）、処理を終了する。
【００６８】
このように、第４の実施形態によれば、文字認識を行うための文字画像データＳ３を、文字媒体を動画撮影することにより得られた文字動画像データＭ１から複数のフレームデータＤＳ３を切り出し、切り出した複数のフレームデータＤＳ３を合成して取得しているため、例えば黒板のように非常に広い範囲に亘って文字が記載されている文字媒体についても、文字媒体を動画像として撮影すれば、文字媒体の全体に記載された文字を文字コードデータＴ０として取得することができる。
【００６９】
なお、第３および第４の実施形態においては、第２の実施形態と同様に音声変換手段２７を設け、文字コードデータＴ０を変換することにより得られた音声データＶ０をカメラ付き携帯電話３に送信してもよい。
【００７０】
また、上記第１から第４の実施形態において、同一人物が書いた文字を撮像する機会が多い場合には、その人の筆跡の特徴を記憶手段２４に記憶しておくことが好ましい。この際、文字画像データＳ０等とともに文字を書いた人を特定するための情報を文字画像処理装置２に送信する。文字画像処理装置２においてはその情報に基づいて、その人の筆跡を考慮して文字認識手段２３において文字コードデータＴ０を取得する。
【００７１】
このように、文字を書いた人の筆跡の特徴を考慮することにより、文字認識手段２３における文字認識の精度を向上させることができる。
【００７２】
また、上記第１から第４の実施形態においては、カメラ付き携帯電話３において文字媒体を撮影しているが、カメラ付きのＰＤＡや、通信機能を有するデジタルカメラ等、任意のカメラ付き携帯端末装置において文字媒体を撮影して文字画像データを取得し、文字画像処理装置２に送信、携帯端末装置において文字コードデータＴ０をテキスト文書として表示してもよい。
【図面の簡単な説明】
【図１】本発明の第１の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図
【図２】第１の実施形態において行われる処理を示すフローチャート
【図３】本発明の第２の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図
【図４】第２の実施形態において行われる処理を示すフローチャート
【図５】本発明の第３の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図
【図６】分割情報の生成を説明するための図
【図７】第３の実施形態において行われる処理を示すフローチャート
【図８】本発明の第４の実施形態による文字画像処理装置を適用した文字画像通信システムの構成を示す概略ブロック図
【図９】マークの付与を説明するための図
【図１０】第４の実施形態において行われる処理を示すフローチャート
【符号の説明】
１　　文字画像通信システム
２　　文字画像処理装置
３　　カメラ付き携帯電話
４　　携帯電話通信網
２１　　通信手段
２２　　補正手段
２３　　文字認識手段
２４　　記憶手段
２５　　リンク情報生成手段
２７　　音声変換手段
２８，４２　　合成手段
３１　　カメラ
３２　　液晶モニタ
３３　　操作ボタン
３４　　メモリ
４１　　切り出し手段

Claims (18)

1. 文字が記載された文字媒体を撮影することにより得られた文字画像を表す文字画像データの入力を受け付け、
   前記文字画像データに対して文字認識処理を施して、前記文字画像に含まれる文字をコード化して文字コードデータを取得し、
   該文字コードデータを出力することを特徴とする文字画像変換方法。
2. 前記文字画像データは、前記文字媒体を分割して撮影することにより得られた複数の分割文字画像データが合成されてなるものであることを特徴とする請求項１記載の文字画像処理方法。
3. 前記文字画像データは、前記文字媒体を動画撮影することにより得られた動画像データから切り出した、複数の所定のフレームをそれぞれ表すフレーム画像データが合成されてなるものであることを特徴とする請求項１記載の文字画像処理方法。
4. 前記文字画像データを保存し、
   前記文字コードデータとともに、該文字コードデータを取得した前記文字画像データの保存場所を表すリンク情報を出力することを特徴とする請求項１から３のいずれか１項記載の文字画像処理方法。
5. 前記文字コードデータを音声データに変換し、
   該音声データを前記文字コードデータに代えてまたは前記文字コードデータとともに出力することを特徴とする請求項１から４のいずれか１項記載の文字画像処理方法。
6. カメラ付き携帯端末装置において前記文字媒体を撮影することにより取得され、該カメラ付き携帯端末装置から送信された前記文字画像データを受信し、
   前記文字コードデータを前記カメラ付き携帯端末装置に送信することを特徴とする請求項１から５のいずれか１項記載の文字画像処理方法。
7. 文字が記載された文字媒体を撮影することにより得られた文字画像を表す文字画像データの入力を受け付ける入力手段と、
   前記文字画像データに対して文字認識処理を施して、前記文字画像に含まれる文字をコード化して文字コードデータを取得する文字認識手段と、
   該文字コードデータを出力する出力手段とを備えたことを特徴とする文字画像変換装置。
8. 前記文字媒体を分割して撮影することにより得られた複数の分割文字画像データを合成して前記文字画像データを得る合成手段をさらに備えたことを特徴とする請求項７記載の文字画像処理装置。
9. 前記文字媒体を動画撮影することにより得られた動画像データから複数の所定のフレームを切り出す切り出し手段と、
   該切り出し手段により切り出された前記複数の所定のフレームをそれぞれ表す複数のフレーム画像データを合成して前記文字画像データを得る合成手段とをさらに備えたことを特徴とする請求項７記載の文字画像処理装置。
10. 前記文字画像データを保存する保存手段と、
    前記文字コードデータとともに、該文字コードデータを取得した前記文字画像データの保存場所を表すリンク情報を生成するリンク情報生成手段とをさらに備え、
    前記出力手段は、前記リンク情報をも出力する手段であることを特徴とする請求項７から９のいずれか１項記載の文字画像処理装置。
11. 前記文字コードデータを音声データに変換する音声変換手段をさらに備え、
    前記出力手段は、該音声データを前記文字コードデータに代えてまたは前記文字コードデータとともに出力する手段であることを特徴とする請求項７から１０のいずれか１項記載の文字画像処理装置。
12. カメラ付き携帯端末装置において前記文字媒体を撮影することにより取得され、該カメラ付き携帯端末装置から送信された前記文字画像データを受信し、前記文字コードデータを前記カメラ付き携帯端末装置に送信する通信手段をさらに備えたことを特徴とする請求項７から１１のいずれか１項記載の文字画像処理装置。
13. 文字が記載された文字媒体を撮影することにより得られた文字画像を表す文字画像データの入力を受け付ける手順と、
    前記文字画像データに対して文字認識処理を施して、前記文字画像に含まれる文字をコード化して文字コードデータを取得する手順と、
    該文字コードデータを出力する手順とを有する文字画像変換方法をコンピュータに実行させるためのプログラム。
14. 前記文字媒体を分割して撮影することにより得られた複数の分割文字画像データを合成して前記文字画像データを得る手順をさらに有する請求項１３記載のプログラム。
15. 前記文字媒体を動画撮影することにより得られた動画像データから複数の所定のフレームを切り出す手順と、
    該切り出し手段により切り出された前記複数の所定のフレームをそれぞれ表す複数のフレーム画像データを合成して前記文字画像データを得る手順とをさらに有する請求項１３記載のプログラム。
16. 前記文字画像データを保存する手順と、
    前記文字コードデータとともに、該文字コードデータを取得した前記文字画像データの保存場所を表すリンク情報を出力する手順とをさらに有する請求項１３から１５のいずれか１項記載のプログラム。
17. 前記文字コードデータを音声データに変換する手順と、
    該音声データを前記文字コードデータに代えてまたは前記文字コードデータとともに出力する手順とをさらに有する請求項１３から１６のいずれか１項記載のプログラム。
18. カメラ付き携帯端末装置において前記文字媒体を撮影することにより取得され、該カメラ付き携帯端末装置から送信された前記文字画像データを受信する手順と、
    前記文字コードデータを前記カメラ付き携帯端末装置に送信する手順とをさらに有する請求項１３から１７のいずれか１項記載のプログラム。

Images