JP2007013235A - 画像合成装置、画像処理装置の制御方法およびプログラム - Google Patents

Abstract

【課題】 写真画像と手書き画像とを合成する場合、合成時における上記写真画像に対する手書き画像の位置関係を、手書き画像を紙に描く時点で確認することができ、また、ユーザが手書き画像を作成している間に、画像処理装置を他の用途に使用しても、また、その電源を切っても、その後に、画像合成作業を続けることができる画像合成装置、画像処理装置の制御方法およびプログラムを提供することを目的とするものである。

【解決手段】 原稿シートの手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力し、バーコードを読み取り、解析し、写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力し、バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取手段が出力した手書き画像のデータとを合成する画像処理装置である。

【選択図】 図２

Description

本発明は、画像合成装置、画像処理装置の制御方法およびプログラムに関するものである。

近年、デジタルカメラやカラースキャナ等、写真画像入力装置、カラープリンタなどの画像出力装置が普及し、高性能化するに伴い、デジタル写真画像の様々な使われ方が提案されている。写真を撮影し、そのまま記録用紙に単に印刷するだけではなく、様々な加工、編集をして利用することが多い。たとえば、写真画像にメッセージを描き込み、手紙として送り、また、タイトルやイラストを写真画像に描き込み、アルバムに貼るなどの使われ方が提案されている。

上記のように、画像入力装置から入力した写真画像に、メッセージやイラストを手書きで追加する場合、入力した写真画像とは別の紙に、ユーザが手書きでメッセージやイラストを記述し、この手書き画像を読取装置が読み取り、写真画像と合成する方法が提案されている（たとえば、特許文献１参照）。

また、このような画像合成に際して、写真画像をそのまま使うのではなく、写真画像の一部を切出すトリミング処理を行い、また、写真画像に対する補正処理を行い、また、写真画像にフレームやスタンプ等の装飾パターンを追加する等、写真画像に対して各種の編集を加えたものに、メッセージやイラストを手書きで追加したいという要望がある。

この要望を実現する手段として、画像合成装置に設けられている表示手段および入力手段を用いて、写真画像を表示および編集し、この結果得られた編集済み写真画像に、別の紙に書いた手書き画像を読取装置で読み取って合成する方法が考えられる。
特開平０９−１３９８３２号公報

しかし、上記従来例では、編集済みの写真画像に、たとえば被写体として映っている人物以外の背景部分に、位置を合わせてメッセージやイラストを描こうとすると、写真画像と、メッセージ、イラスト等の手書き画像とを合成したときに、どのような位置関係で、手書き画像が写真画像に重なるのかを、手書き画像を作成するときに確認できないという問題がある。

また、ユーザが指定したトリミング位置や補正パラメータ、装飾パターンの指定等の編集情報は、手書き画像を読取装置で読み取り、合成処理を行う時点で必要になるので、ユーザが手書き画像を作成し、読取操作を行うまで、編集情報を装置内に記憶しておく必要がある。このために、ユーザが手書き画像を作成している間は、画像処理装置を他の用途に使用することができず、また、画像処理装置の電源を切ることができないという問題がある。

本発明は、写真画像と手書き画像とを合成する場合、合成時における上記写真画像に対する手書き画像の位置関係を、手書き画像を紙に描く時点で確認することができ、また、ユーザが手書き画像を作成している間に、画像処理装置を他の用途に使用しても、また、その電源を切っても、その後に、画像合成作業を続けることができる画像合成装置、画像処理装置の制御方法およびプログラムを提供することを目的とするものである。

本発明は、原稿シートの手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力し、バーコードを読み取り、解析し、写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力し、バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取手段が出力した手書き画像のデータとを合成する画像処理装置である。

本発明によれば、写真画像を特定する画像特定情報と、関連する付加情報とをバーコード化して原稿シート上に配置し、印刷し、ユーザが原稿シートの手書き画像領域に手書き画像を描いた後に原稿シートを読取手段で読み取って合成処理する時点で、上記バーコードに埋め込まれている画像特定情報と付加情報とに基づいて、写真画像に対する画像編集処理を実行することができるので、原稿シート印刷前にユーザが指定した画像補正やトリミング等の画像編集指定の結果を、合成処理時にそのまま反映させることができるという効果を奏する。

また、本発明によれば、原稿シート上に画像入力手段から入力された写真画像を参照画像として配置し、印刷する際に、バーコードに埋め込まれている付加情報と同じ付加情報に基づいて画像編集を施した結果を、参照画像として印刷し、原稿シートの手書き画像領域にユーザが手書き画像を描く時点で、画像補正やトリミング等の画像編集処理を施した結果が参照できるので、最終的な仕上がりを具体的に確認しながら原稿を描くことができるという効果を奏する。

発明を実施するための最良の形態は、次の実施例である。

図１は、本発明の実施例１である画像合成装置１００の構成を示すブロック図である。

画像合成装置１００は、ＣＰＵ２と、内部バス３と、プログラムメモリ４と、データメモリ５と、読取制御部６と、読取機構７と、データ変換部９と、記録制御部１１と、印字記録機構１２と、操作パネル１６と、メモリカード制御部１７と、インタフェース制御部１９と、インタフェース２０と、通信制御部２２とを有する。

データメモリ５は、読取バッファメモリ８と、印字バッファメモリ１０と、画像メモリ１３とを有する。操作パネル１６は、表示部１４と、操作部１５とを有する。

ＣＰＵ２は、マイクロプロセッサ形態を有し、内部バス３を介して接続されているＲＯＭ形態のプログラムメモリ４に格納されている制御プログラムと、ＲＡＭ形態のデータメモリ５の内容とに応じて動作する。ＣＰＵ２は、読取制御部６を通じて、読取機構７を動作させ、読取機構７内に設けられている不図示のイメージセンサが読み取った原稿画像データを、データメモリ５中の読取バッファメモリ８に格納する。

読取バッファメモリ８に格納されている原稿画像データは、データ変換部９によって読み出され、印字記録データに変換した後に、データメモリ５中の印字バッファメモリ１０に格納される。ＣＰＵ２は、記録制御部１１を通じて、印字記録機構１２を動作させるとともに、印字バッファメモリ１０に格納されている印字記録データを読み出し、印字記録機構１２に送り、記録媒体へ印字記録動作を行うことによって、コピー動作を実現する。

データメモリ５には、画像メモリ１３が設けられ、読取機構７が読み取った原稿画像データの他に、各種の画像データを一時的に記憶し、編集することができる。

画像メモリ１３に記憶されている画像データは、データ変換部９によって読み出され、印字記録データに変換し、印字記録動作を行うことによって、コピー動作以外にも、写真画像その他の印刷を行う。

なお、データメモリ５上の読取バッファメモリ８、印字バッファメモリ１０、画像メモリ１３は、ＣＰＵ２の管理によって、動作モードやユーザ設定等、動作状況に応じて、各メモリの容量配分を動的に変更し、割り付けて動作する。

画像合成装置１００には、ＬＥＤ、ＬＣＤなどの表示部１４、各種キーなどの操作部１５を具備している操作パネル１６が設けられ、オペレータによる各種入力操作や動作状況の表示などを行うことができる。

メモリカード制御部１７は、データ記憶媒体であるメモリカード１８へのアクセスを制御し、メモリカード１８に記憶されている画像データなどを読み書きする。これによって、メモリカード１８に記憶されている写真画像のデータを読み出し、画像メモリ１３に格納し、印字記録データに変換し、印字記録する。

インタフェース制御部１９は、インタフェース２０の通信制御を行い、外部に接続されている外部装置２１との間で、データを送受信する。外部装置２１として、パーソナルコンピュータを接続し、コンピュータ上で動作するプリンタドライバによって作成された印字記録データを受信し、印字記録する他、デジタルカメラ等の機器を接続し、写真画像のデータを読み出し、画像メモリ１３に格納し、印字記録データに変換し、印字記録する。

通信制御部２２は、ＭＯＤＥＭ（変復調装置）や、ＮＣＵ（網制御装置）等によって構成され、アナログの通信回線２３に接続され、通信制御、通信回線に対する発呼と着呼等の回線制御を行う。

図２は、実施例１における原稿シートＳＨ１を示す図である。

原稿シートＳＨ１は、各種設定領域３０と、参照画像領域４０と、手書き領域５０と、バーコードＢＣとを有する。

各種設定領域３０は、原稿シートＳＨ１の最上部に印刷され、ここにあるマークシート枠３１、３２、３３をユーザが塗りつぶすことによって、合成結果印刷に関する設定を選択することができる。つまり、原稿シートＳＨ１において、各種設定領域３０内に用紙サイズ選択マークシート枠３１、３２、３３が配置され、これをユーザが塗りつぶすことによって、合成結果を印刷する記録媒体の用紙サイズを選択することができる。

参照画像領域４０は、原稿シートＳＨ１において、各種設定領域３０の下に設けられ、参照画像４１が印刷されている。参照画像４１は、ユーザが選択した写真画像ＰＩに対応する画像である。また、参照画像４１は、対応する写真画像ＰＩの最終出力形態（図５）と同一のトリミング処理と、フレーム合成とを行った結果を表した画像である。

手書き領域５０は、原稿シートＳＨ１において、参照画像領域４０の下に設けられ、参照画像領域４０の大きさと同じ大きさであり、ユーザはこの手書き領域５０に、任意の筆記具で、手書き画像５１を描くことができる。

バーコードＢＣは、また、原稿シートＳＨ１上に設けられ、ユーザが選択した写真画像ＰＩを特定する画像番号、画像ファイル名等、画像特定情報がデータとして埋め込まれ、印刷されている。また、バーコードＢＣには、付加情報として、ユーザが指定した画像編集情報も、データとして埋め込まれ、印刷されている。画像合成装置１００の読取機構７が、バーコードＢＣを読み取リ、この読み取った画像を解析することによって、バーコードＢＣに埋め込まれているデータを取得する。

図３は、実施例１において、原稿シートＳＨ１を印刷する際に、画像合成装置１００のＣＰＵ２による処理動作を示すフローチャートである。

本処理は、操作パネル１６に表示されているメニューを見て、ユーザが操作パネル１６を操作することによって、「原稿シート印刷」を選択した場合に実行される処理である。

まず、ＣＰＵ２は、Ｓ１で、メモリカード１８に格納されている写真画像ＰＩのうちの１枚をユーザに選択させる。この場合、たとえば、メモリカード１８に格納されている写真画像ＰＩを、順次表示部１４に表示し、操作部１５におけるキー操作を監視することによって、写真画像ＰＩを選択する。

次に、Ｓ２では、ＣＰＵ２は、Ｓ１で選択された写真画像ＰＩの一部の領域を切出すトリミング指定を行わせる。この場合、たとえば操作パネル１６によってトリミング矩形の左上および右下位置を指定させることによって、トリミング指定を行う。

Ｓ３では、ＣＰＵ２は、複数のフレームデータのうちの１つを選択させる。フレームデータは、所定のフォーマットでプログラムメモリ４に予め記憶されている一種の画像ファイルであり、額縁のような装飾パターンであり、この額縁のような装飾パターンを写真画像ＰＩと重ねて合成することによって、写真画像に額縁のような装飾パターンを追加することができる。

上記Ｓ１〜Ｓ３の処理によって、写真画像ＰＩと、トリミング、フレーム情報とを設定させた後に、Ｓ４では、ＣＰＵ２が、原稿シートＳＨ１の印刷を開始させる。ＣＰＵ２は、Ｓ１で選択された写真画像ＰＩを、メモリカード１８から読み出し（Ｓ４）、Ｓ２で設定されたトリミング情報に基づいてトリミング処理を行い（Ｓ５）、また、Ｓ３で指定されたフレームデータをプログラムメモリ４から読み出し、Ｓ５の結果に合成し、参照画像４０のデータを取得する（Ｓ６）。

Ｓ７では、ＣＰＵ２は、Ｓ１で指定された画像特定情報と、Ｓ２で設定されたトリミング情報と、Ｓ３で指定されたフレーム情報とに基づいて、バーコードＢＣのデータを作成する。

Ｓ８では、ＣＰＵ２は、Ｓ４〜Ｓ６で得られた参照画像４０のデータと、Ｓ７で得られたバーコードＢＣのデータと、プログラムメモリ４に予め記憶されている各種設定領域３０印刷用のデータとを組み合わせ、原稿シートＳＨ１の印刷データを作成する。この作成された印刷データに基づいて、印字記録機構１２を制御することによって、原稿シートＳＨ１を印刷する（Ｓ９）。

図４は、実施例１において、記入済みの原稿シートＳＨ１を読み込み、写真画像ＰＩと手書き画像５１とを合成し、印刷する場合におけるＣＰＵ２の処理動作を示すフローチャートである。

本処理は、操作パネル１６に表示されているメニューにおいて、ユーザが「原稿シート読込・合成印刷」を選択した場合に実行される処理である。

画像合成装置１００は、Ｓ１１で、読取機構７を制御し、原稿シートＳＨ１を読み取り、原稿シートＳＨ１の画像データとする。読み取った原稿シートＳＨ１の画像データから、各種設定領域３０を切出し、マークシート枠３１、３２、３３の塗りつぶし状態を解析することによって、用紙サイズの選択情報を取得する（Ｓ１２）。

Ｓ１３では、ＣＰＵ２は、読み取った原稿シートＳＨ１の画像データから、バーコードＢＣ部分を切出し、バーコードＢＣのデータを解析することによって、画像特定情報、フレーム情報、トリミング情報を取得する。

Ｓ１４では、ＣＰＵ２は、Ｓ１１で読み取った原稿シートＳＨ１の画像データから、手書き領域５０の画像を切出し、手書き画像のデータとする。Ｓ１５では、ＣＰＵ２は、Ｓ１３でバーコードＢＣのデータを解析して得られた画像特定情報に基づいて、Ｓ１でユーザが選択した写真画像と同一の写真画像ＰＩを、メモリカード１８から読み出す。

Ｓ１６では、ＣＰＵ２は、Ｓ１３でバーコードＢＣのデータを解析して得られたトリミング情報に基づいて、Ｓ１５で取得した写真画像ＰＩにトリミング処理を行う。

Ｓ１７では、ＣＰＵ２は、バーコードＢＣのデータを解析して得られたフレーム情報に基づいて、プログラムメモリ４からフレームデータを読み出し、Ｓ１６で得られたトリミング済の写真画像ＰＩに合成する。

Ｓ１８では、ＣＰＵ２は、Ｓ１４で切出した手書き画像のデータと、Ｓ１７で得られた編集済み写真画像ＰＩのデータとを合成し、合成画像データとする。Ｓ１９では、Ｓ１２で取得した用紙サイズ選択情報に基づいて、合成画像データの拡大または縮小処理を行い、Ｓ２０では、印字記録機構１２を制御することによって、合成画像を出力用紙に印刷する。

図５は、実施例１における合成結果出力例７０を示す図である。

図５に示すように、写真画像ＰＩに画像編集処理を施した編集済み写真画像ＰＩａと、手書き領域５０に描き込まれた手書き画像５１とを重ね合わせるように合成し、各種設定領域３０の用紙サイズ選択マークシート３１、３２、３３から選択されたサイズに合うように拡大・縮小し、この拡大・縮小された合成結果が、記録媒体ＰＰに出力される。

実施例１によれば、ユーザは、原稿シートＳＨ１の手書き領域５０に手書き画像５１を描き込むときに、最終出力形態と同一のトリミング処理と、フレーム合成とを行った結果である参照画像４１を見ることができるので、重ね合わせ合成したときの位置関係を把握しながら、手書き画像５１を描くことができる。

また、実施例１によれば、ユーザが選択した写真画像ＰＩを特定する画像特定情報や付加情報は、バーコードＢＣとして原稿シートＳＨ１に記録され、画像合成装置１００が記憶しておく必要がないので、ユーザが手書き画像５１を作成している間に、画像合成装置１００を他の用途に使用することができ、また、電源を切っても、その後に画像合成作業を続けることができる。

実施例１では、付加情報として、トリミング情報とフレーム情報とを使用しているが、トリミング情報、フレーム情報のうちの一方のみを、付加情報として使用するようにしてもよい。このようにしても、実施例１における効果と同じ効果を奏する。

また、付加情報として、写真画像ＰＩの明度、色調等を変更する画像補正パラメータを使用するようにしてもよい。

実施例１において、印字記録機構１２が、合成した結果を記録媒体ＰＰに印刷記録するが、合成した結果を、操作パネル１６の表示部１４に表示し、ユーザが確認するようにしてもよい。また、合成した結果を、メモリカード１８等の記憶媒体に書き込み保存するようにしてもよい。さらに、通信回線２３またはインタフェース２０を介して、他の機器に、上記合成した結果を転送するようにしてもよい。この場合、実施例１における効果と同様の効果を奏する。この場合、上記他の機器において、合成した結果の画像について、編集することができる。

なお、上記実施例をプログラムの発明として把握することができる。つまり、上記実施例は、参照画像が印刷されている参照画像領域と、上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域と、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードとを具備する原稿シートを印刷する原稿シート印刷手順と、上記手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力する手書き画像読取手順と、上記バーコードを読み取り、解析し、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力するバーコード読取手順と、上記バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取手順が出力した手書き画像のデータとを合成する合成手順とを画像処理装置に実行させるプログラムの例である。

本発明の実施例１である画像合成装置１００の構成を示すブロック図である。 実施例１における原稿シートＳＨ１を示す図である。 実施例１において、原稿シートＳＨ１を印刷する際に、画像合成装置１００のＣＰＵ２による処理動作を示すフローチャートである。 実施例１において、記入済みの原稿シートＳＨ１を読み込み、写真画像ＰＩと手書き画像５１とを合成し、印刷する場合におけるＣＰＵ２の処理動作を示すフローチャートである。 実施例１における合成結果出力例７０を示す図である。

符号の説明

１００…画像合成装置、
２…ＣＰＵ、
４…プログラムメモリ、
６…読取制御部、
７…読取機構、
１１…記録制御部、
１２…印字記録機構、
１６…操作パネル、
ＳＨ１…原稿シート、
３０…各種設定領域、
４０…参照画像領域、
４１…参照画像、
５０…手書き領域、
５１…手書き画像、
ＢＣ…バーコード、
７０…合成結果出力例。

Claims (15)

1. 参照画像が印刷されている参照画像領域と、上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域と、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードとを具備する原稿シートを印刷する原稿シート印刷手段と；
   上記手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力する手書き画像読取手段と；
   上記バーコードを読み取り、解析し、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力するバーコード読取手段と；
   上記バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取手段が出力した手書き画像のデータとを合成する合成手段と；
   を有することを特徴とする画像処理装置。
2. 請求項１において、
   上記付加情報は、上記写真画像に付加するためにユーザが選択した装飾パターン種別情報であることを特徴とする画像合成装置。
3. 請求項１において、
   上記付加情報は、上記写真画像に対してユーザが設定した画像補正情報、画像加工に関するパラメータのうちの少なくとも１つであることを特徴とする画像合成装置。
4. 請求項１において、
   上記付加情報は、上記写真画像の部分領域を切出す範囲をユーザが指定するトリミング情報であることを特徴とする画像合成装置。
5. 請求項１〜請求項４のうちの１項において、
   上記参照画像は、上記写真画像に、上記付加情報に基づく画像編集処理を施した画像であることを特徴とする画像合成装置。
6. 参照画像が印刷されている参照画像領域と、上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域と、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードとを具備する原稿シートを印刷する原稿シート印刷工程と；
   上記手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力する手書き画像読取工程と；
   上記バーコードを読み取り、解析し、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力するバーコード読取工程と；
   上記バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取工程が出力した手書き画像のデータとを合成する合成工程と；
   を有することを特徴とする画像処理装置の制御方法。
7. 参照画像が印刷されている参照画像領域と、上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域と、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードとを具備する原稿シートを印刷する原稿シート印刷手順と；
   上記手書き領域に記入されている手書き画像を読み取り、手書き画像のデータを出力する手書き画像読取手順と；
   上記バーコードを読み取り、解析し、上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報を出力するバーコード読取手順と；
   上記バーコードに書き込まれている画像特定情報に基づいて検出された写真画像のデータと、上記手書き画像読取手順が出力した手書き画像のデータとを合成する合成手順と；
   を画像処理装置に実行させるプログラム。
8. 参照画像が印刷されている参照画像領域と；
   上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域と；
   上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードと；
   を有することを特徴とする原稿シート。
9. 請求項８において、
   上記参照画像領域のサイズと上記手書き領域のサイズとがほぼ同一であり、また、上記参照画像領域の近傍に上記手書き領域が印刷されていることを特徴とする原稿シート。
10. 請求項８において、
    上記付加情報は、上記写真画像に付加するためにユーザが選択した装飾パターン種別情報であることを特徴とする原稿シート。
11. 請求項８において、
    上記付加情報は、上記写真画像に対してユーザが設定した画像補正情報、画像加工に関するパラメータのうちの少なくとも１つであることを特徴とする原稿シート。
12. 請求項８において、
    上記付加情報は、上記写真画像の部分領域を切出す範囲をユーザが指定するトリミング情報であることを特徴とする原稿シート。
13. 請求項８〜請求項１２のうちのいずれか１項において、
    上記参照画像は、上記写真画像に、上記付加情報に基づく画像編集処理を施した画像であることを特徴とする原稿シート。
14. 参照画像領域に、参照画像を印刷する参照画像印刷手段と；
    上記参照画像に対応する写真画像と合成する手書き画像であってユーザが手書きすべき手書き画像を記入する手書き領域を印刷する手書き領域印刷手段と；
    上記写真画像を特定する画像特定情報または上記写真画像に関連する付加情報が書き込まれているバーコードを印刷するバーコード印刷手段と；
    を有することを特徴とする原稿シート印刷装置。
15. 請求項１４において、
    上記参照画像領域のサイズと上記手書き領域のサイズとがほぼ同一であり、また、上記参照画像領域の近傍に上記手書き領域が印刷されていることを特徴とする原稿シート印刷装置。

Images