[go: up one dir, main page]

JP2002298136A - Conversion program into painting style image - Google Patents

Conversion program into painting style image

Info

Publication number
JP2002298136A
JP2002298136A JP2001103291A JP2001103291A JP2002298136A JP 2002298136 A JP2002298136 A JP 2002298136A JP 2001103291 A JP2001103291 A JP 2001103291A JP 2001103291 A JP2001103291 A JP 2001103291A JP 2002298136 A JP2002298136 A JP 2002298136A
Authority
JP
Japan
Prior art keywords
image
original image
pixel
density value
conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001103291A
Other languages
Japanese (ja)
Other versions
JP3640897B2 (en
Inventor
Atsuo Ida
敦夫 井田
Jiro Hata
二郎 畑
Kosho Morimoto
晃章 森本
Yasushi Nishimura
康司 西村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Newly Corp
Original Assignee
Newly Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Newly Corp filed Critical Newly Corp
Priority to JP2001103291A priority Critical patent/JP3640897B2/en
Publication of JP2002298136A publication Critical patent/JP2002298136A/en
Application granted granted Critical
Publication of JP3640897B2 publication Critical patent/JP3640897B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Facsimile Image Signal Circuits (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a program capable of converting the original image depicted in a mechanical tone by the photo or CG into a painting style image without much labor and time. SOLUTION: The conversion program into the painting style image in which the input original image in a mechanical tone is converted into the painting style image comprises a composite step of composing the original image with a filter image prepared by the predetermined variable density pattern so as to provide the target picture feeling in the original image.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、絵画調画像への変
換プログラムに関する。より詳しくは、写真やCG(コ
ンピュータグラフフィクス)によって機械調に描かれた
原画像を、絵画調に描かれた画像にコンピュータを用い
て変換するためのプログラムに関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a program for converting a picture into a picture-like image. More specifically, the present invention relates to a program for using a computer to convert an original image drawn mechanically by a photograph or CG (computer graph fix) into an image drawn in a pictorial style.

【0002】[0002]

【従来の技術】従来、各種販売業者は、販売対象の写真
やCG画像をチラシ又は雑誌等に載せて宣伝を行なって
いた。写真やCG画像は、はっきりしていてわかりやす
い。しかし、最近では、このようなはっきりした所謂機
械調画像よりも、人間が手書したような絵画調画像、つ
まり、暈し(ぼかし)や色斑(ムラ)などが少々ある画
像が好評になってきている。絵画調画像は、見た感じが
柔らかく、馴染みがあり、また面白みがあって実感が湧
きやすいということがその理由である。
2. Description of the Related Art Hitherto, various dealers have been promoting advertisements by placing photographs or CG images to be sold on flyers or magazines. Photos and CG images are clear and easy to understand. However, recently, rather than such a clear so-called machine-like image, a picture-like image written by a human, that is, an image having a little blurring or unevenness of color has become more popular. Is coming. The reason is that the painting-like image has a soft and familiar appearance, and is interesting and easy to give a real feeling.

【0003】[0003]

【発明が解決しようとする課題】一方、CGにより、は
じめから絵画調画像を作成することは可能であるが、手
間や時間が多くかかる。また、写真をスキャナで読み取
って、そのデータを変更することで絵画調画像とするこ
とも可能であるが、データの変更は、手作業によらなけ
ればならず、やはり、手間や時間が多くかかる。本発明
は、上述の問題に鑑みてなされたものであり、写真又は
CGによって機械調に描かれた原画像を、手間や時間を
多くかけることなく絵画調画像に変換できるプログラム
の提供を課題とする。
On the other hand, although it is possible to create a painting-like image from the beginning by using CG, it takes much time and effort. It is also possible to create a painting-like image by reading a photograph with a scanner and changing the data, but the data must be changed manually, which also requires much time and effort. . The present invention has been made in view of the above-described problems, and has as its object to provide a program capable of converting an original image drawn mechanically by a photograph or CG into a painting-like image without much effort and time. I do.

【0004】[0004]

【課題を解決するための手段】上述した課題を解決する
べく、請求項1の発明は、入力される機械調の原画像G
0を絵画調画像GKに変換する絵画調画像への変換プロ
グラムTPであって、前記原画像G0と、該原画像G0
に目的とする絵の感じがでるように所定の濃淡パターン
で作成されたフィルタ画像GFとを合成する合成ステッ
プK3を有する。請求項1の発明によると、合成ステッ
プK3は、入力された機械調の原画像G0とフィルタ画
像GFとを合成して絵画調画像GKに変換する。フィル
タ画像GFは、原画像G0に目的とする絵の感じがでる
ように所定の濃淡パターンで作成されている。合成処理
は、例えば、パーソナルコンピュータにおけるキーボー
ト又はマウス等による簡単な操作によって行なわれ、手
作業でデータの変更をする必要がない。すなわち、手間
や時間を多くかけることなく、絵画調画像GKが得られ
る。
In order to solve the above-mentioned problem, the invention of claim 1 is to provide an original mechanical tone image G
0 is a conversion program TP into a painting-like image for converting 0 into a painting-like image GK, wherein the original image G0 and the original image G0
And a combining step K3 for combining a filter image GF created with a predetermined shading pattern so as to give a desired picture feeling. According to the first aspect of the invention, the synthesizing step K3 synthesizes the input mechanical tone original image G0 and the filter image GF to convert them into a painting tone image GK. The filter image GF is created in a predetermined shading pattern so that the original image G0 has a desired picture feeling. The combining process is performed by a simple operation using, for example, a keyboard or a mouse in a personal computer, and there is no need to manually change data. That is, the painting-like image GK can be obtained without much trouble and time.

【0005】請求項2の発明では、前記合成合成ステッ
プK3は、前記フィルタ画像GFにおける中間濃度より
も低い画素に対しては、その画素に対応する前記原画像
G0の画素の濃度値Sをより一層低くし、前記フィルタ
画像GFにおける中間濃度よりも高い画素に対しては、
その画素に対応する前記原画像G0の画素の濃度値Sを
より一層高くする変換を行ない、該変換によって得られ
る濃度値Dは、入力される前記原画像G0の各濃度値S
に対して線形関数となる。請求項2の発明によると、原
画像G0の画素が、フィルタ画像GFの画素の濃度Mに
「染まる」形になり、これによって合成が行なわれる。
この合成は画素単位で行なわれるので、きめ細かく合成
が行なわれることが期待できる。また、該変換によって
得られる濃度値Dは、入力される前記原画像G0の各濃
度値Sに対して線形関数となるので、入力される原画像
G0の濃度値S全てについて合成の効果が反映される。
According to the second aspect of the present invention, the synthesizing and synthesizing step K3 further includes, for a pixel lower than the intermediate density in the filter image GF, the density value S of the pixel of the original image G0 corresponding to the pixel. Further lower, for pixels higher than the intermediate density in the filter image GF,
A conversion is performed to further increase the density value S of the pixel of the original image G0 corresponding to the pixel, and the density value D obtained by the conversion is converted to the density value S of the input original image G0.
Is a linear function for. According to the second aspect of the present invention, the pixels of the original image G0 are "stained" in the density M of the pixels of the filter image GF, and the synthesis is performed.
Since this synthesis is performed on a pixel basis, it can be expected that the synthesis will be performed finely. Further, since the density value D obtained by the conversion is a linear function with respect to each density value S of the input original image G0, the effect of the combination is reflected on all the density values S of the input original image G0. Is done.

【0006】請求項3の発明では、前記合成ステップK
3は、前記原画像G0の画素の濃度値Sをより一層低く
する変換、及び前記原画像G0の画素の濃度値Sをより
一層高くする変換を、色の3原色毎に行なってなる。請
求項3の発明によると、入力されるカラーの原画像G0
に対してフィルタ画像GFを合成して絵画調画像GKが
得られる。
According to the third aspect of the present invention, the synthesizing step K
Reference numeral 3 denotes conversion for further lowering the density value S of the pixel of the original image G0 and conversion for further increasing the density value S of the pixel of the original image G0 for each of the three primary colors. According to the third aspect of the invention, the input color original image G0
Is combined with the filter image GF to obtain a painting-like image GK.

【0007】請求項4の発明では、前記原画像G0の画
素の濃度値Sをより一層低くする度合い、及び前記原画
像G0の画素の濃度値Sをより一層高くする度合いを調
整可能である。請求項4の発明によると、種々の絵の感
じを出す画像に変換する場合において、上記度合いを調
整することによって、絵画調画像GKにおける模様の表
れ方の強弱等について様々な形態を実現することができ
る。
According to the fourth aspect of the present invention, it is possible to adjust the degree of further lowering the density value S of the pixel of the original image G0 and the degree of further increasing the density value S of the pixel of the original image G0. According to the fourth aspect of the present invention, in the case of converting the image into an image giving various picture feelings, it is possible to realize various forms regarding the strength of the appearance of the pattern in the painting-like image GK by adjusting the degree. Can be.

【0008】請求項5の発明は、前記合成ステップK3
による処理の前に前記原画像G0の輪郭をより一層はっ
きりさせる鮮鋭化ステップK1を有してなる。請求項5
の発明によると、最終的に得られる絵画調画像GKのエ
ッジが、フィルタ画像GFとの合成によってぼやけたも
のにならない。
According to a fifth aspect of the present invention, the synthesizing step K3
Before the processing according to (1), a sharpening step K1 for further sharpening the outline of the original image G0 is provided. Claim 5
According to the invention, the edge of the finally obtained painting-like image GK does not become blurred due to the combination with the filter image GF.

【0009】本明細書において、原画像とは、例えば、
CG画像の画像データや、スキャナで読み取った写真等
の画像データの意味で用いることがある。また、フィル
タ画像についても画像データの意味で用いることがあ
る。つまり、「画像」を、画像データとして解釈するこ
とがある。
In this specification, the original image is, for example,
It may be used to mean image data of a CG image or image data such as a photograph read by a scanner. Also, a filter image may be used in the sense of image data. That is, "image" may be interpreted as image data.

【0010】[0010]

【発明の実施の形態】以下、添付図面に基づいて、本発
明の一実施形態である変換プログラムTPについて説明
する。変換プログラムTPは、フロッピー(登録商標)
ディスクやCD−ROMなどの記憶媒体に記憶される。
または、適当なプログラム配信サーバからパーソナルコ
ンピュータ等におけるハードディスクにダウンロードす
るようにしてもよい。図1は原画像G0を示す図、図2
及び図3は絵画調画像GKの例を示す図、図4はフィル
タ画像GFの一例を示す図である。変換プログラムTP
は、入力される原画像G0を絵画調画像GKに変換する
ものである。原画像G0とは、例えば、写真をスキャナ
で読み取って得られた画像や、CGによって機械調に描
かれた画像であり、図1に示すように、画像に暈しや斑
がない。なお、原画像G0はカラー画像である。これに
対して、図2の絵画調画像GK1では、家の屋根や壁に
斑があり、空や地面は靄がかかったように暈され、水彩
画の感じがでている。また、図3の絵画調画像GK2で
は、全体的にメッシュ状の濃淡模様が現れ、キャンバス
に描かれた油絵の感じがでている。
DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a conversion program TP according to an embodiment of the present invention will be described with reference to the accompanying drawings. The conversion program TP is a floppy (registered trademark)
It is stored in a storage medium such as a disk or a CD-ROM.
Alternatively, the program may be downloaded from a suitable program distribution server to a hard disk of a personal computer or the like. FIG. 1 is a diagram showing an original image G0, and FIG.
FIG. 3 is a diagram showing an example of a painting-like image GK, and FIG. 4 is a diagram showing an example of a filter image GF. Conversion program TP
Converts the input original image G0 into a painting-like image GK. The original image G0 is, for example, an image obtained by reading a photograph with a scanner, or an image drawn mechanically by CG, and has no blur or spots on the image as shown in FIG. Note that the original image G0 is a color image. On the other hand, in the painting-like image GK1 of FIG. 2, there are spots on the roof and walls of the house, and the sky and the ground are blurred as if they were mist, giving a watercolor impression. Further, in the painting-like image GK2 of FIG. 3, a mesh-like light and shade pattern appears as a whole, and the feeling of an oil painting drawn on the canvas is obtained.

【0011】絵画調画像GKへの変換は、フィルタ画像
GFによって行なわれる。フィルタ画像GFは、変換プ
ログラムTPの中に組み込まれており、原画像G0に目
的とする絵の感じがでるように所定の濃淡パターンを有
している。例えば、図4のフィルタ画像GFは、水彩画
の感じのする絵画調画像GK1に変換するためのもので
あり、中央付近は黒の割合が多く、中央から遠ざかるに
従って徐々に白が混じり、周辺部では真白となるパター
ンを有したモノクロの濃淡画像である。なお、フィルタ
画像GFには、水彩画の感じをだすためのもの以外に
も、図示は省略したが、数種類のものが組み込まれてい
る。それらは、互いに異なる濃淡パターンを有してお
り、キャンバスに描かれた感じ、雲中にいるような感
じ、風が吹いているような感じ、デニム布地に描かれた
感じ、水滴がついた感じ、及びスケッチ風に描かれた感
じをだすためのものなどがある。
The conversion to the painting-like image GK is performed by the filter image GF. The filter image GF is incorporated in the conversion program TP and has a predetermined shading pattern so that the original image G0 has a desired picture feeling. For example, the filter image GF in FIG. 4 is for converting into a painting-like image GK1 that feels like a watercolor painting. The proportion of black is large near the center, white gradually mixes as the distance from the center increases, and in the periphery, It is a monochrome gray-scale image having a pure white pattern. Although not shown, the filter image GF incorporates several types of filter images GF, in addition to the filter image GF. They have different shade patterns from each other, feeling like being drawn on canvas, feeling like being in the clouds, feeling like blowing wind, feeling like being drawn on denim fabric, feeling with water droplets , And those for creating a sketch-like feeling.

【0012】次に、変換プログラムTPで行なわれる処
理について説明する。図5は変換プログラムTPで行な
う処理内容の概略を示すフローチャートである。図5に
示すように、変換プログラムTPは、鮮鋭化ステップK
1、ストレッチステップK2、合成ステップK3、明る
さ調整ステップK4及びコントラスト調整ステップK5
を有する。鮮鋭化ステップK1では、入力画像である原
画像G0の輪郭をより一層はっきりさせる処理を行な
う。この処理は、最終的に得られる絵画調画像GKのエ
ッジが、フィルタ画像GFとの合成によってぼやけたも
のにならないようにするために行なう。ストレッチステ
ップK2では、原画像G0のサイズとフィルタ画像GF
のサイズとが一致していない場合に、両者を一致させる
処理を行なう。具体的には、原画像G0において、注目
する画素の幅方向座標値と高さ方向座標値との比を求
め、フィルタ画像GFにおいて、その比に対応する画素
の位置を、原画像G0において注目した画素の対応画素
とする。この対応付けを原画像G0全体について行な
う。これにより、実質的に、原画像G0の幅及び高さ
と、フィルタ画像GFの幅及び高さとがそれぞれ一致す
るようにフィルタ画像GFを引き伸ばし又は縮小するこ
とになる。
Next, the processing performed by the conversion program TP will be described. FIG. 5 is a flowchart showing an outline of the processing contents performed by the conversion program TP. As shown in FIG. 5, the conversion program TP includes a sharpening step K
1. Stretch step K2, synthesis step K3, brightness adjustment step K4, and contrast adjustment step K5
Having. In the sharpening step K1, a process of further sharpening the contour of the original image G0 as the input image is performed. This processing is performed so that the edge of the finally obtained painting-like image GK does not become blurred due to the combination with the filter image GF. In the stretching step K2, the size of the original image G0 and the filter image GF
If the sizes do not match, a process for matching the two is performed. Specifically, in the original image G0, the ratio between the width direction coordinate value and the height direction coordinate value of the pixel of interest is determined, and in the filter image GF, the position of the pixel corresponding to the ratio is determined in the original image G0. It is assumed that the pixel corresponds to the pixel that has been set. This association is performed for the entire original image G0. As a result, the filter image GF is substantially expanded or reduced so that the width and height of the original image G0 and the width and height of the filter image GF respectively match.

【0013】合成ステップK3では、原画像G0とフィ
ルタ画像GFとを後述する変換式(*1)によって合成
する処理を行なう。明るさ調整ステップK4では、合成
ステップK3でフィルタ画像GFを合成した際に、合成
された画像のトーンを調整する処理を行なう。また、コ
ントラスト調整ステップK5では、コントラストを調整
する処理を行なう。これにより、合成ステップK3で得
られた画像のトーン及びコントラストが下がっても、適
当な値に調整される。以上のステップK1からステップ
K5までの処理は、変換プログラムTPの動作する例え
ばパーソナルコンピュータにおいて、キーボート又はマ
ウス等の簡単な入力操作によって行なわれる。従って、
手作業でデータの変更をする必要がなく、手間や時間を
多くかけることなく、絵画調画像GKが得られる。
In the synthesizing step K3, a process of synthesizing the original image G0 and the filter image GF by a conversion formula (* 1) described later is performed. In the brightness adjustment step K4, when the filter image GF is synthesized in the synthesis step K3, a process of adjusting the tone of the synthesized image is performed. In contrast adjustment step K5, a process of adjusting contrast is performed. As a result, even if the tone and contrast of the image obtained in the synthesis step K3 decrease, the image is adjusted to an appropriate value. The above processing from step K1 to step K5 is performed by a simple input operation such as a keyboard or a mouse in, for example, a personal computer on which the conversion program TP operates. Therefore,
There is no need to manually change the data, and the painting-like image GK can be obtained without much trouble and time.

【0014】次に、合成ステップK3の処理について詳
しく説明する。原画像G0とフィルタ画像GFとの合成
は、次に示す変換式(*1)に基づいて行なわれる。 M<128のとき、 Dr=Sr−{Sr×(128−M)×P/(128×1000)} Dg=Sg−{Sg×(128−M)×P/(128×1000)} Db=Sb−{Sb×(128−M)×P/(128×1000)} M≧128のとき、 Dr=Sr+{(255−Sr)×(M−128)×P/(128×1000) } Dg=Sg+{(255−Sg)×(M−128)×P/(128×1000) } Db=Sb+{(255−Sb)×(M−128)×P/(128×1000) } ……(*1)
Next, the processing in the combining step K3 will be described in detail. The synthesis of the original image G0 and the filter image GF is performed based on the following conversion formula (* 1). When M <128, Dr = Sr− {Sr × (128−M) × P / (128 × 1000)} Dg = Sg− {Sg × (128−M) × P / (128 × 1000)} Db = Sb− {Sb × (128−M) × P / (128 × 1000)} When M ≧ 128, Dr = Sr + {(255−Sr) × (M−128) × P / (128 × 1000)} Dg = Sg + {(255-Sg) * (M-128) * P / (128 * 1000)} Db = Sb + {(255-Sb) * (M-128) * P / (128 * 1000)} ... ( * 1)

【0015】変換式(*1)において、各パラメータを
次のように定義する。すなわち、Sr,Sg,Sbは、そ
れぞれ、原画像G0における任意の画素の色を、色の3
原色である赤(R)、緑(G)、青(B)に分解して表
わしたときのR,G,B各色の濃度値である。Mは、フ
ィルタ画像GFにおける任意の画素の濃度値である。D
r,Dg,Dbは、それぞれ変換式(*1)によって出力
される、R,G,B各色の濃度値である。Pは、合成の
度合いを調整するためのパラメータである。なお、濃度
値S、濃度値Mをそれぞれ単に入力S、出力Mと記載
し、また、パラメータPを適用量Pと記載することがあ
る。
In the conversion equation (* 1), each parameter is defined as follows. That is, Sr, Sg, and Sb respectively represent the color of an arbitrary pixel in the original image G0 by the color 3
These are the density values of each of the R, G, and B colors when they are separated into the primary colors red (R), green (G), and blue (B). M is a density value of an arbitrary pixel in the filter image GF. D
r, Dg, and Db are the density values of each of the R, G, and B colors output by the conversion formula (* 1). P is a parameter for adjusting the degree of synthesis. Note that the density value S and the density value M may be simply described as input S and output M, respectively, and the parameter P may be described as an applied amount P.

【0016】ここで、変換式(*1)の理解を容易にす
るために、図6及び図7を参照して、それぞれ原画像G
0とフィルタ画像GFとを合成するための基本となる変
換式(*2)、及び変換式(*2)の改良式である変換
式(*3)について説明する。図6は、変換式(*2)
の入力Sと出力Dとの関係をフィルタ画像GFの濃度値
Mを3通り変えて示す図である。図6(A)はM=12
8のとき、図6(B)はM=0のとき、図6(C)はM
=255のときをそれぞれ示す。変換式(*2)は次の
ように表わされる。 D=S+(M−128) ……(*2) ただし、D<0ならばD=0とし、D>255ならばD
=255とする。
Here, in order to facilitate understanding of the conversion equation (* 1), referring to FIGS.
The conversion equation (* 2), which is the basis for combining 0 and the filter image GF, and the conversion equation (* 3), which is an improved equation of the conversion equation (* 2), will be described. FIG. 6 shows the conversion formula (* 2)
FIG. 9 is a diagram showing the relationship between the input S and the output D of the filter image GF by changing the density value M of the filter image GF in three ways. FIG. 6A shows M = 12.
8, FIG. 6 (B) shows M = 0, FIG. 6 (C) shows M
= 255. The conversion equation (* 2) is expressed as follows. D = S + (M−128) (* 2) However, if D <0, D = 0, and if D> 255, D
= 255.

【0017】変換式(*2)は、入力Sについて、次の
ような変換を行なう。すなわち、フィルタ画像GFにお
いて濃度値Mが中間濃度(=128)よりも高い画素
(128<M≦255)については、その画素に対応す
る原画像G0の画素の濃度値Sをより一層高くし、フィ
ルタ画像GFにおいて濃度値Mが中間濃度よりも低い画
素(0≦M<128)については、その画素に対応する
原画像G0の画素の濃度値Sをより一層低くし、フィル
タ画像GFにおいて濃度値Mが中間濃度の画素について
は、その画素に対応する原画像G0の画素の濃度値Sを
そのまま出力する。
The conversion equation (* 2) performs the following conversion on the input S. That is, for a pixel (128 <M ≦ 255) where the density value M is higher than the intermediate density (= 128) in the filter image GF, the density value S of the pixel of the original image G0 corresponding to the pixel is further increased. For a pixel (0 ≦ M <128) where the density value M is lower than the intermediate density in the filter image GF, the density value S of the pixel of the original image G0 corresponding to the pixel is further lowered, and the density value For a pixel whose M is an intermediate density, the density value S of the pixel of the original image G0 corresponding to the pixel is output as it is.

【0018】例えば、フィルタ画像GFの画素の濃度値
Mが0のときは、図6(B)の右半分に示すように、そ
の画素に対応する原画像G0の明るい画素(濃度値が1
28〜255の部分)が暗くなる。また、フィルタ画像
GFの画素の濃度値Mが255のときは、図6(C)の
左半分に示すように、その画素に対応する原画像G0の
暗い画素が明るくなる。つまり、原画像G0の画素が、
フィルタ画像GFの対応する画素の濃度に「染まる」形
になり、これによって合成が行なわれる。この合成は画
素単位で行なわれるので、きめ細かく合成が行なわれる
ことが期待できる。原画像G0に対し変換式(*2)を
色の3原色R,G,B毎に適用することで、カラー画像
に対してフィルタ画像GFを合成することができる。
For example, when the density value M of a pixel of the filter image GF is 0, as shown in the right half of FIG. 6B, a bright pixel (having a density value of 1) of the original image G0 corresponding to that pixel.
28-255). When the density value M of the pixel of the filter image GF is 255, as shown in the left half of FIG. 6C, the dark pixel of the original image G0 corresponding to that pixel becomes bright. That is, the pixels of the original image G0 are
The density of the corresponding pixel of the filter image GF becomes "dyed", whereby the composition is performed. Since this synthesis is performed on a pixel basis, it can be expected that the synthesis will be performed finely. By applying the conversion formula (* 2) to the original image G0 for each of the three primary colors R, G, and B, the filter image GF can be synthesized with the color image.

【0019】ところで、変換式(*2)では、出力Dが
負になるときはDを0にし、出力Dが255を超えると
きはDを255にしている。このため、図6(B)の左
半分に示すように、フィルタ画像GFの画素の濃度値M
が小さいときは、その画素に対応する原画像G0の暗い
画素は、濃度値Sによらず0になってしまう。逆に、フ
ィルタ画像GFの濃度値Mが大きいときは、図6(C)
の右半分に示すように、原画像G0の明るい部分は、濃
度値Sによらず255になってしまう。このため、入力
Sの全てについて合成の効果が反映されるとは限らなく
なる。この問題は、次に示す変換式(*3)によって改
善される。
In the conversion formula (* 2), when the output D becomes negative, D is set to 0, and when the output D exceeds 255, D is set to 255. Therefore, as shown in the left half of FIG. 6B, the density value M of the pixel of the filter image GF
Is smaller, the dark pixel of the original image G0 corresponding to that pixel becomes 0 irrespective of the density value S. Conversely, when the density value M of the filter image GF is large, FIG.
, The bright part of the original image G0 becomes 255 irrespective of the density value S. For this reason, the effect of combination is not always reflected on all of the inputs S. This problem is improved by the following conversion equation (* 3).

【0020】変換式(*3)は次のように表わされる。 M<128のとき、D=S×M/128 M≧128のとき、D=S+{(255−S)×(M−128)/128} ……(*3)The conversion equation (* 3) is expressed as follows. When M <128, D = S × M / 128 When M ≧ 128, D = S + {(255−S) × (M−128) / 128} (* 3)

【0021】図7は、変換式(*3)の入力Sと出力D
との関係をフィルタ画像GFの濃度値Mを5通りに変え
て示す図である。直線L1はM=0のとき、直線L2は
M=64のとき、直線L3はM=128のとき、直線L
4はM=192のとき、直線L5はM=255のときを
それぞれ示す。図7に示すように、変換式(*3)は、
入力Sの全てについての線形関数になるので、変換式
(*2)における上述した問題が改善され、入力Sの全
てについて合成の効果が反映される。特に、直線L1の
ように、フィルタ画像G0の濃度値Mが0のとき、出力
Dは0になる。また、直線L5のように、フィルタ画像
G0の濃度値Mが255のとき、入力Sの全てに対して
255になる。従って、フィルタ画像GFとして、周辺
部が白で描かれたものを使うことにより、原画像G0の
周辺部も白となり、白い画用紙に描かれた水彩画のよう
な感じがでる。
FIG. 7 shows the input S and output D of the conversion formula (* 3).
FIG. 11 is a diagram showing the relationship between the filter image GF and the density value M of the filter image GF in five ways. The straight line L1 is M = 0, the straight line L2 is M = 64, the straight line L3 is M = 128, the straight line L
4 indicates the case where M = 192, and the straight line L5 indicates the case where M = 255. As shown in FIG. 7, the conversion equation (* 3) is
Since the function is a linear function for all the inputs S, the above-described problem in the conversion formula (* 2) is improved, and the effect of the combination is reflected for all the inputs S. In particular, when the density value M of the filter image G0 is 0 as in the straight line L1, the output D is 0. Further, when the density value M of the filter image G0 is 255 as in the straight line L5, the density becomes 255 for all the inputs S. Therefore, by using an image whose peripheral portion is drawn in white as the filter image GF, the peripheral portion of the original image G0 also becomes white, giving a feeling like a watercolor drawn on a white drawing paper.

【0022】変換式(*1)は、変換式(*3)を基に
作成されており、入力Sの全てについての線形関数にな
っている。更に、合成の度合いがパラメータPによって
調整できるようになっている。変換式(*3)を合成の
度合いが調整できる変換式にするために、まず、変換式
(*3)を(*3´)のように変形する。 M<128のとき、 D=S−{S×(128−M)/128} M≧128のとき、 D=S+{(255−S)×(M−128)/128} ……(*3´) 変換式(*3´)を合成の度合いが調整できる変換式に
するために、パラメータPを含む項を入れると次の変換
式(*4)になる。 M<128のとき、 D=S−{S×(128−M)/128}×P/1000 M≧128のとき、 D=S+{(255−S)×(M−128)/128}×P/1000 ……(*4)
The conversion equation (* 1) is created based on the conversion equation (* 3), and is a linear function for all the inputs S. Further, the degree of synthesis can be adjusted by the parameter P. In order to convert the conversion equation (* 3) into a conversion equation that can adjust the degree of synthesis, first, the conversion equation (* 3) is modified as (* 3 ′). When M <128, D = S− {S × (128−M) / 128} When M ≧ 128, D = S + {(255−S) × (M−128) / 128} (3) ') In order to convert the conversion formula (* 3') into a conversion formula capable of adjusting the degree of synthesis, the following conversion formula (* 4) is obtained by including a term including the parameter P. When M <128, D = S− {S × (128−M) / 128} × P / 1000 When M ≧ 128, D = S + {(255−S) × (M−128) / 128} × P / 1000 (* 4)

【0023】パラメータPは、合成に際し、フィルタ画
像GFを合成する度合いを決定するためのものであり、
ユーザによって0から1000の値に設定可能である。
パラメータPが1000のときを100パーセントの適
用としている。なお、図7では、フィルタ画像GFを1
00パーセント適用したときの結果を示した。図8は、
変換式(*4)において、フィルタ画像GFの濃度値M
を0として、入力Sと出力Dとの関係を適用量Pを3通
りに変えて示す図である。図7(A)はP=0のとき、
図7(B)はP=500のとき、図7(C)はP=10
00のときをそれぞれ示す。適用量Pが0のときは、フ
ィルタ画像GFが適用されないということなので、図7
(A)のように、原画像G0がそのまま出力される。適
用量Pが1000のときは、フィルタ画像GFが全て適
用されるということなので、図7(C)のように、原画
像G0は濃度値が0の画像として出力される。適用量P
が500のときは、図7(B)のように、フィルタ画像
GFの合成の度合いは50パーセントとなる。変換式
(*4)を整理し、R,G,Bのそれぞれについて表す
と、はじめに示した変換式(*1)が得られる。
The parameter P is for determining the degree to which the filter image GF is to be synthesized at the time of synthesis.
The value can be set from 0 to 1000 by the user.
When the parameter P is 1000, 100% is applied. In FIG. 7, the filter image GF is set to 1
The results when 00% was applied are shown. FIG.
In the conversion formula (* 4), the density value M of the filter image GF
Is a diagram showing the relationship between an input S and an output D by changing an applied amount P into three types, with 0 being set to 0. FIG. FIG. 7A shows that when P = 0,
FIG. 7B shows a case where P = 500, and FIG. 7C shows a case where P = 10.
00 is shown. When the application amount P is 0, it means that the filter image GF is not applied.
As shown in (A), the original image G0 is output as it is. When the applied amount P is 1000, it means that all of the filter images GF are applied. Therefore, as shown in FIG. 7C, the original image G0 is output as an image having a density value of 0. Application amount P
Is 500, the degree of synthesis of the filtered image GF is 50% as shown in FIG. 7B. By rearranging the conversion formula (* 4) and expressing each of R, G, and B, the conversion formula (* 1) shown first is obtained.

【0024】適用量Pによる効果は次のようになる。例
えば、フィルタ画像GFが、濃淡のパターンによって凹
凸を表わした画像であれば、凹凸の起伏の大きさを変換
式(*1)における適用量Pで調整することができる。
つまり、フィルタ画像GFが、キャンバス面におけるメ
ッシュの凹部となる部分が淡く描かれ、且つ凸部となる
部分が濃く描かれたパターンをもつ濃淡画像であれば、
適用量Pを大きくすることによって、次のような合成画
像が得られる。すなわち、適用量Pを大きくすることに
よって、凹部においては、色が淡くなる度合いが強ま
り、凸部においては、色が濃くなる度合いが強まる。こ
れにより、凹凸の起伏が大きなキャンバスに描かれたと
いう感じがでる。反対に、適用量Pを小さくすることに
よって、凹凸の起伏が小さなキャンバスに描かれたとい
う感じがでる。適用量Pの値を変えることにより、キャ
ンバスに描かれた感じへの変換だけでなく、他の種々の
絵の感じを出す画像に変換する場合においても、模様の
表れ方の強弱等について様々な形態を実現することがで
きる。
The effect of the application amount P is as follows. For example, if the filter image GF is an image in which unevenness is represented by a light and shade pattern, the size of the unevenness can be adjusted by the application amount P in the conversion formula (* 1).
That is, if the filter image GF is a shaded image having a pattern in which the concave portions of the mesh on the canvas surface are drawn lightly and the convex portions are drawn dark,
By increasing the application amount P, the following composite image can be obtained. That is, by increasing the application amount P, the degree of color fading in the concave portions increases, and the degree of color deepening in the convex portions increases. This gives the impression that the unevenness has been drawn on the large canvas. Conversely, by reducing the applied amount P, it is felt that the unevenness has been drawn on a small canvas. By changing the value of the applied amount P, not only the conversion to the feeling drawn on the canvas, but also the conversion to an image that gives the feeling of various other pictures, various changes in the strength of the appearance of the pattern, etc. The form can be realized.

【0025】以上に述べたように、変換プログラムTP
においては、入力された原画像G0に変換式(*1)に
よってフィルタ画像GFを合成することにより、絵画調
画像GKが得られる。変換プログラムTPの処理は、キ
ーボート又はマウス等の簡単な入力操作によって行なわ
れる。従って、手作業でデータの変更をする必要がな
く、手間や時間を多くかけることなく、絵画調画像GK
が得られる。
As described above, the conversion program TP
In, by combining the input original image G0 with the filter image GF by the conversion equation (* 1), a painting-like image GK is obtained. The processing of the conversion program TP is performed by a simple input operation such as a keyboard or a mouse. Therefore, there is no need to manually change the data and the painting-like image GK can be performed without much trouble and time.
Is obtained.

【0026】また、変換式(*1)による合成は画素単
位で行なわれるので、きめ細かく合成が行なわれること
が期待できる。そして、変換式(*1)は、入力Sの全
てについての線形関数になるので、入力Sの全てについ
て合成の効果が反映される。また、原画像G0に対し変
換式(*2)を色の3原色R,G,B毎に適用すること
で、カラー画像に対してフィルタ画像GFを合成するこ
とができる。また、適用量Pの値を変えることにより、
種々の絵の感じを出す画像に変換する場合においても、
模様の表れ方の強弱等について様々な形態を実現するこ
とができる。更に、鮮鋭化ステップK1により、入力画
像である原画像G0の輪郭をより一層はっきりさせる処
理を行なうので、最終的に得られる絵画調画像GKのエ
ッジが、フィルタ画像GFとの合成によってぼやけたも
のにならない。
Further, since the synthesis by the conversion formula (* 1) is performed on a pixel-by-pixel basis, it can be expected that the synthesis is performed finely. Since the conversion formula (* 1) is a linear function for all the inputs S, the effect of the combination is reflected for all the inputs S. Further, by applying the conversion equation (* 2) to the original image G0 for each of the three primary colors R, G, and B, the filter image GF can be synthesized with the color image. Also, by changing the value of the application amount P,
Even when converting to an image that gives various picture feelings,
Various modes can be realized for the strength of the appearance of the pattern and the like. Further, the sharpening step K1 performs processing for further sharpening the outline of the original image G0, which is the input image, so that the edge of the finally obtained painting-like image GK is blurred by synthesis with the filter image GF. do not become.

【0027】[0027]

【発明の効果】本発明によると、写真又はCGによって
機械調に描かれた原画像を、手間や時間を多くかけるこ
となく絵画調画像に変換できる。請求項2の発明による
と、得られる絵画調画像が、きめ細かく合成されること
が期待できる。また、入力される原画像の濃度値全てに
ついて合成の効果が反映される。請求項3の発明による
と、入力されるカラーの原画像に対してもフィルタ画像
を合成して絵画調画像が得られる。請求項4の発明によ
ると、適用量の値をユーザが変えることにより、種々の
絵の感じを出す画像に変換する場合において、模様の表
れ方の強弱等について様々な形態を実現することができ
る。請求項5の発明によると、最終的に得られる絵画調
画像のエッジが、フィルタ画像との合成によってぼやけ
たものにならない。
According to the present invention, an original image drawn mechanically by a photograph or CG can be converted into a picture-like image without much trouble and time. According to the invention of claim 2, it can be expected that the obtained painting-like image is finely synthesized. In addition, the effect of combination is reflected on all the density values of the input original image. According to the third aspect of the present invention, a painting-like image is obtained by synthesizing a filter image also with an input color original image. According to the fourth aspect of the present invention, when the user changes the value of the application amount to convert the image into an image that gives a variety of pictorial feelings, it is possible to realize various forms of the strength of the appearance of the pattern and the like. . According to the fifth aspect of the present invention, the edge of the finally obtained painting-like image does not become blurred due to the combination with the filter image.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 原画像を示す図である。FIG. 1 is a diagram showing an original image.

【図2】 絵画調画像の例を示す図である。FIG. 2 is a diagram illustrating an example of a painting-like image.

【図3】 絵画調画像の例を示す図である。FIG. 3 is a diagram illustrating an example of a painting-like image.

【図4】 フィルタ画像の一例を示す図である。FIG. 4 is a diagram illustrating an example of a filter image.

【図5】 変換プログラムで行なう処理内容の概略を示
すフローチャートである。
FIG. 5 is a flowchart showing an outline of processing contents performed by a conversion program.

【図6】 変換式(*2)の入力と出力との関係をフィ
ルタ画像の濃度値を3通りに変えて示す図である。
FIG. 6 is a diagram showing the relationship between the input and output of the conversion formula (* 2) by changing the density value of the filter image into three types.

【図7】 変換式(*3)の入力と出力との関係をフィ
ルタ画像の濃度値を5通りに変えて示す図である。
FIG. 7 is a diagram showing the relationship between the input and output of the conversion formula (* 3) by changing the density value of the filter image into five values.

【図8】 変換式(*4)において、フィルタ画像の濃
度値を0として、入力と出力との関係を適用量を3通り
に変えて示す図である。
FIG. 8 is a diagram showing the relationship between input and output in the conversion formula (* 4), with the density value of the filter image set to 0, and changing the application amount in three ways.

【符号の説明】[Explanation of symbols]

TP 変換プログラム G0 原画像 GK 絵画調画像 GF フィルタ画像 K1 鮮鋭化ステップ K3 合成ステップ TP conversion program G0 Original image GK Painting style image GF Filter image K1 Sharpening step K3 Synthesis step

───────────────────────────────────────────────────── フロントページの続き (72)発明者 森本 晃章 京都府久世郡久御山町佐古外屋敷125 ニ ューリー株式会社内 (72)発明者 西村 康司 京都府久世郡久御山町佐古外屋敷125 ニ ューリー株式会社内 Fターム(参考) 5B057 AA11 CA08 CA12 CA16 CB08 CB12 CB16 CC01 CD05 CE03 CE08 CE11 5C076 AA12 AA27 5C077 MP08 NN02 PP03 PP23 PP32 TT08  ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Akiaki Morimoto 125 Sako Outer House, Kumiyama-cho, Kuse-gun, Kyoto Prefecture Inside (72) Inventor Koji Nishimura 125 Sako Outer House, Kumiyama-cho, Kuse-gun, Kyoto F term (reference) 5B057 AA11 CA08 CA12 CA16 CB08 CB12 CB16 CC01 CD05 CE03 CE08 CE11 5C076 AA12 AA27 5C077 MP08 NN02 PP03 PP23 PP32 TT08

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 入力される機械調の原画像を絵画調画像
に変換する絵画調画像への変換プログラムであって、 前記原画像と、該原画像に目的とする絵の感じがでるよ
うに所定の濃淡パターンで作成されたフィルタ画像とを
合成する合成ステップを有する、ことを特徴とする絵画
調画像への変換プログラム。
1. A program for converting an input mechanical tone original image into a painting tone image to convert it into a painting tone image, wherein the original image and a target picture feel are obtained in the original image. A program for converting into a painting-like image, comprising a synthesizing step of synthesizing with a filter image created with a predetermined shading pattern.
【請求項2】 前記合成ステップは、前記フィルタ画像
における中間濃度よりも低い画素に対しては、その画素
に対応する前記原画像の画素の濃度値をより一層低く
し、前記フィルタ画像における中間濃度よりも高い画素
に対しては、その画素に対応する前記原画像の画素の濃
度値をより一層高くする変換を行ない、 該変換によって得られる濃度値は、前記原画像の各画素
の濃度値に対して線形関数となる、請求項1に記載の絵
画調画像への変換プログラム。
2. The method according to claim 1, wherein, for a pixel having a lower density than the intermediate density in the filter image, the density value of a pixel of the original image corresponding to the pixel is further lowered, For the higher pixel, a conversion is performed to further increase the density value of the pixel of the original image corresponding to the pixel, and the density value obtained by the conversion becomes the density value of each pixel of the original image. 2. The program according to claim 1, wherein the program is a linear function.
【請求項3】 前記合成ステップは、前記原画像の画素
の濃度値をより一層低くする変換、及び前記原画像の画
素の濃度値をより一層高くする変換を、色の3原色毎に
行なってなる、請求項2に記載の絵画調画像への変換プ
ログラム。
3. The synthesizing step includes performing, for each of three primary colors, conversion for lowering the density value of the pixels of the original image and conversion for further increasing the density value of the pixels of the original image. The program for converting into a painting-like image according to claim 2.
【請求項4】 前記原画像の画素の濃度値をより一層低
くする度合い、及び前記原画像の画素の濃度値をより一
層高くする度合いを調整可能である、請求項2又は3に
記載の絵画調画像への変換プログラム。
4. The painting according to claim 2, wherein the degree of further lowering the density value of the pixel of the original image and the degree of further increasing the density value of the pixel of the original image are adjustable. Conversion program for tonal images.
【請求項5】 前記合成ステップによる処理の前に前記
原画像の輪郭をより一層はっきりさせる鮮鋭化ステップ
を有してなる、請求項1から4のいずれかに記載の絵画
調画像への変換プログラム。
5. The program according to claim 1, further comprising a sharpening step for further sharpening the outline of the original image before the processing in the combining step. .
JP2001103291A 2001-04-02 2001-04-02 Conversion program for painting-like images Expired - Fee Related JP3640897B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001103291A JP3640897B2 (en) 2001-04-02 2001-04-02 Conversion program for painting-like images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001103291A JP3640897B2 (en) 2001-04-02 2001-04-02 Conversion program for painting-like images

Publications (2)

Publication Number Publication Date
JP2002298136A true JP2002298136A (en) 2002-10-11
JP3640897B2 JP3640897B2 (en) 2005-04-20

Family

ID=18956370

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001103291A Expired - Fee Related JP3640897B2 (en) 2001-04-02 2001-04-02 Conversion program for painting-like images

Country Status (1)

Country Link
JP (1) JP3640897B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009075867A (en) * 2007-09-20 2009-04-09 Sega Corp Image processing program, computer-readable recording medium storing the program, image processing apparatus, and image processing method
CN102147911A (en) * 2010-02-04 2011-08-10 卡西欧计算机株式会社 Image processing device
US8184925B1 (en) 2007-10-22 2012-05-22 Berridge & Associates System for converting a photograph into a portrait-style image
JP2012142757A (en) * 2010-12-28 2012-07-26 Casio Comput Co Ltd Image printing device, coloring-outline generation method, and coloring-outline generation program
JP2012216179A (en) * 2011-03-31 2012-11-08 Casio Comput Co Ltd Image processing device, image processing method, and program
JP2014059843A (en) * 2012-09-19 2014-04-03 Casio Comput Co Ltd Image generation device, image generation method, and program
JP2014082777A (en) * 2013-12-12 2014-05-08 Casio Comput Co Ltd Image processing apparatus, and image processing program

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009075867A (en) * 2007-09-20 2009-04-09 Sega Corp Image processing program, computer-readable recording medium storing the program, image processing apparatus, and image processing method
US8184925B1 (en) 2007-10-22 2012-05-22 Berridge & Associates System for converting a photograph into a portrait-style image
CN102147911A (en) * 2010-02-04 2011-08-10 卡西欧计算机株式会社 Image processing device
JP2011166217A (en) * 2010-02-04 2011-08-25 Casio Computer Co Ltd Image processing device and image processing program
JP2012142757A (en) * 2010-12-28 2012-07-26 Casio Comput Co Ltd Image printing device, coloring-outline generation method, and coloring-outline generation program
JP2012216179A (en) * 2011-03-31 2012-11-08 Casio Comput Co Ltd Image processing device, image processing method, and program
CN102842140A (en) * 2011-03-31 2012-12-26 卡西欧计算机株式会社 Image processing apparatus and image processing method
US9020255B2 (en) 2011-03-31 2015-04-28 Casio Computer Co., Ltd. Image processing apparatus, image processing method, and storage medium
JP2014059843A (en) * 2012-09-19 2014-04-03 Casio Comput Co Ltd Image generation device, image generation method, and program
JP2014082777A (en) * 2013-12-12 2014-05-08 Casio Comput Co Ltd Image processing apparatus, and image processing program

Also Published As

Publication number Publication date
JP3640897B2 (en) 2005-04-20

Similar Documents

Publication Publication Date Title
JP4508565B2 (en) A method for enhancing tone characteristics of digital images using inflection points in tone scale function
JP4924264B2 (en) Image processing apparatus, image processing method, and computer program
JP2004158006A (en) Method for emphasizing tonal and spatial characteristics of digital image
JP2004030670A (en) Enhancement method for color tone feature of digital image
ES2285566T3 (en) PROCEDURE AND SYSTEM TO MODIFY A DIGITAL IMAGE DIFFERENTIALLY AND ALMOST REGULAR BY PIXEL.
JP4466565B2 (en) Output image data generation apparatus and output image data generation method
JP2003264699A (en) Method for adjusting color, brightness and tone scale of rendered digital image
CN103198469B (en) Image processing apparatus and image processing method
JP5896204B2 (en) Image processing apparatus and program
JP2018014646A (en) Image processing apparatus and image processing method
JPH10243211A (en) Image processor, image-processing method and recording medium
JP3640897B2 (en) Conversion program for painting-like images
JP2012216179A (en) Image processing device, image processing method, and program
JP2001111858A (en) Color correction definition preparing method, color correction definition generator, and storage medium for color correction definition generation program
JP2020123138A (en) Image processing system, image processing method, program, and storage medium
WO2016088162A1 (en) Image conversion method
JP2010074217A (en) Method and computer program for coloring image generation and recording medium
CN101408974A (en) Image-processing method and apparatus
JPH0746416A (en) Color image processor
JP2020182163A (en) Image processing equipment, image processing methods and programs
JP2010081350A (en) Method and program for generating oil painting tone image
Peng Bilateral Filtering Based Image Cartoon Stylization Design
Rizzi et al. Developments in the recovery of colour in fine art prints using spatial image processing
Freeman Mastering Black and White Digital Photography
JP2009031855A (en) Image processing apparatus, image processing method, and computer program

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20040706

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20040707

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040913

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050119

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080128

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090128

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100128

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110128

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120128

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120128

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130128

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130128

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140128

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees