JP2001119556A - Image processor and processing method for multi-band image - Google Patents
Image processor and processing method for multi-band imageInfo
- Publication number
- JP2001119556A JP2001119556A JP29681899A JP29681899A JP2001119556A JP 2001119556 A JP2001119556 A JP 2001119556A JP 29681899 A JP29681899 A JP 29681899A JP 29681899 A JP29681899 A JP 29681899A JP 2001119556 A JP2001119556 A JP 2001119556A
- Authority
- JP
- Japan
- Prior art keywords
- image
- band
- light source
- spectral
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 230000003595 spectral effect Effects 0.000 claims abstract description 147
- 238000009826 distribution Methods 0.000 claims abstract description 86
- 239000002131 composite material Substances 0.000 claims description 54
- 238000005286 illumination Methods 0.000 claims description 10
- 230000002194 synthesizing effect Effects 0.000 abstract description 11
- 230000015572 biosynthetic process Effects 0.000 abstract description 2
- 238000003786 synthesis reaction Methods 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 22
- 238000000034 method Methods 0.000 description 8
- 238000007689 inspection Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 241000112598 Pseudoblennius percoides Species 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013213 extrapolation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Landscapes
- Processing Of Color Television Signals (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、被写体を撮影する
際に、撮影波長帯域を複数のバンド帯域に分割して撮影
した複数の画像からなる被写体のマルチバンド画像と所
望のマルチバンド背景画像の画像データとを用いて、所
望の光源下の合成画像を生成する画像生成技術に関す
る。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multi-band image of a subject composed of a plurality of images obtained by dividing a photographing wavelength band into a plurality of band bands and a desired multi-band background image. The present invention relates to an image generation technique for generating a composite image under a desired light source using image data.
【0002】[0002]
【従来の技術】今日、デジタル画像処理の進歩によっ
て、デジタルカメラ等で撮影した被写体画像を、フォト
レタッチ用ソフトウェアを用いて、任意の背景画像に容
易に貼り付け合成することできる。例えば、光源を白熱
電球として室内で撮影した人物画像を、夏の浜辺で撮影
した背景画像に合成して、浜辺にいる人物画像を作成す
ることが可能である。このようなカラー画像の合成は、
一般に、R(赤)、G(緑)およびB(青)の各画素の
背景画像の画像データの一部分を、被写体画像の画像デ
ータと置き換えることによって行われる。そのため、得
られた合成画像では、被写体画像の測色値がそのまま維
持されて背景画像とともに再現される。2. Description of the Related Art Today, with the advance of digital image processing, a subject image photographed by a digital camera or the like can be easily pasted and synthesized on an arbitrary background image using photo retouching software. For example, a person image photographed indoors using a light source as an incandescent light bulb can be combined with a background image photographed on a summer beach to create a person image on the beach. The synthesis of such a color image
Generally, this is performed by replacing a part of the image data of the background image of each pixel of R (red), G (green) and B (blue) with the image data of the subject image. Therefore, in the obtained composite image, the colorimetric values of the subject image are maintained as they are and are reproduced together with the background image.
【0003】[0003]
【発明が解決しようとする課題】しかし、撮影された被
写体画像の測色値は、撮影光源の分光強度分布に影響を
受け、上記例の白熱電球の光源では約2800〜300
0K(ケルビン)の色温度を有し、画像は赤味が強い傾
向にある。一方、夏の浜辺で撮影した背景画像は、色温
度が5000〜6000K(ケルビン)の太陽光を光源
とするため、白熱電球を光源とした被写体画像のような
赤味はない。そのため、被写体画像の測色値をそのまま
維持し、背景画像とともに再現した合成画像は、被写体
が背景画像と遊離して浮き出してしまい、あたかも浜辺
にいる人物を撮影したような臨場感のある合成画像を得
ることはできない。However, the colorimetric value of the photographed subject image is affected by the spectral intensity distribution of the photographing light source.
It has a color temperature of 0K (Kelvin) and the image tends to be reddish. On the other hand, a background image taken on a summer beach does not have a red tint like a subject image using an incandescent bulb as a light source because the light source uses sunlight having a color temperature of 5000 to 6000 K (Kelvin) as a light source. For this reason, the composite image reproduced with the background image while maintaining the colorimetric values of the subject image as it is, the subject is separated from the background image and emerges, making it a realistic image as if shooting a person on the beach Can not get.
【0004】たとえ、被写体画像を背景画像の色味に合
わせるために、フォトレタッチ用ソフトウェアを用い
て、R、GおよびBの各画素の画像データを任意に変更
し、色バランスを調整しても、所望の光源下で実際に背
景と共に被写体を撮影する際の見えの雰囲気に合った画
像を測色的に正確に再現できず、十分に臨場感のある合
成画像を得ることはできないといった問題があった。For example, even if the image data of each of the R, G, and B pixels is arbitrarily changed using photo retouching software to adjust the color balance so that the subject image matches the color of the background image. However, there is a problem that an image that matches the appearance atmosphere when actually photographing a subject together with a background under a desired light source cannot be colorimetrically accurately reproduced, and a sufficiently realistic composite image cannot be obtained. there were.
【0005】そこで、本発明は、上記問題点を解決し、
被写体を背景画像とともに合成する際、画像撮影時の雰
囲気に合わせた被写体の画像を測色的に正確に再現し、
被写体画像が背景画像に違和感無く融合し、十分に臨場
感のある合成画像を得るとともに、合成画像の作成に際
し、所望の光源を一意的に定めて合成画像を作成するこ
とのできる画像処理装置および画像処理方法を提供する
ことを目的とする。Therefore, the present invention solves the above problems,
When synthesizing the subject with the background image, the subject's image that matches the atmosphere at the time of shooting the image is accurately reproduced colorimetrically,
An image processing apparatus capable of fusing a subject image with a background image without a sense of incongruity and obtaining a sufficiently realistic composite image, and at the time of creating a composite image, uniquely defining a desired light source and creating a composite image; and It is an object to provide an image processing method.
【0006】[0006]
【課題を解決するための手段】上記目的を達成するため
に、本発明者は、被写体を撮影する際、撮影波長帯域を
複数のバンド帯域に分割して各バンド帯域毎に撮影した
複数のバンド画像から構成されるマルチバンド画像に注
目して鋭意検討した結果、以下の発明に至ったものであ
る。すなわち、本発明は、被写体を撮影する際に、撮影
波長帯域を複数のバンド帯域に分割して撮影した複数の
画像からなるマルチバンド画像を処理するマルチバンド
画像の画像処理装置であって、照明用光源の分光強度分
布を複数備える光源分光分布データベース部と、被写体
の背景画像として合成する、撮影時の光源の分光強度分
布が既知のマルチバンド背景画像を複数備える背景画像
データベース部と、前記光源分光分布データベース部お
よび前記背景画像データベース部より所望の光源の分光
強度分布および所望のマルチバンド背景画像を選択する
選択手段と、前記選択手段によって選択された前記マル
チバンド背景画像より得られる背景画像分光反射率デー
タと前記被写体のマルチバンド画像より得られる被写体
分光反射率データとを合成し、合成画像分光反射率デー
タを得る画像データ合成部と、前記画像データ合成処理
部で得られた合成画像分光反射率データと前記選択手段
によって選択された前記分光強度分布とを用いて、合成
画像の画像データを求める合成画像生成部と、前記合成
画像生成部で得られた合成画像の画像データを所定の出
力画像信号に変換して出力する画像データ出力部とを備
えることを特徴とするマルチバンド画像の画像処理装置
を提供するものである。In order to achieve the above object, the present inventor, when photographing a subject, divides a photographing wavelength band into a plurality of band bands and a plurality of bands photographed for each band band. As a result of intensive studies focusing on a multi-band image composed of images, the following invention has been achieved. That is, the present invention is a multi-band image processing apparatus for processing a multi-band image composed of a plurality of images obtained by dividing a photographing wavelength band into a plurality of band bands when photographing a subject. A light source spectral distribution database unit including a plurality of spectral intensity distributions of light sources for use, a background image database unit including a plurality of multiband background images having a known spectral intensity distribution of a light source at the time of shooting to be combined as a background image of a subject, and the light source Selecting means for selecting a desired light source spectral intensity distribution and a desired multi-band background image from the spectral distribution database section and the background image database section; and a background image spectrum obtained from the multi-band background image selected by the selecting means. Reflectance data and subject spectral reflectance data obtained from a multi-band image of the subject. An image data synthesizing unit for obtaining synthesized image spectral reflectance data, and using the synthesized image spectral reflectance data obtained by the image data synthesizing processing unit and the spectral intensity distribution selected by the selecting unit, A composite image generation unit that obtains image data of the composite image, and an image data output unit that converts the image data of the composite image obtained by the composite image generation unit into a predetermined output image signal and outputs the output signal. The present invention provides an image processing apparatus for a multi-band image.
【0007】また、本発明は、被写体を撮影する際に、
撮影波長帯域を複数のバンド帯域に分割して撮影した複
数の画像からなるマルチバンド画像を処理するマルチバ
ンド画像の画像処理方法であって、照明用光源の分光強
度分布を複数備える光源分光分布データベース部から所
望の照明用光源の分光強度分布を選択し、撮影時の光源
の分光強度分布が既知のマルチバンド背景画像を複数備
える背景画像データベース部から、被写体の背景画像と
して合成する、所望のマルチバンド背景画像を選択し、
選択された前記マルチバンド背景画像より得られる背景
画像分光反射率データと前記被写体のマルチバンド画像
より得られる被写体分光反射率データとを合成して合成
画像分光反射率データを得、この合成画像分光反射率デ
ータと前記分光強度分布とを用いて、合成画像の画像デ
ータを求め、この合成画像の画像データを所定の出力画
像信号に変換して出力することを特徴とするマルチバン
ド画像の画像処理方法を提供するものである。Further, the present invention provides a method for photographing a subject,
An image processing method of a multi-band image for processing a multi-band image composed of a plurality of images obtained by dividing an imaging wavelength band into a plurality of band bands, comprising: a light source spectral distribution database including a plurality of spectral intensity distributions of an illumination light source. A desired spectral intensity distribution of the light source for illumination from the unit, and synthesize a desired multiplicity as a background image of the subject from a background image database unit including a plurality of multi-band background images with known spectral intensity distributions of the light source at the time of shooting. Select the band background image,
Background image spectral reflectance data obtained from the selected multi-band background image is combined with subject spectral reflectance data obtained from the multi-band image of the subject to obtain composite image spectral reflectance data. Image processing of a multi-band image, wherein image data of a composite image is obtained using reflectance data and the spectral intensity distribution, and the image data of the composite image is converted into a predetermined output image signal and output. It provides a method.
【0008】ここで、前記光源分光分布データベース部
は、屋外光源の色温度に対応した分光強度分布を備え、
所望の照明用光源として屋外光源を選択する場合、場
所、季節および時間帯の少なくとも1つを検査キーとし
て指定し、この検索キーより光源の色温度を確定し、こ
の色温度より光源の分光強度分布を決定するのが好まし
く、その際、さらに、所望の照明用光源の分光強度分布
を選択する際、指定した前記場所に応じて、時間帯に対
する屋外光源の色温度を規定する基準関数を設定し、前
記基準関数に対して、指定した前記季節に応じた比率で
圧縮・伸張し、さらに、圧縮・伸張した前記基準関数よ
り、指定した前記時間帯における色温度を求めること
で、前記検索キーより色温度を決定するのが好ましい。
また、前記合成画像の画像データを求める際、合成画像
の画像データの内、背景画像領域と被写体画像領域に用
いる光源の強度を変えて合成画像の画像データを求める
のが好ましい。Here, the light source spectral distribution database section has a spectral intensity distribution corresponding to the color temperature of the outdoor light source,
When an outdoor light source is selected as a desired illumination light source, at least one of a place, a season, and a time zone is designated as an inspection key, the color temperature of the light source is determined by using the search key, and the spectral intensity of the light source is determined from the color temperature. Preferably, the distribution is determined. At that time, when selecting a desired spectral intensity distribution of the illumination light source, a reference function that defines the color temperature of the outdoor light source with respect to time is set according to the specified location. Then, the reference key is compressed / expanded at a ratio corresponding to the specified season, and the color temperature in the specified time zone is obtained from the compressed / expanded reference function to obtain the search key. More preferably, the color temperature is determined.
When obtaining the image data of the composite image, it is preferable to obtain the image data of the composite image by changing the intensity of the light source used for the background image region and the subject image region in the image data of the composite image.
【0009】[0009]
【発明の実施の形態】以下、本発明のマルチバンド画像
処理方法を実施する本発明のマルチバンド画像処理装置
について、添付の図面に示される好適実施例を基に詳細
に説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a multi-band image processing apparatus of the present invention for implementing a multi-band image processing method of the present invention will be described in detail based on a preferred embodiment shown in the accompanying drawings.
【0010】図1に、本発明のマルチバンド画像処理装
置の一実施例であるマルチバンド画像処理装置(以下、
本装置という)10の概略ブロック図を示す。本装置1
0は、以降で述べる機能がコンピュータによって処理さ
れるソフトウェアで構成されてもよく、また機能の一部
または全部が独立した装置の形で構成されてもよい。本
装置10は、光源Sで照明された被写体Oをマルチバン
ドカメラ12で撮影することによって得られるマルチバ
ンド画像の被写体画像を所望の背景画像に貼り付けて合
成し、合成画像の画像データをプリンタ30に出力する
画像処理装置である。FIG. 1 shows a multi-band image processing apparatus (hereinafter, referred to as a multi-band image processing apparatus) according to an embodiment of the present invention.
FIG. 1 shows a schematic block diagram of an apparatus (referred to as the present apparatus) 10. This device 1
0 may be constituted by software in which the functions described below are processed by a computer, or some or all of the functions may be constituted by an independent device. The present apparatus 10 pastes a subject image of a multi-band image obtained by photographing a subject O illuminated by the light source S with the multi-band camera 12 onto a desired background image, synthesizes the image, and converts the image data of the synthesized image into a printer. 30 is an image processing apparatus that outputs the image data to the image processing apparatus 30.
【0011】本装置10は、マルチバンドカメラ12で
撮影されたマルチバンド画像を保持するマルチバンド画
像収録部14と、マルチバンド画像より、光源Sの分光
強度分布の成分を除去し、被写体Oの分光反射率分布を
推定し、被写体分光反射率データを取得する分光反射率
推定部16と、光源の分光強度分布を複数備える光源分
光分布データベース部18と、被写体の背景画像として
合成するマルチバンド背景画像を複数備える背景画像デ
ータベース部20と、光源分光分布データベース部18
と背景画像データベース部20から、所望の分光強度分
布とマルチバンド背景画像を検索して選択する選択手段
としての検索部22と、検索部22によって選択したマ
ルチバンド背景画像より得られる背景画像分光反射率デ
ータと被写体分光反射率データとを合成し、合成画像分
光反射率データを得る画像データ合成部24と、この合
成画像分光反射率データと検索部22によって選択され
た分光強度分布とを用いて、合成画像の画像データを求
める合成画像生成部26と、合成画像生成部26で得ら
れた合成画像の画像データを所定の出力画像信号に変換
して出力する画像データ出力部28とを主に有して構成
される。また、本装置10は、画像データ出力部28を
介して、合成画像をプリント出力するためにプリンタ3
0に接続されている。The apparatus 10 includes a multi-band image recording unit 14 for holding a multi-band image captured by a multi-band camera 12 and a component of a spectral intensity distribution of a light source S from a multi-band image. A spectral reflectance estimating unit 16 for estimating a spectral reflectance distribution and obtaining subject spectral reflectance data, a light source spectral distribution database unit 18 having a plurality of light source spectral intensity distributions, and a multi-band background to be synthesized as a background image of the subject. A background image database unit 20 having a plurality of images and a light source spectral distribution database unit 18
A search unit 22 for selecting and searching a desired spectral intensity distribution and a multi-band background image from the background image database unit 20 and a background image spectral reflection obtained from the multi-band background image selected by the search unit 22 The image data synthesizing unit 24 that synthesizes the ratio data and the subject spectral reflectance data to obtain synthesized image spectral reflectance data, and uses the synthesized image spectral reflectance data and the spectral intensity distribution selected by the search unit 22. A composite image generation unit 26 for obtaining image data of the composite image, and an image data output unit 28 for converting the image data of the composite image obtained by the composite image generation unit 26 into a predetermined output image signal and outputting the signal. It is configured to have. In addition, the apparatus 10 is connected to the printer 3 via the image data output unit 28 in order to print out the composite image.
Connected to 0.
【0012】マルチバンドカメラ12は、被写体Oを撮
影する際に、撮影波長帯域を複数のバンド帯域に分割し
た複数のバンド画像からなるマルチバンド画像を撮影す
るカメラであって、例えば、撮影波長帯域を複数のバン
ド帯域に分割するバンドパスフィルタとしての可変フィ
ルタとこの可変フィルタを透過した透過光を撮像するC
CDカメラから構成される。得られた画像データは、本
装置10のマルチバンド画像収録部14に送られ、一時
的に保持される。なお、光源Sは、特に制限されず、い
ずれの光源であってもよいが、後述するように、マルチ
バンド画像より分光反射率分布の画像データを得るため
に、分光強度分布が既知の光源であることが好ましい。
また、マルチバンド画像は、少なくともバンド帯域を8
バンド以上に分割したものである。The multi-band camera 12 is a camera for photographing a subject O to photograph a multi-band image composed of a plurality of band images obtained by dividing a photographing wavelength band into a plurality of band bands. Filter as a band-pass filter that divides light into a plurality of band bands, and C that captures transmitted light transmitted through the variable filter
It consists of a CD camera. The obtained image data is sent to the multiband image recording unit 14 of the present apparatus 10 and is temporarily stored. The light source S is not particularly limited, and may be any light source. As described later, in order to obtain image data of a spectral reflectance distribution from a multiband image, a light source having a known spectral intensity distribution is used. Preferably, there is.
Also, the multiband image has at least a band band of 8
It is divided into bands or more.
【0013】マルチバンド画像収録部14は、マルチバ
ンドカメラ12で得られた複数の画像からなるマルチバ
ンド画像の画像データを一時保持するメモリ部であり、
すべてのバンド画像を撮影終了後、直ちにマルチバンド
画像の画像データは分光反射率分布推定部16に送られ
る。The multi-band image recording section 14 is a memory section for temporarily storing image data of a multi-band image composed of a plurality of images obtained by the multi-band camera 12,
Immediately after all the band images have been captured, the image data of the multi-band image is sent to the spectral reflectance distribution estimating unit 16.
【0014】分光反射率分布推定部16は、得られたマ
ルチバンド画像から被写体Oの分光反射率分布を推定す
る部分であり、予め光源Sで撮影された分光反射率が既
知の白色板のマルチバンド画像が参照画像データとして
備えられており、被写体Oのマルチバンド画像の各バン
ド画像の画像データを、この白色板の対応するバンド画
像の参照画像データ値で除算することによって分光反射
率を推定することができる。また、分光反射率16は、
分光反射率が既知のグレーパッチ、例えばマクベスチャ
ートのグレーパッチ6段を参照画像データとし、この参
照画像データ値とこの既知の分光反射率の値とを対応さ
せた1次元ルックアップテーブルを予め作成し、この1
次元ルックアップテーブルを用いて、被写体Oの分光反
射率を推定してもよい。推定された分光反射率の画像デ
ータは、画像データ合成部24に送られる。The spectral reflectance distribution estimating section 16 is a section for estimating the spectral reflectance distribution of the object O from the obtained multi-band image, The band image is provided as reference image data, and the spectral reflectance is estimated by dividing the image data of each band image of the multiband image of the subject O by the reference image data value of the corresponding band image of the white plate. can do. Also, the spectral reflectance 16 is
A gray patch whose spectral reflectance is known, for example, six gray patches of a Macbeth chart, is used as reference image data, and a one-dimensional lookup table is created in advance in which the reference image data values correspond to the known spectral reflectance values. And this one
The spectral reflectance of the subject O may be estimated using a dimensional lookup table. The image data of the estimated spectral reflectance is sent to the image data synthesizing unit 24.
【0015】一方、光源分光分布データベース部(以
降、光源分光分布DB部という)18は、照明用光源の
分光強度分布を複数備えるデータベース部である。光源
分光分布DB部18では、光源は屋内光源と屋外光源と
に分けて分類され、屋内光源は、例えば白色蛍光灯と白
熱電球の分光強度分布を揃える。一方、屋外光源は、各
光源の色温度に対応して分光強度分布を備え、例えば色
温度が6500K(ケルビン)の場合、CIE標準の光
D65の分光強度分布に対応するように構成される。さら
に、光源分光分布DB部18は、後述するように、時間
帯に対して色温度を定める基準関数Tが、検索キーとし
て指定する場所の地名に応じて、一意的に定まるように
データベース化されている。On the other hand, a light source spectral distribution database unit (hereinafter, referred to as a light source spectral distribution DB unit) 18 is a database unit having a plurality of spectral intensity distributions of the illumination light source. In the light source spectral distribution DB unit 18, the light sources are classified into indoor light sources and outdoor light sources, and the indoor light sources have, for example, uniform spectral intensity distributions of a white fluorescent lamp and an incandescent lamp. On the other hand, outdoor light source is configured with a spectral intensity distribution corresponding to the color temperature of the light sources, for example, the color temperature is the case of 6500K (Kelvin), corresponding to the spectral intensity distribution of light D 65 of CIE standard . Further, as will be described later, the light source spectral distribution DB unit 18 is formed into a database such that a reference function T for determining a color temperature with respect to a time zone is uniquely determined according to a place name of a place designated as a search key. ing.
【0016】背景画像データベース部(以降、背景画像
DB部という)20は、被写体Oの背景画像として合成
するマルチバンド背景画像を複数備えたデータベース部
であり、このマルチバンド背景画像は、撮影時の光源の
分光強度分布が既知となっている。このマルチバンド背
景画像は、撮影場所の情報が一緒に記録されてデータベ
ース化されてもよく、この場合、後述する分光強度分布
の選択の際に指定する検索キーとしての場所に適合する
背景画像を選択するために用いることができる。なお、
背景画像DB部20のマルチバンド背景画像の分光構成
波長、すなわち各バンド帯域を代表する波長は、被写体
Oの分光反射率分布の画像データの分光構成波長と同じ
であることが好ましい。分光構成波長が異なる場合、内
挿補間や外挿補外を行って、分光構成波長を揃える必要
があるからである。A background image database section (hereinafter referred to as a background image DB section) 20 is a database section provided with a plurality of multi-band background images to be synthesized as a background image of the subject O. The spectral intensity distribution of the light source is known. This multi-band background image may be recorded together with information on the shooting location and stored in a database. In this case, a background image that matches a location as a search key to be specified when selecting a spectral intensity distribution described later is used. Can be used to select. In addition,
It is preferable that the spectral component wavelength of the multi-band background image of the background image DB unit 20, that is, the wavelength representing each band is the same as the spectral component wavelength of the image data of the spectral reflectance distribution of the subject O. This is because, when the spectral component wavelengths are different, it is necessary to perform interpolation or extrapolation to make the spectral component wavelengths uniform.
【0017】検索部22は、光源分光分布DB部18お
よび背景画像DB部20より所望の光源の分光強度分布
および所望のマルチバンド背景画像を選択する選択手段
である。光源の分光強度分布の選択は、場所(p)、季
節(s)および時間帯(h)の少なくとも1つを検査キ
ーとして指定し、屋内光源の場合は、例えば白熱蛍光灯
や白熱電球を択一的に選択する。一方屋外光源の場合
は、後述するように、場所(p)、季節(s)および時
間帯(h)を検索キーとして指定することによって、一
意的に色温度を定めることができ、この色温度より分光
強度分布を決定することができる。得られた分光強度分
布は、合成画像生成部26に送られる。The search unit 22 is a selection unit for selecting a desired light source spectral intensity distribution and a desired multiband background image from the light source spectral distribution DB unit 18 and the background image DB unit 20. To select the spectral intensity distribution of the light source, at least one of the location (p), season (s), and time zone (h) is designated as an inspection key. For an indoor light source, for example, an incandescent fluorescent lamp or an incandescent light bulb is selected. Select uniformly. On the other hand, in the case of an outdoor light source, as described later, the color temperature can be uniquely determined by specifying the location (p), season (s), and time zone (h) as a search key. More spectral intensity distribution can be determined. The obtained spectral intensity distribution is sent to the composite image generation unit 26.
【0018】マルチバンド背景画像については、背景画
像のサンプル画像がインデックス画像として図示されな
いモニタ等に複数表示され、この中からマルチバンド背
景画像を選択することができる。また、光源分光強度分
布の選択の際のキー検索の場所(p)と連動して、その
場所(p)に対応するマルチバンド背景画像を選択して
もよい。得られたマルチバンド背景画像は、画像データ
合成部24に送られる。With respect to the multi-band background image, a plurality of sample images of the background image are displayed as index images on a monitor (not shown) or the like, and the multi-band background image can be selected from these. Also, in conjunction with the key search location (p) at the time of selecting the light source spectral intensity distribution, a multiband background image corresponding to the location (p) may be selected. The obtained multiband background image is sent to the image data synthesizing unit 24.
【0019】画像データ合成部24は、検索部22によ
って選択されたマルチバンド背景画像より背景画像分光
反射率データを求め、この画像データと分光反射率推定
部16で推定された被写体分光反射率データとを合成
し、合成画像分光反射率データを得る部分である。ま
ず、図示されないモニタに、被写体Oのマルチバンド画
像のバンド画像が白黒画像として表示される。オペレー
タのマニュアルによって、あるいは公知の被写体エッジ
検出法によって自動的に、マルチバンド画像内の被写体
Oの形状を求め、この形状に対応する画素の被写体分光
反射率データを取り出す。さらに、背景画像に合成する
際の被写体Oの位置を定めるために、マルチバンド背景
画像のバンド画像を図示されないモニタに画像表示し、
被写体Oの貼り付け場所を図示されないマウスやキーボ
ード等によって指示する。その後、マルチバンド背景画
像から、マルチバンド背景画像撮影時の既知となってい
る撮影光の分光強度分布の成分を除去し、背景画像分光
反射率データを得る。被写体Oに入れ換えて合成する背
景画像の領域の背景画像分光反射率データは、被写体分
光反射率データと入れ替えられ、合成画像分光反射率デ
ータが得られる。得られた合成画像分光反射率データ
は、合成画像生成部26に送られる。The image data synthesizing section 24 obtains background image spectral reflectance data from the multiband background image selected by the search section 22, and obtains the image data and the subject spectral reflectance data estimated by the spectral reflectance estimating section 16. Are combined to obtain combined image spectral reflectance data. First, a band image of the multi-band image of the subject O is displayed as a monochrome image on a monitor (not shown). The shape of the subject O in the multi-band image is obtained by an operator's manual or automatically by a known subject edge detection method, and subject spectral reflectance data of pixels corresponding to this shape is extracted. Further, in order to determine the position of the subject O when combining with the background image, the band image of the multi-band background image is image-displayed on a monitor (not shown),
The position where the subject O is to be pasted is indicated by a mouse, keyboard, or the like (not shown). Thereafter, the component of the spectral intensity distribution of the photographing light that is known at the time of photographing the multi-band background image is removed from the multi-band background image to obtain background image spectral reflectance data. The background image spectral reflectance data of the background image area to be replaced with the subject O and replaced is replaced with the subject spectral reflectance data, and combined image spectral reflectance data is obtained. The obtained composite image spectral reflectance data is sent to the composite image generation unit 26.
【0020】合成画像生成部26は、画像データ合成部
24で得られた合成画像分光反射率データに、検索部2
2で得られた光源の分光強度分布を掛け合わせて、合成
画像の画像データを生成する部分である。すなわち、合
成画像分光反射率データと分光強度分布とを分光構成波
長ごとに掛け合わせて、合成画像のマルチバンド画像の
画像データを生成する。生成された合成画像の画像デー
タは、画像データ出力部28に送られる。The composite image generation unit 26 adds the composite image spectral reflectance data obtained by the image data
This is a part that generates image data of a composite image by multiplying the spectral intensity distribution of the light source obtained in step 2. That is, the image data of the multi-band image of the composite image is generated by multiplying the composite image spectral reflectance data by the spectral intensity distribution for each spectral component wavelength. The image data of the generated composite image is sent to the image data output unit 28.
【0021】画像データ出力部28は、生成された合成
画像の画像データからプリンタ30に適合した出力画像
信号に変換して出力する部分である。画像データ出力部
28は、プリンタ30の出力画像信号値(電圧値VR 、
VGおよびVB )が既知となっているカラーチャートの
測色値を公知の方法によって求め、例えばCIEL* a
* b* 空間のL* 、a* およびb* の値を求め、このL
* 、a* およびb* の値と出力画像信号値(電圧値
VR 、VG およびVB )とを対応させることによって予
め作成された3次元ルックアップテーブルを備える。一
方、合成画像データは、分光構成波長ごとに値を備える
データであるため、これを分光構成波長毎にXYZ表色
系の等色関数の値と掛け合わせてその和をとり、3刺激
値X,YおよびZを求め、この3刺激値X,YおよびZ
より、公知の方法により、CIEL* a* b* 空間のL
* 、a* およびb* の値を算出し、測色値を求める。こ
れによって、上記3次元ルックアップテーブルを用いて
出力画像信号にデータ変換をすることができる。得られ
た出力画像信号は、プリンタ30に送られ、合成画像を
出力することができる。The image data output section 28 converts the image data of the generated composite image into an output image signal suitable for the printer 30, and outputs the output image signal. The image data output unit 28 outputs the output image signal value (voltage value V R ,
V G and V B ) are determined by a known method on a color chart with a known color chart, for example, CIEL * a
The values of L * , a * and b * in the * b * space are determined, and this L
*, It comprises a three-dimensional look-up table created in advance by associating the a * and b * values and the output image signal value (voltage value V R, V G and V B). On the other hand, since the composite image data is data having a value for each spectral component wavelength, the composite image data is multiplied by the value of the color-matching function of the XYZ color system for each spectral component wavelength, and the sum thereof is calculated. , Y and Z are obtained, and the three stimulus values X, Y and Z are obtained.
According to a known method, the L of the CIEL * a * b * space
The values of * , a *, and b * are calculated, and the colorimetric values are obtained. As a result, data can be converted into an output image signal using the three-dimensional lookup table. The obtained output image signal is sent to the printer 30 and can output a composite image.
【0022】本装置10は、以上のように構成される
が、被写体Oを撮影したマルチバンド画像は、必ずしも
マルチバンドカメラ12で撮影収録されたものに限られ
ず、被写体Oのマルチバンド画像とその時の照明光源の
分光強度分布とが既知であればよく、特に制限されず、
例えばデータベースに記録されている被写体Oのマルチ
バンド画像であってもよい。Although the present apparatus 10 is configured as described above, the multi-band image of the subject O is not necessarily limited to the one captured and recorded by the multi-band camera 12, and the multi-band image of the subject O As long as the spectral intensity distribution of the illumination light source is known, there is no particular limitation,
For example, a multiband image of the subject O recorded in the database may be used.
【0023】次に、本発明のマルチバンド画像処理方法
について、上記マルチバンドが像処理装置10の作用を
一実施例として説明する。図2は、本発明のマルチバン
ド画像処理方法の一実施例を示すものである。Next, the operation of the multi-band image processing apparatus 10 will be described as an embodiment of the multi-band image processing method of the present invention. FIG. 2 shows an embodiment of the multi-band image processing method according to the present invention.
【0024】まず、被写体Oのマルチバンド画像が、マ
ルチバンドカメラ12によって撮影収録され、このマル
チバンド画像の画像データ値を、バンド帯域を代表する
分光構成波長ごとに、予め光源Sで撮影された分光反射
率が既知の白色板が参照画像データの値で除算すること
によって被写体Oの分光反射率を推定する(ステップ1
00)。First, a multi-band image of the subject O is photographed and recorded by the multi-band camera 12, and image data values of the multi-band image are photographed in advance by the light source S for each spectral component wavelength representing a band band. The spectral reflectance of the object O is estimated by dividing the white plate whose spectral reflectance is known by the value of the reference image data (step 1).
00).
【0025】一方、合成画像の照明光源を選択するため
に、光源の分光強度分布を備える光源分光分布DB部1
8から所望の光源分光分布を選択する(ステップ10
2)。光源分光分布の選択は、図3に示されるように、
まず、場所(p)の指定を行う(ステップ102a)。
場所の指定は、具体的な地名や屋内等を指定する。例え
ば、場所の具体的な地名や屋内等の各項目が階層的にあ
るいは羅列的に、図示されないモニタ画面上にメニュー
形式で表示され、オペレータがマウスやキーボードで指
示する。屋内光源を選択した場合、光源として白熱蛍光
灯や白熱電球等の一定の光源が図示されないモニタ画面
上に表示され、オペレータが択一的に光源を指定する
(ステップ102b)。On the other hand, in order to select an illumination light source for the synthesized image, a light source spectral distribution DB unit 1 having a spectral intensity distribution of the light source is selected.
8 to select a desired light source spectral distribution (step 10).
2). The selection of the light source spectral distribution is performed as shown in FIG.
First, the location (p) is specified (step 102a).
The designation of a place designates a specific place name, indoor or the like. For example, items such as a specific place name and indoors of a place are displayed in a menu format on a monitor screen (not shown) in a hierarchical or enumerated manner, and an operator gives an instruction with a mouse or a keyboard. When the indoor light source is selected, a fixed light source such as an incandescent fluorescent lamp or an incandescent light bulb is displayed on a monitor screen (not shown) as a light source, and the operator specifies the light source alternatively (step 102b).
【0026】一方、場所の具体的な地名を指定した場
合、光源は屋外光源となり、各地名に応じた色温度の時
間帯(h)に関する基準関数Tを設定する(ステップ1
02c)。この基準関数Tは、屋外光源である太陽光の
標準となる日の日の出から日の入りまでの色温度の時間
的変化を表した関数である。標準となる日とは、例えば
日の出から日の入りまでの時間が12時間である春分の
日や秋分の日である。たとえば、場所(p)を東京と指
定をすることによって、図4(a)左側に示されるよう
な基準関数Tが定まり、ケニアと指定することによっ
て、図4(a)右側に示されるような基準関数Tが定ま
る。ここで、基準関数Tを定める時間帯(h)は、太陽
が最も高度を上げるおおよその時間帯、すなわち春分の
日や秋分の日の正午を基準とするものである。また、図
4(a)〜(c)で示される基準関数Tは、この基準と
なる時間帯(h)を原点とした楕円型の関数となってい
る。基準となる時間の前後において、太陽が高度を下げ
るため色温度が低下するためである。しかし、図4
(a)〜(c)で示される基準関数Tは、単なる一例で
あって、これに限定されず、必ずしも楕円型である必要
はない。On the other hand, when a specific place name of a place is designated, the light source is an outdoor light source, and a reference function T relating to the time zone (h) of the color temperature corresponding to each place name is set (step 1).
02c). The reference function T is a function representing a temporal change in color temperature from sunrise to sunset, which is a standard for sunlight as an outdoor light source. The standard day is, for example, a spring equinox day or an autumn equinox day in which the time from sunrise to sunset is 12 hours. For example, when the location (p) is designated as Tokyo, a reference function T as shown on the left side of FIG. 4A is determined, and when it is designated as Kenya, the reference function T as shown on the right side of FIG. The reference function T is determined. Here, the time zone (h) that defines the reference function T is based on the approximate time zone in which the sun rises most, that is, at noon on the day of spring equinox or autumn equinox. The reference function T shown in FIGS. 4A to 4C is an elliptic function whose origin is the reference time zone (h). This is because before and after the reference time, the sun lowers the altitude and the color temperature decreases. However, FIG.
The reference function T shown in (a) to (c) is merely an example, and is not limited to this, and need not necessarily be elliptical.
【0027】次に、オペレータは季節(s)、例えば
春、夏、秋および冬の指定を行う(ステップ102
d)。季節(s)の指定は、季節によって日の出から日
の入りまでの時間が変わり、同じ時間帯(h)であって
も、季節(s)によって、太陽の高度さらには色温度が
変化するからである。そこで、図4(b)に示すよう
に、ステップ102cで定まった基準関数Tを時間軸h
の方向に季節(s)に応じて伸縮する(ステップ102
e)。例えば、季節(s)が夏の場合、日の出から日の
入りまでの時間は長いため、時間軸hの方向に伸張さ
れ、冬の場合は、圧縮される。季節(s)の指定は、
春、夏、秋および冬の替わりに月(1月、2月・・・)
で指定するものであってもよい。さらに、季節(s)に
応じて太陽の高度は上下し、色温度も変化するため、基
準関数Tの色温度方向に対して、季節(s)に応じて圧
縮・伸張を行ってもよい。また、色温度が最大となる時
間帯は一年を通して不変ではないため、季節(s)の指
定に応じて、太陽の高度が最大となる時間帯が、基準関
数Tの時間軸hの原点となるように、伸縮された基準関
数Tを時間軸hの方向に平行移動してもよい。Next, the operator designates the season (s), for example, spring, summer, autumn and winter (step 102).
d). The designation of the season (s) is because the time from sunrise to sunset changes depending on the season, and even in the same time zone (h), the altitude of the sun and the color temperature change depending on the season (s). Therefore, as shown in FIG. 4B, the reference function T determined in step 102c is
(Step 102) according to the season (s).
e). For example, when the season (s) is summer, the time from sunrise to sunset is long, so that it is expanded in the direction of the time axis h, and in winter, it is compressed. Specifying the season (s)
Moon instead of spring, summer, autumn and winter (January, February ...)
May be specified. Further, since the altitude of the sun rises and falls and the color temperature changes according to the season (s), the compression / expansion may be performed in the color temperature direction of the reference function T according to the season (s). Further, since the time zone in which the color temperature is maximum is not invariable throughout the year, the time zone in which the altitude of the sun is maximum depends on the origin of the time axis h of the reference function T according to the designation of the season (s). As such, the scaled reference function T may be translated in the direction of the time axis h.
【0028】次に、オペレータは時間帯(h)、例えば
9時や10時等の時間帯の指定を行う(ステップ102
f)。時間帯(h)の指定によって色温度を定めるため
である。例えば15時と時間帯(h)を指定した場合、
図4(c)に示されるように、伸張された基準関数T上
の対応する時間帯15時の色温度を求め、色温度を確定
する(ステップ102g)。なお、時間帯(h)の指定
は、時間で指定する場合に限られず、9〜11時等の一
定時間範囲の指定でもよく、さらに午前、正午および午
後のように大きい時間帯を指定するものであってもよ
い。Next, the operator designates a time zone (h), for example, a time zone such as 9:00 or 10:00 (step 102).
f). This is because the color temperature is determined by specifying the time zone (h). For example, if you specify 15:00 and time zone (h),
As shown in FIG. 4C, the color temperature in the corresponding time zone 15:00 on the expanded reference function T is determined, and the color temperature is determined (step 102g). The designation of the time zone (h) is not limited to the case where the time is designated, but may be a fixed time range such as 9 to 11 o'clock, and further designates a large time zone such as morning, noon and afternoon. It may be.
【0029】すなわち、屋内光源の場合には、光源とし
て白色蛍光灯や白熱電球が択一的に定められ、分光強度
分布が一意的に定まる。一方、屋外光源の場合には、場
所(p),季節(s)および時間帯(h)より、色温度
が定まり、この色温度に対応したCIE標準の光や補助
標準の光、例えば図4(d)に示すように、色温度が5
000K(ケルビン)では補助標準の光D50の分光強度
分布、5500K(ケルビン)では補助標準の光D55の
分光強度分布が一意的に定まる。このようにして、光源
分光分布は決定される(ステップ102h)。なお、場
所が予め一定である場合や季節が一定である場合、ま
た、時間帯が一定である場合,場所(p)、季節(s)
および時間帯(h)の少なくとも1つを検査キーとして
指定するものであってもよい。That is, in the case of an indoor light source, a white fluorescent lamp or an incandescent light bulb is alternatively determined as the light source, and the spectral intensity distribution is uniquely determined. On the other hand, in the case of an outdoor light source, the color temperature is determined from the place (p), the season (s), and the time zone (h), and the CIE standard light or auxiliary standard light corresponding to the color temperature, for example, FIG. As shown in FIG.
000K (Kelvin), the spectral intensity of the auxiliary standard illuminant D 50 distribution, 5500K (Kelvin), the spectral intensity distribution of the auxiliary standard illuminant D 55 is uniquely determined. Thus, the light source spectral distribution is determined (Step 102h). When the place is constant or the season is constant, or when the time zone is constant, the place (p), the season (s)
And at least one of the time zone (h) may be designated as the inspection key.
【0030】次に、被写体Oを合成するための所望の背
景画像を、背景画像DB部20から選びだし、マルチバ
ンド背景画像を選択する(ステップ104)。マルチバ
ンド背景画像は、オペレータのマニュアルにより、ある
いは、光源分光分布選択(ステップ102)の際の検索
キーである場所(p)に連動して選択してもよい。Next, a desired background image for synthesizing the subject O is selected from the background image DB unit 20, and a multi-band background image is selected (step 104). The multi-band background image may be selected by an operator's manual or in conjunction with a location (p) which is a search key when selecting the light source spectral distribution (step 102).
【0031】ステップ104で選択されたマルチバンド
背景画像より既知の分光強度分布を除算して得られる背
景画像分光反射率データと、ステップ100で得られた
被写体分光反射率データとを合成し、合成画像データを
取得する(ステップ106)。画像データの合成は、オ
ペレータのマニュアルによって、あるいは公知の被写体
エッジ検出法によって自動的に検出された被写体Oの形
状を被写体Oのマルチバンド画像の中から抽出し、この
形状に対応する画素の被写体分光反射率データを取り出
し、背景画像で指示された被写体の合成される所望の領
域の背景画像分光反射率データを入れ替えることによっ
て行われる。The background image spectral reflectance data obtained by dividing the known spectral intensity distribution from the multiband background image selected in step 104 and the subject spectral reflectance data obtained in step 100 are synthesized, and synthesized. Image data is obtained (step 106). The image data is synthesized by extracting the shape of the subject O, which is automatically detected by an operator's manual or by a known subject edge detection method, from the multiband image of the subject O. This is performed by extracting the spectral reflectance data and exchanging the spectral reflectance data of the background image of the desired area where the subject indicated by the background image is synthesized.
【0032】次に、ステップ106で得られた合成画像
データとステップ102で得られた光源の分光強度分布
とを分光構成波長ごとに掛け合わせることで、ステップ
102で得られた光源に基づいた合成画像の画像データ
が生成される(ステップ108)。その際、背景画像の
領域の光源の光強度を、被写体Oの領域の光源の光強度
に比べ小さく設定してもよい。すなわち、分光強度分布
の波形を維持したまま、背景画像領域に与える光強度と
被写体画像領域に与える光源強度とに強弱をつけてもよ
い。合成画像の画像データは、分光構成波長毎に画像デ
ータ値を持つマルチバンド画像であり、この画像データ
のままではプリント出力できないため、まず、この画像
データを測色値であるCIEL* a* b* 空間のL* 、
a* およびb* の値に変換する(ステップ110)。こ
の変換は、まず、分光構成波長ごとに値を備える合成画
像の画像データを、対応する分光構成波長毎にXYZ表
色系の等色関数の値と掛け合わせてその和をとり、3刺
激値X,YおよびZを求め、この3刺激値X,Yおよび
Zより、公知の方法により、CIEL* a* b* 空間の
L* 、a* およびb* の値を算出することによって行わ
れる。Next, the composite image data obtained in step 106 is multiplied by the spectral intensity distribution of the light source obtained in step 102 for each spectral component wavelength, thereby obtaining a composite image based on the light source obtained in step 102. Image data of the image is generated (step 108). At this time, the light intensity of the light source in the area of the background image may be set smaller than the light intensity of the light source in the area of the subject O. That is, the intensity of the light applied to the background image area and the intensity of the light source applied to the subject image area may be increased or decreased while maintaining the waveform of the spectral intensity distribution. The image data of the composite image is a multi-band image having an image data value for each spectral component wavelength and cannot be printed out as it is. Therefore, first, the image data is converted to CIEL * a * b which is a colorimetric value. * Space L * ,
The values are converted into values of a * and b * (step 110). In this conversion, first, image data of a composite image having a value for each spectral component wavelength is multiplied by the value of a color matching function of the XYZ color system for each corresponding spectral component wavelength, and the sum is calculated. X, Y, and Z are obtained, and the tristimulus values X, Y, and Z are used to calculate the values of L * , a *, and b * in the CIEL * a * b * space by a known method.
【0033】得られた合成画像の測色値のデータは、プ
リンタ30に適合した既知のカラーチャートのL* 、a
* およびb* の値と、その出力画像信号とによって予め
作成された3次元ルックアップテーブルを用いて、出力
画像信号に変換される(ステップ112)。その後、プ
リンタ30に出力され、合成画像がプリント出力される
(ステップ114)。The data of the colorimetric values of the obtained composite image is represented by L * , a of a known color chart suitable for the printer 30.
The output image signal is converted into an output image signal using a three-dimensional lookup table created in advance based on the values of * and b * and the output image signal (step 112). Thereafter, the composite image is output to the printer 30 and printed out (step 114).
【0034】このように、被写体Oと背景画像との合成
は、分光反射率の画像データによって合成され、同一の
分光強度を持つ光源で照明されるため、被写体が背景画
像と遊離して浮き出してしまうことなく、臨場感のある
合成画像を得ることができる。As described above, when the subject O and the background image are combined, the subject O and the background image are combined and illuminated by the light source having the same spectral intensity. Thus, a synthesized image with a sense of reality can be obtained.
【0035】以上、本発明のマルチバンド画像処理装置
および処理方法について詳細に説明したが、本発明は上
記実施例に限定はされず、本発明の要旨を逸脱しない範
囲において、各種の改良および変更を行ってもよいのは
もちろんである。Although the multi-band image processing apparatus and processing method of the present invention have been described in detail above, the present invention is not limited to the above-described embodiment, and various improvements and modifications can be made without departing from the gist of the present invention. It goes without saying that it may be performed.
【0036】[0036]
【発明の効果】以上、詳細に説明したように、本発明に
よれば、被写体の分光反射率の画像データと背景画像の
分光反射率分布の画像データとを合成して合成画像を作
成するため、実際に撮影する際の画像撮影時の雰囲気に
合わせた被写体の画像を測色的に正確に再現し、被写体
画像が背景画像に違和感無く融合し、十分に臨場感のあ
る合成画像を得ることができる。また、合成画像を得る
際の光源の分光強度分布は、例えば屋外光源を選択する
場合、場所、季節および時間帯を検査キーとして指定す
ることによって、所望の分光強度分布を一意的に定める
ことができ、さらに、背景画像に適した光源を選択する
ことができる。また、被写体画像と背景画像の光源強度
を変えて合成画像を生成することができるので、より臨
場感のある合成画像を得ることができる。As described above in detail, according to the present invention, a composite image is created by combining image data of the spectral reflectance of a subject and image data of the spectral reflectance distribution of a background image. Colorimetrically accurately reproduces the subject's image that matches the atmosphere at the time of the actual shooting, and the subject image fuses seamlessly with the background image to obtain a fully realistic composite image Can be. Also, the spectral intensity distribution of the light source when obtaining a composite image can be uniquely determined by specifying a location, a season, and a time zone as an inspection key, for example, when an outdoor light source is selected. In addition, a light source suitable for the background image can be selected. Further, since a composite image can be generated by changing the light source intensity between the subject image and the background image, a composite image having a more realistic feeling can be obtained.
【図1】 本発明のマルチバンド画像処理装置の一例を
示す概略ブロック図である。FIG. 1 is a schematic block diagram illustrating an example of a multiband image processing device according to the present invention.
【図2】 本発明のマルチバンド画像処理方法の流れの
一例を示すフローチャートである。FIG. 2 is a flowchart illustrating an example of the flow of a multi-band image processing method according to the present invention.
【図3】 図2に示されるフローのうち、光源分光分布
の選択について詳細に説明するフローチャートである。FIG. 3 is a flowchart illustrating details of selection of a light source spectral distribution in the flow illustrated in FIG. 2;
【図4】 (a)〜(d)は、光源分光分布について説
明する説明図である。FIGS. 4A to 4D are explanatory diagrams illustrating a light source spectral distribution.
10 マルチバンド画像処理装置 12 マルチバンドカメラ 14 マルチバンド画像収録部 16 分光反射率分布推定部 18 光源分光分布データベース部 20 背景画像データベース部 22 検索部 24 画像データ合成部 26 合成画像生成部 28 画像データ出力部 30 プリンタ Reference Signs List 10 Multi-band image processing device 12 Multi-band camera 14 Multi-band image recording unit 16 Spectral reflectance distribution estimating unit 18 Light source spectral distribution database unit 20 Background image database unit 22 Search unit 24 Image data synthesizing unit 26 Synthetic image generating unit 28 Image data Output unit 30 Printer
Claims (5)
数のバンド帯域に分割して撮影した複数の画像からなる
マルチバンド画像を処理するマルチバンド画像の画像処
理装置であって、 照明用光源の分光強度分布を複数備える光源分光分布デ
ータベース部と、 被写体の背景画像として合成する、撮影時の光源の分光
強度分布が既知のマルチバンド背景画像を複数備える背
景画像データベース部と、 前記光源分光分布データベース部および前記背景画像デ
ータベース部より所望の光源の分光強度分布および所望
のマルチバンド背景画像を選択する選択手段と、 前記選択手段によって選択された前記マルチバンド背景
画像より得られる背景画像分光反射率データと前記被写
体のマルチバンド画像より得られる被写体分光反射率デ
ータとを合成し、合成画像分光反射率データを得る画像
データ合成部と、 前記画像データ合成処理部で得られた合成画像分光反射
率データと前記選択手段によって選択された前記分光強
度分布とを用いて、合成画像の画像データを求める合成
画像生成部と、 前記合成画像生成部で得られた合成画像の画像データを
所定の出力画像信号に変換して出力する画像データ出力
部とを備えることを特徴とするマルチバンド画像の画像
処理装置。1. A multi-band image processing apparatus for processing a multi-band image composed of a plurality of images obtained by dividing a photographing wavelength band into a plurality of band bands when photographing a subject. A light source spectral distribution database unit including a plurality of light source spectral intensity distributions; a background image database unit including a plurality of multi-band background images having a known spectral intensity distribution of the light source at the time of shooting to be combined as a subject background image; Selecting means for selecting a desired light source spectral intensity distribution and a desired multiband background image from the distribution database section and the background image database section; and a background image spectral reflection obtained from the multiband background image selected by the selecting means. Rate data and subject spectral reflectance data obtained from a multiband image of the subject. An image data combining unit that obtains combined image spectral reflectance data; and a combined image using the combined image spectral reflectance data obtained by the image data combining processing unit and the spectral intensity distribution selected by the selection unit. A composite image generation unit that obtains image data of the image data, and an image data output unit that converts image data of the composite image obtained by the composite image generation unit into a predetermined output image signal and outputs the signal. Image processing device for band images.
数のバンド帯域に分割して撮影した複数の画像からなる
マルチバンド画像を処理するマルチバンド画像の画像処
理方法であって、 照明用光源の分光強度分布を複数備える光源分光分布デ
ータベース部から所望の照明用光源の分光強度分布を選
択し、 撮影時の光源の分光強度分布が既知のマルチバンド背景
画像を複数備える背景画像データベース部から、被写体
の背景画像として合成する、所望のマルチバンド背景画
像を選択し、 選択された前記マルチバンド背景画像より得られる背景
画像分光反射率データと前記被写体のマルチバンド画像
より得られる被写体分光反射率データとを合成して合成
画像分光反射率データを得、 この合成画像分光反射率データと前記分光強度分布とを
用いて、合成画像の画像データを求め、 この合成画像の画像データを所定の出力画像信号に変換
して出力することを特徴とするマルチバンド画像の画像
処理方法。2. A multi-band image processing method for processing a multi-band image including a plurality of images obtained by dividing a photographing wavelength band into a plurality of band bands when photographing a subject. A spectral intensity distribution of a desired illumination light source is selected from a light source spectral intensity distribution database unit having a plurality of light intensity spectral intensity distributions. From a background image database unit having a plurality of multi-band background images with known light intensity spectral intensity distributions at the time of shooting. A desired multi-band background image to be synthesized as a subject background image is selected, and the background image spectral reflectance data obtained from the selected multi-band background image and the subject spectral reflectance obtained from the multi-band image of the subject Data and the combined image spectral reflectance data to obtain combined image spectral reflectance data and the spectral intensity distribution. And obtaining image data of the composite image, converting the image data of the composite image into a predetermined output image signal, and outputting the output signal.
光源の色温度に対応した分光強度分布を備え、 所望の照明用光源として屋外光源を選択する場合、場
所、季節および時間帯の少なくとも1つを検査キーとし
て指定し、この検索キーより光源の色温度を確定し、こ
の色温度より光源の分光強度分布を決定する請求項2に
記載のマルチバンド画像の画像処理方法。3. The light source spectral distribution database unit includes a spectral intensity distribution corresponding to a color temperature of an outdoor light source. When selecting an outdoor light source as a desired illumination light source, at least one of a place, a season, and a time zone. 3. The image processing method for a multi-band image according to claim 2, wherein a color temperature of the light source is determined from the search key, and a spectral intensity distribution of the light source is determined from the color temperature.
る際、指定した前記場所に応じて、時間帯に対する屋外
光源の色温度を規定する基準関数を設定し、 前記基準関数に対して、指定した前記季節に応じた比率
で圧縮・伸張し、 さらに、圧縮・伸張した前記基準関数より、指定した前
記時間帯における色温度を求めることで、前記検索キー
より色温度を決定する請求項3に記載のマルチバンド画
像の画像処理方法。4. When selecting a desired spectral intensity distribution of a light source for illumination, a reference function that defines a color temperature of an outdoor light source with respect to a time zone is set according to the specified location. Compressing / expanding at a ratio according to the designated season, and determining a color temperature in the designated time zone from the compressed / expanded reference function, thereby determining a color temperature from the search key. 3. The image processing method for a multi-band image according to 3.
成画像の画像データの内、背景画像領域と被写体画像領
域に用いる光源の強度を変えて合成画像の画像データを
求める請求項2〜4のいずれかに記載のマルチバンド画
像の画像処理方法。5. The image data of the composite image is obtained by changing the intensity of a light source used for a background image area and a subject image area in the image data of the composite image when obtaining the image data of the composite image. An image processing method for a multiband image according to any one of the above.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29681899A JP2001119556A (en) | 1999-10-19 | 1999-10-19 | Image processor and processing method for multi-band image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29681899A JP2001119556A (en) | 1999-10-19 | 1999-10-19 | Image processor and processing method for multi-band image |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001119556A true JP2001119556A (en) | 2001-04-27 |
Family
ID=17838558
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29681899A Withdrawn JP2001119556A (en) | 1999-10-19 | 1999-10-19 | Image processor and processing method for multi-band image |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001119556A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008157709A3 (en) * | 2007-06-19 | 2009-02-19 | Intellectual Ventures Holding | Computer system and method for rendering a display with a changing color frequency spectrum corresponding to a selected frequency spectrum |
| WO2021014869A1 (en) * | 2019-07-25 | 2021-01-28 | パナソニックIpマネジメント株式会社 | Image data processing method, image data processing device, and image data processing system |
-
1999
- 1999-10-19 JP JP29681899A patent/JP2001119556A/en not_active Withdrawn
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008157709A3 (en) * | 2007-06-19 | 2009-02-19 | Intellectual Ventures Holding | Computer system and method for rendering a display with a changing color frequency spectrum corresponding to a selected frequency spectrum |
| WO2021014869A1 (en) * | 2019-07-25 | 2021-01-28 | パナソニックIpマネジメント株式会社 | Image data processing method, image data processing device, and image data processing system |
| JPWO2021014869A1 (en) * | 2019-07-25 | 2021-01-28 | ||
| CN113853631A (en) * | 2019-07-25 | 2021-12-28 | 松下知识产权经营株式会社 | Image data processing method, image data processing apparatus, and image data processing system |
| US12219300B2 (en) | 2019-07-25 | 2025-02-04 | Panasonic Intellectual Property Management Co., Ltd. | Method for processing image data, image data processing apparatus, and image data processing system |
| JP7634193B2 (en) | 2019-07-25 | 2025-02-21 | パナソニックIpマネジメント株式会社 | Image data processing method, image data processing device, and image data processing system |
| CN113853631B (en) * | 2019-07-25 | 2025-09-23 | 松下知识产权经营株式会社 | Image data processing method, image data processing device and image data processing system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Reinhard et al. | High dynamic range imaging: acquisition, display, and image-based lighting | |
| JP4231661B2 (en) | Color reproduction device | |
| JP3305265B2 (en) | Image processing apparatus and method | |
| US7830566B2 (en) | Image processing method and device enabling faithful reproduction of appearance and further preferred color reproduction of appearance, image output device and digital camera using the same, and image processing program for executing the image processing method and recording medium on which the program is recorded | |
| US8379048B2 (en) | User adjustable gamut mapping and conversion of images from a source color space to a destination color space including primary and redundant colors | |
| JP2003533831A (en) | Method and apparatus for measuring, encoding and displaying object color for digital imaging processing | |
| JPH1185952A (en) | Color reproducing device | |
| JPH09185705A (en) | Color image editing method by spectrum | |
| JP4174703B2 (en) | Spectrum / color reproduction system | |
| JP2003284084A (en) | Image processing apparatus and method, and method of manufacturing image processing apparatus | |
| JP2003348501A (en) | Image display device | |
| JP2009545804A (en) | Method and system for converting at least one first spectral image into a second spectral image | |
| CN101088277A (en) | Method of electronic color image saturation processing | |
| JP2002281338A (en) | Image processing apparatus and method | |
| US20130093919A1 (en) | Adaptive color imaging | |
| JP2000341499A (en) | Color reproducing apparatus | |
| JP2008225887A (en) | Image search system | |
| US20230206518A1 (en) | Method for reconstructing an image, in particular an exact color image, and associated computer program, device and system | |
| JP2001119556A (en) | Image processor and processing method for multi-band image | |
| JP2004267448A (en) | Image processor, image processing method and program | |
| JP3305266B2 (en) | Image processing method | |
| JP4400146B2 (en) | Spectral image data processing method and spectral image data processing apparatus | |
| JP2005039408A (en) | Image processing apparatus, image processing method, program, and recording medium | |
| JP2006081654A (en) | Image forming method, and device therefor | |
| JP2001309198A (en) | Image processing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20070109 |