WO2020110517A1 - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- WO2020110517A1 WO2020110517A1 PCT/JP2019/041407 JP2019041407W WO2020110517A1 WO 2020110517 A1 WO2020110517 A1 WO 2020110517A1 JP 2019041407 W JP2019041407 W JP 2019041407W WO 2020110517 A1 WO2020110517 A1 WO 2020110517A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image
- pixel
- display panel
- pixel value
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/13—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on liquid crystals, e.g. single liquid crystal display cells
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/13—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on liquid crystals, e.g. single liquid crystal display cells
- G02F1/133—Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
- G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/10—Intensity circuits
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/324—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
Definitions
- the embodiment of the present invention relates to an image processing device.
- Such a display device displays an image on a display (display panel) provided in a position in front of the user when the head mounted display is mounted on the user's head. It is configured to be displayed. As a result, the user wearing the head mounted display can experience a realistic virtual reality space.
- the head mounted display for VR described above is required to have high display performance such as having a high resolution of 1000 ppi or more and a high response speed.
- a liquid crystal display and an organic EL display are often used, but the liquid crystal display often has a high resolution but a response speed lower than that of the organic EL display.
- the organic EL display has a high response speed, but it is difficult to increase the resolution.
- a liquid crystal display is adopted as the display mounted on the head mounted display, it is possible to realize a high response speed by adopting, for example, the IPS (In-Plane-Switching) method.
- IPS In-Plane-Switching
- the problem to be solved by the present invention is to provide an image processing device capable of suppressing a decrease in contrast of an image displayed on a display device such as a head mounted display.
- an image processing device for displaying an image on a display device mounted on a user's head.
- the image processing device includes an input unit, a composite image generation unit, and a calculation unit.
- the input unit includes a first image displayed on a first display panel for the left eye of the user, which is provided on the display device, and a second display for the right eye of the user, which is provided on the display device. Enter the second image displayed on the panel.
- the composite image generation unit generates a third image by combining the input first image and second image.
- the arithmetic unit irradiates the first display panel with light based on the generated third image so as to irradiate at least a part of the first display panel and the second display panel with light.
- a control value for driving the first illuminator and the second illuminator that emits light to the second display panel is calculated.
- the first illuminator drives the first display panel to emit light based on the calculated control value.
- the second illuminator drives the second display panel to emit light based on the calculated control value.
- FIG. 1 is a perspective view showing an example of the outer appearance of a display device including the image processing device according to the embodiment.
- FIG. 2 is a diagram for explaining the outline of the configuration of the display device.
- FIG. 3 is a block diagram showing an example of the functional configuration of the image processing apparatus.
- FIG. 4 is a flowchart showing an example of the processing procedure of the image processing apparatus.
- FIG. 5 is a diagram for explaining an example of the operation of the image processing apparatus.
- FIG. 6 is a diagram for explaining the backlight control value.
- FIG. 7 is a diagram for explaining a comparative example of this embodiment.
- FIG. 8 is a diagram for describing an example of the operation of the image processing device when the display device includes one display panel.
- FIG. 9 is a diagram for explaining a configuration for combining the backlight control values calculated from each of the first and second images.
- FIG. 1 is a perspective view showing an example of the outer appearance of a display device including the image processing device according to the present embodiment.
- the display device includes a head mount display (HMD: Head Mount Display) that is used by being mounted on the user's head.
- HMD Head Mount Display
- Such a display device is used to provide, for example, virtual reality (VR) to a user wearing the display device on their head.
- VR virtual reality
- the display device HMD is provided with a display panel 11a (first display panel) and a display panel 11b (second display panel).
- the display panels 11a and 11b are arranged so as to be positioned in front of the left and right eyes of the user with the display device HMD worn on the head by the user.
- the display panels 11a and 11b are assumed to be liquid crystal display panels using a liquid crystal layer.
- the display device HMD includes the display panel 11a for the left eye of the user who wears the display device HMD and the display panel 11b for the right eye of the user as described above.
- the display panel 11a is a liquid crystal display panel as described above, and includes, for example, a first substrate, a second substrate arranged to face the first substrate, and a liquid crystal formed between the first substrate and the second substrate. And layers.
- the backlight unit 12a is arranged as an illuminator that illuminates the display panel 11a (illumination unit that illuminates the display panel 11a with light). Has been done. It is assumed that a plurality of light emitting diodes (LEDs) are arranged in the backlight unit 12a.
- LEDs light emitting diodes
- the backlight unit 12a may be, for example, a direct-type LED backlight in which LEDs are arranged at a position corresponding to the entire surface of the display panel 11a (that is, directly below the display panel 11a), or the backlight unit 12a of the display panel 11a. It may be an edge type LED backlight in which LEDs are arranged at positions corresponding to end portions such as left and right or top and bottom.
- a panel driver 13a that controls the drive of the display panel 11a (controls the display operation of the display panel 11a) is mounted on, for example, the first substrate provided in the display panel 11a.
- the display panel 11b is a liquid crystal display panel configured in the same manner as the above-mentioned display panel 11a, and includes a first substrate, a second substrate arranged to face the first substrate, the first substrate and the second substrate. A liquid crystal layer formed between the substrates.
- the backlight unit 12b is arranged as an illuminator that illuminates the display panel 11b (illumination unit that illuminates the display panel 11b with light). Has been done.
- the backlight unit 12b may be a direct-type LED backlight or an edge-type LED backlight, like the backlight unit 12a described above.
- a panel driver 13b that controls the drive of the display panel 11b (controls the display operation of the display panel 11b) is mounted on, for example, the first substrate provided in the display panel 11b.
- a host computer 20 is provided outside the display panels 11a and 11b.
- the host computer 20 outputs the images displayed on the display panels 11a and 11b.
- the image displayed on the display panel 11a is an image for the left eye (an image visually recognized by the left eye of the user).
- the image displayed on the display panel 11b is an image for the right eye (an image visually recognized by the user's right eye).
- the image for the left eye and the image for the right eye are similar images that reproduce the parallax of both eyes.
- Such an image for the left eye is displayed on the display panel 11a, an image for the right eye is displayed on the display panel 11b, and the image for the left eye and the image for the right eye are the left eye and the right eye of the user.
- the user can grasp a three-dimensional space (three-dimensional space) as the above virtual reality space.
- the display device HMD when used for the purpose of providing virtual reality to the user as described above (that is, used as a head mounted display for VR), the display device HMD has high display performance. Is required.
- the display panels 11a and 11b that is, liquid crystal display panels
- an IPS (In-Plane-Switching) method is adopted, and a configuration for improving the response speed is adopted.
- IPS In-Plane-Switching
- a technique called backlight blinking which is capable of improving the blur of a moving image (suppressing the afterimage effect) by turning on the backlight at the timing when the response is completed, is applied to the display device HMD. Applicable.
- liquid crystal display panels when liquid crystal display panels are used as the display panels 11a and 11b as described above, the liquid crystal display panel may have a low contrast as compared with, for example, an organic EL display.
- the display device HMD is configured to improve the response speed as described above, the contrast of images displayed on the display device HMD (display panels 11a and 11b) tends to decrease.
- This local dimming is a technique for improving the contrast reduction in the liquid crystal display panel by partially driving the backlight unit.
- the display device HMD is provided with the image processing device 30 in order to reduce the calculation load in the Local Dimmig.
- the image processing device 30 is realized, for example, as a bridge chip arranged between the display panels 11 a and 11 b and the host computer 20.
- the image processing device 30 is connected to the host computer 20, and uses the images output from the host computer 20 (the image for the left eye and the image for the right eye) to execute the above-mentioned processing regarding Local Dimming.
- the image processing device 30 is also connected to the above-mentioned panel drivers 13a and 13b via, for example, an FPC.
- the image processing device 30 is configured to execute a process related to Local Dimming, and then, a left eye image and a right eye image, and a control value for partially driving the backlight units 12a and 12b (hereinafter, referred to as a backlight.
- the control value and the notation) are output to the panel drivers 13a and 13b.
- the panel driver 13a inputs the image for the left eye and the backlight control value output from the image processing device 30, and controls the drive of the display panel 11a and the backlight unit 12a.
- the panel driver 13b inputs the image for the right eye and the backlight control value output from the image processing device 30, and controls the drive of the display panel 11b and the backlight unit 12b.
- FIG. 3 is a block diagram showing an example of the functional configuration of the image processing apparatus 30 according to this embodiment.
- the image processing device 30 includes an image input unit 31, a composite image generation unit 32, a control value calculation unit 33, and a correction processing unit 34.
- the image processing device 30 has been described as being implemented as a chip as described above, but the respective units 31 to 34 included in the image processing device 30 may be implemented by hardware. It may be realized by software, or may be realized as a combined configuration of hardware and software.
- the image input unit 31 inputs the image for the left eye displayed on the display panel 11a and the image for the right eye displayed on the display panel 11b.
- the image for the left eye input by the image input unit 31 includes a pixel value (first pixel value) relating to the color to be represented by each pixel forming the image.
- the image for the right eye input by the image input unit 31 includes a pixel value (second pixel value) relating to the color to be represented by each pixel forming the image.
- the composite image generation unit 32 generates a composite image (third image) by combining the image for the left eye and the image for the right eye input by the image input unit 31.
- the composite image is generated based on the pixel value of each pixel included in each of the left-eye image and the right-eye image described above.
- the control value calculation unit 33 calculates the above-mentioned backlight control value based on the composite image generated by the composite image generation unit 32.
- the backlight control value drives the backlight units 12a and 12b (controls the driving of the backlight units 12a and 12b so that, for example, at least a part of the display panels 11a and 11b is irradiated with light. ) Is a control value for.
- the correction processing unit 34 corrects the image for the left eye input by the image input unit 31 based on the backlight control value calculated by the control value calculation unit 33.
- the correction processing unit 34 also corrects the image for the right eye input by the image input unit 31 based on the backlight control value calculated by the control value calculation unit 33.
- the backlight control value calculated by the control value calculation unit 33 and the image for the left eye corrected by the correction processing unit 34 are output from the image processing device 30 to the panel driver 13a.
- the backlight control value calculated by the control value calculation unit 33 and the image for the right eye corrected by the correction processing unit 34 are output from the image processing device 30 to the panel driver 13b.
- the display device HMD When the user wears the display device HMD on his/her head, the display device HMD displays an image corresponding to, for example, a virtual reality space that changes according to the movement of the user's head.
- the process of the image processing device 30 described below is executed for each image (frame) that constitutes the video displayed on the display device HMD in this way.
- the images forming the video displayed on the display device HMD are output from the host computer 20 to the image processing device 30.
- the image output from the host computer 20 includes an image displayed on the display panel 11a for the left eye of the user wearing the display device HMD (hereinafter, referred to as a first image) and a right eye of the user.
- An image displayed on the display panel 11b (hereinafter referred to as a second image) is included.
- the image input unit 31 inputs the first and second images (step S1).
- the composite image generation unit 32 generates a composite image (third image) by combining the first and second images input in step S1 (step S2).
- the first image includes the pixel value of each pixel that configures the first image
- the second image includes the pixel value of each pixel that configures the second image.
- the pixel value of each pixel is a value (RGB value or the like) relating to the color to be expressed by the pixel, and defines the saturation and the brightness of the pixel.
- the first and second images are images that are similar to each other and reproduce the parallax of both eyes as described above, and the numbers of pixels forming the first and second images are the same.
- the composite image generation unit 32 generates, for example, a maximum image as a composite image.
- the maximum image is an image in which the maximum value of the pixel values of the corresponding pixels in the first and second images is used as the pixel value of each pixel forming the generated image (maximum image).
- the composite image generation unit 32 for example, a pixel value of one pixel (hereinafter, referred to as a first target pixel) out of a plurality of pixels forming the first image and a plurality of pixels forming the second image.
- the pixel value of a pixel (hereinafter, referred to as a second target pixel) arranged at a position corresponding to the first target pixel among the pixels of (1) is compared.
- the composite image generation unit 32 determines that the larger pixel value (that is, the maximum value of the corresponding two pixel values) of the pixel value of the first target pixel and the pixel value of the second target pixel is the first and the second pixel value. 2 Determined as the pixel value of the pixel at the position corresponding to the target pixel (pixel forming the composite image).
- the composite image generation unit 32 can generate a composite image by executing such processing for all pixels.
- the saturation that is, the saturation defined by the pixel value of each pixel
- the maximum value of the saturation of each pixel may be used to generate the combined image
- the maximum value of the brightness that is, the brightness of each pixel
- the maximum value of each pixel defined by the pixel value of each pixel may be used to generate the combined image. May be generated.
- the composite image may be generated using the average value of the pixel values (, saturation or luminance) of the respective pixels instead of the maximum value of the pixel values of the corresponding pixels in the first and second images. ..
- control value calculation unit 33 calculates the backlight control value based on the composite image generated in step S2 (step S3).
- the backlight control value calculated in step S3 is set to the backlight units 12a and 12b so as to irradiate light to a portion (at least a part of the display panels 11a and 11b) required to display the composite image, for example. It is a control value for driving.
- the pixel values included in the images (first and second images) input in step S1 described above are, for example, a plurality of LEDs arranged in the backlight units 12a and 12b uniformly irradiating light. It defines the saturation and luminance of the color expressed in the state of being.
- the correction processing unit 34 corrects the first image input in step S1 based on the backlight control value calculated in step S3 (step S4).
- the first image includes the pixel value of each pixel forming the first image, but in step S4, the pixel value of each pixel is corrected. Specifically, regarding the pixel value of each pixel forming the first image, light is emitted from (the LED arranged in) the backlight unit 12a to the display panel 11a based on the backlight control value calculated in step S3. When illuminated, the color is corrected (visually recognized) according to the pixel value of each pixel forming the first image input in step S1.
- correction processing unit 34 corrects the second image input in step S1 based on the backlight control value calculated in step S3 (step S5).
- step S5 is a process corresponding to the process of step S4. That is, in step S5, the pixel value of each pixel forming the second image is displayed on the display panel 11b from the backlight unit 12b (the LED arranged therein) based on the backlight control value calculated in step S3. When the light is emitted, the color is corrected so that the color according to the pixel value of each pixel forming the second image input in step S1 is displayed (visually recognized).
- steps S4 and S5 the colors represented by each pixel in the state where the backlight units 12a and 12b are driven so as to uniformly emit light, and the backlight units 12a and 12b are backlit.
- step S1 the color represented by each pixel is the same in a state where the light is driven so as to partially emit light (that is, partially driven) based on the light control value.
- the pixel values included in the input first and second pixels are corrected (converted).
- the first image (that is, the first image after correction) including the backlight control value calculated in step S3 and the pixel value corrected in step S4 is the image processing apparatus.
- the data is output from 30 to the panel driver 13a (step S6).
- the panel driver 13a controls the driving of the backlight unit 12a based on the backlight control value, and also drives the display panel 11a so as to display the corrected first image. Control.
- the second image (that is, the corrected second image) including the backlight control value calculated in step S3 and the pixel value corrected in step S5 is output from the image processing device 30 to the panel driver 13b ( Step S7).
- the panel driver 13b controls the driving of the backlight unit 12b based on the backlight control value, and also drives the display panel 11b so as to display the corrected second image. Control.
- the image input unit 31 is assumed to have input the first image 101 and the second image 102.
- the first image 101 and the second image 102 are images that are similar to each other and reproduce the parallax of both eyes.
- the composite image generation unit 32 generates the composite image 103 from the first image 101 and the second image 102 (step S11).
- the composite image 103 is assumed to be the maximum image described above.
- control value calculation unit 33 calculates the backlight control value 201 from the composite image 103 (step S12).
- the backlight control value 201 for example, the positions of the LEDs to be emitted (lighted) among the plurality of LEDs arranged in the backlight units 12a and 12b are simply shown.
- the backlight control value 201 will be described in more detail with reference to FIG.
- the backlight units 12a and 12b are the direct type LED backlights described above, and in the backlight units 12a and 12b, for example, LEDs are provided in each of 48 blocks (segment areas) formed by 8 rows ⁇ 6 columns. Suppose that is placed.
- the backlight control value 201 as shown in FIG. 6 is obtained, for example.
- an object having a color having relatively high saturation and brightness is displayed near the center, and a background having a color having relatively low saturation and brightness is displayed around the object.
- the LEDs arranged in the block corresponding to the position where the object is displayed out of the above-mentioned 48 blocks are made to emit light with high brightness (output), and correspond to the position where the background is displayed.
- a backlight control value 201 that causes the LEDs arranged in the block to emit light with low brightness (output) is calculated.
- the numerical value attached to each block represents the brightness (amount of light emission) when the LEDs arranged in the block are caused to emit light.
- the LEDs arranged in the block to which "100” is attached emit light with the maximum brightness (100% brightness).
- the LED arranged in the block to which "60" is attached emits light at 60% of the maximum brightness.
- FIG. 6 is for conceptually explaining the backlight control value 201, and is schematically shown compared to the actual mode. That is, the backlight control value 201 (numerical value given to each block) shown in FIG. 6 is an example, and the number of LEDs (the number of blocks) arranged in the backlight units 12a and 12b may be different. ..
- the backlight control value 201 calculated by the control value calculation unit 33 as described above is output to the backlight units 12a and 12b via the panel drivers 13a and 13b (step S13).
- the backlight units 12a and 12b are driven based on the common backlight control value 201 calculated from the composite image 103.
- the same backlight control luminance distribution
- the second image (the image for the right eye) displayed on the display panel 11b (the second display panel for the user's right eye) provided in the device HMD is input, and the input first image and second image are input.
- a combined image (third image) is generated by combining the images, and the backlight unit 12a (first illumination unit that irradiates the first display panel with light) and the backlight unit 12b (second image) are generated based on the combined image.
- a backlight control value for driving a second illumination unit that illuminates the display panel) is calculated. In the present embodiment, the backlight units 12a and 12b are driven based on the calculated backlight control value.
- the first backlight control value 201a and the second backlight control value 201b are calculated from the first image 101 and the second image 102, respectively, as shown in FIG. 7, for example.
- the configuration (hereinafter, referred to as a comparative example of the present embodiment) is general, but the calculation load is high in the case of the comparative example.
- the fact that the first and second images (images for the left eye and the right eye) displayed on the display panels 11a and 11b are similar to each other is used, and Since the configuration for calculating the backlight control value is adopted, it is possible to reduce the load required for the complicated calculation (backlight control value calculation) in Local Dimming as compared with the comparative example of the present embodiment shown in FIG. 7 described above. Becomes
- the pixel value (first pixel value) of each pixel forming the first image and the pixel value (second pixel value) of each pixel forming the second image are compared, and each pixel is compared.
- a composite image having the maximum pixel value is generated.
- the degrees may be compared, and a combined image having the maximum saturation in each pixel may be generated.
- the brightness of each pixel defined by the pixel value of each pixel forming the first image and the brightness of each pixel defined by the pixel value of each pixel forming the second image are defined as By comparison, a combined image having the maximum brightness in each pixel may be generated.
- the first image is corrected based on the calculated backlight control value
- the second image is corrected based on the backlight control value
- the backlight unit 12a when the backlight unit 12a is driven based on the backlight control value (that is, when the backlight unit 12a irradiates the display panel 11a with light), the color according to the pixel value included in the first image is displayed.
- the pixel value is corrected so that is expressed (visible by the user).
- the display panel 11a is driven so as to display the first image whose pixel value is corrected.
- the backlight unit 12b is driven based on the backlight control value (that is, the display unit 11b is illuminated with light)
- the color according to the pixel value included in the second image is displayed.
- the pixel value is corrected so that is expressed (visible by the user).
- the display panel 11b is driven so as to display the second image in which the pixel value is corrected.
- the display device HMD has been described as including the two display panels 11a and 11b for the left eye and the right eye.
- the display device HMD includes one display panel. Good.
- the image input unit 31 is assumed to have input the first image 101 and the second image 102.
- the composite image generation unit 32 generates the composite image 103 from the first image 101 and the second image 102 (step S21).
- control value calculation unit 33 calculates the backlight control value 201 from the composite image 103 (step S22).
- the display panel has a size similar to that of the display panels 11a and 11b combined, and One backlight unit (a backlight unit of about the same size as the display panel) is arranged on the back side of the.
- One backlight unit (a backlight unit of about the same size as the display panel) is arranged on the back side of the.
- the first image 101 and the second image 102 described above are supposed to be displayed side by side, for example, in a region for the left eye and a region for the right eye in one display panel.
- the above-mentioned backlight control value 201 is calculated from an image (composite image 103 of the first image 101 and the second image 102) that is half the size of the display panel. As described above, it is impossible to control the driving of the backlight unit having the same size as the display panel.
- the backlight control value 201 calculated from the composite image 103 as described above is expanded so as to correspond to the positions where the first image 101 and the second image 102 are displayed (step S23). According to this, as shown in FIG. 8, as in the case where the first image 101 and the second image 102 are displayed side by side on the display panel, the backlight corresponding to the backlight control value 201 is arranged. A write control value 202 is obtained.
- the backlight control value 202 expanded as described above is output to the backlight unit via the panel driver mounted on the display panel (step S24).
- the use of Local Dimming suppresses the deterioration of the contrast in the display panel and reduces the calculation load in the Local Dimming. It becomes possible.
- the number of display panels can be reduced as compared with the above-described configuration in which the display device HMD has two display panels 11a and 11b.
- the cost of the display device HMD can be reduced.
- the first backlight control value 201a (first control value) and the second backlight control value 201b (second control value) are calculated, and the calculated first backlight control value 201a and second backlight control value 201b are calculated.
- the composite backlight control value 203 (third control value) may be generated from In this case, the backlight units 12a and 12b may be driven based on the combined backlight control value 203.
- the calculation load in Local Dimming (the load of the backlight control value calculation) increases, but the first image 101 also, it becomes possible to combine the backlight control values used when correcting the second image 102 into one. Therefore, even when the image processing apparatus 30 operates as shown in FIG. 9, the first image 101 is corrected using the first backlight control value 201a, and the second backlight control value 201b is used. Compared with the case where the second image 102 is corrected (that is, the comparative example shown in FIG. 7), the load on the image processing device 30 can be reduced.
- the image processing device 30 is realized as a bridge chip, and is described as being disposed between the display panels 11a and 11b and the host computer 20, for example. It may be built in the host computer 20.
- the panel drivers 13a and 13b have been described as being mounted on the display panels 11a and 11b, respectively.
- the display panels 11a and 11b are configured to be driven by one panel driver. It may be.
- the image processing device 30 may be incorporated in a panel driver that drives the display panels 11a and 11b.
- An input unit for inputting a second image A composite image generation unit that generates a third image by combining the input first image and second image
- a first illumination unit that irradiates the first display panel and the second display panel with light based on the generated third image so as to irradiate at least a part of the first display panel and the second display panel with the light
- And a calculation unit that calculates a control value for driving the second illumination unit that illuminates the second display panel with light. Equipped with, The first lighting unit is driven to irradiate the first display panel with light based on the calculated control value, The second illuminator is driven to irradiate the second display panel with light based on the calculated control value.
- Image processing device A composite image generation unit that generates a third image by combining the input first image and second image
- a first illumination unit that irradiates the first display panel and the second display panel with light based on the generated third image so as to irradiate at least a part of the first display panel and the
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the composite image generation unit compares the first pixel value and the second pixel value and generates a third image having a maximum pixel value in each pixel.
- the image processing device according to [C1].
- [C3] The composite image generation unit compares the saturation of each pixel defined by the first pixel value and the saturation of each pixel defined by the second pixel value, and the saturation is maximized in each pixel.
- the image processing device according to [C2] which generates a third image.
- the composite image generation unit compares the brightness of each pixel defined by the first pixel value and the brightness of each pixel defined by the second pixel value, and the third image having the maximum brightness in each pixel.
- the image processing device according to [C2], wherein [C5]
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the composite image generation unit compares the first pixel value and the second pixel value, and generates a third image in which the pixel value of each pixel is an average value of the first pixel value and the second pixel value.
- Do The image processing device according to [C1].
- the image processing device according to [C1].
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the first correction unit includes a first pixel value included in the input first image when the first illumination unit irradiates the first display panel with light based on the calculated control value.
- the first pixel value is corrected so that the color according to The second correction unit includes a second pixel value included in the input second image when the second display unit is illuminated with light based on the calculated control value.
- the second pixel value is corrected so that the color according to The first display panel is driven to display a first image in which the first pixel value is corrected,
- the second display panel is driven to display the second image in which the second pixel value is corrected.
- an image processing device for displaying an image on a display device mounted on a user's head
- An input unit for inputting a first image for the left eye of the user and a second image for the right eye of the user, which are displayed side by side on a display panel provided in the display device
- a composite image generation unit that generates a third image by combining the input first image and second image
- a calculation unit that calculates a control value for driving an illumination unit that irradiates the display panel with light so that at least a part of the display panel is irradiated with light based on the generated third image; Equipped with, The illumination unit is driven so as to emit light to the display panel based on the calculated control value.
- Image processing device for displaying an image on a display device mounted on a user's head
- An input unit for inputting a first image for the left eye of the user and a second image for the right eye of the user, which are displayed side by side on a display panel provided in the display device
- a composite image generation unit that
- an image processing device for displaying an image on a display device mounted on a user's head, A first image displayed on the first display panel for the left eye of the user, which is provided on the display device, and a second display panel for the right eye of the user, which is provided on the display device.
- An input unit for inputting a second image
- a first control for driving a first illuminating unit that irradiates the first display panel with light so that at least a part of the first display panel is irradiated with light based on the input first image.
- a first calculation unit for calculating a value A second control for driving a second illuminating unit that irradiates the second display panel with light so that at least a part of the second display panel is irradiated with light based on the input second image.
- a second calculation unit for calculating a value A control value generation unit that generates a third control value by combining the calculated first control value and the calculated second control value; Equipped with,
- the first illuminator is driven to irradiate the first display panel with light based on the generated third control value.
- the second lighting unit is driven to irradiate the second display panel with light based on the generated third control value.
- Image processing device A first calculation unit for calculating a value, A second control for driving a second illuminating unit that irradiates the second display panel with light so that at least a part of the second display panel is irradiated with light based on the input second image.
- a second calculation unit for calculating a value A control value generation unit
- An image processing device for displaying an image on the display device, A first display panel for the left eye of the user, A second display panel for the right eye of the user, A first illumination unit for irradiating the first display panel with light; A second illumination unit for irradiating the second display panel with light; Equipped with, The image processing device, An input unit for inputting a first image displayed on the first display panel and a second image displayed on the second display panel; A composite image generation unit that generates a third image by combining the input first image and second image Based on the generated third image, for driving the first illuminating unit and the second illuminating unit so as to illuminate at least a part of the first display panel and the second display panel.
- the first lighting unit is driven to irradiate the first display panel with light based on the calculated control value
- the second illuminator is driven to irradiate the second display panel with light based on the calculated control value.
- Display device. [C11]
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the composite image generation unit compares the first pixel value and the second pixel value and generates a third image having a maximum pixel value in each pixel.
- the display device according to [C10].
- the composite image generation unit compares the saturation of each pixel defined by the first pixel value and the saturation of each pixel defined by the second pixel value, and the saturation is maximized in each pixel.
- the display device according to [C11] which generates a third image.
- the composite image generation unit compares the brightness of each pixel defined by the first pixel value and the brightness of each pixel defined by the second pixel value, and the third image having the maximum brightness in each pixel.
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the composite image generation unit compares the first pixel value and the second pixel value, and generates a third image in which the pixel value of each pixel is an average value of the first pixel value and the second pixel value.
- the display device according to [C9].
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the first correction unit includes a first pixel value included in the input first image when the first illumination unit irradiates the first display panel with light based on the calculated control value.
- the first pixel value is corrected so that the color according to The second correction unit includes a second pixel value included in the input second image when the second display unit is illuminated with light based on the calculated control value.
- the second pixel value is corrected so that the color according to The first display panel is driven to display a first image in which the first pixel value is corrected,
- the second display panel is driven to display the second image in which the second pixel value is corrected.
- [C17] An image processing method executed by an image processing device for displaying an image on a display device mounted on a user's head, A first image displayed on the first display panel for the left eye of the user, which is provided on the display device, and a second display panel for the right eye of the user, which is provided on the display device.
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the step of generating includes a step of comparing the first pixel value and the second pixel value and generating a third image having a maximum pixel value in each pixel.
- [C19] In the step of generating, the saturation of each pixel defined by the first pixel value is compared with the saturation of each pixel defined by the second pixel value, and the saturation is maximized in each pixel.
- the image processing method according to [C18] including the step of generating three images.
- [C20] In the step of generating, the brightness of each pixel defined by the first pixel value and the brightness of each pixel defined by the second pixel value are compared, and a third image having the maximum brightness in each pixel is generated.
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the generating step compares the first pixel value and the second pixel value, and generates a third image in which the pixel value of each pixel is an average value of the first pixel value and the second pixel value.
- the first image includes a first pixel value relating to a color to be represented by each pixel forming the first image
- the second image includes a second pixel value relating to a color to be represented by each pixel forming the second image
- the step of correcting the first image includes a step of correcting the first image included in the input first image when the first illumination unit irradiates the first display panel with light based on the calculated control value.
- the step of correcting the second image includes a step of correcting the second image included in the input second image when the second illumination panel irradiates the second display panel with light based on the calculated control value.
- the step of correcting the second pixel value so that the color according to the two pixel value is expressed The first display panel is driven to display a first image in which the first pixel value is corrected, The second display panel is driven to display the second image in which the second pixel value is corrected.
- HMD Human-Distance Device
- 11a, 11b Display panel (first display panel, second display panel), 12a, 12b... Backlight unit (first illumination section, second illumination section), 13a, 13b... Panel driver, 20 ... host computer, 30... image processing device, 31... image input unit, 32... synthetic image generation unit, 33... control value calculation unit, 34... correction processing unit.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Theoretical Computer Science (AREA)
- Nonlinear Science (AREA)
- Chemical & Material Sciences (AREA)
- Crystallography & Structural Chemistry (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mathematical Physics (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Liquid Crystal (AREA)
- Controls And Circuits For Display Device (AREA)
- Liquid Crystal Display Device Control (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
実施形態によれば、ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置が提供される。画像処理装置は、入力部と、合成画像生成部と、演算部とを具備する。入力部は、第1表示パネルに表示される第1画像及び第2表示パネルに表示される第2画像を入力する。合成画像生成部は、第1画像及び第2画像を合成することによって第3画像を生成する。演算部は、第3画像に基づいて第1表示パネルに光を照射する第1照明部及び第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算する。第1照明部は、制御値に基づいて第1表示パネルに光を照射する。第2照明部は、制御値に基づいて第2表示パネルに光を照射する。
Description
本発明の実施形態は、画像処理装置に関する。
近年では、ユーザの頭部に装着される表示装置(HMD:Head Mount Display)を用いて例えば仮想現実(VR:Virtual Reality)を提供する技術が注目されている。
このような表示装置(以下、ヘッドマウントディスプレイと表記)は、当該ヘッドマウントディスプレイがユーザの頭部に装着された際に当該ユーザの眼前となる位置に設けられたディスプレイ(表示パネル)に画像が表示されるように構成されている。これにより、ヘッドマウントディスプレイを装着したユーザは、臨場感のある仮想現実空間を体験することができる。
ところで、上記したVR向けのヘッドマウントディスプレイでは、例えば1000ppi以上の高い解像度を有すること及び応答速度が高速であることといった高いディスプレイ性能が要求される。
ヘッドマウントディスプレイに搭載されるディスプレイとしては例えば液晶ディスプレイ及び有機ELディスプレイが用いられる場合が多いが、液晶ディスプレイは、解像度は高いが応答速度は有機ELディスプレイと比較して低速である場合が多い。一方、有機ELディスプレイは、応答速度は高速であるが解像度を上げることが困難である。
ここで、ヘッドマウントディスプレイに搭載されるディスプレイとして液晶ディスプレイを採用する場合、例えばIPS(In-Plane-Switching)方式等を採用することにより応答速度の高速化を実現することが可能である。
しかしながら、このような応答速度を高速化する構成の場合には、一般的にディスプレイに表示される画像のコントラストが低下する傾向がある。
そこで、本発明が解決しようとする課題は、ヘッドマウントディスプレイのような表示装置に表示される画像のコントラストの低下を抑制することが可能な画像処理装置を提供することにある。
実施形態によれば、ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置が提供される。前記画像処理装置は、入力部と、合成画像生成部と、演算部とを具備する。前記入力部は、前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する。前記合成画像生成部は、前記入力された第1画像及び第2画像を合成することによって第3画像を生成する。前記演算部は、前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算する。前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動する。前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する。
以下、図面を参照して、実施形態について説明する。
図1は、本実施形態に係る画像処理装置を備える表示装置の外観の一例を示す斜視図である。本実施形態において、表示装置は、ユーザの頭部に装着されて使用されるヘッドマウントディスプレイ(HMD:Head Mount Display)を含む。このような表示装置は、当該表示装置を頭部に装着したユーザに対して、例えば仮想現実(VR:Virtual Reality)を提供するために用いられる。
図1は、本実施形態に係る画像処理装置を備える表示装置の外観の一例を示す斜視図である。本実施形態において、表示装置は、ユーザの頭部に装着されて使用されるヘッドマウントディスプレイ(HMD:Head Mount Display)を含む。このような表示装置は、当該表示装置を頭部に装着したユーザに対して、例えば仮想現実(VR:Virtual Reality)を提供するために用いられる。
図1に示すように、表示装置HMDには、表示パネル11a(第1表示パネル)及び表示パネル11b(第2表示パネル)が設けられている。
表示パネル11a及び11bは、ユーザが表示装置HMDを頭部に装着した状態で当該ユーザの左眼及び右眼の眼前に位置するようにそれぞれ配置されている。本実施形態において、表示パネル11a及び11bは、液晶層を用いた液晶表示パネルであるものとする。
ここで、図2を参照して、表示装置HMDの構成の概要について説明する。表示装置HMDは、上記したように当該表示装置HMDを装着するユーザの左眼用の表示パネル11a及び当該ユーザの右眼用の表示パネル11bを備える。
表示パネル11aは、上記したように液晶表示パネルであり、例えば第1基板と、当該第1基板に対向配置された第2基板と、当該第1基板及び第2基板の間に形成された液晶層とを備える。
表示パネル11aの背面側(つまり、表示パネル11aの表示面の反対側)には、当該表示パネル11aを照明する照明具(表示パネル11aに光を照射する照明部)としてバックライトユニット12aが配置されている。バックライトユニット12aには、例えば複数の発光ダイオード(LED)が配置されているものとする。
なお、バックライトユニット12aは、例えば表示パネル11aの全面に対応する位置(つまり、表示パネル11aの直下)にLEDが配置された直下型LEDバックライトであってもよいし、当該表示パネル11aの左右または上下等の端部に対応する位置にLEDが配置されたエッジ型LEDバックライトであってもよい。
また、上記した表示パネル11aに備えられる例えば第1基板上には、当該表示パネル11aの駆動を制御する(表示パネル11aの表示動作を制御する)パネルドライバ13aが搭載されている。
一方、表示パネル11bは、上記した表示パネル11aと同様に構成された液晶表示パネルであり、第1基板と、当該第1基板に対向配置された第2基板と、当該第1基板及び第2基板の間に形成された液晶層とを備える。
表示パネル11bの背面側(つまり、表示パネル11bの表示面の反対側)には、当該表示パネル11bを照明する照明具(表示パネル11bに光を照射する照明部)としてバックライトユニット12bが配置されている。
バックライトユニット12bは、上記したバックライトユニット12aと同様に、直下型LEDバックライトであってもよいし、エッジ型LEDバックライトであってもよい。
なお、表示パネル11bに備えられる例えば第1基板上には、当該表示パネル11bの駆動を制御する(表示パネル11bの表示動作を制御する)パネルドライバ13bが搭載されている。
また、図2に示すように、表示装置HMDにおいては、表示パネル11a及び11bの外部にホストコンピュータ20が設けられている。ホストコンピュータ20は、表示パネル11a及び11bに表示される画像を出力する。
ここで、本実施形態において、表示パネル11aに表示される画像は、左眼用の画像(ユーザの左眼で視認される画像)である。また、表示パネル11bに表示される画像は、右眼用の画像(ユーザの右眼で視認される画像)である。なお、左眼用の画像及び右眼用の画像は、両目の視差を再現した互いに類似する画像である。このような左眼用の画像が表示パネル11aに表示され、右眼用の画像が表示パネル11bに表示され、当該左眼用の画像及び右眼用の画像がユーザの左眼及び右眼で視認された場合には、ユーザは上記した仮想現実空間として立体的な空間(3次元空間)を把握することができる。
ところで、上記したように表示装置HMDがユーザに対して仮想現実を提供するような用途で用いられる(つまり、VR用のヘッドマウントディスプレイとして用いられる)場合、当該表示装置HMDには、高いディスプレイ性能が要求される。
そこで、本実施形態における表示パネル11a及び11b(つまり、液晶表示パネル)においては、例えばIPS(In-Plane-Switching)方式を採用し、応答速度を向上させる構成を採用する。また、上記したように表示装置HMDにおいては至近距離から画像(映像)を視認するため、動画のぼけを低減する必要がある。これに対しては、例えば応答が完了したタイミングでバックライトを点灯させることにより、動画ぼけを改善する(残像感を抑制する)ことが可能なバックライトブリンキングと称される技術が表示装置HMDに適用されるものとする。
しかしながら、上記したように表示パネル11a及び11bとして液晶表示パネルを用いる場合、当該液晶表示パネルは、例えば有機ELディスプレイ等と比較してコントラストが低い場合がある。
また、表示装置HMDにおいて上記した応答速度を向上させる構成を採用した場合には、当該表示装置HMD(表示パネル11a及び11b)に表示される画像のコントラストが低下する傾向がある。
このようなコントラストの低下を抑制するために、本実施形態においては、Local Dimmingと称される技術を用いる。このLocal Dimmingは、バックライトユニットを部分的に駆動することによって液晶表示パネルにおけるコントラストの低下を改善するための技術である。
上記したLocal Dimmingを用いた場合にはコントラストの低下を抑制することができるが、表示装置HMDにおいては例えば2560×2440以上と画素数が非常に多いため、Local Dimmingにおける演算負荷が高くなる。
そこで、本実施形態において、表示装置HMDは、Local Dimmigにおける演算負荷を低減するために画像処理装置30を備えるものとする。
画像処理装置30は、例えば表示パネル11a及び11bとホストコンピュータ20との間に配置されたブリッジチップとして実現されている。
画像処理装置30は、ホストコンピュータ20と接続されており、当該ホストコンピュータ20から出力された画像(左眼用の画像及び右眼用の画像)を用いて上記したLocal Dimmingに関する処理を実行する。
また、画像処理装置30は、上記したパネルドライバ13a及び13bと例えばFPC等を介して接続されている。画像処理装置30は、Local Dimmingに関する処理が実行された後に、左眼用の画像及び右眼用の画像と、バックライトユニット12a及び12bを部分的に駆動するための制御値(以下、バックライト制御値と表記)とをパネルドライバ13a及び13bに出力する。
この場合、パネルドライバ13aは、画像処理装置30から出力された左眼用の画像及びバックライト制御値を入力し、表示パネル11a及びバックライトユニット12aの駆動を制御する。同様に、パネルドラバ13bは、画像処理装置30から出力された右眼用の画像及びバックライト制御値を入力し、表示パネル11b及びバックライトユニット12bの駆動を制御する。
図3は、本実施形態に係る画像処理装置30の機能構成の一例を示すブロック図である。図3に示すように、画像処理装置30は、画像入力部31、合成画像生成部32、制御値演算部33及び補正処理部34を含む。
なお、本実施形態において画像処理装置30は上記したようにチップとして実現されるものとして説明したが、当該画像処理装置30に含まれる各部31~34は、ハードウェアによって実現されてもよいし、ソフトウェアによって実現されてもよいし、ハードウェア及びソフトウェアの組み合わせ構成として実現されてもよい。
画像入力部31は、表示パネル11aに表示される左眼用の画像及び表示パネル11bに表示される右眼用の画像を入力する。
なお、画像入力部31によって入力される左眼用の画像は、当該画像を構成する各画素で表現すべき色彩に関する画素値(第1画素値)を含む。同様に、画像入力部31によって入力される右眼用の画像は、当該画像を構成する各画素で表現すべき色彩に関する画素値(第2画素値)を含む。
合成画像生成部32は、画像入力部31によって入力された左眼用の画像及び右眼用の画像を合成することによって合成画像(第3画像)を生成する。なお、合成画像は、上記した左眼用の画像及び右眼用の画像の各々に含まれる各画素の画素値に基づいて生成される。
制御値演算部33は、合成画像生成部32によって生成された合成画像に基づいて、上記したバックライト制御値を演算する。本実施形態において、バックライト制御値は、例えば表示パネル11a及び11bの少なくとも一部に光を照射するように、バックライトユニット12a及び12bを駆動する(バックライトユニット12a及び12bの駆動を制御する)ための制御値である。
補正処理部34は、制御値演算部33によって演算されたバックライト制御値に基づいて、画像入力部31によって入力された左眼用の画像を補正する。また、補正処理部34は、制御値演算部33によって演算されたバックライト制御値に基づいて、画像入力部31によって入力された右眼用の画像を補正する。
上記した制御値演算部33によって演算されたバックライト制御値及び補正処理部34によって補正された左眼用の画像は、画像処理装置30からパネルドライバ13aに出力される。また、制御値演算部33によって演算されたバックライト制御値及び補正処理部34によって補正された右眼用の画像は、画像処理装置30からパネルドライバ13bに出力される。
次に、図4のフローチャートを参照して、本実施形態に係る画像処理装置30の処理手順の一例について説明する。
ユーザが表示装置HMDを頭部に装着して使用する場合、当該表示装置HMDにおいては、例えばユーザの頭部の動き等に応じて変化する仮想現実空間に相当する映像が表示される。
以下に説明する画像処理装置30の処理は、このように表示装置HMDにおいて表示される映像を構成する画像(フレーム)毎に実行される。
ここで、表示装置HMDにおいて表示される映像を構成する画像は、ホストコンピュータ20から画像処理装置30に出力される。なお、ホストコンピュータ20から出力される画像には、表示装置HMDを装着するユーザの左眼用の表示パネル11aに表示される画像(以下、第1画像と表記)及び当該ユーザの右眼用の表示パネル11bに表示される画像(以下、第2画像と表記)が含まれる。
上記したようにホストコンピュータ20から画像処理装置30に第1及び第2画像が出力された場合、画像入力部31は、当該第1及び第2画像を入力する(ステップS1)。
次に、合成画像生成部32は、ステップS1において入力された第1及び第2画像を合成することによって合成画像(第3画像)を生成する(ステップS2)。
ここで、上記したように、第1画像は当該第1画像を構成する各画素の画素値を含み、第2画像は当該第2画像を構成する各画素の画素値を含む。なお、各画素の画素値は、当該画素で表現すべき色彩に関する値(RGB値等)であり、当該画素の彩度及び輝度等を規定するものである。また、第1及び第2画像は上記したように両目の視差を再現した互いに類似する画像であり、当該第1及び第2画像を構成する画素の数等は同一であるものとする。
この場合、ステップS2において、合成画像生成部32は、合成画像として例えば最大画像を生成する。最大画像は、生成される画像(最大画像)を構成する各画素の画素値として、第1及び第2画像において対応する各画素の画素値のうちの最大値を用いた画像である。
具体的には、合成画像生成部32は、例えば第1画像を構成する複数の画素のうちの1つの画素(以下、第1対象画素と表記)の画素値と、第2画像を構成する複数の画素のうちの第1対象画素に対応する位置に配置されている画素(以下、第2対象画素と表記)の画素値とを比較する。合成画像生成部32は、第1対象画素の画素値と第2対象画素の画素値のうちより大きい画素値(つまり、対応する2つの画素値のうちの最大値)を、当該第1及び第2対象画素に対応する位置の画素(合成画像を構成する画素)の画素値として決定する。
合成画像生成部32は、このような処理を、全ての画素について実行することによって、合成画像を生成することができる。
ここでは、単に第1及び第2画像において対応する各画素の画素値の最大値を用いて合成画像を生成するものとして説明したが、当該各画素の画素値によって規定される彩度(つまり、各画素の彩度)の最大値を用いて合成画像を生成してもよいし、当該各画素の画素値によって規定される輝度(つまり、各画素の輝度)の最大値を用いて合成画像を生成してもよい。
更に、第1及び第2画像において対応する各画素の画素値の最大値ではなく、当該各画素の画素値(、彩度または輝度)の平均値を用いて合成画像が生成されても構わない。
次に、制御値演算部33は、ステップS2において生成された合成画像に基づいて、バックライト制御値を演算する(ステップS3)。なお、ステップS3において演算されるバックライト制御値は、例えば合成画像を表示するために必要な部分(表示パネル11a及び11bの少なくとも一部)に光を照射するようにバックライトユニット12a及び12bを駆動するための制御値である。
ここで、上記したステップS1において入力された画像(第1及び第2画像)に含まれる画素値は、例えばバックライトユニット12a及び12bに配置されている複数のLEDが一律に光を照射している状態で表現される色彩の彩度及び輝度を規定したものである。
このため、バックライトユニット12a及び12bが上記したバックライト制御値に基づいて駆動している状態でステップS1において入力された画像に含まれる画素値に基づいて画像が表示された場合には、例えば表示すべき画像とは部分的に彩度または輝度が異なる画像が表示(視認)される可能性がある。
よって、補正処理部34は、ステップS3において演算されたバックライト制御値に基づいて、ステップS1において入力された第1画像を補正する(ステップS4)。
なお、上記したように第1画像は当該第1画像を構成する各画素の画素値を含むが、ステップS4においては、当該各画素の画素値が補正される。具体的には、第1画像を構成する各画素の画素値は、ステップS3において演算されたバックライト制御値に基づいてバックライトユニット12a(に配置されているLED)から表示パネル11aに光が照射された場合に、ステップS1において入力された第1画像を構成する各画素の画素値に従った色彩が表現(視認)されるように補正される。
また、補正処理部34は、ステップS3において演算されたバックライト制御値に基づいて、ステップS1において入力された第2画像を補正する(ステップS5)。
なお、ステップS5の処理はステップS4の処理に相当する処理である。すなわち、ステップS5において、第2画像を構成する各画素の画素値は、ステップS3において演算されたバックライト制御値に基づいてバックライトユニット12b(に配置されているLED)から表示パネル11bに光が照射された場合に、ステップS1において入力された第2画像を構成する各画素の画素値に従った色彩が表示(視認)されるように補正される。
換言すれば、ステップS4及びS5においては、バックライトユニット12a及び12bが一律に光を照射するように駆動している状態において各画素で表現される色彩と、当該バックライトユニット12a及び12bがバックライト制御値に基づいて部分的に光を照射するように駆動している(つまり、部分的に駆動している)状態において各画素で表現される色彩とが同一となるように、ステップS1において入力された第1及び第2画素に含まれる画素値が補正(変換)される。
ステップS4及びS5の処理が実行されると、ステップS3において演算されたバックライト制御値及びステップS4において補正された画素値を含む第1画像(つまり、補正後の第1画像)が画像処理装置30からパネルドライバ13aに出力される(ステップS6)。
ステップS6の処理が実行された場合、パネルドライバ13aは、バックライト制御値に基づいてバックライトユニット12aの駆動を制御するとともに、補正後の第1画像を表示するように表示パネル11aの駆動を制御する。
また、ステップS3において演算されたバックライト制御値及びステップS5において補正された画素値を含む第2画像(つまり、補正後の第2画像)が画像処理装置30からパネルドライバ13bに出力される(ステップS7)。
ステップS7の処理が実行された場合、パネルドライバ13bは、バックライト制御値に基づいてバックライトユニット12bの駆動を制御するとともに、補正後の第2画像を表示するように表示パネル11bの駆動を制御する。
なお、上記した補正後の第1画像及び補正後の第2画像は同時に表示パネル11a及び11bに表示される必要があるため、パネルドライバ13a及び13bは、例えば同期して動作するものとする。
ここで、図5を参照して、本実施形態に係る画像処理装置30の動作の一例について説明する。
図5に示す例では、画像入力部31は、第1画像101及び第2画像102を入力したものとする。図5に示すように、第1画像101及び第2画像102は、両目の視差を再現した互いに類似する画像である。
この場合、合成画像生成部32は、第1画像101及び第2画像102から合成画像103を生成する(ステップS11)。なお、合成画像103は、上記した最大画像であるものとする。
次に、制御値演算部33は、合成画像103からバックライト制御値201を演算する(ステップS12)。
ここで、図5においては、バックライト制御値201として例えばバックライトユニット12a及び12bに配置されている複数のLEDのうち発光させる(点灯させる)LEDの位置が簡易的に示されているが、バックライト制御値201については、図6を参照してより詳細に説明する。
ここでは、バックライトユニット12a及び12bが上記した直下型LEDバックライトであり、当該バックライトユニット12a及び12bにおいて、例えば8行×6列で形成される48個の各ブロック(セグメントエリア)にLEDが配置されている場合を想定する。
この場合において、図5に示す合成画像103に基づいてバックライト制御値が演算された場合には、例えば図6に示すようなバックライト制御値201が得られるものとする。
具体的には、図5に示すように、中心付近に比較的彩度及び輝度が高い色彩の物体が表示され、当該物体の周辺に比較的彩度及び輝度が低い色彩の背景が表示される合成画像103の場合、上記した48個のブロックのうちの物体が表示される位置に対応するブロックに配置されているLEDを高い輝度(出力)で発光させ、背景が表示される位置に対応するブロックに配置されているLEDを低い輝度(出力)で発光させるバックライト制御値201が演算される。
なお、図6において、各ブロックに付されている数値は、当該ブロックに配置されているLEDを発光させる際の輝度(発光量)を表している。具体的には、例えば「100」が付されているブロックに配置されているLEDは最大の輝度(100%の輝度)で発光させることを表しているものとする。また、例えば「60」が付されているブロックに配置されているLEDは最大の輝度に対する60%の輝度で発光させることを表しているものとする。
すなわち、本実施形態においては、図6に示すように、合成画像103を構成する各画素において表現すべき色彩(当該各画素の画素値によって規定される彩度または輝度)を解析することによって、当該各画素に対応するブロック(LED)毎に異なるバックライト制御値(発光量)が演算される。
このようなバックライト制御値201によれば、バックライトユニット12a及び12bに配置されている複数のLEDの各々の発光量を個別に制御することができる。
なお、図6はバックライト制御値201を概念的に説明するためのものであり、実際の態様に比べて模式的に表されている。すなわち、図6に示すバックライト制御値201(各ブロックに付された数値)は一例であるし、バックライトユニット12a及び12bに配置されるLEDの数(ブロックの数)も異なっていてもよい。
再び図5に戻ると、上記したように制御値演算部33によって演算されたバックライト制御値201は、パネルドライバ13a及び13bを介してバックライトユニット12a及び12bに出力される(ステップS13)。
すなわち、本実施形態において、バックライトユニット12a及び12bは、合成画像103から演算された共通のバックライト制御値201に基づいて駆動する。換言すれば、本実施形態においては、左眼用及び右眼用の画像に対して同じバックライトコントロール(輝度分布)が適用される。
上記したように本実施形態においては、表示装置HMDに設けられている表示パネル11a(ユーザの左眼用の第1表示パネル)に表示される第1画像(左眼用の画像)及び当該表示装置HMDに設けられている表示パネル11b(ユーザの右眼用の第2表示パネル)に表示される第2画像(右眼用の画像)を入力し、当該入力された第1画像及び第2画像を合成することによって合成画像(第3画像)を生成し、当該合成画像に基づいてバックライトユニット12a(第1表示パネルに光を照射する第1照明部)及びバックライトユニット12b(第2表示パネルに光を照射する第2照明部)を駆動するためのバックライト制御値を演算する。本実施形態において、バックライトユニット12a及び12bは、演算されたバックライト制御値に基づいて駆動する。
本実施形態においては、このような構成により、Local Dimmingを用いる(バックライト制御値に基づいてバックライトユニット12a及び12bを駆動する)ことによって表示パネル11a及び11bにおけるコントラストの低下を抑制することが可能となる。
また、上記したようにLocal Dimmingを用いた場合、例えば図7に示すように第1画像101及び第2画像102の各々から第1バックライト制御値201a及び第2バックライト制御値201bをそれぞれ演算する構成(以下、本実施形態の比較例と表記)が一般的であるが、当該比較例の場合には演算負荷が高くなる。
これに対して、本実施形態においては、表示パネル11a及び11bに表示される第1及び第2画像(左眼用及び右眼用の画像)が類似していることを利用し、合成画像からバックライト制御値を演算する構成を採用したため、上記した図7に示す本実施形態の比較例と比較してLocal Dimmingにおける複雑な演算(バックライト制御値演算)にかかる負荷を低減することが可能となる。
また、本実施形態においては、例えば第1画像を構成する各画素の画素値(第1画素値)及び第2画像を構成する各画素の画素値(第2画素値)を比較し、各画素において画素値が最大となる合成画像が生成される。このような構成によれば、合成画像からバックライト制御値を演算し、当該バックライト制御値に基づいてバックライトユニット12a及び12bを駆動したとしても、第1及び第2画像の表示に必要な部分にはバックライトユニット12a及び12b(に配置されているLED)から表示パネル11a及び11bに対して光が照射されるため、当該表示パネル11a及び11bにおいて適切な画像が表示されなくなることを回避することができる。
なお、本実施形態においては、第1画像を構成する各画素の画素値によって規定される当該各画素の彩度及び第2画像を構成する各画素の画素値によって規定される当該各画素の彩度を比較し、各画素において彩度が最大となる合成画像が生成されてもよい。また、本実施形態においては、第1画像を構成する各画素の画素値によって規定される当該各画素の輝度及び第2画像を構成する各画素の画素値によって規定される当該各画素の輝度を比較し、各画素において輝度が最大となる合成画像が生成されてもよい。
また、本実施形態においては合成画像が最大画像(各画素の画素値、彩度または輝度の最大値を用いて生成される画像)であるものとして説明したが、当該合成画像は、各画素の画素値、彩度または輝度の平均値を用いて生成される画像であってもよい。
また、本実施形態においては、演算されたバックライト制御値に基づいて第1画像を補正し、当該バックライト制御値に基づいて第2画像を補正する。
この場合、バックライト制御値に基づいてバックライトユニット12aが駆動した(つまり、バックライトユニット12aによって表示パネル11aに光が照射された)場合に、第1画像に含まれる画素値に従った色彩が表現される(ユーザによって視認される)ように当該画素値が補正される。この場合、表示パネル11aは、画素値が補正された第1画像を表示するように駆動する。
同様に、バックライト制御値に基づいてバックライトユニット12bが駆動した(つまり、バックライトユニット12bによって表示パネル11bに光が照射された)場合に、第2画像に含まれる画素値に従った色彩が表現される(ユーザによって視認される)ように当該画素値が補正される。この場合、表示パネル11bは、画素値が補正された第2画像を表示するように駆動する。
このような構成によれば、バックライト制御値に基づいてバックライトユニット12a及び12bが駆動する(すなわち、バックライトユニット12a及び12bから照射される光量が変化した)場合であっても、当該バックライトユニット12a及び12bから照射される光(LEDの発光量)に応じて第1及び第2画像を構成する各画素の画素値を調整することによって、本来表示すべき画像と同様の画像を表示することが可能となる。
なお、本実施形態においては、表示装置HMDが左眼用及び右眼用の2つの表示パネル11a及び11bを備えるものとして説明したが、例えば表示装置HMDに備えられる表示パネルは1つであってもよい。
以下、図8を参照して、表示装置HMDが1つ(1枚)の表示パネルを備える構成である場合における画像処理装置30の動作の一例について説明する。なお、図5と同様の部分には同一参照符号を付して、ここではその詳しい説明を省略する。
図8に示す例では、画像入力部31は、第1画像101及び第2画像102を入力したものとする。
この場合、合成画像生成部32は、第1画像101及び第2画像102から合成画像103を生成する(ステップS21)。
次に、制御値演算部33は、合成画像103からバックライト制御値201を演算する(ステップS22)。
ここで、上記したように表示装置HMDが1つの表示パネルを備える構成の場合、当該表示パネルは上記した表示パネル11a及び11bを合わせたものと同程度のサイズを有しており、当該表示パネルの背面側には1つのバックライトユニット(当該表示パネルと同程度のサイズのバックライトユニット)が配置される。また、上記した第1画像101及び第2画像102は、1つの表示パネル内の例えば左眼用の領域及び右眼用の領域に並べて表示されるものとする。
これに対して、上記したバックライト制御値201は表示パネルのサイズの半分の画像(第1画像101及び第2画像102の合成画像103)から演算されているため、当該バックライト制御値201では、上記したように表示パネルと同程度のサイズのバックライトユニットの駆動を制御することができない。
そこで、上記したように合成画像103から演算されたバックライト制御値201は、第1画像101及び第2画像102の各々が表示される位置に対応するように展開される(ステップS23)。これによれば、図8に示すように、第1画像101及び第2画像102が並べて表示パネルに表示されるのと同様に、上記したバックライト制御値201が並べられたものに相当するバックライト制御値202が得られる。
上記したように展開されたバックライト制御値202は、表示パネルに搭載されているパネルドライバを介してバックライトユニットに出力される(ステップS24)。
上記した動作によれば、表示装置HMDが1つの表示パネルを備える構成であっても、Local Dimmingを用いることによって当該表示パネルにおけるコントラストの低下を抑制するとともに、当該Local Dimmingにおける演算負荷を低減することが可能となる。
また、表示装置HMDが1つの表示パネルを備える構成の場合には、上記した表示装置HMDが2つの表示パネル11a及び11bを備える構成と比較して、表示パネルの枚数を削減することができるため、当該表示装置HMDのコストを削減することができる。
なお、本実施形態に係る画像処理装置30は上記した図5において説明したように動作するものとして説明したが、例えば図9に示すように、第1画像101及び第2画像102の各々から第1バックライト制御値201a(第1制御値)及び第2バックライト制御値201b(第2制御値)をそれぞれ演算し、当該演算された第1バックライト制御値201a及び第2バックライト制御値201bから合成バックライト制御値203(第3制御値)を生成する構成としてもよい。この場合、バックライトユニット12a及び12bは、合成バックライト制御値203に基づいて駆動すればよい。
このような構成によれば、画像処理装置30が例えば図5において説明したように動作する場合と比較するとLocal Dimmingにおける演算負荷(バックライト制御値演算の負荷)は増加するが、第1画像101及び第2画像102を補正する際に用いられるバックライト制御値を1つにまとめることが可能となる。このため、画像処理装置30が図9に示すように動作する場合であっても、第1バックライト制御値201aを用いて第1画像101を補正し、第2バックライト制御値201bを用いて第2画像102を補正する場合(すなわち、図7に示す比較例)と比べれば画像処理装置30の負荷を低減することができる。
なお、本実施形態においては、画像処理装置30がブリッジチップとして実現され、例えば表示パネル11a及び11bとホストコンピュータ20との間に配置されているものとして説明したが、画像処理装置30は、例えばホストコンピュータ20の内部に組み込まれていてもよい。
また、本実施形態においてはパネルドライバ13a及び13bが表示パネル11a及び11bの各々に対して搭載されているものとして説明したが、例えば表示パネル11a及び11bは1つのパネルドライバによって駆動される構成であってもよい。この場合、画像処理装置30は、表示パネル11a及び11bを駆動するパネルドライバに組み込まれていてもよい。
以下、本実施形態に係る発明を付記する。
[C1]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照明する第2照明部を駆動するための制御値を演算する演算部と
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。
[C2]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
[C1]記載の画像処理装置。
[C3]
前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する[C2]記載の画像処理装置。
[C4]
前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する[C2]記載の画像処理装置。
[C5]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
[C1]記載の画像処理装置。
[C6]
前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C1]記載の画像処理装置。
[C7]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C6]記載の画像処理装置。
[C8]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている表示パネルに並べて表示される前記ユーザの左眼用の第1画像及び当該ユーザの右眼用の第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記表示パネルの少なくとも一部に光を照射するように、当該表示パネルに光を照射する照明部を駆動するための制御値を演算する演算部と
を具備し、
前記照明部は、前記演算された制御値に基づいて前記表示パネルに光を照射するように駆動する
画像処理装置。
[C9]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像に基づいて、前記第1表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部を駆動するための第1制御値を演算する第1演算部と、
前記入力された第2画像に基づいて、前記第2表示パネルの少なくとも一部に光を照射するように、当該第2表示パネルに光を照射する第2照明部を駆動するための第2制御値を演算する第2演算部と、
前記演算された第1制御値及び前記演算された第2制御値を合成することによって第3制御値を生成する制御値生成部と
を具備し、
前記第1照明部は、前記生成された第3制御値に基づいて前記第1表示パネルに光を照射するように駆動する
前記第2照明部は、前記生成された第3制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。
[C10]
ユーザの頭部に装着される表示装置において、
前記表示装置に画像を表示するための画像処理装置と、
前記ユーザの左眼用の第1表示パネルと、
前記ユーザの右眼用の第2表示パネルと、
前記第1表示パネルに光を照射する第1照明部と、
前記第2表示パネルに光を照射する第2照明部と
を具備し、
前記画像処理装置は、
前記第1表示パネルに表示される第1画像及び前記第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、前記第1照明部及び前記第2照明部を駆動するための制御値を演算する演算部と
を含み、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
表示装置。
[C11]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
[C10]記載の表示装置。
[C12]
前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する[C11]記載の表示装置。
[C13]
前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する[C11]記載の表示装置。
[C14]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
[C10]記載の表示装置。
[C15]
前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C9]記載の表示装置。
[C16]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C15]記載の表示装置。
[C17]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置が実行する画像処理方法であって、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力するステップと、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成するステップと、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算するステップと
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理方法。
[C18]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成するステップは、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成するステップを含む
[C17]記載の画像処理方法。
[C19]
前記生成するステップは、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成するステップを含む[C18]記載の画像処理方法。
[C20]
前記生成するステップは、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成するステップを含む[C18]記載の画像処理方法。
[C21]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成するステップは、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成するステップを含む
[C17]記載の画像処理方法。
[C22]
前記演算された制御値に基づいて前記第1画像を補正するステップと、
前記演算された制御値に基づいて前記第2画像を補正するステップと
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C17]記載の画像処理方法。
[C23]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1画像を補正するステップは、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正するステップを含み、
前記第2画像を補正するステップは、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正するステップを含み、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C22]記載の画像処理方法。
[C1]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照明する第2照明部を駆動するための制御値を演算する演算部と
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。
[C2]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
[C1]記載の画像処理装置。
[C3]
前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する[C2]記載の画像処理装置。
[C4]
前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する[C2]記載の画像処理装置。
[C5]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
[C1]記載の画像処理装置。
[C6]
前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C1]記載の画像処理装置。
[C7]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C6]記載の画像処理装置。
[C8]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている表示パネルに並べて表示される前記ユーザの左眼用の第1画像及び当該ユーザの右眼用の第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記表示パネルの少なくとも一部に光を照射するように、当該表示パネルに光を照射する照明部を駆動するための制御値を演算する演算部と
を具備し、
前記照明部は、前記演算された制御値に基づいて前記表示パネルに光を照射するように駆動する
画像処理装置。
[C9]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像に基づいて、前記第1表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部を駆動するための第1制御値を演算する第1演算部と、
前記入力された第2画像に基づいて、前記第2表示パネルの少なくとも一部に光を照射するように、当該第2表示パネルに光を照射する第2照明部を駆動するための第2制御値を演算する第2演算部と、
前記演算された第1制御値及び前記演算された第2制御値を合成することによって第3制御値を生成する制御値生成部と
を具備し、
前記第1照明部は、前記生成された第3制御値に基づいて前記第1表示パネルに光を照射するように駆動する
前記第2照明部は、前記生成された第3制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。
[C10]
ユーザの頭部に装着される表示装置において、
前記表示装置に画像を表示するための画像処理装置と、
前記ユーザの左眼用の第1表示パネルと、
前記ユーザの右眼用の第2表示パネルと、
前記第1表示パネルに光を照射する第1照明部と、
前記第2表示パネルに光を照射する第2照明部と
を具備し、
前記画像処理装置は、
前記第1表示パネルに表示される第1画像及び前記第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、前記第1照明部及び前記第2照明部を駆動するための制御値を演算する演算部と
を含み、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
表示装置。
[C11]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
[C10]記載の表示装置。
[C12]
前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する[C11]記載の表示装置。
[C13]
前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する[C11]記載の表示装置。
[C14]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
[C10]記載の表示装置。
[C15]
前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C9]記載の表示装置。
[C16]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C15]記載の表示装置。
[C17]
ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置が実行する画像処理方法であって、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力するステップと、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成するステップと、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算するステップと
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理方法。
[C18]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成するステップは、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成するステップを含む
[C17]記載の画像処理方法。
[C19]
前記生成するステップは、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成するステップを含む[C18]記載の画像処理方法。
[C20]
前記生成するステップは、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成するステップを含む[C18]記載の画像処理方法。
[C21]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成するステップは、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成するステップを含む
[C17]記載の画像処理方法。
[C22]
前記演算された制御値に基づいて前記第1画像を補正するステップと、
前記演算された制御値に基づいて前記第2画像を補正するステップと
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
[C17]記載の画像処理方法。
[C23]
前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1画像を補正するステップは、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正するステップを含み、
前記第2画像を補正するステップは、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正するステップを含み、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
[C22]記載の画像処理方法。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
HMD…表示装置、11a,11b…表示パネル(第1表示パネル、第2表示パネル)、12a,12b…バックライトユニット(第1照明部、第2照明部)、13a,13b…パネルドライバ、20…ホストコンピュータ、30…画像処理装置、31…画像入力部、32…合成画像生成部、33…制御値演算部、34…補正処理部。
Claims (23)
- ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算する演算部と
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
請求項1記載の画像処理装置。 - 前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する請求項2記載の画像処理装置。
- 前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する請求項2記載の画像処理装置。
- 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
請求項1記載の画像処理装置。 - 前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
請求項1記載の画像処理装置。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
請求項6記載の画像処理装置。 - ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている表示パネルに並べて表示される前記ユーザの左眼用の第1画像及び当該ユーザの右眼用の第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記表示パネルの少なくとも一部に光を照射するように、当該表示パネルに光を照射する照明部を駆動するための制御値を演算する演算部と
を具備し、
前記照明部は、前記演算された制御値に基づいて前記表示パネルに光を照射するように駆動する
画像処理装置。 - ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置において、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像に基づいて、前記第1表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部を駆動するための第1制御値を演算する第1演算部と、
前記入力された第2画像に基づいて、前記第2表示パネルの少なくとも一部に光を照射するように、当該第2表示パネルに光を照射する第2照明部を駆動するための第2制御値を演算する第2演算部と、
前記演算された第1制御値及び前記演算された第2制御値を合成することによって第3制御値を生成する制御値生成部と
を具備し、
前記第1照明部は、前記生成された第3制御値に基づいて前記第1表示パネルに光を照射するように駆動する
前記第2照明部は、前記生成された第3制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理装置。 - ユーザの頭部に装着される表示装置において、
前記表示装置に画像を表示するための画像処理装置と、
前記ユーザの左眼用の第1表示パネルと、
前記ユーザの右眼用の第2表示パネルと、
前記第1表示パネルに光を照射する第1照明部と、
前記第2表示パネルに光を照射する第2照明部と
を具備し、
前記画像処理装置は、
前記第1表示パネルに表示される第1画像及び前記第2表示パネルに表示される第2画像を入力する入力部と、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成する合成画像生成部と、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、前記第1照明部及び前記第2照明部を駆動するための制御値を演算する演算部と
を含み、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
表示装置。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成する
請求項10記載の表示装置。 - 前記合成画像生成部は、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成する請求項11記載の表示装置。
- 前記合成画像生成部は、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成する請求項11記載の表示装置。
- 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記合成画像生成部は、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成する
請求項10記載の表示装置。 - 前記演算された制御値に基づいて前記第1画像を補正する第1補正部と、
前記演算された制御値に基づいて前記第2画像を補正する第2補正部と
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
請求項9記載の表示装置。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1補正部は、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正し、
前記第2補正部は、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正し、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
請求項15記載の表示装置。 - ユーザの頭部に装着される表示装置に画像を表示するための画像処理装置が実行する画像処理方法であって、
前記表示装置に設けられている前記ユーザの左眼用の第1表示パネルに表示される第1画像及び前記表示装置に設けられている前記ユーザの右眼用の第2表示パネルに表示される第2画像を入力することと、
前記入力された第1画像及び第2画像を合成することによって第3画像を生成することと、
前記生成された第3画像に基づいて、前記第1表示パネル及び前記第2表示パネルの少なくとも一部に光を照射するように、当該第1表示パネルに光を照射する第1照明部及び前記第2表示パネルに光を照射する第2照明部を駆動するための制御値を演算することと
を具備し、
前記第1照明部は、前記演算された制御値に基づいて前記第1表示パネルに光を照射するように駆動し、
前記第2照明部は、前記演算された制御値に基づいて前記第2表示パネルに光を照射するように駆動する
画像処理方法。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成することは、前記第1画素値及び前記第2画素値を比較し、前記各画素において画素値が最大となる第3画像を生成することを含む
請求項17記載の画像処理方法。 - 前記生成することは、前記第1画素値によって規定される各画素の彩度及び前記第2画素値によって規定される各画素の彩度を比較し、当該各画素において彩度が最大となる第3画像を生成することを含む請求項18記載の画像処理方法。
- 前記生成することは、前記第1画素値によって規定される各画素の輝度及び前記第2画素値によって規定される各画素の輝度を比較し、当該各画素において輝度が最大となる第3画像を生成することを含む請求項18記載の画像処理方法。
- 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記生成することは、前記第1画素値及び前記第2画素値を比較し、前記各画素における画素値を当該第1画素値及び当該第2画素値の平均値とする第3画像を生成することを含む
請求項17記載の画像処理方法。 - 前記演算された制御値に基づいて前記第1画像を補正することと、
前記演算された制御値に基づいて前記第2画像を補正することと
を更に具備し、
前記第1表示パネルは、前記補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記補正された第2画像を表示するように駆動する
請求項17記載の画像処理方法。 - 前記第1画像は、当該第1画像を構成する各画素で表現すべき色彩に関する第1画素値を含み、
前記第2画像は、当該第2画像を構成する各画素で表現すべき色彩に関する第2画素値を含み、
前記第1画像を補正することは、前記演算された制御値に基づいて前記第1照明部によって前記第1表示パネルに光が照射された場合に、前記入力された第1画像に含まれる第1画素値に従った色彩が表現されるように、当該第1画素値を補正することを含み、
前記第2画像を補正することは、前記演算された制御値に基づいて前記第2照明部によって前記第2表示パネルに光が照射された場合に、前記入力された第2画像に含まれる第2画素値に従った色彩が表現されるように、当該第2画素値を補正することを含み、
前記第1表示パネルは、前記第1画素値が補正された第1画像を表示するように駆動し、
前記第2表示パネルは、前記第2画素値が補正された第2画像を表示するように駆動する
請求項22記載の画像処理方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018-225238 | 2018-11-30 | ||
| JP2018225238A JP2020086381A (ja) | 2018-11-30 | 2018-11-30 | 画像処理装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2020110517A1 true WO2020110517A1 (ja) | 2020-06-04 |
Family
ID=70853367
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2019/041407 Ceased WO2020110517A1 (ja) | 2018-11-30 | 2019-10-21 | 画像処理装置 |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2020086381A (ja) |
| WO (1) | WO2020110517A1 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012046424A1 (ja) * | 2010-10-04 | 2012-04-12 | パナソニック株式会社 | 映像表示装置 |
| JP2012178722A (ja) * | 2011-02-25 | 2012-09-13 | Toshiba Corp | 画像表示装置 |
| JP2016181865A (ja) * | 2015-03-25 | 2016-10-13 | セイコーエプソン株式会社 | 映像処理装置、表示装置、及び、映像処理方法 |
| WO2018055899A1 (ja) * | 2016-09-23 | 2018-03-29 | シャープ株式会社 | 表示装置および表示装置の制御方法。 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000013715A (ja) * | 1998-06-19 | 2000-01-14 | Canon Inc | 頭部装着型表示装置 |
| KR102570950B1 (ko) * | 2015-12-28 | 2023-08-25 | 엘지디스플레이 주식회사 | 개인 몰입형 장치의 표시장치 |
-
2018
- 2018-11-30 JP JP2018225238A patent/JP2020086381A/ja active Pending
-
2019
- 2019-10-21 WO PCT/JP2019/041407 patent/WO2020110517A1/ja not_active Ceased
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012046424A1 (ja) * | 2010-10-04 | 2012-04-12 | パナソニック株式会社 | 映像表示装置 |
| JP2012178722A (ja) * | 2011-02-25 | 2012-09-13 | Toshiba Corp | 画像表示装置 |
| JP2016181865A (ja) * | 2015-03-25 | 2016-10-13 | セイコーエプソン株式会社 | 映像処理装置、表示装置、及び、映像処理方法 |
| WO2018055899A1 (ja) * | 2016-09-23 | 2018-03-29 | シャープ株式会社 | 表示装置および表示装置の制御方法。 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020086381A (ja) | 2020-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20100045694A1 (en) | Image Display Apparatus | |
| US9454939B2 (en) | Display apparatus and electronic apparatus | |
| JP4980336B2 (ja) | 液晶表示装置及びその駆動方法 | |
| CN102483905A (zh) | 显示装置和显示方法 | |
| JP2005309338A (ja) | 画像表示装置および画像表示方法 | |
| US8976204B2 (en) | Display device | |
| CN110574099A (zh) | 基于头部跟踪的场序跳视分离减少 | |
| CN101983400A (zh) | 影像显示装置 | |
| US11170722B2 (en) | Display device with a backlight | |
| US20160379574A1 (en) | Color Sequential Image Method and System Thereof | |
| CN109727581B (zh) | 场序型图像显示装置及图像显示方法 | |
| JP2013161053A (ja) | 画像表示装置 | |
| JP2022509771A (ja) | 輝度制御された環境における局所減光のための装置、システム、および方法 | |
| WO2016104340A1 (ja) | 表示装置及びその駆動方法 | |
| CN102918582A (zh) | 液晶显示装置 | |
| JP2004241962A (ja) | 表示装置及び方法 | |
| WO2020110517A1 (ja) | 画像処理装置 | |
| KR20160092125A (ko) | 표시 장치 | |
| JP2011227200A (ja) | 液晶表示装置 | |
| JP7481828B2 (ja) | 表示装置および制御方法 | |
| JP2008165048A (ja) | カラー表示装置およびカラー表示方法 | |
| WO2018008720A1 (ja) | 表示装置 | |
| JP7377124B2 (ja) | 表示装置 | |
| JP5045987B2 (ja) | 液晶表示装置、表示制御方法、およびプログラム | |
| US12457316B1 (en) | Three-dimensional display device and display method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19891514 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 19891514 Country of ref document: EP Kind code of ref document: A1 |