[go: up one dir, main page]

WO2014002790A1 - 画像処理装置、画像処理方法、及びプログラム - Google Patents

画像処理装置、画像処理方法、及びプログラム Download PDF

Info

Publication number
WO2014002790A1
WO2014002790A1 PCT/JP2013/066435 JP2013066435W WO2014002790A1 WO 2014002790 A1 WO2014002790 A1 WO 2014002790A1 JP 2013066435 W JP2013066435 W JP 2013066435W WO 2014002790 A1 WO2014002790 A1 WO 2014002790A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
processing unit
unit
viewpoint
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2013/066435
Other languages
English (en)
French (fr)
Inventor
一 若林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of WO2014002790A1 publication Critical patent/WO2014002790A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels

Definitions

  • the present disclosure relates to an image processing device, an image processing method, and a program, and more particularly, to an image processing device, an image processing method, and a program that can more quickly superimpose icons and the like for 3D images. .
  • OSD On Screen Display
  • LSI Large Scale Integration
  • the 3D image is an image that is recognized by the viewer as a three-dimensional image, and is, for example, a two-dimensional image for the right eye that is visually recognized by the viewer's right eye, and is visually recognized by the viewer's left eye. It is comprised from the two-dimensional image for left eyes for doing.
  • the superimposition of an icon or the like on the 3D image is realized by superimposing the icon or the like on the right-eye two-dimensional image and the left-eye two-dimensional image constituting the 3D image.
  • the present disclosure has been made in view of such a situation, and is intended to more quickly superimpose icons and the like for 3D images.
  • An image processing apparatus includes a main processing unit that superimposes first superimposition data on a first viewpoint image obtained from a first viewpoint among a plurality of superposition data held in advance.
  • a second viewpoint image obtained from a second viewpoint different from the first viewpoint from among the plurality of superimposing data held in advance in synchronization with the main processing unit.
  • the image processing apparatus includes a slave processing unit that superimposes the image, a first viewpoint image after superimposition, and a 3D image generation unit that generates a 3D image composed of the second viewpoint image after superimposition.
  • a first output unit that outputs the first viewpoint image to the main processing unit and a second output unit that outputs the second viewpoint image to the sub-processing unit may be further provided.
  • the main processing unit communicates a synchronization signal for performing processing in synchronization with the main processing unit to the sub processing unit via a dedicated communication path, and the sub processing unit
  • the first superimposing data can be superimposed on the second viewpoint image in synchronization with the synchronization signal communicated from the main processing unit via a communication path.
  • the main processing unit includes a first holding unit that holds the plurality of superimposing data in advance, a first changing unit that changes an internal state of the main processing unit based on a user input operation, and the first Of the plurality of superposition data held in one holding unit, the first superposition data indicating the internal state of the main processing unit changed by the first change unit is used as the first superposition data.
  • a first superimposing unit that superimposes on the viewpoint image.
  • the secondary processing unit is configured to change the internal state of the secondary processing unit in synchronization with a change in the internal state of the second processing unit that holds the plurality of superimposing data in advance and the main processing unit.
  • a second changing unit that changes the internal state to the same, and among the plurality of superimposition data held in the second holding unit, the second processing unit changed by the second changing unit
  • a second superimposing unit that superimposes the first superimposing data indicating an internal state on the second viewpoint image.
  • the image processing apparatus may be provided with a plurality of sub processing units, and the 3D image generation unit may be obtained from the first viewpoint image after superimposition and the plurality of sub processing units, respectively.
  • a 3D image composed of the second viewpoint image can be generated.
  • An image processing method is an image processing method of an image processing device that generates a 3D image
  • the image processing device includes a main processing unit, a sub processing unit, and a 3D image generation unit
  • the main processing unit superimposes first superposition data among a plurality of superposition data held in advance on a first viewpoint image obtained from a first viewpoint
  • the sub-processing unit includes the main processing.
  • the first superimposition data is superimposed on a second viewpoint image obtained from a second viewpoint different from the first viewpoint among the plurality of superimposition data held in advance in synchronization with the unit.
  • the image processing method includes a step in which the 3D image generation unit generates a 3D image composed of the first viewpoint image after superimposition and the second viewpoint image after superimposition.
  • a program includes a main processing unit that superimposes a first superposition data among a plurality of superposition data held in advance on a first viewpoint image obtained from a first viewpoint.
  • a program for functioning as a 3D image generation unit that generates a 3D image composed of a slave processing unit to be superimposed on an image, the first viewpoint image after being superimposed, and the second viewpoint image after being superimposed. .
  • the first superimposing data is superimposed on the first viewpoint image obtained from the first viewpoint, and the main processing unit Synchronously, among the plurality of superimposing data held in advance by the slave processing unit, the first superimposing data is converted into a second viewpoint image obtained from a second viewpoint different from the first viewpoint.
  • a 3D image composed of the first viewpoint image after superimposition and the second viewpoint image after superimposition is generated.
  • FIG. 1 shows a configuration example of an image processing apparatus 1 according to the present embodiment.
  • the image processing apparatus 1 is, for example, a digital camera that captures a 3D image, and includes lenses 21 1 and 21 2 , imaging elements 22 1 and 22 2 , a main processing unit 23 1 , a sub processing unit 23 2 , and an operation unit 24. , A data storage unit 25, relay units 26 and 27, and a generation display unit 28.
  • the image processing apparatus 1 is described as a digital camera that captures a 3D image.
  • the image processing apparatus 1 is not limited to a digital camera as long as it is a device that performs a process of superimposing an icon or the like on a 3D image.
  • the present technology can also be applied to an apparatus.
  • the image processing apparatus 1 suppresses the communication amount of data communicated between the main processing unit 23 1 and the sub-processing unit 23 2 and quickly superimposes OSD data on the 3D image.
  • the 3D image is an image recognized by the user (viewer) as a three-dimensional image.
  • a 2D image for the right eye for allowing the user's right eye to visually recognize the image and a left eye of the user. It is composed of a left-eye two-dimensional image for visual recognition.
  • the 3D image may be composed of two two-dimensional images (two-dimensional image for right eye and two-dimensional image for left eye) and three or more two-dimensional images obtained from different viewpoints. it can.
  • the 3D image is assumed to be composed of two two-dimensional images, that is, a right-eye two-dimensional image and a left-eye two-dimensional image. To do.
  • the main processing unit 23 1 and the sub processing unit 23 2 hold a plurality of OSD data in advance, so that the OSD is connected between the main processing unit 23 1 and the sub processing unit 23 2. Data is not exchanged.
  • the imaging element 22 1 outputs the right-eye two-dimensional image to the main processing unit 23 1
  • the imaging element 22 2 outputs the left-eye two-dimensional image to the sub-processing unit 23 2 , thereby performing main processing.
  • the two-dimensional image for the right eye and the two-dimensional image for the left eye are not exchanged between the unit 23 1 and the sub-processing unit 23 2 .
  • the image processing apparatus 1 suppresses the communication amount of data communicated between the main processing unit 23 1 and the sub-processing unit 23 2 and reduces the time required for the communication, thereby superimposing the OSD data. To do it quickly.
  • light from the outside (for example, reflected light from a subject) is incident on the image sensor 22 1 via an optical system such as a lens 21 1 . Further, external light is incident on the image sensor 22 2 via an optical system such as the lens 21 2 .
  • the imaging element 22 1 performs photoelectric conversion for converting the light from the lens 21 1 into an image signal, and supplies a right-eye two-dimensional image as an image signal obtained as a result to the main processing unit 23 1 .
  • the imaging element 22 2 performs photoelectric conversion for converting light from the lens 21 2 into an image signal, and supplies a two-dimensional image for the left eye as an image signal obtained as a result to the slave processing unit 23 2 .
  • image sensors 22 1 and 22 2 for example, image sensors such as a CCD (Charge Coupled Device) and a CMOS (Complementary Metal Oxide Semiconductor) are employed.
  • CCD Charge Coupled Device
  • CMOS Complementary Metal Oxide Semiconductor
  • the lens 21 1 and the lens 21 2 are provided at positions separated by a predetermined distance (for example, a distance corresponding to the distance between the human right eye and the left eye).
  • the image sensor 22 1 outputs a two-dimensional image for the right eye obtained by imaging the subject from the first viewpoint to the main processing unit 23 1 .
  • the imaging element 22 2 outputs a left-eye two-dimensional image obtained by capturing an image of a subject from a second viewpoint different from the first viewpoint to the slave processing unit 23 2 .
  • the main processing unit 23 for example, among the plurality of OSD data held in advance, the OSD data representing the internal state of the main processor 23 1, superimposed on the right eye two-dimensional images from the imaging device 22 1, the The right-eye OSD superimposed image obtained by superposition is output to the generation display unit 28.
  • the internal state of the main processing unit 23 1 for example, and the internal state of the main processor 23 1 performs the image stabilization processing for the two-dimensional image for the right eye
  • the main processing unit 23 1 is the right-eye 2
  • An internal state in which a dimensional image is recorded in the data storage unit 25 can be considered. The same applies to the internal state of the sub processor 23 2 .
  • the main processing unit 23 1 changes the internal state of the main processing unit 23 1 based on an operation signal from the operation unit 24.
  • the main processing unit 23 1 controls the sub processing unit 23 2 to perform the same processing as the main processing unit 23 1 .
  • the processing of the main processing unit 23 1 and the sub processing unit 23 2 is performed in synchronization with the synchronization signal generated by the main processing unit 23 1 .
  • the main processing unit 23 1 generates a synchronization signal for synchronizing with the main processing unit 23 1, and transmits the generated synchronization signal to the slave processing unit 23 2 via the relay unit 26.
  • the main processing unit 23 1 generates instruction data for instructing the sub-processing unit 23 2 to change the internal state, output a left-eye OSD superimposed image to be described later, and the like.
  • the instruction data is transmitted to the slave processing unit 23 2 via the relay unit 27.
  • the instruction data for instructing the change of the internal state is referred to as first instruction data.
  • the instruction data that instructs the output of the left-eye OSD superimposed image is referred to as second instruction data. Note that the instruction data is not limited to the first instruction data and the second instruction data.
  • the sub processor 23 2 receives the synchronization signal transmitted from the main processor 23 1 via the relay unit 26 and the instruction data transmitted from the main processor 23 1 via the relay unit 27.
  • the sub processor 23 2 performs the same processing as the main processor 23 1 in synchronization with the synchronization signal from the relay unit 26 based on the instruction data from the relay unit 27.
  • the slave processing unit 23 2 changes the internal state of the slave processing unit 23 2 in synchronization with the synchronization signal from the relay unit 26 based on the first instruction data from the relay unit 27. Change to the same internal state as 1 .
  • the change of the internal state of the sub processor 23 2 is performed at (almost) the same timing as the change of the internal state of the main processor 23 1 .
  • the slave processing unit 23 2 synchronizes the left eye from the image sensor 22 2 with OSD data representing the internal state of the slave processing unit 23 2 among a plurality of OSD data held in advance in synchronization with the synchronization signal. Is superimposed on the two-dimensional image. It is assumed that the sub processor 23 2 is instructed to superimpose OSD data by instruction data from the relay unit 27.
  • the superimposition of OSD data in the slave processing unit 23 2 is performed at the same timing as the superimposition timing of the OSD data in the main processing unit 23 1 .
  • the secondary processing unit 23 2 generates the left-eye OSD superimposed image obtained by the superimposition based on the second instruction data from the relay unit 27 in synchronization with the synchronization signal from the relay unit 26, To 28.
  • the output of the left-eye OSD superimposed image by the sub-processing unit 23 2 is performed at the same timing as the output timing of the right-eye OSD superimposed image from the main processing unit 23 1 .
  • Operation unit 24 is composed of operation buttons to be operated by the user, in response to being operated by the user, an operation signal corresponding to a user operation, and supplies to the main processor 23 1.
  • the user can change the internal state of the image processing apparatus 1, that is, the internal state of the main processing unit 23 1 and the secondary processing unit 23 2 by operating the operation unit 24.
  • the data storage unit 25 is, for example, a flash memory or the like, and stores the right-eye two-dimensional image from the main processing unit 23 1 and the left-eye two-dimensional image from the sub-processing unit 23 2 .
  • the data storage unit 25 stores in advance a program executed by the main processing unit 23 1 and the sub-processing unit 23 2 .
  • the relay unit 26 between the main processing unit 23 1 and the sub processing unit 23 2 , a synchronization signal output from the main processing unit 23 1 and a response output from the sub processing unit 23 2 (from the main processing unit 23 1 Response to the data).
  • the relay unit 27 between the main processor 23 1 and the slave processing unit 23 2, instruction data and output from the main processing unit 23 1, output from the slave processing unit 23 2, the response to the instruction data Relay etc.
  • the synchronization signal is communicated via a dedicated communication path (communication path via the relay unit 26) different from the communication path for communicating instruction data and the like.
  • the generation display unit 28 based on the OSD superimposed image for the right eye from the main processing unit 23 1 and the OSD superimposed image for the left eye from the sub-processing unit 23 2 , the OSD superimposed image for the right eye and the OSD superimposed for the left eye.
  • a 3D image composed of images is generated and displayed on a built-in display unit (not shown).
  • FIG. 2 shows a detailed configuration example of the main processing unit 23 1 , the sub-processing unit 23 2 , and the generation display unit 28.
  • the main processing unit 23 1 includes an image processing unit 41 1 , an AD (analog to digital) conversion unit 42 1 , a CPU (central processing unit) 43 1 , a holding unit 44 1 , a RAM (random access memory) 45 1 , and a superposition unit 46. 1 and a communication unit 47 1 .
  • a right-eye two-dimensional image is supplied from the image sensor 22 1 to the image processing unit 41 1 .
  • the image processing unit 41 1 performs image processing such as gamma correction processing, white balance processing, and camera shake correction processing on the two-dimensional image for the right eye from the image sensor 22 1, and performs two-dimensional processing for the right eye after the image processing.
  • the image is supplied to the AD conversion unit 42 1 .
  • the AD conversion unit 42 1 performs AD conversion for converting the two-dimensional image for the right eye as an analog signal from the image processing unit 41 1 into the two-dimensional image for the right eye as a digital signal, and performs the right conversion as a digital signal. a two-dimensional image for the eye, and supplies the CPU 43 1.
  • the CPU 43 1 controls the image processing unit 41 1 , the AD conversion unit 42 1 , the superimposition unit 46 1 , and the communication unit 47 1 .
  • CPU 43 1 generates the synchronization signal in synchronization with the generated synchronization signal, performs a predetermined process.
  • the CPU 43 1 changes the internal state of the main processing unit 23 1 based on the operation signal from the operation signal 25.
  • State information indicating the internal state of the main processor 23 1, for example, is held in the built-in memory or the like (not shown) of the CPU 43 1.
  • the CPU 43 1 uses the first instruction data for instructing to change the internal state of the sub processor 23 2 to the same internal state as the main processor 23 1 , and the left eye from the sub processor 23 2. Second instruction data or the like for instructing to output the OSD superimposed image is generated. Then, the CPU 43 1 supplies the generated first instruction data, second instruction data, and the like together with the synchronization signal to the communication unit 47 1 .
  • the CPU 43 1 controls the superimposing unit 46 1 to perform processing for superimposing OSD data representing the internal state of the main processing unit 23 1 on the right-eye two-dimensional image.
  • the CPU 43 1 supplies the right-eye two-dimensional image from the AD conversion unit 42 1 to the RAM 45 1 and temporarily holds it.
  • the CPU 43 1 identifies the internal state of the main processing unit 23 1 based on the state information held in a built-in memory (not shown). Furthermore, for example, CPU 43 1, among the plurality of OSD data previously held in the holding unit 44 1, the OSD data representing the internal state of the main processor 23 1 were identified, read from the holding unit 44 1, RAM 45 1 To temporarily hold.
  • CPU 43 1 from RAM 45 1 reads out the retained of the right-eye 2-D image and OSD data, and supplies the superposed portions 46 1 to perform the overlap of the OSD data to the two-dimensional image for the right eye.
  • the holding unit 44 1 holds in advance a plurality of OSD data each representing the internal state of the main processing unit 23 1 .
  • RAM 45 1 is adapted to temporarily hold the data writing has been instructed from the CPU 43 1, the data read is instructed from CPU 43 1, and supplies the CPU 43 1.
  • Superimposing unit 46 to the right eye two-dimensional images from the CPU 43 1, likewise superimposes the OSD data from the CPU 43 1, supplies the right-eye OSD superimposed image obtained by the superposition, on the generation and display unit 28 To do.
  • the communication unit 47 1 supplies the synchronization signal from the main processing unit 23 1 to the communication unit 47 2 via the relay unit 26. Further, the communication unit 47 1 supplies the first instruction data, the second instruction data, and the like from the main processing unit 23 1 to the communication unit 47 2 via the relay unit 27.
  • the communication unit 47 1 supplies data such as a response returned from the slave processing unit 23 2 via the relay unit 26 or the relay unit 27 to the CPU 43 1 .
  • the slave processing unit 23 2 includes an image processing unit 41 2 , an AD conversion unit 42 2 , a CPU 43 2 , a holding unit 44 2 , a RAM 45 2 , a superimposing unit 46 2 , and a communication unit 47 2 .
  • a left-eye two-dimensional image is supplied from the image sensor 22 2 to the image processing unit 41 2 .
  • the image processing unit 41 2 performs image processing such as gamma correction processing, white balance processing, and camera shake correction processing on the two-dimensional image for the left eye from the image sensor 22 2, and performs two-dimensional processing for the left eye after image processing. images, and supplies to the AD conversion unit 42 2.
  • the AD conversion unit 42 2 performs AD conversion for converting the two-dimensional image for the left eye as an analog signal from the image processing unit 41 1 into the two-dimensional image for the left eye as a digital signal, and performs left conversion as a digital signal. a two-dimensional image for the eye, and supplies the CPU 43 2.
  • the CPU 43 2 receives a synchronization signal transmitted from the CPU 43 1 of the main processing unit 23 1 via the communication unit 47 1 , the relay unit 26, and the communication unit 47 2 , and synchronizes with the received synchronization signal,
  • the image processing unit 41 2 , AD conversion unit 42 2 , superimposing unit 46 2 , and communication unit 47 2 are controlled.
  • the CPU 43 2 uses the first instruction data and the second instruction data transmitted from the CPU 43 1 of the main processing unit 23 1 via the communication unit 47 1 , the relay unit 27, and the communication unit 47 2. Etc.
  • CPU 43 2 in synchronization with the received synchronization signal also performs the processing instructed by the first instruction data and the second instruction data received.
  • the timing at which the change of the internal state of the main processing unit 23 1 is performed in synchronization with the synchronization signal is changed.
  • state information indicating the internal state of the sub processor 23 2 is held in, for example, a built-in memory (not shown) of the CPU 43 2 .
  • CPU 43 2 when receiving the second instruction data for instructing the output of the left-eye OSD superimposed image, in synchronization with the synchronizing signal, for the right eye from the main processing unit 23 1 of the overlapping portion 46 2 timing the same timing OSD superimposed image is output, to output the OSD superimposed image for the left eye superimposing unit 46 1.
  • the CPU 43 2 controls the superimposing unit 46 2 to perform a process of superimposing OSD data representing the internal state of the slave processing unit 23 2 on the left-eye two-dimensional image. Assume that the CPU 43 2 is instructed to superimpose OSD data by instruction data output from the CPU 43 1 and supplied.
  • the CPU 43 2 supplies the left-eye two-dimensional image from the AD conversion unit 42 2 to the RAM 45 2 and temporarily holds it.
  • the CPU 43 2 identifies the internal state of the sub processor 23 2 based on the state information held in a built-in memory (not shown). Furthermore, for example, CPU 43 2, of the plurality of OSD data previously held in the holding unit 44 2, the OSD data representing the internal state of the slave processor 23 2 identified, read from the storage portion 44 2, RAM 45 2 To temporarily hold.
  • CPU 43 2 from RAM 45 2, reads out the retained two-dimensional image and OSD data for the left eye, and supplies to the superimposing unit 46 2, and superimposes the OSD data into two-dimensional image for the left eye.
  • Holding portion 44 2 previously holds a plurality of OSD data respectively representing the internal state of the slave processing unit 23 2. Note that the holding portion 44 2, the same OSD data and a plurality of OSD data holding unit 44 1 is held is previously held.
  • RAM 45 2 is adapted to temporarily hold the data writing has been instructed from the CPU 43 2, the data read is instructed from the CPU 43 2, and supplies the CPU 43 2.
  • the superimposing unit 46 2 superimposes the OSD data from the CPU 43 2 on the two-dimensional image for the left eye from the CPU 43 2 , and supplies the OSD superimposed image for the left eye obtained by the superimposition to the generation display unit 28. To do.
  • the communication unit 47 2 supplies the synchronization signal from the relay unit 26 to the CPU 43 2, and supplies the first instruction data, the second instruction data, and the like from the relay unit 27 to the CPU 43 2 .
  • the communication unit 47 2 transmits a response from the relay unit 26 to the communication unit 47 1 via the relay unit 26. Further, the communication unit 47 2 transmits a response from the relay unit 27 to the communication unit 47 1 via the relay unit 27.
  • the generation display unit 28 includes a 3D image generation unit 61, a display control unit 62, and a display unit 63.
  • 3D image generation unit 61 a right-eye OSD overlapping image supplied from the superimposing unit 461 of the main processing unit 23 1, the left-eye OSD overlapping image supplied from the superimposing unit 46 2 of the slave processing unit 23 2 Based on this, a 3D image composed of the OSD superimposed image for the right eye and the OSD superimposed image for the left eye is generated and supplied to the display control unit 62.
  • the display control unit 62 supplies the 3D image from the 3D image generation unit 61 to the display unit 63 for display.
  • the display unit 63 is, for example, an LCD (liquid crystal display) or the like, and displays a 3D image according to control from the display control unit 62.
  • the display unit 63 is provided with a parallax barrier, a lenticular lens, or the like that optically separates the right-eye two-dimensional image and the left-eye two-dimensional image included in the 3D image.
  • the display unit 63 displays the OSD superimposed image for the left eye included in the 3D image so as to be visually recognized by the user's left eye using a parallax barrier, a lenticular lens, or the like, and for the right eye included in the 3D image.
  • the OSD superimposed image is displayed so as to be visually recognized by the user's right eye.
  • the display unit 63 may cause the user to visually recognize the 3D image by alternately displaying the two-dimensional image for the right eye and the two-dimensional image for the left eye. In this case, the user needs to wear 3D glasses or the like that alternately block the field of view of the right eye and the left eye.
  • This display process is started, for example, when the image processing apparatus 1 is powered on.
  • step S21 the processing branches depending on whether the main subject of processing is the main processing unit 23 1 or the sub processing unit 23 2 .
  • step S21 when the processing subject is the main processing unit 23 1 , the main processing unit 23 1 advances the processing to step S23, and when the processing subject is the sub processing unit 23 2 , the sub processing unit 23 In step 2 , the process proceeds to step S22.
  • step S22 CPU 43 2 of the slave processing unit 23 2, the CPU 43 1 of the main processing unit 23 1, the communication unit 47 1, via the relay unit 27 and the communication unit 47 2, the internal state of the slave processor 23 2 It is determined whether or not first instruction data for instructing change has been received.
  • the CPU 43 2 of the slave processing unit 23 2 waits to determine that the first instruction data has been received, and then proceeds to step S25.
  • step S25 the CPU 43 2 of the slave processing unit 23 2 synchronizes with the synchronization signal output and supplied from the CPU 43 1 of the main processing unit 23 1 based on the received first instruction data. The same processing as 23 1 is performed.
  • a synchronization signal is supplied to the CPU 43 2 of the slave processing unit 23 2 from the CPU 43 1 of the main processing unit 23 1 via the communication unit 47 1 , the relay unit 26, and the communication unit 47 2 .
  • the processing performed by the secondary processing unit 23 2 will be described together with the processing performed by the main processing unit 23 1 in steps S25 to S30.
  • step S23 the CPU 43 1 of the main processing unit 23 1 receives an operation signal from the operation unit 24. If the CPU 43 1 of the main processing unit 23 1 does not receive an operation signal from the operation unit 24, the process proceeds to step S26, and the subsequent processing is performed.
  • step S24 the CPU 43 1 generates first instruction data for instructing the change of the internal state of the slave processing unit 23 2 based on the operation signal from the operation unit 24, the communication unit 47 1 , the relay unit 27, The data is supplied to the CPU 43 2 of the slave processing unit 23 2 via the communication unit 47 2 .
  • step S25 the CPU 43 1 changes the internal state of the main processing unit 23 1 based on the operation signal from the operation unit 24.
  • the operation unit 24 sends an operation signal corresponding to the user's recording operation to the CPU 43 1. Output to.
  • the CPU 43 1 changes the internal state of the main processing unit 23 1 to an internal state in which recording processing is performed.
  • the CPU 43 2 of the slave processing unit 23 2 synchronizes with the synchronization signal based on the first instruction data received in step S22, at (almost) the same timing as the change of the internal state of the main processing unit 23 1. Then, the internal state of the sub processor 23 2 is changed to the same internal state as that of the sub processor 23 1 .
  • step S26 the image pickup element 221 is photoelectrically converted transmitted light from the lens 21 1, and outputs the result to the right eye two-dimensional images obtained, the image processing unit 41 of the main processing unit 23 1.
  • the imaging element 22 lens photoelectrically converting the transmitted light from 21 2, and outputs the result to the two-dimensional image for the left eye obtained, the image processing unit 41 2 of the slave processing unit 23 2.
  • step S27 the image processing unit 41 1 performs image processing on the right eye two-dimensional images from the imaging device 22 1, the two-dimensional image for the right eye after the image processing, and supplies to the AD converter section 42 1.
  • the image processing unit 41 2 performs image processing on the left-eye 2-D image from the image pickup element 22 2, the two-dimensional image for the left eye after the image processing, and supplies to the AD conversion unit 42 2.
  • step S28 the AD converter section 42 1, a right two-dimensional image for the eye from the image processing unit 41 1 to AD conversion, and supplies the CPU 43 1. Then, the CPU 43 1 supplies the right-eye two-dimensional image from the AD conversion unit 42 1 to the RAM 45 1 and temporarily holds it.
  • the AD conversion unit 42 2 the left two-dimensional image for the eye from the image processing unit 41 2 performs AD conversion and supplies it to the CPU 43 2. Then, the CPU 43 2 supplies the left-eye two-dimensional image from the AD conversion unit 42 2 to the RAM 45 2 and temporarily holds it.
  • step S29 the main processing unit 23 1 of the CPU 43 1, based on the status information held in the built-in memory (not shown) to identify the internal state of the main processor 23 1.
  • CPU 43 1 among the plurality of OSD data stored in advance in storage portion 44 1, the OSD data representing the internal state of the main processor 23 1 were identified, read from the holding unit 44 1, supplied to the RAM 45 1 And hold it temporarily.
  • CPU 43 2 of the slave processing unit 23 based on the state information held in the built-in memory (not shown) to identify the internal state of the slave processing unit 23 2.
  • step S30 CPU 43 1, the two-dimensional image and OSD data for the right eye is held in RAM 45 1, is read from RAM 45 1, and supplies the superimposed portion 46 1.
  • CPU 43 2 is the 2-dimensional image and OSD data for the left eye is held in RAM 45 2, it is read from RAM 45 2, and supplies the superimposed portion 46 2.
  • the superimposing unit 46 2 CPU 43 the OSD data supplied from the 2 by superimposing a two-dimensional image for the left eye supplied likewise from the CPU 43 2, and generates an OSD superimposed image for the left eye.
  • step S31 when the subject of processing is the main processing unit 23 1 , the main processing unit 23 1 advances the processing to step S33, and when the subject of processing is the sub processing unit 23 2 , the sub processing unit 23 2 Then, the process proceeds to step S32.
  • step S32 CPU 43 2 of the slave processing unit 23 2, the CPU 43 1 of the main processing unit 23 1, the communication unit 47 1, via the relay unit 27, and a communication unit 47 2, the OSD superimposing image for the left eye output It is determined whether or not the second instruction data for instructing is received.
  • the CPU 43 2 of the slave processing unit 23 2 waits to determine that the second instruction data has been received, and advances the process to step S34.
  • step S33 the CPU 43 1 of the main processing unit 23 1 generates second instruction data, and sends it to the CPU 43 2 of the slave processing unit 23 2 via the communication unit 47 1 , the relay unit 27, and the communication unit 47 2. Send.
  • step S34 the superimposing unit 46 1 of the main processing unit 23 1 outputs the right-eye OSD superimposed image generated in the immediately preceding step S30 to the 3D image generating unit 61 of the generation display unit 28.
  • superimposing unit 46 2 of the slave processing unit 23 based on the second instruction data received from CPU 43 1 of the main processing unit 23 1, already generated OSD superimposed image for the left eye in step S30 of immediately preceding generation
  • the data is output to the 3D image generation unit 61 of the display unit 28.
  • the left eye OSD superimposed image is output from the superimposing unit 46 2 at the same timing as the right eye OSD superimposed image is output from the superimposing unit 46 1 .
  • step S35 3D image generation unit 61 of generating the display unit 28, and a right-eye OSD overlapping images from the superimposing unit 461, on the basis of the left-eye OSD overlapping images from the superimposing unit 46 2, OSD for the right eye A 3D image including the superimposed image and the left-eye OSD superimposed image is generated and supplied to the display control unit 62.
  • step S36 the display control unit 62 supplies the 3D image from the 3D image generation unit 61 to the display unit 63 for display.
  • the display unit 63 displays the OSD superimposed image for the left eye included in the 3D image so that the left eye of the user can visually recognize the OSD superimposed image for the right eye included in the 3D image. It is displayed so that it can be visually recognized.
  • step S37 for example, the CPU 43 1 of the main processing unit 23 1 determines whether or not to continue the display process based on an operation signal from the operation unit 24. Returning to step S21, the same processing is performed thereafter.
  • step S37 when the main processing unit 23 1 determines not to continue the display process, the display process ends.
  • the main processing unit 23 1 does not need to communicate the OSD data for the left-eye two-dimensional image to the sub-processing unit 23 2 , so that the time required for such communication can be omitted.
  • the image sensor 22 1 outputs a right-eye two-dimensional image obtained by photoelectric conversion of the light from the lens 21 1 to the main processing unit 23 1 , and the image sensor 22 2 has the lens 21 2.
  • the two-dimensional image for the left eye obtained by photoelectric conversion of the light from is output to the sub processor 23 2 .
  • the communication unit 47 1 is provided with the relay unit 26 for communicating the synchronization signal and the relay unit 27 for communicating the instruction data and the like separately, the delivery of the synchronization signal is delayed. Thus, it is possible to prevent a situation in which synchronization cannot be established between the main processing unit 23 1 and the sub-processing unit 23 2 .
  • the main processing unit 23 1 and the sub processing unit 23 2 are configured in the same manner, the main processing unit 23 1 and the sub processing unit 23 2 can be manufactured in the same manufacturing process. For this reason, the manufacturing cost of the image processing apparatus 1 can be reduced.
  • main processing unit 23 1 and the sub-processing unit 23 2 are manufactured using parts common to a conventional imaging device that images a subject, it is not necessary to develop an additional electronic circuit or software, Costs for development can be reduced.
  • the main processing unit 23 1 superimposes the OSD data on the two-dimensional image for the right eye from the image sensor 22 1 , and the slave processing unit 23 2 for the left eye from the image sensor 22 2 .
  • the OSD data was superimposed on the 3D image by superimposing the OSD data on the two-dimensional image.
  • the OSD data may be superimposed on the 3D image stored in the data storage unit 25.
  • the main processing unit 23 1 reads the right-eye two-dimensional image included in the 3D image from the data storage unit 25, and superimposes the OSD data on the read right-eye two-dimensional image. Further, the sub processor 23 2 reads the left-eye two-dimensional image included in the 3D image from the data storage unit 25, and superimposes the OSD data on the read left-eye two-dimensional image.
  • one data storage unit 25 is provided in the image processing apparatus 1, as shown in FIG. 1, one data storage unit 25 is provided.
  • the main processing unit 23 1 may include the data storage unit 25 1 and the sub-processing unit 23 2 may include the data storage unit 25 2 . It is assumed that the same 3D image is stored in the data storage unit 25 1 and the data storage unit 25 2 .
  • the main processing unit 23 1 reads the right-eye two-dimensional image included in the 3D image from the built-in data storage unit 25 1 and superimposes the OSD data on the read right-eye two-dimensional image. Further, the sub processor 23 2 reads the left-eye two-dimensional image included in the 3D image from the built-in data storage unit 25 2 and superimposes the OSD data on the read left-eye two-dimensional image.
  • the image processing apparatus 1 has been described as including one slave processing unit 23 2, can be configured to include two slave processing unit 23 2 and 23 3.
  • the image processing apparatus 1 is also possible as will the included lens 21 3 and the image pickup element 22 3, the image pickup element 22 3, the light from the lens 21 3 and photoelectric conversion, the image pickup device 22 1 and 22 It acquires two-dimensional images of different viewpoints from the image obtained from 2, and outputs to the slave processing unit 23 3.
  • the sub processor 23 3 outputs, from the image sensor 22 3 , OSD data indicating the internal state of the sub processor 23 3 changed by the control from the main processor 23 1 among the plurality of OSD data held in advance.
  • the OSD superimposed image obtained by superimposing on the two-dimensional image is output to the 3D image generating unit 61.
  • the 3D image generation unit 61 generates a 3D image including the OSD superimposed image from the main processing unit 23 1 , the OSD superimposed image from the sub processing unit 23 2, and the OSD superposed image from the sub processing unit 23 3 , and performs display control. To the unit 62.
  • the display control unit 62 supplies the 3D image from the 3D image generation unit 61 to the display unit 63 for display.
  • N is a natural number of 3 or more sub-processing units 23 2 to 23 N + 1 may be provided. it can.
  • a main processing unit that superimposes first superposition data among a plurality of superposition data held in advance on a first viewpoint image obtained from a first viewpoint, and in synchronization with the main processing unit
  • a slave processing unit that superimposes the first superimposition data on a second viewpoint image obtained from a second viewpoint different from the first viewpoint among the plurality of superimposition data held in advance
  • An image processing apparatus comprising: the first viewpoint image after superimposition; and a 3D image generation unit that generates a 3D image composed of the second viewpoint image after superimposition.
  • the image processing apparatus communicates a synchronization signal for performing processing in synchronization with the main processing unit to the sub processing unit via a dedicated communication path.
  • the main processing unit includes a first holding unit that holds the plurality of superimposing data in advance, and a first changing unit that changes an internal state of the main processing unit based on a user input operation.
  • the first superimposing data indicating the internal state of the main processing unit changed by the first changing unit among the plurality of superimposing data held in the first holding unit,
  • the image processing apparatus according to (1) or (2) further including a first superimposing unit that superimposes on the first viewpoint image.
  • the sub processing unit synchronizes with the change of the internal state of the second processing unit that stores the plurality of superimposing data in advance and the internal state of the main processing unit.
  • the second changing unit that changes to the same internal state as the main processing unit, and the slave changed by the second changing unit.
  • the image processing apparatus according to (4) further including: a second superimposing unit that superimposes the first superimposing data indicating an internal state of the processing unit on the second viewpoint image.
  • the image processing apparatus includes a plurality of sub processing units, and the 3D image generation unit is obtained from the first viewpoint image after superimposition and the plurality of sub processing units, respectively.
  • the image processing device according to any one of (1) to (5), wherein a 3D image configured by the second viewpoint image is generated.
  • the image processing apparatus includes a main processing unit, a sub processing unit, and a 3D image generation unit, and the main processing unit holds a plurality of images in advance.
  • the first superimposing data is superimposed on the first viewpoint image obtained from the first viewpoint, and the slave processing unit holds in advance in synchronization with the main processing unit.
  • the first superimposition data is superimposed on a second viewpoint image obtained from a second viewpoint different from the first viewpoint, and the 3D image generation unit
  • An image processing method including a step of generating a 3D image composed of the first viewpoint image and the superimposed second viewpoint image.
  • a main processing unit that superimposes the first superposition data among a plurality of superposition data held in advance on the first viewpoint image obtained from the first viewpoint, and the main processing unit.
  • a sub-process for superimposing the first superimposition data on a second viewpoint image obtained from a second viewpoint different from the first viewpoint among the plurality of superposition data held in synchronization And a program for functioning as a 3D image generation unit that generates a 3D image composed of the first viewpoint image after superimposition and the second viewpoint image after superimposition.
  • the series of processes described above can be executed by hardware or software, for example.
  • a program constituting the software may execute various functions by installing a computer incorporated in dedicated hardware or various programs. For example, it is installed from a program recording medium in a general-purpose computer or the like.
  • FIG. 4 shows a configuration example of a computer that executes the above-described series of processing by a program.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the CPU 81 is also connected with an input / output interface 85 via the bus 84.
  • the input / output interface 85 is connected to an input unit 86 made up of a keyboard, a mouse, a microphone, etc., and an output unit 87 made up of a display, a speaker, etc.
  • the CPU 81 executes various processes in response to commands input from the input unit 86. Then, the CPU 81 outputs the processing result to the output unit 87.
  • the storage unit 88 connected to the input / output interface 85 is composed of, for example, a hard disk, and stores programs executed by the CPU 81 and various data.
  • the communication unit 89 communicates with an external device via a network such as the Internet or a local area network.
  • the program may be acquired via the communication unit 89 and stored in the storage unit 88.
  • the drive 90 connected to the input / output interface 85 drives a removable medium 91 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and drives the program or data recorded therein. Etc. The acquired program and data are transferred to and stored in the storage unit 88 as necessary.
  • a recording medium for recording (storing) a program installed in a computer and ready to be executed by the computer is a magnetic disk (including a flexible disk), an optical disk (CD-ROM (Compact Disc- Removable media 91, which is a package media made up of a read-only memory, DVD (digital versatile disc), a magneto-optical disk (including MD (mini-disc)), or a semiconductor memory, or the program is temporarily or It is composed of a ROM 82 that is permanently stored, a hard disk that constitutes the storage unit 88, and the like.
  • CD-ROM Compact Disc- Removable media 91
  • MD magneto-optical disk
  • semiconductor memory or the program is temporarily or It is composed of a ROM 82 that is permanently stored, a hard disk that constitutes the storage unit 88, and the like.
  • Recording of a program on a recording medium is performed using a wired or wireless communication medium such as a local area network, the Internet, or digital satellite broadcasting via a communication unit 89 that is an interface such as a router or a modem as necessary. Is called.
  • a wired or wireless communication medium such as a local area network, the Internet, or digital satellite broadcasting
  • a communication unit 89 that is an interface such as a router or a modem as necessary. Is called.
  • steps describing the series of processes described above are not limited to the processes performed in time series according to the described order, but are not necessarily performed in time series, either in parallel or individually.
  • the process to be executed is also included.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

　本開示は、３Ｄ画像を対象としたアイコン等の重畳を、より迅速に行うことができるようにする画像処理装置、画像処理方法、及びプログラムに関する。 主処理部が、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳し、従処理部が、主処理部に同期して、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳し、３Ｄ画像生成部が、重畳後の第１の視点画像と、重畳後の第２の視点画像により構成される３Ｄ画像を生成する。本開示は、例えば、３Ｄ画像を生成する画像処理装置に適用できる。

Description

画像処理装置、画像処理方法、及びプログラム
　本開示は、画像処理装置、画像処理方法、及びプログラムに関し、特に、例えば、３Ｄ画像を対象としたアイコン等の重畳を、より迅速に行えるようにした画像処理装置、画像処理方法、及びプログラムに関する。
　従来、例えば、１のLSI(Large Scale Integration)を用いて、３Ｄ画像にアイコン等を重畳するOSD(On Screen Display)重畳技術が存在する（例えば、特許文献１及び２参照）。
　ここで、３Ｄ画像とは、立体的な画像として視認者により認識される画像であり、例えば、視認者の右眼に視認させるための右眼用２次元画像と、視認者の左眼に視認させるための左眼用２次元画像から構成される。
　このため、３Ｄ画像に対するアイコン等の重畳は、３Ｄ画像を構成する右眼用２次元画像と左眼用２次元画像に、それぞれ、アイコン等を重畳することにより実現される。
特開２０１１－５５１４８号公報 特開２０１１－１３５２５２号公報
　ところで、従来のOSD重畳技術によれば、１のLSIにより、アイコン等の重畳が行われるため、アイコン等の重畳を、比較的、速やかに行うことができなかった。
　本開示は、このような状況に鑑みてなされたものであり、３Ｄ画像を対象としたアイコン等の重畳を、より迅速に行えるようにするものである。
　本開示の一側面の画像処理装置は、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部とを含む画像処理装置である。
　前記第１の視点画像を、前記主処理部に出力する第１の出力部と、前記第２の視点画像を、前記従処理部に出力する第２の出力部とをさらに設けることができる。
　前記主処理部は、前記主処理部と同期して処理を行わせるための同期信号を、専用の通信経路を経由して、前記従処理部に通信し、前記従処理部は、前記専用の通信経路を経由して前記主処理部から通信される前記同期信号に同期して、前記第１の重畳用データを、前記第２の視点画像に重畳することができる。
　前記主処理部は、前記複数の重畳用データを予め保持する第１の保持部と、ユーザの入力操作に基づいて、前記主処理部の内部状態を変更する第１の変更部と、前記第１の保持部に保持されている前記複数の重畳用データのうち、前記第１の変更部により変更された前記主処理部の内部状態を示す前記第１の重畳用データを、前記第１の視点画像に重畳する第１の重畳部とを有することができる。
　前記従処理部は、前記複数の重畳用データを予め保持する第２の保持部と、前記主処理部の内部状態の変更に同期して、前記従処理部の内部状態を、前記主処理部と同一の内部状態に変更する第２の変更部と、前記第２の保持部に保持されている前記複数の重畳用データのうち、前記第２の変更部により変更された前記従処理部の内部状態を示す前記第１の重畳用データを、前記第２の視点画像に重畳する第２の重畳部とを有することができる。
　前記画像処理装置には、複数の前記従処理部を設けることができ、前記３Ｄ画像生成部は、重畳後の前記第１の視点画像と、前記複数の従処理部からそれぞれ得られる、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成することができる。
　本開示の一側面の画像処理方法は、３Ｄ画像を生成する画像処理装置の画像処理方法であって、前記画像処理装置は、主処理部と、従処理部と、３Ｄ画像生成部を含み、前記主処理部が、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳し、前記従処理部が、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳し、前記３Ｄ画像生成部が、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成するステップを含む画像処理方法である。
　本開示の一側面のプログラムは、コンピュータを、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部として機能させるためのプログラムである。
　本開示によれば、主処理部が予め保持する複数の重畳用データのうち、第１の重畳用データが、第１の視点から得られる第１の視点画像に重畳され、前記主処理部に同期して、従処理部が予め保持する前記複数の重畳用データのうち、前記第１の重畳用データが、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳され、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像が生成される。
　本開示によれば、３Ｄ画像を対象としたアイコン等の重畳を、より迅速に行うことが可能となる。
本技術を適用した画像処理装置の構成例を示すブロック図である。 主処理部、従処理部、及び生成表示部の詳細な構成例を示すブロック図である。 画像処理装置が行う表示処理を説明するためのフローチャートである。 コンピュータの構成例を示すブロック図である。
　以下、本開示における実施の形態（以下、本実施の形態という）について説明する。なお、説明は以下の順序で行う。
　１．本実施の形態（主処理部と従処理部が、それぞれ、OSDデータを予め保持しているときの一例）
　２．変形例
＜１．本実施の形態＞
[画像処理装置１の構成例]
　図１は、本実施の形態である画像処理装置１の構成例を示している。
　この画像処理装置１は、例えば、３Ｄ画像を撮像するデジタルカメラ等であり、レンズ２１1及び２１2、撮像素子２２1及び２２2、主処理部２３1、従処理部２３2、操作部２４、データ記憶部２５、中継部２６及び２７、並びに生成表示部２８から構成される。
　本実施の形態では、画像処理装置１は、３Ｄ画像を撮像するデジタルカメラとして説明するが、３Ｄ画像にアイコン等を重畳する処理を行う装置であれば、デジタルカメラに限定されず、どのような装置にも本技術を適用することができる。
　なお、この画像処理装置１は、主処理部２３1と従処理部２３2の間で通信されるデータの通信量を抑制して、３Ｄ画像に対するOSDデータの重畳を迅速に行うものである。
　ここで、３Ｄ画像とは、立体的な画像としてユーザ（視認者）により認識される画像であり、例えば、ユーザの右眼に視認させるための右眼用２次元画像と、ユーザの左眼に視認させるための左眼用２次元画像から構成される。
　なお、３Ｄ画像としては、２枚の２次元画像（右眼用２次元画像及び左眼用２次元画像）の他、３枚以上の、それぞれ異なる視点から得られる２次元画像により構成することができる。
　しかし、本実施の形態では、説明を簡単にするために、３Ｄ画像は、２枚の２次元画像、つまり、右眼用２次元画像と左眼用２次元画像により構成されているものとして説明する。
　すなわち、画像処理装置１では、主処理部２３1と従処理部２３2が、それぞれ、複数のOSDデータを予め保持することにより、主処理部２３1と従処理部２３2の間で、OSDデータのやりとりを行わないようにしている。
　また、撮像素子２２1が、右眼用２次元画像を主処理部２３1に出力し、撮像素子２２2が、左眼用２次元画像を従処理部２３2に出力することにより、主処理部２３1と従処理部２３2の間で、右眼用２次元画像や左眼用２次元画像のやりとりを行わないようにしている。
　これにより、画像処理装置１は、主処理部２３1と従処理部２３2の間で通信されるデータの通信量を抑制して、その通信に要する時間を少なくすることにより、OSDデータの重畳を迅速に行うようにしている。
　図１の画像処理装置１において、外部からの光（例えば、被写体からの反射光など）は、レンズ２１1等の光学系を介して、撮像素子２２1に入射される。また、外部からの光は、レンズ２１2等の光学系を介して、撮像素子２２2に入射される。
　撮像素子２２1は、レンズ２１1からの光を画像信号に変換する光電変換を行い、その結果得られる画像信号としての右眼用２次元画像を、主処理部２３1に供給する。
　また、撮像素子２２2は、レンズ２１2からの光を画像信号に変換する光電変換を行い、その結果得られる画像信号としての左眼用２次元画像を、従処理部２３2に供給する。
　ここで、撮像素子２２1及び２２2としては、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等のイメージセンサが採用される。
　なお、レンズ２１1とレンズ２１2は、それぞれ、所定の距離（例えば、人間の右眼と左眼の間隔に応じた距離）だけ離れた位置に設けられている。
　このため、撮像素子２２1は、第１の視点から被写体を撮像して得られる右眼用２次元画像を、主処理部２３1に出力する。
　また、撮像素子２２2は、第１の視点とは異なる第２の視点から被写体を撮像して得られる左眼用２次元画像を、従処理部２３2に出力する。
　主処理部２３1は、例えば、予め保持する複数のOSDデータのうち、主処理部２３1の内部状態を表すOSDデータを、撮像素子２２1からの右眼用２次元画像に重畳し、その重畳により得られる右眼用OSD重畳画像を、生成表示部２８に出力する。
　ここで、主処理部２３1の内部状態としては、例えば、主処理部２３1が右眼用２次元画像に対して手振れ補正処理を行う内部状態や、主処理部２３1が右眼用２次元画像をデータ記憶部２５に記録させる内部状態等が考えられる。このことは、従処理部２３2の内部状態についても同様である。
　また、例えば、主処理部２３1は、操作部２４からの操作信号に基づいて、主処理部２３1の内部状態を変更する。
　さらに、例えば、主処理部２３1は、従処理部２３2を制御して、主処理部２３1と同様の処理を行わせる。なお、主処理部２３1と従処理部２３2の処理は、それぞれ、主処理部２３1で生成される同期信号に同期して行われる。
　すなわち、例えば、主処理部２３1は、主処理部２３1に同期させるための同期信号を生成し、生成した同期信号を、中継部２６を経由して、従処理部２３2に送信する。
　また、例えば、主処理部２３1は、従処理部２３2に対して、内部状態の変更や、後述する左眼用OSD重畳画像の出力等を指示するための指示データを生成し、生成した指示データを、中継部２７を経由して、従処理部２３2に送信する。
　ここで、以下の説明では、内部状態の変更を指示する指示データを、第１の指示データという。また、左眼用OSD重畳画像の出力を指示する指示データを、第２の指示データという。なお、指示データは、第１の指示データ及び第２の指示データに限定されない。
　従処理部２３2は、主処理部２３1から中継部２６を経由して送信される同期信号、及び主処理部２３1から中継部２７を経由して送信される指示データを受信する。
　そして、従処理部２３2は、中継部２７からの指示データに基づき、中継部２６からの同期信号に同期して、主処理部２３1と同様の処理を行う。
　すなわち、例えば、従処理部２３2は、中継部２７からの第１の指示データに基づき、中継部２６からの同期信号に同期して、従処理部２３2の内部状態を、主処理部２３1と同一の内部状態に変更する。
　この場合、従処理部２３2の内部状態の変更は、主処理部２３1の内部状態の変更のタイミングと（殆ど）同一のタイミングで行われる。
　また、例えば、従処理部２３2は、同期信号に同期して、予め保持する複数のOSDデータのうち、従処理部２３2の内部状態を表すOSDデータを、撮像素子２２2からの左眼用２次元画像に重畳する。なお、従処理部２３2には、中継部２７からの指示データにより、OSDデータの重畳が指示されているものとする。
　この場合、従処理部２３2におけるOSDデータの重畳は、主処理部２３1におけるOSDデータの重畳のタイミングと同一のタイミングで行われる。
　そして、従処理部２３2は、その重畳により得られる左眼用OSD重畳画像を、中継部２７からの第２の指示データに基づき、中継部２６からの同期信号に同期して、生成表示部２８に出力する。
　この場合、従処理部２３2による左眼用OSD重畳画像の出力は、主処理部２３1から右眼用OSD重畳画像が出力されるタイミングと同一のタイミングで行われる。
　操作部２４は、ユーザにより操作される操作ボタン等から構成されており、ユーザに操作されたことに対応して、ユーザの操作に対応する操作信号を、主処理部２３1に供給する。
　ユーザは、操作部２４を操作することにより、画像処理装置１の内部状態、すなわち、主処理部２３1及び従処理部２３2の内部状態を変更することができる。
　データ記憶部２５は、例えばフラッシュメモリ等であり、主処理部２３1からの右眼用２次元画像や、従処理部２３2からの左眼用２次元画像を記憶する。また、データ記憶部２５は、主処理部２３1や従処理部２３2により実行されるプログラムを予め記憶する。
　中継部２６は、主処理部２３1と従処理部２３2の間で、主処理部２３1から出力される同期信号や、従処理部２３2から出力されるレスポンス（主処理部２３1からのデータに対するレスポンス）等を中継する。
　また、中継部２７は、主処理部２３1と従処理部２３2との間で、主処理部２３1から出力される指示データや、従処理部２３2から出力される、指示データに対するレスポンス等を中継する。
　画像処理装置１では、同期信号を、指示データ等を通信する通信経路とは異なる専用の通信経路（中継部２６を経由する通信経路）を経由して通信している。
　これにより、主処理部２３1から従処理部２３2に供給される同期信号が遅延する事態を抑止して、主処理部２３1と従処理部２３2との間で、正確に同期をとるようにしている。
　生成表示部２８は、主処理部２３1からの右眼用OSD重畳画像と、従処理部２３2からの左眼用OSD重畳画像に基づいて、右眼用OSD重畳画像と左眼用OSD重畳画像からなる３Ｄ画像を生成して、図示せぬ内蔵の表示部に表示させる。
[主処理部２３1、従処理部２３2、及び生成表示部２８の詳細な構成例]
　次に、図２は、主処理部２３1、従処理部２３2、及び生成表示部２８の詳細な構成例を示している。
　主処理部２３1は、画像処理部４１1、AD(analog to digital)変換部４２1、CPU(central processing unit)４３1、保持部４４1、RAM(random access memory)４５1、重畳部４６1、及び通信部４７1から構成される。
　画像処理部４１1には、撮像素子２２1から右眼用２次元画像が供給される。画像処理部４１1は、撮像素子２２1からの右眼用２次元画像に対して、ガンマ補正処理やホワイトバランス処理、手振れ補正処理等の画像処理を施し、画像処理後の右眼用２次元画像を、AD変換部４２1に供給する。
　AD変換部４２1は、画像処理部４１1からの、アナログ信号としての右眼用２次元画像を、デジタル信号としての右眼用２次元画像に変換するAD変換を行い、デジタル信号としての右眼用２次元画像を、CPU４３1に供給する。
　CPU４３1は、例えば、画像処理部４１1、AD変換部４２1、重畳部４６1、及び通信部４７1を制御する。
　また、例えば、CPU４３1は、同期信号を生成し、生成した同期信号に同期して、所定の処理を行う。
　すなわち、例えば、CPU４３1は、操作信号２５からの操作信号に基づいて、主処理部２３1の内部状態を変更する。主処理部２３1の内部状態を表す状態情報は、例えば、CPU４３1の図示せぬ内蔵のメモリ等に保持される。
　また、例えば、CPU４３1は、従処理部２３2の内部状態を、主処理部２３1と同一の内部状態に変更させることを指示する第１の指示データ、及び従処理部２３2から左眼用OSD重畳画像を出力させることを指示する第２の指示データ等を生成する。そして、CPU４３1は、同期信号とともに、生成した第１の指示データや第２の指示データ等を、通信部４７1に供給する。
　さらに、例えば、CPU４３1は、重畳部４６1を制御して、右眼用２次元画像に、主処理部２３1の内部状態を表すOSDデータを重畳する処理を行わせる。
　すなわち、例えば、CPU４３1は、AD変換部４２1からの右眼用２次元画像を、RAM４５1に供給して一時的に保持させる。
　また、例えば、CPU４３1は、図示せぬ内蔵のメモリに保持されている状態情報に基づいて、主処理部２３1の内部状態を識別する。さらに、例えば、CPU４３1は、保持部４４1に予め保持されている複数のOSDデータのうち、識別した主処理部２３1の内部状態を表すOSDデータを、保持部４４1から読み出し、RAM４５1に供給して、一時的に保持させる。
　そして、CPU４３1は、RAM４５1から、保持済みの右眼用２次元画像及びOSDデータを読み出し、重畳部４６1に供給して、右眼用２次元画像に対するOSDデータの重畳を行わせる。
　保持部４４1は、主処理部２３1の内部状態をそれぞれ表す複数のOSDデータを予め保持している。
　RAM４５1は、CPU４３1から書き込みが指示されたデータを一時的に保持するとともに、CPU４３1から読み出しが指示されたデータを、CPU４３1に供給する。
　重畳部４６1は、CPU４３1からの右眼用２次元画像に対して、同じくCPU４３1からのOSDデータを重畳し、その重畳により得られる右眼用OSD重畳画像を、生成表示部２８に供給する。
　通信部４７1は、主処理部２３1からの同期信号を、中継部２６を経由して、通信部４７2に供給する。また、通信部４７1は、主処理部２３1からの第１の指示データや第２の指示データ等を、中継部２７を経由して、通信部４７2に供給する。
　その他、例えば、通信部４７1は、従処理部２３2から、中継部２６や中継部２７を経由して返信されるレスポンス等のデータを、CPU４３1に供給する。
　従処理部２３2は、画像処理部４１2、AD変換部４２2、CPU４３2、保持部４４2、RAM４５2、重畳部４６2、及び通信部４７2から構成される。
　画像処理部４１2には、撮像素子２２2から左眼用２次元画像が供給される。画像処理部４１2は、撮像素子２２2からの左眼用２次元画像に対して、ガンマ補正処理やホワイトバランス処理、手振れ補正処理等の画像処理を施し、画像処理後の左眼用２次元画像を、AD変換部４２2に供給する。
　AD変換部４２2は、画像処理部４１1からの、アナログ信号としての左眼用２次元画像を、デジタル信号としての左眼用２次元画像に変換するAD変換を行い、デジタル信号としての左眼用２次元画像を、CPU４３2に供給する。
　CPU４３2は、主処理部２３1のCPU４３1から、通信部４７1、中継部２６、及び通信部４７2を経由して送信される同期信号を受信し、受信した同期信号に同期して、画像処理部４１2、AD変換部４２2、重畳部４６2、及び通信部４７2を制御する。
　また、例えば、CPU４３2は、主処理部２３1のCPU４３1から、通信部４７1、中継部２７、及び通信部４７2を経由して送信される第１の指示データや第２の指示データ等を受信する。
　そして、CPU４３2は、受信した同期信号に同期して、同じく受信した第１の指示データや第２の指示データにより指示された処理を行う。
　すなわち、例えば、CPU４３2は、内部状態の変更を指示する第１の指示データを受信した場合、同期信号に同期して、主処理部２３1の内部状態の変更が行われるタイミングと（殆ど）同一のタイミングで、従処理部２３2の内部状態を変更する。
　なお、従処理部２３2の内部状態を表す状態情報は、例えば、CPU４３2の図示せぬ内蔵のメモリ等に保持される。
　また、例えば、CPU４３2は、左眼用OSD重畳画像の出力を指示する第２の指示データを受信した場合、同期信号に同期して、主処理部２３1の重畳部４６2から右眼用OSD重畳画像が出力されるタイミングと同一のタイミングで、重畳部４６1に左眼用OSD重畳画像を出力させる。
　さらに、例えば、CPU４３2は、重畳部４６2を制御して、左眼用２次元画像に、従処理部２３2の内部状態を表すOSDデータを重畳する処理を行わせる。なお、CPU４３2には、CPU４３1から出力されて供給される指示データにより、OSDデータの重畳が指示されているものとする。
　すなわち、例えば、CPU４３2は、AD変換部４２2からの左眼用２次元画像を、RAM４５2に供給して一時的に保持させる。
　また、例えば、CPU４３2は、図示せぬ内蔵のメモリに保持されている状態情報に基づいて、従処理部２３2の内部状態を識別する。さらに、例えば、CPU４３2は、保持部４４2に予め保持されている複数のOSDデータのうち、識別した従処理部２３2の内部状態を表すOSDデータを、保持部４４2から読み出し、RAM４５2に供給して、一時的に保持させる。
　そして、CPU４３2は、RAM４５2から、保持済みの左眼用２次元画像及びOSDデータを読み出し、重畳部４６2に供給して、左眼用２次元画像にOSDデータを重畳させる。
　保持部４４2は、従処理部２３2の内部状態をそれぞれ表す複数のOSDデータを予め保持している。なお、保持部４４2には、保持部４４1が保持している複数のOSDデータと同一のOSDデータが予め保持される。
　RAM４５2は、CPU４３2から書き込みが指示されたデータを一時的に保持するとともに、CPU４３2から読み出しが指示されたデータを、CPU４３2に供給する。
　重畳部４６2は、CPU４３2からの左眼用２次元画像に対して、同じくCPU４３2からのOSDデータを重畳し、その重畳により得られる左眼用OSD重畳画像を、生成表示部２８に供給する。
　通信部４７2は、中継部２６からの同期信号を、CPU４３2に供給し、中継部２７からの第１の指示データや第２の指示データ等を、CPU４３2に供給する。
　また、例えば、通信部４７2は、中継部２６からのレスポンス等を、中継部２６を経由して、通信部４７1に送信する。さらに、通信部４７2は、中継部２７からのレスポンス等を、中継部２７を経由して、通信部４７1に送信する。
　生成表示部２８は、３Ｄ画像生成部６１、表示制御部６２、及び表示部６３から構成される。
　３Ｄ画像生成部６１は、主処理部２３1の重畳部４６1から供給される右眼用OSD重畳画像と、従処理部２３2の重畳部４６2から供給される左眼用OSD重畳画像に基づいて、右眼用OSD重畳画像と左眼用OSD重畳画像からなる３Ｄ画像を生成し、表示制御部６２に供給する。
　表示制御部６２は、３Ｄ画像生成部６１からの３Ｄ画像を、表示部６３に供給して表示させる。
　表示部６３は、例えば、LCD(liquid crystal display)等であり、表示制御部６２からの制御に従って、３Ｄ画像を表示する。
　すなわち、例えば、表示部６３には、３Ｄ画像に含まれる右眼用２次元画像と左眼用２次元画像を、光学的に分離するパララックスバリアやレンチキュラーレンズ等が設けられている。
　このため、表示部６３は、パララックスバリアやレンチキュラーレンズ等により、３Ｄ画像に含まれる左眼用OSD重畳画像を、ユーザの左眼に視認させるように表示し、３Ｄ画像に含まれる右眼用OSD重畳画像を、ユーザの右眼に視認させるように表示する。
　なお、表示部６３は、右眼用２次元画像と左眼用２次元画像を交互に表示することにより、３Ｄ画像をユーザに視認させるようにしてもよい。この場合、ユーザは、右眼と左眼の視界を交互に遮る３Ｄメガネ等を装着する必要がある。
[画像処理装置１の動作説明]
　次に、図３のフローチャートを参照して、画像処理装置１が行う表示処理について説明する。
　この表示処理は、例えば、画像処理装置１の電源がオンされたときに開始される。
　ステップＳ２１では、処理の主体が、主処理部２３1であるか、それとも従処理部２３2であるかに応じて、処理は分岐される。
　すなわち、ステップＳ２１において、処理の主体が主処理部２３1である場合、主処理部２３1は、処理をステップＳ２３に進め、処理の主体が従処理部２３2である場合、従処理部２３2は、処理をステップＳ２２に進める。
　ステップＳ２２では、従処理部２３2のCPU４３2は、主処理部２３1のCPU４３1から、通信部４７1、中継部２７及び通信部４７2を介して、従処理部２３2の内部状態の変更を指示する第１の指示データを受信したか否かを判定する。
　従処理部２３2のCPU４３2は、第１の指示データを受信したと判定するのを待って、処理をステップＳ２５に進める。
　ステップＳ２５では、従処理部２３2のCPU４３2は、受信した第１の指示データに基づいて、主処理部２３1のCPU４３1から出力されて供給される同期信号に同期して、主処理部２３1と同様の処理を行う。
　なお、従処理部２３2のCPU４３2には、主処理部２３1のCPU４３1から、通信部４７1、中継部２６及び通信部４７2を介して、同期信号が供給される。
　従処理部２３2が行う処理は、ステップＳ２５乃至ステップＳ３０において、主処理部２３1が行う処理とともに説明する。
　ステップＳ２３では、主処理部２３1のCPU４３1は、操作部２４からの操作信号を受信する。なお、主処理部２３1のCPU４３1は、操作部２４から、操作信号を受信しなかった場合、処理をステップＳ２６に進め、それ以降の処理を行なう。
　ステップＳ２４では、CPU４３1は、操作部２４からの操作信号に基づいて、従処理部２３2の内部状態の変更を指示する第１の指示データを生成し、通信部４７1、中継部２７及び通信部４７2を介して、従処理部２３2のCPU４３2に供給する。
　ステップＳ２５では、CPU４３1は、操作部２４からの操作信号に基づいて、主処理部２３1の内部状態を変更する。
　すなわち、例えば、ユーザが、操作部２４を用いて、画像処理装置１に録画を行わせるための録画操作を行った場合、操作部２４は、ユーザの録画操作に対応する操作信号を、CPU４３1に出力する。
　この場合、CPU４３1は、操作部２４からの操作信号に基づいて、主処理部２３1の内部状態を、録画処理を行う内部状態に変更する。
　また、従処理部２３2のCPU４３2は、ステップＳ２２で受信した第１の指示データに基づき、同期信号に同期して、主処理部２３1の内部状態の変更と（殆ど）同一のタイミングで、従処理部２３2の内部状態を、従処理部２３1と同一の内部状態に変更する。
　ステップＳ２６では、撮像素子２２1は、レンズ２１1からの透過光を光電変換し、その結果得られる右眼用２次元画像を、主処理部２３1の画像処理部４１1に出力する。
　また、撮像素子２２2は、レンズ２１2からの透過光を光電変換し、その結果得られる左眼用２次元画像を、従処理部２３2の画像処理部４１2に出力する。
　ステップＳ２７では、画像処理部４１1は、撮像素子２２1からの右眼用２次元画像に画像処理を行い、画像処理後の右眼用２次元画像を、AD変換部４２1に供給する。
　また、画像処理部４１2は、撮像素子２２2からの左眼用２次元画像に画像処理を行い、画像処理後の左眼用２次元画像を、AD変換部４２2に供給する。
　ステップＳ２８では、AD変換部４２1は、画像処理部４１1からの右眼用２次元画像をAD変換して、CPU４３1に供給する。そして、CPU４３1は、AD変換部４２1からの右眼用２次元画像を、RAM４５1に供給して一時的に保持させる。
　また、AD変換部４２2は、画像処理部４１2からの左眼用２次元画像をAD変換して、CPU４３2に供給する。そして、CPU４３2は、AD変換部４２2からの左眼用２次元画像を、RAM４５2に供給して一時的に保持させる。
　ステップＳ２９では、主処理部２３1のCPU４３1は、図示せぬ内蔵のメモリに保持されている状態情報に基づいて、主処理部２３1の内部状態を識別する。
　そして、CPU４３1は、保持部４４1に予め保持している複数のOSDデータのうち、識別した主処理部２３1の内部状態を表すOSDデータを、保持部４４1から読み出し、RAM４５1に供給して一時的に保持させる。
　また、従処理部２３2のCPU４３2は、図示せぬ内蔵のメモリに保持されている状態情報に基づいて、従処理部２３2の内部状態を識別する。
　そして、CPU４３2は、保持部４４2に予め保持している複数のOSDデータのうち、識別した従処理部２３2の内部状態を表すOSDデータを、保持部４４2から読み出し、RAM４５2に供給して一時的に保持させる。
　ステップＳ３０では、CPU４３1は、RAM４５1に保持されている右眼用２次元画像及びOSDデータを、RAM４５1から読み出して、重畳部４６1に供給する。そして、重畳部４６1は、CPU４３1から供給されるOSDデータを、同じくCPU４３1から供給される右眼用２次元画像に重畳することにより、右眼用OSD重畳画像を生成する。
　また、CPU４３2は、RAM４５2に保持されている左眼用２次元画像及びOSDデータを、RAM４５2から読み出して、重畳部４６2に供給する。そして、重畳部４６2は、CPU４３2から供給されるOSDデータを、同じくCPU４３2から供給される左眼用２次元画像に重畳することにより、左眼用OSD重畳画像を生成する。
　ステップＳ３１では、処理の主体が主処理部２３1である場合、主処理部２３1は、処理をステップＳ３３に進め、処理の主体が従処理部２３2である場合、従処理部２３2は、処理をステップＳ３２に進める。
　ステップＳ３２では、従処理部２３2のCPU４３2は、主処理部２３1のCPU４３1から、通信部４７1、中継部２７、及び通信部４７2を介して、左眼用OSD重畳画像の出力を指示する第２の指示データを受信したか否かを判定する。
　従処理部２３2のCPU４３2は、第２の指示データを受信したと判定するのを待って、処理をステップＳ３４に進める。
　ステップＳ３３では、主処理部２３1のCPU４３1は、第２の指示データを生成し、通信部４７1、中継部２７、及び通信部４７2を介して、従処理部２３2のCPU４３2に送信する。
　ステップＳ３４では、主処理部２３1の重畳部４６1は、直前のステップＳ３０で生成済みの右眼用OSD重畳画像を、生成表示部２８の３Ｄ画像生成部６１に出力する。
　また、従処理部２３2の重畳部４６2は、主処理部２３1のCPU４３1から受信した第２の指示データに基づき、直前のステップＳ３０で生成済みの左眼用OSD重畳画像を、生成表示部２８の３Ｄ画像生成部６１に出力する。これにより、重畳部４６2からは、重畳部４６1から右眼用OSD重畳画像が出力されるタイミングと同一のタイミングで、左眼用OSD重畳画像が出力される。
　ステップＳ３５では、生成表示部２８の３Ｄ画像生成部６１は、重畳部４６1からの右眼用OSD重畳画像と、重畳部４６2からの左眼用OSD重畳画像に基づいて、右眼用OSD重畳画像と左眼用OSD重畳画像からなる３Ｄ画像を生成し、表示制御部６２に供給する。
　ステップＳ３６では、表示制御部６２は、３Ｄ画像生成部６１からの３Ｄ画像を、表示部６３に供給して表示させる。これにより、表示部６３は、３Ｄ画像に含まれる左眼用OSD重畳画像を、ユーザの左眼に視認させるように表示し、３Ｄ画像に含まれる右眼用OSD重畳画像を、ユーザの右眼に視認させるように表示する。
　ステップＳ３７では、主処理部２３1のCPU４３1は、例えば、操作部２４からの操作信号に基づいて、表示処理を続行するか否かを判定し、表示処理を続行すると判定した場合、処理をステップＳ２１に戻し、それ以降同様の処理が行われる。
　また、ステップＳ３７において、主処理部２３1は、表示処理を続行しないと判定した場合、この表示処理を終了する。
　以上説明したように、表示処理によれば、主処理部２３1の保持部４４1と、従処理部２３2の保持部４４2には、複数のOSDデータを予め保持するようにした。
　このため、例えば、主処理部２３1が、左眼用２次元画像用のOSDデータを、従処理部２３2に通信する必要がないので、そのような通信に要する時間を省略できる。
　また、例えば、撮像素子２２1は、レンズ２１1からの光を光電変換して得られる右眼用２次元画像を、主処理部２３1に出力するとともに、撮像素子２２2は、レンズ２１2からの光を光電変換して得られる左眼用２次元画像を、従処理部２３2に出力するようにした。
　このため、例えば、主処理部２３1が、撮像素子２２2から左眼用２次元画像を取得して、従処理部２３2に通信する構成とした場合と比較して、そのような通信に要する時間を省略できる。
　よって、表示処理によれば、右眼用２次元画像及び左眼用２次元画像から構成される３Ｄ画像に、OSDデータの重畳を迅速に行うことが可能となる。
　さらに、例えば、通信部４７1は、同期信号を通信するための中継部２６と、指示データ等を通信するための中継部２７とを別々に設けるようにしたので、同期信号の配信が遅延して、主処理部２３1と従処理部２３2の間で同期がとれなくなる事態を抑止できる。
　また、例えば、主処理部２３1と従処理部２３2は、同様に構成されているため、主処理部２３1と従処理部２３2を、同様の製造工程で製造することができる。このため、画像処理装置１の製造コストを削減することができる。
　さらに、例えば、主処理部２３1と従処理部２３2を、被写体を撮像する従来の撮像装置と共通の部品を用いて製造すれば、追加の電子回路やソフトウェアの開発をする必要がなくなり、開発のための費用を削減できる。
＜２．変形例＞
　本実施の形態において、主処理部２３1は、撮像素子２２1からの右眼用２次元画像に対してOSDデータを重畳し、従処理部２３2は、撮像素子２２2からの左眼用２次元画像に対してOSDデータを重畳することにより、３Ｄ画像にOSDデータを重畳するようにした。
　しかしながら、その他、例えば、データ記憶部２５に３Ｄ画像が記憶されている場合、データ記憶部２５に記憶されている３Ｄ画像に対してOSDデータを重畳するようにしてもよい。
　すなわち、主処理部２３1は、データ記憶部２５から、３Ｄ画像に含まれる右眼用２次元画像を読み出し、読み出した右眼用２次元画像に対してOSDデータを重畳する。また、従処理部２３2は、データ記憶部２５から、３Ｄ画像に含まれる左眼用２次元画像を読み出し、読み出した左眼用２次元画像に対してOSDデータを重畳する。
　また例えば、画像処理装置１では、図１に示したように、１のデータ記憶部２５を設けるようにした。しかしながら、その他、例えば、主処理部２３1にデータ記憶部２５1を、従処理部２３2にデータ記憶部２５2をそれぞれ内蔵するようにしてもよい。なお、データ記憶部２５1とデータ記憶部２５2には、同一の３Ｄ画像が記憶されるものとする。
　この場合、主処理部２３1は、内蔵するデータ記憶部２５1から、３Ｄ画像に含まれる右眼用２次元画像を読み出し、読み出した右眼用２次元画像に対してOSDデータを重畳する。また、従処理部２３2は、内蔵するデータ記憶部２５2から、３Ｄ画像に含まれる左眼用２次元画像を読み出し、読み出した左眼用２次元画像に対してOSDデータを重畳する。
　さらに、本実施の形態では、画像処理装置１が、１個の従処理部２３2を含むものとして説明したが、２個の従処理部２３2及び２３3を含む構成とすることができる。
　この場合、例えば、画像処理装置１には、レンズ２１3及び撮像素子２２3も含まれることとなり、撮像素子２２3は、レンズ２１3からの光を光電変換して、撮像素子２２1及び２２2から得られる画像とは異なる視点の２次元画像を取得し、従処理部２３3に出力する。
　そして、従処理部２３3は、予め保持する複数のOSDデータのうち、主処理部２３1からの制御により変更した従処理部２３3の内部状態を示すOSDデータを、撮像素子２２3からの２次元画像に重畳し、その重畳により得られるOSD重畳画像を、３Ｄ画像生成部６１に出力する。
　３Ｄ画像生成部６１は、主処理部２３1からのOSD重畳画像、従処理部２３2からのOSD重畳画像、及び従処理部２３3からのOSD重畳画像からなる３Ｄ画像を生成し、表示制御部６２に供給する。
　表示制御部６２は、３Ｄ画像生成部６１からの３Ｄ画像を、表示部６３に供給して表示させる。
　なお、画像処理装置１では、２個の従処理部２３2及び２３3の他、N個(Nは３以上の自然数)の従処理部２３2乃至２３N+1を設けるようにすることができる。
　ところで、本技術は、以下の構成をとることができる。
　（１）予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部とを含む画像処理装置。
　（２）前記第１の視点画像を、前記主処理部に出力する第１の出力部と、前記第２の視点画像を、前記従処理部に出力する第２の出力部とをさらに含む前記（１）に記載の画像処理装置。
（３）前記主処理部は、前記主処理部と同期して処理を行わせるための同期信号を、専用の通信経路を経由して、前記従処理部に通信し、前記従処理部は、前記専用の通信経路を経由して前記主処理部から通信される前記同期信号に同期して、前記第１の重畳用データを、前記第２の視点画像に重畳する前記（１）又は（２）に記載の画像処理装置。
　（４）前記主処理部は、前記複数の重畳用データを予め保持する第１の保持部と、ユーザの入力操作に基づいて、前記主処理部の内部状態を変更する第１の変更部と、前記第１の保持部に保持されている前記複数の重畳用データのうち、前記第１の変更部により変更された前記主処理部の内部状態を示す前記第１の重畳用データを、前記第１の視点画像に重畳する第１の重畳部とを有する前記（１）又は（２）に記載の画像処理装置。
　（５）前記従処理部は、前記複数の重畳用データを予め保持する第２の保持部と、前記主処理部の内部状態の変更に同期して、前記従処理部の内部状態を、前記主処理部と同一の内部状態に変更する第２の変更部と、前記第２の保持部に保持されている前記複数の重畳用データのうち、前記第２の変更部により変更された前記従処理部の内部状態を示す前記第１の重畳用データを、前記第２の視点画像に重畳する第２の重畳部とを有する前記（４）に記載の画像処理装置。
　（６）前記画像処理装置は、複数の前記従処理部を含み、前記３Ｄ画像生成部は、重畳後の前記第１の視点画像と、前記複数の従処理部からそれぞれ得られる、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する前記（１）乃至（５）に記載の画像処理装置。
　（７）３Ｄ画像を生成する画像処理装置の画像処理方法において、前記画像処理装置は、主処理部と、従処理部と、３Ｄ画像生成部を含み、前記主処理部が、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳し、前記従処理部が、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳し、前記３Ｄ画像生成部が、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成するステップを含む画像処理方法。
　（８）コンピュータを、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部として機能させるためのプログラム。
　上述した一連の処理は、例えばハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、又は、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のコンピュータなどに、プログラム記録媒体からインストールされる。
[コンピュータの構成例]
　図４は、上述した一連の処理をプログラムにより実行するコンピュータの構成例を示している。
　CPU（Central Processing Unit）８１は、ROM（Read Only Memory）８２、又は記憶部８８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）８３には、CPU８１が実行するプログラムやデータ等が適宜記憶される。これらのCPU８１、ROM８２、及びRAM８３は、バス８４により相互に接続されている。
　CPU８１にはまた、バス８４を介して入出力インタフェース８５が接続されている。入出力インタフェース８５には、キーボード、マウス、マイクロホン等よりなる入力部８６、ディスプレイ、スピーカ等よりなる出力部８７が接続されている。CPU８１は、入力部８６から入力される指令に対応して各種の処理を実行する。そして、CPU８１は、処理の結果を出力部８７に出力する。
　入出力インタフェース８５に接続されている記憶部８８は、例えばハードディスクからなり、CPU８１が実行するプログラムや各種のデータを記憶する。通信部８９は、インタネットやローカルエリアネットワーク等のネットワークを介して外部の装置と通信する。
　また、通信部８９を介してプログラムを取得し、記憶部８８に記憶してもよい。
　入出力インタフェース８５に接続されているドライブ９０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等のリムーバブルメディア９１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータ等を取得する。取得されたプログラムやデータは、必要に応じて記憶部８８に転送され、記憶される。
　コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを記録（記憶）する記録媒体は、図４に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ（Mini-Disc）を含む）、もしくは半導体メモリ等よりなるパッケージメディアであるリムーバブルメディア９１、又は、プログラムが一時的もしくは永続的に格納されるROM８２や、記憶部８８を構成するハードディスク等により構成される。記録媒体へのプログラムの記録は、必要に応じてルータ、モデム等のインタフェースである通信部８９を介して、ローカルエリアネットワーク、インタネット、デジタル衛星放送といった、有線又は無線の通信媒体を利用して行われる。
　なお、本明細書において、上述した一連の処理を記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
　また、本開示は、上述した本実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
　１　画像処理装置,　２１1,２１2　レンズ,　２２1,２２2　撮像素子,　２３1　主処理部,　２３2　従処理部,　２４　操作部,　２５　データ記憶部,　２６,２７　中継部,　２８　生成表示部,　４１1,４１2　画像処理部,　４２1,４２2　AD変換部,　４３1,４３2　CPU,　４４1,４４2　保持部,　４５1,４５2　RAM,　４６1,４６2　重畳部,　４７1,４７2　通信部,　６１　３Ｄ画像生成部,　６２　表示制御部,　６３　表示部

Claims (8)

  1. 　予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、
    　前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、
    　重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部と
    　を含む画像処理装置。
  2. 　前記第１の視点画像を、前記主処理部に出力する第１の出力部と、
    　前記第２の視点画像を、前記従処理部に出力する第２の出力部と
    　をさらに含む請求項１に記載の画像処理装置。
  3. 　前記主処理部は、前記主処理部と同期して処理を行わせるための同期信号を、専用の通信経路を経由して、前記従処理部に通信し、
    　前記従処理部は、前記専用の通信経路を経由して前記主処理部から通信される前記同期信号に同期して、前記第１の重畳用データを、前記第２の視点画像に重畳する
    　請求項２に記載の画像処理装置。
  4. 　前記主処理部は、
    　　前記複数の重畳用データを予め保持する第１の保持部と、
    　　ユーザの入力操作に基づいて、前記主処理部の内部状態を変更する第１の変更部と、
    　　前記第１の保持部に保持されている前記複数の重畳用データのうち、前記第１の変更部により変更された前記主処理部の内部状態を示す前記第１の重畳用データを、前記第１の視点画像に重畳する第１の重畳部と
    　を有する請求項２に記載の画像処理装置。
  5. 　前記従処理部は、
    　　前記複数の重畳用データを予め保持する第２の保持部と、
    　　前記主処理部の内部状態の変更に同期して、前記従処理部の内部状態を、前記主処理部と同一の内部状態に変更する第２の変更部と、
    　　前記第２の保持部に保持されている前記複数の重畳用データのうち、前記第２の変更部により変更された前記従処理部の内部状態を示す前記第１の重畳用データを、前記第２の視点画像に重畳する第２の重畳部と
    　を有する請求項４に記載の画像処理装置。
  6. 　前記画像処理装置は、複数の前記従処理部を含み、
    　前記３Ｄ画像生成部は、重畳後の前記第１の視点画像と、前記複数の従処理部からそれぞれ得られる、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する
    　請求項１に記載の画像処理装置。
  7. 　３Ｄ画像を生成する画像処理装置の画像処理方法において、
    　前記画像処理装置は、主処理部と、従処理部と、３Ｄ画像生成部を含み、
    　　前記主処理部が、予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳し、
    　　前記従処理部が、前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳し、
    　　前記３Ｄ画像生成部が、重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する
    　ステップを含む画像処理方法。
  8. 　コンピュータを、
    　予め保持する複数の重畳用データのうち、第１の重畳用データを、第１の視点から得られる第１の視点画像に重畳する主処理部と、
    　前記主処理部に同期して、予め保持する前記複数の重畳用データのうち、前記第１の重畳用データを、前記第１の視点とは異なる第２の視点から得られる第２の視点画像に重畳する従処理部と、
    　重畳後の前記第１の視点画像と、重畳後の前記第２の視点画像により構成される３Ｄ画像を生成する３Ｄ画像生成部と
    　して機能させるためのプログラム。
PCT/JP2013/066435 2012-06-25 2013-06-14 画像処理装置、画像処理方法、及びプログラム Ceased WO2014002790A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-142023 2012-06-25
JP2012142023 2012-06-25

Publications (1)

Publication Number Publication Date
WO2014002790A1 true WO2014002790A1 (ja) 2014-01-03

Family

ID=49782952

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/066435 Ceased WO2014002790A1 (ja) 2012-06-25 2013-06-14 画像処理装置、画像処理方法、及びプログラム

Country Status (1)

Country Link
WO (1) WO2014002790A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011024021A (ja) * 2009-07-16 2011-02-03 Fujifilm Corp ３次元画像表示装置及び３次元画像表示方法
JP2011114606A (ja) * 2009-11-27 2011-06-09 Panasonic Corp 映像信号処理装置及び映像信号処理方法
JP2011244218A (ja) * 2010-05-18 2011-12-01 Sony Corp データ伝送システム
JP2012113078A (ja) * 2010-11-24 2012-06-14 Seiko Epson Corp 表示装置、表示装置の制御方法、及び、プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011024021A (ja) * 2009-07-16 2011-02-03 Fujifilm Corp ３次元画像表示装置及び３次元画像表示方法
JP2011114606A (ja) * 2009-11-27 2011-06-09 Panasonic Corp 映像信号処理装置及び映像信号処理方法
JP2011244218A (ja) * 2010-05-18 2011-12-01 Sony Corp データ伝送システム
JP2012113078A (ja) * 2010-11-24 2012-06-14 Seiko Epson Corp 表示装置、表示装置の制御方法、及び、プログラム

Similar Documents

Publication Publication Date Title
JP5917017B2 (ja) 画像処理装置及びその制御方法、並びにプログラム
US10958820B2 (en) Intelligent interface for interchangeable sensors
US9277201B2 (en) Image processing device and method, and imaging device
CN102724533A (zh) 显示系统、显示装置以及显示辅助装置
JP2013025649A (ja) 画像処理装置及び画像処理方法、プログラム
JP6667981B2 (ja) 不均衡設定方法及び対応する装置
JPWO2014106916A1 (ja) 画像処理装置、撮像装置、プログラム及び画像処理方法
JP2012133185A (ja) 撮像装置
CN103959336A (zh) 图像处理装置、其方法和非暂时性计算机可读存储介质
US20120314038A1 (en) Stereoscopic image obtaining apparatus
JP6515512B2 (ja) 表示装置、表示装置のキャリブレーション方法、およびキャリブレーションプログラム
TWI524735B (zh) 三維影像產生方法及裝置
KR101228916B1 (ko) 멀티 비젼의 3차원 영상 표시 장치 및 방법
US20130343635A1 (en) Image processing apparatus, image processing method, and program
JP2015019118A (ja) 撮像装置、撮像システムおよび撮像装置の制御プログラム
WO2014002790A1 (ja) 画像処理装置、画像処理方法、及びプログラム
KR101222101B1 (ko) 스테레오스코픽 영상의 생성 장치
US8917316B2 (en) Photographing equipment
JP2014107836A (ja) 撮像装置、制御方法、及びプログラム
JP2014017543A (ja) 画像処理装置およびその制御方法、並びにプログラム
JP2014057219A (ja) 表示制御装置、撮像装置、制御方法、プログラム、及び記録媒体
JP7808375B2 (ja) クラウドデスクトップの展示方法、装置、デバイス及び記憶媒体
CN103369343B (zh) 三维图像产生方法及装置
JP2012049897A (ja) 映像表示装置
JP2013046395A (ja) 撮像装置及びその制御方法、プログラム、及び記録媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13810067

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13810067

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP