JP2012015619A

JP2012015619A - Stereoscopic display device and stereoscopic photographing device

Info

Publication number: JP2012015619A
Application number: JP2010147890A
Authority: JP
Inventors: Soji Yanagida; 聡司柳田
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2010-06-29
Filing date: 2010-06-29
Publication date: 2012-01-19

Abstract

【課題】タッチパネルを使用して３Ｄ画像の画像調整を行う際に、３Ｄ画像を立体視しながら直感的で分かりやすい画像調整を可能にする。
【解決手段】ユーザの利き目を示す利き目情報を取得し、タッチパネルによる操作入力は、ユーザの利き目側の視点画像を画像調整する操作入力と見なす。タッチパネルにより利き目側の視点画像を調整するタッチ操作が行われると、そのタッチ操作による調整方向と同じ調整方向に利き目側の視点画像を画像調整する。例えば、タッチ操作により画像を拡大させる操作入力があると、利き目側の視点画像を拡大し（利き目側でない視点画像は調整不可とし）、直感的で分かりやすい立体視画像の画像調整を可能にしている。
【選択図】図６When adjusting a 3D image using a touch panel, intuitive and easy image adjustment is possible while stereoscopically viewing the 3D image.
The dominant eye information indicating the dominant eye of the user is acquired, and the operation input by the touch panel is regarded as an operation input for image adjustment of the viewpoint image on the dominant eye side of the user. When a touch operation for adjusting the dominant-eye viewpoint image is performed on the touch panel, the dominant-eye viewpoint image is adjusted in the same adjustment direction as the adjustment direction by the touch operation. For example, if there is an operation input that enlarges the image by touch operation, the viewpoint image on the dominant eye side is enlarged (the viewpoint image that is not on the dominant eye side cannot be adjusted), and intuitive and easy-to-understand stereoscopic image adjustment is possible I have to.
[Selection] Figure 6

Description

本発明は立体表示装置及び立体撮影装置に係り、特に立体表示装置を使用して立体視画像の画像調整を行う技術に関する。 The present invention relates to a stereoscopic display device and a stereoscopic imaging device, and more particularly to a technique for performing image adjustment of a stereoscopic image using a stereoscopic display device.

従来、操作部品を立体的に画面に表示し、操作者がタッチパネルにタッチすると、そのタッチ位置を示す座標データに基づいて立体表示装置で立体視表示された操作部品への操作指示を検出し、立体視合成部で形成される操作部品の視差像を変更し、立体表示装置に立体視表示される操作部品の形体を変化させる装置が提案されている（特許文献１）。例えば、操作部品が押しボタン型のスイッチの画像の場合、タッチパネルでそのスイッチの画像にタッチしてオン／オフさせると、オン／オフに応じてスイッチの画像を立体視表示又は平面表示に変更し、これにより操作性を向上させるようにしている。 Conventionally, an operation component is displayed three-dimensionally on the screen, and when an operator touches the touch panel, an operation instruction to the operation component stereoscopically displayed on the stereoscopic display device is detected based on coordinate data indicating the touch position, There has been proposed an apparatus that changes a parallax image of an operation component formed by a stereoscopic synthesis unit and changes the shape of the operation component that is stereoscopically displayed on a stereoscopic display device (Patent Document 1). For example, if the operation component is a push button type switch image, touching the switch image on the touch panel to turn it on / off changes the switch image to stereoscopic display or planar display according to the on / off state. Thus, the operability is improved.

また、立体視差画像を表示部に表示し、タッチパネル上で操作が行われる前に平面画像に切り替えることによって、操作性の向上を図ることが可能な操作パネル装置が提案されている（特許文献２）。 In addition, there has been proposed an operation panel device capable of improving operability by displaying a stereoscopic parallax image on a display unit and switching to a planar image before an operation is performed on a touch panel (Patent Document 2). ).

特開平１０−１０５７３５号公報Japanese Patent Laid-Open No. 10-105735 特開２００４−２８０４９６号公報Japanese Patent Application Laid-Open No. 2004-280496

特許文献１に記載の発明は、立体視表示される操作部品を操作するものであり、左右の視点画像のうちのいずれか一方の視点画像の画像調整を行うものではなく、立体視画像（３Ｄ画像）の視差調整等の編集を行うことができない。 The invention described in Patent Document 1 operates an operation component that is stereoscopically displayed, and does not perform image adjustment of any one of the left and right viewpoint images, but a stereoscopic image (3D Editing such as parallax adjustment of (image) cannot be performed.

特許文献２に記載の発明は、タッチパネル上で操作が行われる前に平面画像（２Ｄ画像）に切り替えるため、３Ｄ画像上でタッチパネルを操作することを想定していない。また、３Ｄ画像の画像調整をタッチパネル上で行う場合に、２Ｄ画像に切り替えているため、３Ｄ画像の見え方の変化をリアルタイムに確認することができず、３Ｄ画像の画像調整等の編集には使いにくいという問題がある。 Since the invention described in Patent Document 2 is switched to a planar image (2D image) before the operation is performed on the touch panel, it is not assumed that the touch panel is operated on the 3D image. In addition, when the image adjustment of the 3D image is performed on the touch panel, since the display is switched to the 2D image, the change in the appearance of the 3D image cannot be confirmed in real time. There is a problem that it is difficult to use.

本発明はこのような事情に鑑みてなされたもので、タッチパネルを使用して３Ｄ画像の画像調整を行う際に、３Ｄ画像を立体視しながら直感的で分かりやすい画像調整を行うことができる立体表示装置及び立体撮影装置を提供することを目的とする。 The present invention has been made in view of such circumstances, and when performing 3D image adjustment using a touch panel, it is possible to perform intuitive and easy to understand image adjustment while stereoscopically viewing the 3D image. An object is to provide a display device and a stereoscopic imaging device.

前記目的を達成するために請求項１に係る立体表示装置は、複数の視点画像からなる立体視画像を表示する立体表示手段と、前記立体表示手段の表示面上に設けられ、前記立体表示手段に表示された立体視画像の画像調整用の操作入力を受け付けるタッチパネルと、ユーザの利き目を示す利き目情報を取得する利き目情報取得手段と、前記利き目情報取得手段が取得した利き目情報と前記タッチパネルが受け付けた操作入力とに基づいて前記立体表示手段に表示された複数の視点画像のうちのユーザの利き目側の視点画像を画像調整する画像調整手段であって、前記利き目側の視点画像に対応して入力される前記操作入力による調整方向と同じ調整方向に前記利き目側の視点画像を画像調整する画像調整手段と、を備えたことを特徴としている。 In order to achieve the object, a stereoscopic display device according to claim 1 is provided on a display surface of a stereoscopic display unit that displays a stereoscopic image including a plurality of viewpoint images, and the stereoscopic display unit. A touch panel that accepts an operation input for image adjustment of a stereoscopic image displayed on the screen, dominant eye information acquisition means for acquiring dominant eye information indicating a user's dominant eye, and dominant eye information acquired by the dominant eye information acquisition means And an image adjustment unit that adjusts a user's dominant viewpoint image among a plurality of viewpoint images displayed on the stereoscopic display unit based on the operation input received by the touch panel, Image adjusting means for adjusting the dominant-eye-side viewpoint image in the same adjustment direction as the adjustment direction by the operation input input corresponding to the viewpoint image. .

前記立体表示手段に表示された立体視画像を見ながらタッチパネルを使用して立体視画像の画像調整を行う場合、どの視点画像を操作しているかが分かりにくいという問題がある。そこで、請求項１に係る発明は、ユーザの利き目を示す利き目情報を取得し、前記タッチパネルによる操作入力は、ユーザの利き目側の視点画像を操作する操作入力と見なし、その操作入力による調整方向と同じ調整方向に利き目側の視点画像を画像調整するようにしている。これにより、利き目側の視点画像を画像調整し（利き目側でない視点画像は調整不可とし）、直感的で分かりやすい立体視画像の画像調整を可能にしている。 When performing image adjustment of a stereoscopic image using a touch panel while viewing a stereoscopic image displayed on the stereoscopic display means, there is a problem that it is difficult to determine which viewpoint image is being operated. Therefore, the invention according to claim 1 acquires dominant eye information indicating a user's dominant eye, and the operation input by the touch panel is regarded as an operation input for operating a viewpoint image on the user's dominant eye side. The dominant viewpoint image is adjusted in the same adjustment direction as the adjustment direction. Thus, the viewpoint image on the dominant eye side is image-adjusted (the viewpoint image that is not on the dominant eye side cannot be adjusted), and an intuitive and easy-to-understand stereoscopic image can be adjusted.

請求項２に示すように請求項１に記載の立体表示装置において、前記タッチパネルは、複数箇所のタッチ位置を同時認識又は動きベクトルを認識し、該認識結果に基づいて前記視点画像の拡大／縮小、右回転／左回転、視差拡大／縮小、及び上／下移動のうちの少なくとも１つの操作入力を受け付けることを特徴としている。前記タッチパネル上での操作方法により立体視画像の画像調整を行う場合、ユーザがいずれの視点画像を操作しようとしているかが不明であるが、ユーザの利き目情報を取得し、その利き目情報にしたがって対応する視点画像を画像調整するようにしたため、ユーザの意図した画像調整を可能にしている。 2. The stereoscopic display device according to claim 1, wherein the touch panel simultaneously recognizes a plurality of touch positions or recognizes a motion vector, and enlarges / reduces the viewpoint image based on the recognition result. , Receiving at least one operation input of right rotation / left rotation, parallax enlargement / reduction, and up / down movement. When performing image adjustment of a stereoscopic image by the operation method on the touch panel, it is unclear which viewpoint image the user is trying to operate, but the user's dominant eye information is acquired, and according to the dominant eye information Since the corresponding viewpoint image is adjusted, the image adjustment intended by the user is made possible.

請求項３に示すように請求項２に記載の立体表示装置において、前記タッチパネルは、更にホワイトバランス調整、コントラスト調整、及び輝度調整のうちの少なくとも１つの操作入力を受け付けることを特徴としている。 According to a third aspect of the present invention, in the stereoscopic display device according to the second aspect, the touch panel further receives at least one operation input of white balance adjustment, contrast adjustment, and luminance adjustment.

請求項４に示すように請求項１から３のいずれかに記載の立体表示装置において、前記画像調整手段による調整結果を前記立体視画像に関連づけて記録する記録手段を備えたことを特徴としている。 According to a fourth aspect of the present invention, the stereoscopic display device according to any one of the first to third aspects further includes a recording unit that records an adjustment result by the image adjustment unit in association with the stereoscopic image. .

請求項５に示すように請求項４に記載の立体表示装置において、前記記録手段は、前記複数の視点画像からなる立体視画像が１つの画像ファイルに記録されている場合には、該画像ファイルのヘッダに前記画像調整手段による調整結果を書き込むことを特徴としている。 5. The stereoscopic display device according to claim 4, wherein when the stereoscopic image composed of the plurality of viewpoint images is recorded in one image file, the recording unit is configured to store the image file. The adjustment result by the image adjustment means is written in the header of the image.

請求項６に示すように請求項４に記載の立体表示装置において、前記記録手段は、前記立体視画像を構成する複数の視点画像が別々の画像ファイルに関連付けて記録されている場合には、前記調整が行われた視点画像に対応する画像ファイルのヘッダに前記画像調整手段による調整結果を書き込むことを特徴としている。 As shown in claim 6, in the stereoscopic display device according to claim 4, when the plurality of viewpoint images constituting the stereoscopic image are recorded in association with different image files, the recording means is The adjustment result by the image adjusting means is written in the header of the image file corresponding to the adjusted viewpoint image.

請求項７に示すように請求項４に記載の立体表示装置において、前記記録手段は、前記画像調整手段による調整結果を記録した調整値ファイルを作成し、該調整値ファイルを前記複数の視点画像からなる立体視画像が記録されたフォルダ内に格納することを特徴としている。 The stereoscopic display device according to claim 4, wherein the recording unit creates an adjustment value file in which an adjustment result by the image adjustment unit is recorded, and the adjustment value file is used as the plurality of viewpoint images. It is characterized in that it is stored in a folder in which a stereoscopic image consisting of is stored.

請求項８に示すように請求項４に記載の立体表示装置において、前記記録手段は、前記複数の視点画像からなる立体視画像が記録されたフォルダとは別に各立体視画像毎にフォルダを作成するとともに、各フォルダ毎に立体視画像と前記画像調整手段による調整結果が記録された調整値ファイルとを記録することを特徴としている。 The stereoscopic display device according to claim 4, wherein the recording unit creates a folder for each stereoscopic image separately from a folder in which a stereoscopic image including the plurality of viewpoint images is recorded. In addition, a stereoscopic image and an adjustment value file in which an adjustment result by the image adjusting unit is recorded are recorded for each folder.

請求項９に示すように請求項４から８のいずれかに記載の立体表示装置において、前記立体表示手段は、前記立体視画像の再生時に該立体視画像に関連づけて記録された調整結果に基づいて前記立体視画像の画像調整を行うことを特徴としている。これにより、自分好みに画像調整した立体視画像を保存することができ、次回再生したときに自分好みの立体視画像を表示することができる。 The stereoscopic display device according to any one of claims 4 to 8, wherein the stereoscopic display means is based on an adjustment result recorded in association with the stereoscopic image when the stereoscopic image is reproduced. Then, the image adjustment of the stereoscopic image is performed. As a result, the stereoscopic image adjusted to the user's preference can be stored, and the user's favorite stereoscopic image can be displayed the next time the image is reproduced.

請求項１０に示すように請求項１から３のいずれかに記載の立体表示装置において、前記画像調整手段による調整結果を装置内蔵の記憶手段に記録する記録手段を備え、前記立体表示手段は、前記立体視画像の再生時に前記記憶手段に記録された調整結果に基づいて前記立体視画像の画像調整を行うことを特徴としている。これによれば、複数の視点画像間の画像調整がずれている立体視画像を再生する際に、装置内蔵の調整結果を使用してキャリブレーションすることができる。 The stereoscopic display device according to any one of claims 1 to 3, further comprising: a recording unit that records an adjustment result by the image adjusting unit in a storage unit built in the apparatus. It is characterized in that image adjustment of the stereoscopic image is performed based on the adjustment result recorded in the storage means when the stereoscopic image is reproduced. According to this, when reproducing a stereoscopic image in which image adjustments between a plurality of viewpoint images are shifted, calibration can be performed using the adjustment result built in the apparatus.

請求項１１に示すように請求項１から１０のいずれかに記載の立体表示装置において、ユーザの利き目情報の登録を受け付け、該受け付けた利き目情報を登録する利き目情報登録手段を備え、前記利き目情報取得手段は、前記利き目情報登録手段から利き目情報を取得することを特徴としている。 The stereoscopic display device according to any one of claims 1 to 10, further comprising: a dominant eye information registration unit that receives registration of the user's dominant eye information and registers the received dominant eye information. The dominant eye information acquisition means acquires dominant eye information from the dominant eye information registration means.

請求項１２に示すように請求項１から１１のいずれかに記載の立体表示装置において、前記利き目情報取得手段は、ユーザの利き目を判定するための左視点画像及び右視点画像からなる利き目判定画像であって、左視点画像と右視点画像とでそれぞれ異なる基準座標を表す利き目判定画像を前記立体表示手段に表示させる表示制御手段と、前記立体表示手段に表示された利き目判定画像に対して前記タッチパネルにより前記利き目判定画像に対してタッチ操作された位置座標を取得する取得手段と、前記左視点画像及び右視点画像からなる各利き目判定画像の各々の基準座標と前記取得された位置座標とに基づいて前記取得された位置座標が左視点画像の基準座標及び右視点画像の基準座標のいずれに近いかに応じて前記タッチパネルを介して前記位置座標を入力したユーザの利き目を判定する判定手段と、を備え、前記判定手段による判定結果に基づいて利き目情報を取得することを特徴としている。 12. The stereoscopic display device according to any one of claims 1 to 11, wherein the dominant eye information acquisition unit includes a left viewpoint image and a right viewpoint image for determining a user's dominant eye. A display control means for displaying a dominant eye determination image on the stereoscopic display means, which is an eye determination image and representing different reference coordinates for the left viewpoint image and the right viewpoint image, and a dominant eye determination displayed on the stereoscopic display means Acquisition means for acquiring a position coordinate touched with respect to the dominant eye determination image by the touch panel with respect to an image; reference coordinates of each dominant eye determination image including the left viewpoint image and the right viewpoint image; and Depending on whether the acquired position coordinates are closer to the reference coordinates of the left viewpoint image or the right viewpoint image based on the acquired position coordinates via the touch panel And a determination means for determining dominant eye of the user who inputs the position coordinates, is characterized by obtaining the dominant eye information on the basis of the determination result by the determination unit.

請求項１２に係る発明によれば、ユーザにより前記利き目情報登録手段に登録されたユーザ自身の利き目情報を、該利き目情報登録手段から取得するようにしている。また、請求項８に係る発明によれば、前記立体表示手段に立体視表示された利き目判定用の利き目判定画像に対してユーザがタッチパネル上でタッチするだけで、ユーザの利き目を判定することができ、この判定結果に基づいて自動的にユーザの利き目情報を取得するようにしている。 According to the twelfth aspect of the invention, the user's own dominant eye information registered in the dominant eye information registration unit by the user is acquired from the dominant eye information registration unit. According to the invention according to claim 8, the user's dominant eye is determined by simply touching the dominant eye determination image for dominant eye determination stereoscopically displayed on the stereoscopic display unit on the touch panel. The user's dominant eye information is automatically acquired based on the determination result.

請求項１３に係る立体撮影装置は、請求項１から１２のいずれかに記載の立体表示装置を備えたことを特徴としている。 A stereoscopic imaging apparatus according to a thirteenth aspect is characterized by including the stereoscopic display apparatus according to any one of the first to twelfth aspects.

請求項１４に示すように請求項１３に記載の立体撮影装置において、前記画像調整手段により調整された立体視画像を外部の立体表示装置に出力する通信手段を備えたことを特徴としている。これによれば、外部の立体表示装置に表示される立体視画像を見ながら、手元の立体撮影装置のタッチパネルを使用して立体視画像の画像調整を行うことができる。 According to a fourteenth aspect of the present invention, the stereoscopic photographing apparatus according to the thirteenth aspect includes a communication unit that outputs a stereoscopic image adjusted by the image adjusting unit to an external stereoscopic display device. According to this, it is possible to perform image adjustment of the stereoscopic image by using the touch panel of the stereoscopic imaging device at hand while viewing the stereoscopic image displayed on the external stereoscopic display device.

本発明によれば、立体表示手段上に設けられたタッチパネルを使用して、立体視画像を見ながら立体視画像を画像調整することができ、特に画像調整するユーザの利き目情報に基づいて対応する視点画像を調整可能にすることにより直感的で分かりやすい画像調整を行うことができる。 According to the present invention, it is possible to adjust a stereoscopic image while viewing a stereoscopic image using a touch panel provided on the stereoscopic display means, and in particular, it is possible based on the dominant eye information of the user who adjusts the image. By adjusting the viewpoint image to be adjusted, intuitive and easy-to-understand image adjustment can be performed.

本発明に係る立体表示装置の外観図External view of stereoscopic display device according to the present invention 本発明に係る立体表示装置の内部構成を含むブロック図The block diagram containing the internal structure of the three-dimensional display apparatus which concerns on this invention 本発明に係る立体表示装置による立体視画像の画像調整・編集の処理を示す実施形態を示すフローチャートThe flowchart which shows embodiment which shows the image adjustment and edit process of the stereoscopic vision image by the stereoscopic display apparatus which concerns on this invention 利き目判定画像とその利き目判定画像にタッチする様子を示す図The figure which shows a mode that a dominant eye determination image and its dominant eye determination image are touched 左視点差分ＤＬ，右視点差分ＤＲの算出方法を説明するために用いた図The figure used in order to explain the calculation method of left viewpoint difference DL and right viewpoint difference DR 利き目側の視点画像の画像調整（拡大／縮小）時におけるタッチ操作等を示す図The figure which shows the touch operation etc. at the time of image adjustment (enlargement / reduction) of the viewpoint image of the dominant eye 利き目側の視点画像の画像調整（右回転／左回転）時におけるタッチ操作等を示す図The figure which shows touch operation etc. at the time of image adjustment (right rotation / left rotation) of the dominant eye viewpoint image 利き目側の視点画像の画像調整（視差調整）時におけるタッチ操作等を示す図The figure which shows touch operation etc. at the time of image adjustment (parallax adjustment) of the viewpoint image of the dominant eye 調整値がヘッダに付加された立体視画像の画像ファイルを示す図The figure which shows the image file of the stereoscopic image in which the adjustment value was added to the header 調整値がヘッダに付加された立体視画像の画像ファイルの他の例を示す図The figure which shows the other example of the image file of the stereoscopic vision image with which the adjustment value was added to the header 立体視画像の画像ファイルが保存されているフォルダ内に調整値ファイルを保存する例を示す図The figure which shows the example which preserve | saves an adjustment value file in the folder where the image file of the stereoscopic vision image is preserve | saved 立体視画像の画像ファイルが保存されているフォルダとは別のフォルダ内に調整値ファイルを保存する例を示す図The figure which shows the example which preserve | saves an adjustment value file in the folder different from the folder where the image file of a stereoscopic vision image is preserve | saved オリジナルの立体視画像が保存されているフォルダとは別に、立体視画像毎にその立体視画像と調整値ファイルとが格納されるフォルダを作成する例を示す図The figure which shows the example which produces the folder which stores the stereoscopic image and adjustment value file for every stereoscopic image separately from the folder where the original stereoscopic image is preserve | saved 装置設定反映処理部に保存される調整値ファイルの一例を示す図The figure which shows an example of the adjustment value file preserve | saved at an apparatus setting reflection process part 本発明に係る立体撮影装置の外観を示す斜視図The perspective view which shows the external appearance of the stereo imaging device which concerns on this invention 本発明に係る立体撮影装置の内部構成を含むブロック図The block diagram containing the internal structure of the stereo imaging device which concerns on this invention

以下、添付図面に従って本発明に係る立体表示装置及び立体撮影装置の実施の形態について説明する。 Hereinafter, embodiments of a stereoscopic display device and a stereoscopic photographing apparatus according to the present invention will be described with reference to the accompanying drawings.

＜立体表示装置＞
図１は本発明に係る立体表示装置の外観図であり、図２は本発明に係る立体表示装置の内部構成を含むブロック図である。 <Stereoscopic display device>
FIG. 1 is an external view of a stereoscopic display device according to the present invention, and FIG. 2 is a block diagram including an internal configuration of the stereoscopic display device according to the present invention.

図１に示すように、この立体表示装置１０は、上面に立体表示部１２、タッチパネル１４及び操作ボタン１６が設けられ、側面に入出力コネクタ１８、非接触通信入出力部２０及び記録媒体スロット２２が設けられている。また、図２に示すように、立体表示装置１０には、上記の立体表示部１２等の他に、メモリー部２４、立体表示制御部２６、スピーカー部２８、入出力部３０、記録媒体記録部３２、利き目判定処理部３４、画像調整・編集部３６、関連付け処理部３８及び装置設定反映処理部４０が設けられている。 As shown in FIG. 1, the stereoscopic display device 10 includes a stereoscopic display unit 12, a touch panel 14, and operation buttons 16 on an upper surface, and an input / output connector 18, a non-contact communication input / output unit 20, and a recording medium slot 22 on a side surface. Is provided. As shown in FIG. 2, the stereoscopic display device 10 includes a memory unit 24, a stereoscopic display control unit 26, a speaker unit 28, an input / output unit 30, a recording medium recording unit, in addition to the above-described stereoscopic display unit 12 and the like. 32, a dominant eye determination processing unit 34, an image adjustment / editing unit 36, an association processing unit 38, and an apparatus setting reflection processing unit 40 are provided.

立体表示部１２は、２視点画像（左視点画像、右視点画像）をパララックスバリアによりそれぞれ所定の指向性をもった指向性画像として表示できる液晶モニタである。尚、立体表示部１２としては、レンチキュラレンズを使用するものや、偏光メガネ、液晶シャッタメガネなどの専用メガネをかけることで左視点画像と右視点画像とを個別に見ることができるものなどが適用できる。また、立体表示部１２は、２視点画像を表示するものに限らず、３視点以上の視点画像を表示するものでもよい。 The stereoscopic display unit 12 is a liquid crystal monitor that can display two viewpoint images (a left viewpoint image and a right viewpoint image) as directional images each having a predetermined directivity by a parallax barrier. In addition, as the stereoscopic display unit 12, those using a lenticular lens, or those capable of individually viewing the left viewpoint image and the right viewpoint image by applying dedicated glasses such as polarized glasses and liquid crystal shutter glasses are applied. it can. The stereoscopic display unit 12 is not limited to displaying a two-viewpoint image, and may display a viewpoint image having three or more viewpoints.

タッチパネル１４は、立体表示部１２の表示面上に設けられており、ユーザがタッチパネル１４上の任意の位置がタッチされると、そのタッチされた位置の２次元座標データを取得することができるものであり、複数箇所のタッチ位置を同時認識することができるとともに、動きベクトルを認識することができるマルチタッチパネルである。即ち、このタッチパネル１４は、後述するようにタッチパネル１４上での２本の指の動きにより視点画像の拡大／縮小、及び右回転／左回転を指示し、また、１本の指の動きにより視差拡大／縮小を指示できるようになっている。 The touch panel 14 is provided on the display surface of the stereoscopic display unit 12, and when the user touches an arbitrary position on the touch panel 14, the two-dimensional coordinate data of the touched position can be acquired. This is a multi-touch panel capable of simultaneously recognizing a plurality of touch positions and recognizing a motion vector. That is, the touch panel 14 instructs enlargement / reduction of the viewpoint image and right / left rotation by movement of two fingers on the touch panel 14 as will be described later, and parallax is performed by movement of one finger. It is possible to instruct enlargement / reduction.

操作ボタン１６は、MENU／OKボタン、マルチファンクションの十字キー等を含み、MENU／OKボタンは、立体表示部１２の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するＯＫボタンとしての機能とを兼備した操作ボタンである。また、十字キーは、上下左右の４方向の指示を入力する操作ボタンであり、メニューが選択されている場合には、そのメニュー画面から項目を選択したり、各メニューから各種設定項目の選択を指示するスイッチ（カーソル移動操作手段）として機能し、また、十字キーの左／右キーは画像再生時のコマ送り（順方向／逆方向送り）ボタンとして機能する。 The operation buttons 16 include a MENU / OK button, a multi-function cross key, and the like. The MENU / OK button functions as a menu button for performing a command to display a menu on the screen of the stereoscopic display unit 12 and a selection. This is an operation button having a function as an OK button for instructing confirmation and execution of contents. The cross key is an operation button for inputting instructions in four directions, up, down, left, and right. When a menu is selected, an item can be selected from the menu screen, and various setting items can be selected from each menu. It functions as an instruction switch (cursor moving operation means), and the left / right key of the cross key functions as a frame advance (forward / reverse feed) button during image reproduction.

入出力コネクタ１８を含む入出力部３０は、パソコンや立体撮影装置等の外部機器との間で画像データ等の情報を入出力するインターフェースであり、同様に非接触通信入出力部２０は、外部機器との間で赤外線やブルートゥース等の近距離無線を行う部分であり、画像データ等の入出力を行う。 The input / output unit 30 including the input / output connector 18 is an interface for inputting / outputting information such as image data to / from an external device such as a personal computer or a stereoscopic camera. Similarly, the non-contact communication input / output unit 20 is an external device. This is a part that performs short-range wireless communication such as infrared and Bluetooth with the device, and inputs and outputs image data and the like.

記録媒体記録部３２は、記録媒体スロット２２を含み、メモリカード等の外部の記録媒体３３が記録媒体スロット２２に装填されると、その記録媒体３３に対して画像データ等の読み書きを行う。 The recording medium recording unit 32 includes a recording medium slot 22, and when an external recording medium 33 such as a memory card is loaded into the recording medium slot 22, image data and the like are read from and written to the recording medium 33.

メモリー部２４は、フラッシュメモリー、ＲＡＭ等を含み、後述する立体視画像の画像調整・編集時に起動するプログラム、利き目判定プログラム、左視点画像及び右視点画像からなる利き目判定用の利き目判定画像、各利き目判定画像の基準座標、及びユーザの利き目情報を記憶するとともに、立体表示部１２に表示する表示用の画像データ等を一時記憶するメモリーとして機能する。 The memory unit 24 includes a flash memory, a RAM, and the like, and a dominant eye determination for dominant eye determination including a program activated during image adjustment / editing of a stereoscopic image described later, a dominant eye determination program, a left viewpoint image, and a right viewpoint image. The image, the reference coordinates of each dominant eye determination image, and the user's dominant eye information are stored, and also functions as a memory for temporarily storing image data for display displayed on the stereoscopic display unit 12.

立体表示制御部２６は、立体表示部１２に立体視画像（３Ｄ画像）、利き目判定用の利き目判定画像、通常の２Ｄ画像、その他、ＧＵＩ用の画像等を表示させる部分であり、中央処理装置（ＣＰＵ）などが考えられる。スピーカー部２８は、音声付き画像（静止画、動画）の再生時に音声データに基づいて音声を発生する。 The stereoscopic display control unit 26 is a part that causes the stereoscopic display unit 12 to display a stereoscopic image (3D image), a dominant eye determination image for dominant eye determination, a normal 2D image, a GUI image, and the like. A processing unit (CPU) or the like can be considered. The speaker unit 28 generates sound based on the sound data when reproducing an image with sound (still image, moving image).

利き目判定処理部３４は、利き目判定処理時にタッチパネル１４から取得されるタッチした位置の座標データに基づいてタッチパネル１４をタッチしたユーザの利き目を判定する。尚、この利き目判定の詳細につては後述する。 The dominant eye determination processing unit 34 determines the dominant eye of the user who touched the touch panel 14 based on the coordinate data of the touched position acquired from the touch panel 14 during the dominant eye determination process. Details of the dominant eye determination will be described later.

画像調整・編集部３６は、２視点画像（左視点画像、右視点画像）のうちのユーザの利き目側の視点画像、又は利き目側と反対側の視点画像の画像調整・編集を行う部分であり、タッチパネル１４からの操作入力に応じて２視点画像のうちの一方の視点画像を固定し、他方の視点画像を拡縮、回転、視差量（並進移動）、ホワイトバランス調整、コントラスト調整、又は輝度調整を行う。 The image adjustment / editing unit 36 performs image adjustment / editing on the viewpoint image on the user's dominant eye side or the viewpoint image on the opposite side to the dominant eye side of the two viewpoint images (left viewpoint image, right viewpoint image). One of the two viewpoint images is fixed in response to an operation input from the touch panel 14, and the other viewpoint image is scaled, rotated, parallax (translational movement), white balance adjustment, contrast adjustment, or Adjust brightness.

関連付け処理部３８は、画像調整・編集部３６により調整・編集された調整値と立体視画像とを関連付ける部分であり、前記調整値を画像ファイルのヘッダに記録し、あるいは画像ファイルとは別のテキストファイルに当該画像ファイルと関連付けて記録する。尚、関連付け処理部３８による画像と調整値との関連付けの詳細については後述する。 The association processing unit 38 associates the adjustment value adjusted / edited by the image adjustment / editing unit 36 with the stereoscopic image, and records the adjustment value in the header of the image file, or is different from the image file. A text file is recorded in association with the image file. Details of the association between the image and the adjustment value by the association processing unit 38 will be described later.

装置設定反映処理部４０は、前記画像調整・編集部３６により調整・編集された調整値を装置内に保存し、この保存した調整値を立体視画像の再生時に反映させる。即ち、装置設定反映処理部４０は、装置内に保存されている調整値を使用して立体視画像の画像調整を行い、画像調整後の立体視画像を、立体表示制御部２６を介して立体表示部１２に表示させ、立体視画像の再生時に反映させる。 The apparatus setting reflection processing unit 40 stores the adjustment value adjusted / edited by the image adjustment / editing unit 36 in the apparatus, and reflects the stored adjustment value when reproducing the stereoscopic image. That is, the apparatus setting reflection processing unit 40 performs image adjustment of the stereoscopic image using the adjustment value stored in the apparatus, and the stereoscopic image after the image adjustment is stereoscopically displayed via the stereoscopic display control unit 26. It is displayed on the display unit 12 and reflected when a stereoscopic image is reproduced.

［実施形態］
図３は立体視画像の画像調整・編集用のプログラムを起動させ、立体視画像の画像調整・編集する場合の処理を示すフローチャートである。以下、図３に示すフローチャートにしたがって立体視画像の画像調整・編集方法の実施形態について説明する。 [Embodiment]
FIG. 3 is a flowchart showing a process in a case where a program for image adjustment / editing of a stereoscopic image is activated to adjust / edit the image of the stereoscopic image. Hereinafter, an embodiment of a method for adjusting and editing a stereoscopic image will be described with reference to the flowchart shown in FIG.

［ステップＳ１０］
立体視画像の画像調整・編集を行うメニュー等をタッチパネル１４又は操作ボタン１６の操作により選択することにより画像調整・編集用のプログラムを起動させ、画像調整・編集を開始させる。 [Step S10]
By selecting a menu or the like for image adjustment / editing of a stereoscopic image by operating the touch panel 14 or the operation button 16, an image adjustment / editing program is activated to start image adjustment / editing.

［ステップＳ１２］
立体表示装置１０は、画像調整・編集の対象となる立体視画像を立体表示部１２に３Ｄ表示させる。この場合、操作ボタン１６の十字キーを操作することにより所望の立体視画像を選択して表示させることができる。 [Step S12]
The stereoscopic display device 10 causes the stereoscopic display unit 12 to 3D display a stereoscopic image that is an object of image adjustment / editing. In this case, a desired stereoscopic image can be selected and displayed by operating the cross key of the operation button 16.

［ステップＳ１４］
立体表示装置１０は、ユーザの利き目情報がメモリー部２４に登録されているか否かを判別する。利き目情報がある場合（「Yes」の場合)には、ステップＳ１８に遷移させ、利き目情報がない場合(「No」の場合)には、ステップＳ１６に遷移させる。 [Step S14]
The stereoscopic display device 10 determines whether or not the user's dominant eye information is registered in the memory unit 24. When there is dominant eye information (in the case of “Yes”), the process proceeds to step S18, and when there is no dominant eye information (in the case of “No”), the process proceeds to step S16.

ユーザの利き目情報は、操作ボタン１６等を使用してユーザ自身が自分の利き目情報を利き目情報登録手段（メモリー部２４）に登録する方法と、タッチパネル１４でのタッチ操作に基づいて自動的にメモリー部２４に登録する方法とがある。 The user's dominant eye information is automatically determined based on a method in which the user himself / herself registers his / her dominant eye information in the dominant eye information registration means (memory unit 24) using the operation buttons 16 and the touch operation on the touch panel 14. In other words, there is a method of registering in the memory unit 24.

＜利き目判定処理及び利き目情報の保存・登録＞
ここで、タッチパネル１４でのタッチ操作に基づいて自動的に利き目情報を登録する方法について、図４及び図５を参照しながら説明する。 <Handedness judgment process and storage / registration of dominant eye information>
Here, a method for automatically registering dominant eye information based on a touch operation on the touch panel 14 will be described with reference to FIGS. 4 and 5.

図４に示すように立体表示制御部２６は、立体表示部１２に利き目判定画像と、「十字の中心を押してください」という文字を表示させる。 As illustrated in FIG. 4, the stereoscopic display control unit 26 causes the stereoscopic display unit 12 to display the dominant eye determination image and the characters “please press the center of the cross”.

この利き目判定画像は、左視点画像及び右視点画像からなる立体視画像であり、この実施形態では、丸に十字が入ったマーク画像である。尚、利き目判定画像及び各画像の基準座標（十字の中心座標）は、メモリー部２４に保存されている。また、利き目判定画像は、この実施形態のものに限らず、視差を持つ画像であり、ユーザの押す場所が明確に指定できるものであれば如何なるものでもよい。 The dominant eye determination image is a stereoscopic image including a left viewpoint image and a right viewpoint image. In this embodiment, the dominant eye determination image is a mark image with a cross in a circle. Note that the dominant eye determination image and the reference coordinates (the center coordinates of the cross) of each image are stored in the memory unit 24. In addition, the dominant eye determination image is not limited to that in this embodiment, and may be any image having a parallax as long as the user can clearly specify the place to be pressed.

利き目判定処理部３４は、立体表示部１２の画面上の利き目判定画像が押されたか否か（タッチパネル１４がタッチされたか否か）を検知し、押された場合には、利き目判定画像の押された位置座標をタッチパネル１４を介して取得し、この位置座標と利き目判定画像の左視点画像及び右視点画像の各基準位置とに基づいてユーザの利き目を判定する。 The dominant eye determination processing unit 34 detects whether or not the dominant eye determination image on the screen of the stereoscopic display unit 12 is pressed (whether or not the touch panel 14 is touched). The pressed position coordinates of the image are acquired via the touch panel 14, and the user's dominant eye is determined based on the position coordinates and the reference positions of the left viewpoint image and the right viewpoint image of the dominant eye determination image.

即ち、図５及び下記の［数１］式、［数２］に示すように左視点差分Ｄ_Ｌ，右視点差分Ｄ_Ｒを算出する。 That is, FIG. 5 and Expression 1 below, calculates the left viewpoint difference D _L, right viewpoint difference D _R as shown in Equation 2.

［数１］
左視点差分Ｄ_Ｌ＝｜((1)左視点画像の押された座標)-((2)左視点画像の十字の中心)|
Ｄ_Ｌ＝√(ｘ_１−ｘ_２)^２＋（ｙ_１−ｙ_２)^２
［数２］
右視点差分Ｄ_Ｒ＝｜((1)右視点画像の押された座標)-((2)右視点画像の十字の中心)|
Ｄ_Ｒ＝√(ｘ_３−ｘ_４)^２＋（ｙ_３−ｙ_４)^２
そして、Ｄ_Ｌ＜Ｄ_Ｒの場合は、左目を利き目と判定し、Ｄ_Ｒ≦Ｄ_Ｌの場合は、右目を利き目と判定する。尚、Ｄ_Ｒ＝Ｄ_Ｌの場合には、利き目の判定は不能であるが、この場合には、ステップＳ２８と同様に、利き目を右目として判定する。 [Equation 1]
Left viewpoint difference D _L = | ((1) coordinates where left viewpoint image is pressed) − ((2) center of cross of left viewpoint image) |
D _L = √ (x ₁ −x ₂ ) ² + (y ₁ −y ₂ ) ²
[Equation 2]
Right viewpoint difference D _R = | ((1) coordinates pressed of right viewpoint image) − ((2) center of cross of right viewpoint image) |
D _R = √ (x ₃ −x ₄ ) ² + (y ₃ −y ₄ ) ²
If D _L <D _R , the left eye is determined to be a dominant eye, and if D _R ≦ D _L , the right eye is determined to be a dominant eye. In the case of D R ₌ D _L is determined dominant eye is impossible, in this case, similarly to step S28, determines dominant eye as the right eye.

このようにして判定したユーザの利き目の情報をメモリー部２４に保存する。 Information on the dominant hand of the user determined in this way is stored in the memory unit 24.

上記の方法を使用すると、立体表示部１２に表示された利き目判定画像をタッチするだけで、利き目の判別ができ、その結果を登録することができる。 If the above method is used, the dominant eye can be determined by simply touching the dominant eye determination image displayed on the stereoscopic display unit 12, and the result can be registered.

［ステップＳ１６］
利き目情報が登録されていない場合には、画像調整・編集を終了させる。この場合、利き目情報が登録されていないことをユーザに警告し、ユーザ自身による利き目情報の入力を促すか、又はタッチパネル１４でのタッチ操作による利き目情報の自動登録を促す。 [Step S16]
If the dominant eye information is not registered, the image adjustment / editing is terminated. In this case, the user is warned that the dominant eye information is not registered, and the user himself / herself is prompted to input the dominant eye information or the automatic registration of the dominant eye information by the touch operation on the touch panel 14 is prompted.

［ステップＳ１８］
利き目情報が取得されると、その後、タッチパネル１４上でタッチされた座標は、利き目側画像の座標として採用する。これにより、立体表示部１２に２視点画像の操作ボタン等がある場合には、利き目側画像（ボタン画像、スライドバー画像）に対するタッチ座標として採用される。 [Step S18]
When the dominant eye information is acquired, the coordinates touched on the touch panel 14 are then adopted as the coordinates of the dominant eye side image. As a result, when the stereoscopic display unit 12 has a two-viewpoint image operation button or the like, it is adopted as a touch coordinate for the dominant eye side image (button image, slide bar image).

［ステップＳ２０］
タッチパネル１４がタッチ操作されたか否か、また、タッチ操作された場合、どの画像調整・編集に対するタッチ操作があったかを判別する。そして、画像調整・編集として、視点画像の拡大／縮小のタッチ操作があった場合にはステップＳ２２に遷移させ、視点画像の右回転／左回転のタッチ操作があった場合にはステップＳ２４に遷移させ、視点画像の視差拡大／縮小のタッチ操作があった場合にはステップＳ２６に遷移させる。また、視点画像のホワイトバランス調整のタッチ操作があった場合にはステップＳ２８に遷移させ、視点画像のコントラスト調整のタッチ操作があった場合にはステップＳ３０に遷移させ、視点画像の輝度調整のタッチ操作があった場合にはステップＳ３２に遷移させる。 [Step S20]
It is determined whether or not the touch panel 14 has been touched, and when the touch operation has been performed, which image adjustment / editing touch operation has been performed. As image adjustment / editing, when there is a touch operation for enlargement / reduction of the viewpoint image, the process proceeds to step S22, and when there is a touch operation for rotation of the viewpoint image to the right / left, the process proceeds to step S24. If there is a touch operation for parallax enlargement / reduction of the viewpoint image, the process proceeds to step S26. If there is a touch operation for adjusting the white balance of the viewpoint image, the process proceeds to step S28, and if there is a touch operation for adjusting the contrast of the viewpoint image, the process proceeds to step S30 to touch the brightness adjustment of the viewpoint image. If there is an operation, the process proceeds to step S32.

［ステップＳ２２］
立体表示部１２に表示されている左右の視点画像内の被写体の大きさが異なる場合、いずれか一方の視点画像を拡大／縮小して大きさを一致させる画像調整を行う必要がある。 [Step S22]
When the size of the subject in the left and right viewpoint images displayed on the stereoscopic display unit 12 is different, it is necessary to perform image adjustment for enlarging / reducing one of the viewpoint images to match the size.

図６（Ａ）に示すように右視点画像が左視点画像よりも小さく、かつユーザの利き目が右の場合には、利き目側の右視点画像を基準に左右の視点画像の被写体の大きさを調整する操作が行われるが、この場合には、利き目側の右視点画像を拡大する操作（２本の指をタッチパネル１４から離さずに拡げるタッチ操作）が行われる。 As shown in FIG. 6A, when the right viewpoint image is smaller than the left viewpoint image and the user's dominant eye is right, the size of the subject of the left and right viewpoint images is determined based on the right viewpoint image on the dominant eye side. In this case, an operation for enlarging the right viewpoint image on the dominant eye side (touch operation for expanding two fingers without releasing the touch panel 14) is performed.

尚、図６（Ａ）では説明のために左右の視点画像（２Ｄ）は横に並べて表示されているが、立体表示部１２上では左右の視点画像は立体視画像として表示される。以降の図面も説明のために左右の視点画像（２Ｄ）を横に並べて表示している。 In FIG. 6A, the left and right viewpoint images (2D) are displayed side by side for explanation, but the left and right viewpoint images are displayed as a stereoscopic image on the stereoscopic display unit 12. The subsequent drawings also display the left and right viewpoint images (2D) side by side for the sake of explanation.

タッチパネル１４は、上記タッチ操作を利き目側の視点画像に対する拡大操作として認識し、その操作入力を画像調整・編集部３６に出力する。画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像（右視点画像）を拡大する画像処理を行う。画像調整・編集部３６により調整・編集された視点画像は、立体表示制御部２６を介して立体表示部１２に表示され、これにより調整結果を確認できるようになっている。 The touch panel 14 recognizes the touch operation as an enlargement operation for the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36. The image adjustment / editing unit 36 performs image processing for enlarging the viewpoint image (right viewpoint image) on the user's dominant eye side of the left and right viewpoint images based on the user's dominant eye information acquired in step S14. The viewpoint image adjusted / edited by the image adjustment / editing unit 36 is displayed on the stereoscopic display unit 12 via the stereoscopic display control unit 26, whereby the adjustment result can be confirmed.

一方、図６（Ｂ）に示すように右視点画像が左視点画像よりも大きく、かつユーザの利き目が右の場合には、利き目側の右視点画像を縮小する操作（２本の指をタッチパネル１４から離さずに近づけるタッチ操作）が行われる。タッチパネル１４は、２本の指がタッチパネル１４から離れずに近づくことを検知すると、利き目側の視点画像に対する縮小操作として認識し、その操作入力を画像調整・編集部３６に出力する。画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像（右視点画像）を縮小する画像調整を行う。 On the other hand, as shown in FIG. 6B, when the right viewpoint image is larger than the left viewpoint image and the user's dominant eye is right, an operation for reducing the right viewpoint image on the dominant eye side (two fingers Is performed without releasing the touch panel 14 from the touch panel 14). When the touch panel 14 detects that two fingers approach without moving away from the touch panel 14, the touch panel 14 recognizes it as a reduction operation for the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36. Based on the user's dominant eye information acquired in step S14, the image adjustment / editing unit 36 performs image adjustment for reducing the viewpoint image (right viewpoint image) on the user's dominant eye side of the left and right viewpoint images.

このように、ユーザの利き目側の視点画像のみを拡大又は縮小し、利き目側でない視点画像を調整不可とすることにより、左右の視点画像からなる立体視画像の拡大／縮小の調整操作が直感的で分かりやすい操作となる。 In this way, by adjusting only the viewpoint image on the dominant eye side of the user and making the adjustment of the viewpoint image that is not on the dominant eye side impossible, the adjustment operation for enlargement / reduction of the stereoscopic image including the left and right viewpoint images is performed. The operation is intuitive and easy to understand.

［ステップＳ２４］
立体表示部１２に表示されている左右の視点画像内の被写体の傾きが異なる場合、いずれか一方の視点画像を回転させて傾きを一致させる画像調整を行う必要がある。 [Step S24]
When the inclinations of the subjects in the left and right viewpoint images displayed on the stereoscopic display unit 12 are different, it is necessary to perform image adjustment in which one of the viewpoint images is rotated to match the inclination.

図７に示すように右視点画像が左視点画像よりも左方向に回転しており、かつユーザの利き目が右の場合には、利き目側の右視点画像を右方向に回転させて左右の視点画像の傾きを一致させる回転操作（２本の指をタッチパネル１４から離さずに、１本の指（親指）を支点にしてもう一本の指（人差し指）を右方向に回転させるタッチ操作）が行われる。 As shown in FIG. 7, when the right viewpoint image is rotated to the left than the left viewpoint image and the user's dominant eye is right, the right viewpoint image on the dominant eye side is rotated to the right to Operation to match the inclination of the viewpoint image (touch operation to rotate the other finger (index finger) to the right with one finger (thumb) as a fulcrum without releasing two fingers from the touch panel 14 ) Is performed.

タッチパネル１４は、上記タッチ操作を利き目側の視点画像に対する回転操作として認識し、その操作入力を画像調整・編集部３６に出力する。画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像（右視点画像）を右方向に回転させる画像処理を行う。 The touch panel 14 recognizes the touch operation as a rotation operation for the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36. Based on the user's dominant eye information acquired in step S <b> 14, the image adjustment / editing unit 36 rotates the viewpoint image (right viewpoint image) on the user's dominant eye side of the left and right viewpoint images in the right direction. I do.

尚、上記のタッチ操作とは逆に、タッチパネル１４上で親指を支点にして人差し指を左方向に回転させると、利き目側の視点画像を左回転させることができる。 Contrary to the above touch operation, when the index finger is rotated leftward on the touch panel 14 with the thumb as a fulcrum, the dominant eye side viewpoint image can be rotated leftward.

このように、ユーザの利き目側の視点画像のみを右回転又は左回転させ、利き目側でない視点画像を調整不可とすることにより、左右の視点画像からなる立体視画像の右回転／左回転の調整操作が直感的で分かりやすい操作となる。 In this way, only the viewpoint image on the user's dominant eye side is rotated to the right or left, and the viewpoint image that is not on the dominant eye side is made unadjustable. The adjustment operation is intuitive and easy to understand.

［ステップＳ２６］
立体表示部１２に表示されている左右の視点画像の視差を調整する場合、いずれか一方の視点画像を水平方向に移動させることにより視差調整を行うことができる。また、いずれか一方の視点画像を上下方向にも移動させることも可能とする。 [Step S26]
When adjusting the parallax between the left and right viewpoint images displayed on the stereoscopic display unit 12, the parallax adjustment can be performed by moving one of the viewpoint images in the horizontal direction. It is also possible to move either one of the viewpoint images in the vertical direction.

図８に示すように右視点画像の被写体が左視点画像の被写体よりも左方向に位置しており、かつユーザの利き目が右の場合には、利き目側の右視点画像を右方向に移動させて左右の視点画像の被写体の位置を一致させる視差調整操作（タッチパネル１４から指を離さずに右方向にドラッグさせるタッチ操作）が行われる。 As shown in FIG. 8, when the subject of the right viewpoint image is positioned to the left of the subject of the left viewpoint image and the user's dominant eye is right, the right viewpoint image on the dominant eye side is directed to the right. A parallax adjustment operation (a touch operation for dragging rightward without releasing the finger from the touch panel 14) is performed to move and match the positions of the subjects of the left and right viewpoint images.

タッチパネル１４は、上記タッチ操作を利き目側の視点画像を並行移動させる視差調整として認識し、その操作入力を画像調整・編集部３６に出力する。画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像（右視点画像）を右方向に移動（視差調整）させる画像処理を行う。 The touch panel 14 recognizes the touch operation as a parallax adjustment for moving the dominant viewpoint image in parallel, and outputs the operation input to the image adjustment / editing unit 36. Based on the user's dominant eye information acquired in step S14, the image adjustment / editing unit 36 moves the viewpoint image (right viewpoint image) of the user's dominant eye among the left and right viewpoint images to the right (parallax adjustment). ) To perform image processing.

尚、上記のタッチ操作とは逆に、タッチパネル１４上で左方向にドラッグさせるタッチ操作が行われると、利き目側の視点画像を左方向に移動させることができる。 Contrary to the touch operation described above, when a touch operation that drags leftward on the touch panel 14 is performed, the dominant-eye viewpoint image can be moved leftward.

このように、ユーザの利き目側の視点画像のみを右方向又は左方向に移動させ、利き目側でない視点画像を調整不可とすることにより、左右の視点画像からなる立体視画像の視差の調整操作が直感的で分かりやすい操作となる。 In this way, by adjusting only the viewpoint image on the dominant eye side of the user in the right direction or the left direction and disabling adjustment of the viewpoint image that is not on the dominant eye side, the parallax adjustment of the stereoscopic image including the left and right viewpoint images is performed. The operation is intuitive and easy to understand.

また、上下方向に視点画像をドラッグさせるタッチ操作を行うことにより、ユーザの利き目側の視点画像のみを上方向又は下方向に移動させることができ、これにより、上下方向に左右の視点画像の位置ズレが発生している場合の調整を行うことができる。 Also, by performing a touch operation of dragging the viewpoint image in the vertical direction, only the viewpoint image on the user's dominant eye side can be moved upward or downward, and thereby the left and right viewpoint images can be moved in the vertical direction. Adjustment can be made when there is a positional shift.

［ステップＳ２８］
立体表示部１２に表示されている左右の視点画像のうちの一方の視点画像のホワイトバランス調整を変更することにより、左右の視点画像のホワイトバランスを一致させることができる。 [Step S28]
By changing the white balance adjustment of one of the left and right viewpoint images displayed on the stereoscopic display unit 12, the white balance of the left and right viewpoint images can be matched.

例えば、立体視画像とともにホワイトバランス調整用のスライドバーを３Ｄ表示し、タッチパネル１４上で、スライドバーのつまみをドラッグすることにより、ホワイトバランス調整の変更を指示することができる。タッチパネル１４は、ホワイトバランス調整用のスライドバーを使用したタッチ操作を利き目側の視点画像のホワイトバランス調整操作として認識し、その操作入力を画像調整・編集部３６に出力する。 For example, a white balance adjustment slide bar can be displayed in 3D together with a stereoscopic image, and a change in white balance adjustment can be instructed by dragging a slide bar knob on the touch panel 14. The touch panel 14 recognizes the touch operation using the slide bar for white balance adjustment as the white balance adjustment operation of the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36.

画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像のホワイトバランス調整を、前記ホワイトバランス調整の操作入力に応じて変更・修正させる画像処理を行う。画像調整・編集部３６によりホワイトバランス調整された視点画像は、立体表示制御部２６を介して立体表示部１２に表示され、これにより調整結果を確認することができる。 Based on the user's dominant eye information acquired in step S14, the image adjustment / editing unit 36 performs the white balance adjustment operation input of the viewpoint image on the user's dominant eye side among the left and right viewpoint images. The image processing to be changed / modified according to is performed. The viewpoint image whose white balance has been adjusted by the image adjustment / editing unit 36 is displayed on the stereoscopic display unit 12 via the stereoscopic display control unit 26, whereby the adjustment result can be confirmed.

［ステップＳ３０］
立体表示部１２に表示されている左右の視点画像のうちの一方の視点画像のコントラスト調整を変更することにより、左右の視点画像のコントラストを一致させることができる。 [Step S30]
The contrast of the left and right viewpoint images can be matched by changing the contrast adjustment of one of the left and right viewpoint images displayed on the stereoscopic display unit 12.

例えば、立体視画像とともにコントラスト調整用のスライドバーを３Ｄ表示し、タッチパネル１４上で、スライドバーのつまみをドラッグすることにより、コントラスト調整の変更を指示することができる。タッチパネル１４は、コントラスト調整用のスライドバーを使用したタッチ操作を利き目側の視点画像のコントラスト調整操作として認識し、その操作入力を画像調整・編集部３６に出力する。 For example, a contrast adjustment slide bar can be displayed in 3D together with a stereoscopic image, and a change in contrast adjustment can be instructed by dragging a slide bar knob on the touch panel 14. The touch panel 14 recognizes the touch operation using the contrast adjustment slide bar as the contrast adjustment operation of the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36.

画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像のコントラスト調整を、前記コントラスト調整の操作入力に応じて変更・修正させる画像処理を行う。画像調整・編集部３６によりコントラスト調整された視点画像は、立体表示制御部２６を介して立体表示部１２に表示され、これにより調整結果を確認することができる。 Based on the user's dominant eye information acquired in step S14, the image adjustment / editing unit 36 performs contrast adjustment of the viewpoint image on the user's dominant eye side of the left and right viewpoint images according to the operation input for the contrast adjustment. Image processing to be changed / modified. The viewpoint image whose contrast has been adjusted by the image adjustment / editing unit 36 is displayed on the stereoscopic display unit 12 via the stereoscopic display control unit 26, whereby the adjustment result can be confirmed.

［ステップＳ３２］
立体表示部１２に表示されている左右の視点画像のうちの一方の視点画像の輝度調整を変更することにより、左右の視点画像の輝度を一致させることができる。 [Step S32]
By changing the luminance adjustment of one of the left and right viewpoint images displayed on the stereoscopic display unit 12, the luminance of the left and right viewpoint images can be matched.

例えば、立体視画像とともに輝度調整用のスライドバーを３Ｄ表示し、タッチパネル１４上で、スライドバーのつまみをドラッグすることにより、輝度調整の変更を指示することができる。タッチパネル１４は、輝度調整用のスライドバーを使用したタッチ操作を利き目側の視点画像の輝度調整操作として認識し、その操作入力を画像調整・編集部３６に出力する。 For example, a brightness adjustment slide bar is displayed in 3D together with a stereoscopic image, and a change in brightness adjustment can be instructed by dragging a slide bar knob on the touch panel 14. The touch panel 14 recognizes the touch operation using the brightness adjustment slide bar as the brightness adjustment operation of the dominant eye viewpoint image, and outputs the operation input to the image adjustment / editing unit 36.

画像調整・編集部３６は、ステップＳ１４で取得したユーザの利き目情報に基づいて、左右の視点画像のうちのユーザの利き目側の視点画像の輝度調整を、前記輝度調整の操作入力に応じて変更・修正させる画像処理を行う。画像調整・編集部３６により輝度調整された視点画像は、立体表示制御部２６を介して立体表示部１２に表示され、これにより調整結果を確認することができる。 Based on the user's dominant eye information acquired in step S14, the image adjustment / editing unit 36 performs luminance adjustment of the viewpoint image on the user's dominant eye side of the left and right viewpoint images in accordance with the operation input for the luminance adjustment. Image processing to be changed / modified. The viewpoint image whose luminance has been adjusted by the image adjustment / editing unit 36 is displayed on the stereoscopic display unit 12 via the stereoscopic display control unit 26, whereby the adjustment result can be confirmed.

［ステップＳ３４］
上記ステップＳ２２〜Ｓ３２により立体視画像の画像調整・編集が行われると、関連付け処理部３８によるステップＳ３６の処理、又は装置設定反映処理部４０によるステップＳ３８の処理が選択される。 [Step S34]
When the image adjustment / editing of the stereoscopic image is performed in steps S22 to S32, the process in step S36 by the association processing unit 38 or the process in step S38 by the device setting reflection processing unit 40 is selected.

［ステップＳ３６］
関連付け処理部３８は、画像調整・編集部３６により調整・編集された調整値と立体視画像とを、以下に示すように関連付けて保存する。 [Step S36]
The association processing unit 38 stores the adjustment value adjusted and edited by the image adjustment / editing unit 36 and the stereoscopic image in association with each other as shown below.

図９に示すように左右の視点画像が１つの画像ファイルに格納されている場合には、この画像ファイルのヘッダに調整値を保存する。図９に示す例では、右画像を右にＸ画素移動させる視差調整値を保存している。 As shown in FIG. 9, when the left and right viewpoint images are stored in one image file, the adjustment value is stored in the header of the image file. In the example illustrated in FIG. 9, a parallax adjustment value for moving the right image to the right by X pixels is stored.

また、図１０に示すように左右の視点画像が別々の画像ファイルに保存されている場合（但し、左右の視点画像は互いにファイル名等で関連付けられている）には、画像調整された視点画像側の画像ファイルのヘッダに調整値を保存する。図１０に示す例では、右の視点画像側（利き目側）の画像ファイルのヘッダに右画像を右にＸ画素移動させる視差調整値を保存している。 Also, as shown in FIG. 10, when the left and right viewpoint images are stored in separate image files (however, the left and right viewpoint images are associated with each other by a file name, etc.) The adjustment value is saved in the header of the image file on the side. In the example illustrated in FIG. 10, a parallax adjustment value for moving the right image to the right by X pixels is stored in the header of the image file on the right viewpoint image side (dominant eye side).

図１１に示す例では、立体視画像の画像ファイルが保存されているフォルダ内に、調整値ファイルを作成保存している。この調整値ファイルは、テキストファイルであり、各立体視画像１、２、…、に関連付けてそれぞれ調整値を保存している。 In the example shown in FIG. 11, the adjustment value file is created and saved in the folder in which the image file of the stereoscopic image is saved. This adjustment value file is a text file and stores adjustment values in association with each of the stereoscopic images 1, 2,.

図１２に示す例は、図１１に示す例の変形例であり、前記作成された調整値ファイルを、立体視画が保存されているフォルダとは別のフォルダに保存している。 The example shown in FIG. 12 is a modification of the example shown in FIG. 11, and the created adjustment value file is stored in a folder different from the folder in which the stereoscopic image is stored.

図１３に示す例は、オリジナルの立体視画像が保存されているフォルダとは別に、各立体視画像毎にフォルダを作成するとともに、各フォルダ毎に立体視画像とその調整値ファイルとを格納するようにしている。 The example shown in FIG. 13 creates a folder for each stereoscopic image separately from the folder in which the original stereoscopic image is stored, and stores the stereoscopic image and its adjustment value file for each folder. I am doing so.

尚、この立体表示装置１０は、立体視画像を再生する際に上記のようにその立体視画像の画像ファイルのヘッダや調整値ファイルから調整値を取得できる場合には、その調整値に基づいて立体視画像の画像調整を行うことができるようになっている。これにより、画像調整後の次回の再生時には、自分好みに画像調整された立体視画像を表示することができる。 When the stereoscopic display device 10 can obtain an adjustment value from the header of the image file of the stereoscopic image or the adjustment value file as described above when reproducing the stereoscopic image, the stereoscopic display device 10 is based on the adjustment value. The image adjustment of the stereoscopic image can be performed. Thereby, at the time of the next reproduction after the image adjustment, it is possible to display a stereoscopic image adjusted to the user's preference.

［ステップＳ３８］
装置設定反映処理部４０は、図１４に示すように画像調整・編集部３６により調整・編集された調整値が保存された、調整値ファイル（テキストファイル）を作成保存する。 [Step S38]
The apparatus setting reflection processing unit 40 creates and saves an adjustment value file (text file) in which adjustment values adjusted / edited by the image adjustment / editing unit 36 are saved as shown in FIG.

また、装置設定反映処理部４０は、前記保存した調整ファイルの調整値を立体視画像の再生時に反映させることができる。即ち、装置設定反映処理部４０は、前記調整値ファイルに保存されている調整値を使用して立体視画像の画像調整を行い、画像調整後の立体視画像を、立体表示制御部２６を介して立体表示部１２に表示させ、立体視画像の再生時に反映させる。これによれば、複数の視点画像間の画像調整がずれている立体視画像を再生する際に、調整値ファイルの調整値を使用してキャリブレーションすることができる。 Further, the apparatus setting reflection processing unit 40 can reflect the adjustment value of the stored adjustment file when reproducing the stereoscopic image. In other words, the device setting reflection processing unit 40 performs image adjustment of the stereoscopic image using the adjustment value stored in the adjustment value file, and the stereoscopic image after the image adjustment is sent via the stereoscopic display control unit 26. Are displayed on the stereoscopic display unit 12 and reflected when the stereoscopic image is reproduced. According to this, when reproducing a stereoscopic image in which image adjustment between a plurality of viewpoint images is shifted, calibration can be performed using the adjustment value of the adjustment value file.

＜立体撮影装置＞
図１５（Ａ）及び（Ｂ）はそれぞれ本発明に係る立体撮影装置の外観を示す斜め前方から見た斜視図及び斜め後方から見た斜視図であり、図２６は本発明に係る立体撮影装置の内部構成を含むブロック図である。 <Stereoscopic device>
15A and 15B are a perspective view seen from an oblique front and an oblique view seen obliquely from the rear, respectively, showing the external appearance of the stereoscopic photographing apparatus according to the present invention, and FIG. 26 is a stereoscopic photographing apparatus according to the present invention. It is a block diagram including the internal structure of.

図１５（Ａ）及び（Ｂ）に示すように、この立体撮影装置１００の前面には、左右にレンズ５０Ｌ，５０Ｒが配設され、上面にフラッシュ５１、レリーズボタン５３が配設されている。また、装置背面には、図１に示した立体表示装置１０と同様な立体表示部１２、タッチパネル１４、操作ボタン１６が配設されている。 As shown in FIGS. 15A and 15B, lenses 50L and 50R are disposed on the left and right sides of the front surface of the stereoscopic photographing apparatus 100, and a flash 51 and a release button 53 are disposed on the upper surface. Also, on the back of the apparatus, a stereoscopic display unit 12, a touch panel 14, and operation buttons 16 similar to the stereoscopic display apparatus 10 shown in FIG.

図２６に示すように立体撮影装置１００は、図２に示した立体表示装置１０の構成を全て含むとともに、更にレンズ５０Ｌ，５０Ｒを含む撮像部６０Ｌ，６０Ｒ、カメラ制御部７０、立体感制御部７２等を備えている。尚、図２に示した立体表示装置１０と同一の構成部分には同一の符号を付し、その詳細な説明は省略する。 As shown in FIG. 26, the stereoscopic imaging device 100 includes all the configurations of the stereoscopic display device 10 shown in FIG. 2, and further includes imaging units 60L and 60R including lenses 50L and 50R, a camera control unit 70, and a stereoscopic effect control unit. 72 etc. In addition, the same code | symbol is attached | subjected to the component same as the stereoscopic display apparatus 10 shown in FIG. 2, and the detailed description is abbreviate | omitted.

撮像部６０Ｌ，６０Ｒは、それぞれ同一の構成を有するものであり、レンズ５０、撮像素子（イメージセンサ）５２、Ａ／Ｄ変換器５４、及び画像処理部５６から構成されている。 The imaging units 60L and 60R have the same configuration, and include a lens 50, an imaging element (image sensor) 52, an A / D converter 54, and an image processing unit 56.

レンズ５０は、フォーカスレンズ、ズームレンズ等を含み、図示しないレンズ駆動部に駆動されて光軸に沿って前後に移動する。カメラ制御部７０は、レンズ駆動部の駆動を制御することにより、フォーカスレンズの位置を制御して被写体に焦点が合うように焦点調節を行うとともに、操作ボタン１６からのズーム指令に応じてズームレンズの位置を制御してズーミングを行う。 The lens 50 includes a focus lens, a zoom lens, and the like, and is driven by a lens driving unit (not shown) to move back and forth along the optical axis. The camera control unit 70 controls the driving of the lens driving unit so as to control the position of the focus lens so as to adjust the focus so that the subject is in focus, and the zoom lens according to the zoom command from the operation button 16. Zooming by controlling the position of.

カメラ制御部７０は、図示しない絞りを制御し、イメージセンサ５２への入射光量を制御する。イメージセンサ５２は、２次元のカラーＣＣＤ固体撮像素子により構成されている。イメージセンサ５２の受光面には、多数のフォトダイオードが２次元的に配列されており、各フォトダイオードには所定の配列でカラーフィルタが配置されている。レンズ５０、絞りを介してセンサ受光面上に結像された被写体の光学像は、このフォトダイオードによって入射光量に応じた信号電荷に変換される。各フォトダイオードに蓄積された信号電荷は、カメラ制御部７０の指令に従ってセンサ駆動部から与えられる駆動パルスに基づいて信号電荷に応じた電圧信号（画像信号）としてイメージセンサ５２から順次読み出される。イメージセンサ５２は、電子シャッタ機能を備えており、フォトダイオードへの電荷蓄積時間を制御することにより、露光時間（シャッタ速度）が制御される。尚、本実施形態では、イメージセンサ５２としてＣＣＤセンサを用いているが、ＣＭＯＳセンサ等の他の構成の撮像素子を用いることもできる。 The camera control unit 70 controls a diaphragm (not shown) and controls the amount of light incident on the image sensor 52. The image sensor 52 is constituted by a two-dimensional color CCD solid-state imaging device. A large number of photodiodes are two-dimensionally arranged on the light receiving surface of the image sensor 52, and a color filter is arranged in a predetermined arrangement on each photodiode. The optical image of the subject formed on the sensor light-receiving surface through the lens 50 and the diaphragm is converted into signal charges corresponding to the amount of incident light by the photodiode. The signal charge accumulated in each photodiode is sequentially read out from the image sensor 52 as a voltage signal (image signal) corresponding to the signal charge based on a drive pulse given from the sensor drive unit according to a command from the camera control unit 70. The image sensor 52 has an electronic shutter function, and the exposure time (shutter speed) is controlled by controlling the charge accumulation time in the photodiode. In the present embodiment, a CCD sensor is used as the image sensor 52, but an image pickup device having another configuration such as a CMOS sensor may be used.

イメージセンサ５２から読み出された画像信号は、Ａ／Ｄ変換器５４によりデジタル信号に変換された後、画像処理部５６に出力される。 The image signal read from the image sensor 52 is converted into a digital signal by the A / D converter 54 and then output to the image processing unit 56.

上記構成の撮像部６０Ｌ，６０Ｒの一対のレンズ５０は、図１５に示すように立体撮影装置１００の装置本体に対して水平方向に、かつ所定の間隔（所定の基線長）で配置されており、更に各レンズの光軸が一点で交差するように輻輳角（各光軸のなす角度）が調整されて配置されている。 As shown in FIG. 15, the pair of lenses 50 of the imaging units 60L and 60R having the above-described configuration are arranged in the horizontal direction with respect to the apparatus body of the stereoscopic photographing apparatus 100 and at a predetermined interval (predetermined base line length). Further, the convergence angle (angle formed by each optical axis) is adjusted so that the optical axes of the respective lenses intersect at one point.

カメラ制御部７０は、各撮像部６０Ｌ，６０Ｒを同期させて駆動する。即ち、各レンズ５０は、常に同じ被写体にピントが合うように焦点調整が行われ、常に同じ焦点距離（ズーム倍率）に設定される。また、常に同じ入射光量（絞り値）となるように絞りが調整される。 The camera control unit 70 drives the imaging units 60L and 60R in synchronization. That is, each lens 50 is always adjusted in focus so that the same subject is in focus, and is always set to the same focal length (zoom magnification). In addition, the aperture is adjusted so that the same incident light amount (aperture value) is always obtained.

画像処理部５６は、ホワイトバランス調整回路、階調変換処理回路（例えば、ガンマ補正回路）、同時化回路（単板イメージセンサ５２のカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、輪郭補正回路、輝度・色差信号生成回路等を含む処理部として機能し、Ａ／Ｄ変換器５４によりデジタル信号に変換されたＲ、Ｇ、Ｂの画像データに対して所定の信号処理を行う。即ち、Ｒ、Ｇ、Ｂの画像信号は、画像処理部５６において輝度信号（Ｙ信号）及び色差信号（Ｃｒ、Ｃｂ信号）からなるＹＵＶ信号に変換されるとともに、階調変換処理（例えば、ガンマ補正）等の所定の処理が施される。 The image processing unit 56 interpolates a spatial shift of the color signal associated with the color filter array of the single-plate image sensor 52, a white balance adjustment circuit, a gradation conversion processing circuit (for example, a gamma correction circuit), and a synchronization circuit. A processing circuit that converts color signals into a simultaneous type), a contour correction circuit, a luminance / color difference signal generation circuit, and the like, and functions as R, G, and B converted into digital signals by the A / D converter 54 Predetermined signal processing is performed on the image data. That is, the R, G, B image signals are converted into YUV signals composed of luminance signals (Y signals) and color difference signals (Cr, Cb signals) in the image processing unit 56, and gradation conversion processing (for example, gamma) Predetermined processing such as correction is performed.

画像処理部５６により処理された左右の視点画像データは、所定形式の圧縮画像データに変換された後、所定の画像ファイルに格納され、記録媒体記録部３２を介して記録媒体３３に記録される。 The left and right viewpoint image data processed by the image processing unit 56 is converted into compressed image data of a predetermined format, stored in a predetermined image file, and recorded on the recording medium 33 via the recording medium recording unit 32. .

立体表示部１２は、前述したように立体視画像を表示するための画像表示部として使用されるとともに各種設定時にＧＵＩとして使用され、また、撮影モード時に３Ｄのライブビュー画像を表示し、画角を確認するための電子ファインダとして利用される。 As described above, the stereoscopic display unit 12 is used as an image display unit for displaying a stereoscopic image and is used as a GUI during various settings, and also displays a 3D live view image in a shooting mode, and has an angle of view. It is used as an electronic finder for confirming.

立体感制御部７２は、撮影する立体視画像の立体感の強弱の度合いを調整する部分であり、例えばレンズ５０でのズーム倍率が変更され、又はユーザからの視差調整の指示入力があると、左右の視点画像の視差量（画像ずらし量）を調整する。 The stereoscopic effect control unit 72 is a part that adjusts the degree of intensity of the stereoscopic effect of the stereoscopic image to be shot. For example, when the zoom magnification of the lens 50 is changed or when a parallax adjustment instruction is input from the user, The parallax amount (image shift amount) of the left and right viewpoint images is adjusted.

尚、この実施形態の立体撮影装置１００は、左右の撮像部６０Ｌ，６０Ｒを備えた２眼の立体撮影装置であるが、３つ以上の撮像部を備えたものでもよい。また、同一被写体を異なる位置から２Ｄ撮影を行うことで立体視画像を取得する機能を有する立体撮影装置の場合には、単眼のものでもよい。 Note that the stereoscopic imaging apparatus 100 according to this embodiment is a two-lens stereoscopic imaging apparatus including left and right imaging units 60L and 60R, but may include three or more imaging units. Further, in the case of a stereoscopic imaging apparatus having a function of acquiring a stereoscopic image by performing 2D imaging of the same subject from different positions, it may be monocular.

［その他］
立体表示装置１０又は立体撮影装置１００により画像調整された立体視画像を、非接触通信入出力部２０又は入出力部３０から更に他の立体表示装置（例えば、大画面の３Ｄディスプレイ等）に送出するようにしてもよい。この場合、他の立体表示装置に表示された立体視画像を見ながら、手元の立体表示装置１０又は立体撮影装置１００を使用して立体視画像の画像調整が可能になる。 [Others]
A stereoscopic image adjusted by the stereoscopic display device 10 or the stereoscopic imaging device 100 is sent from the non-contact communication input / output unit 20 or the input / output unit 30 to another stereoscopic display device (for example, a large-screen 3D display). You may make it do. In this case, it is possible to adjust the image of the stereoscopic image using the stereoscopic display device 10 or the stereoscopic photographing device 100 at hand while viewing the stereoscopic image displayed on the other stereoscopic display device.

この実施形態の立体表示装置１０は、左右の２視点画像を表示するものであるが、これに限らず、３視点以上の視点画像を表示するものでもよい。この場合、利き目判定処理部３４での利き目判定処理時にタッチパネル１４から取得されるタッチした位置の座標データに基づいて、ユーザの利き目が３視点以上の視点画像のうちのいずれの視点画像を視認しているかを検知することができ、この検知した視点画像の画像調整を行えばよい。 The stereoscopic display device 10 of this embodiment displays left and right two viewpoint images, but is not limited to this, and may display three or more viewpoint images. In this case, based on the coordinate data of the touched position acquired from the touch panel 14 during the dominant eye determination process in the dominant eye determination processing unit 34, any viewpoint image among viewpoint images having three or more viewpoints of the user's dominant eye Can be detected and image adjustment of the detected viewpoint image may be performed.

また、立体視画像の画像調整・編集の種類はこの実施形態に限らず、また、画像調整時のタッチパネルの操作方法にこの実施形態に限定されず、種々のものが考えられる。 Further, the type of image adjustment / editing of the stereoscopic image is not limited to this embodiment, and the operation method of the touch panel at the time of image adjustment is not limited to this embodiment, and various types can be considered.

更に、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。 Furthermore, it goes without saying that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the spirit of the present invention.

１０…立体表示装置、１２…立体表示部、１４…タッチパネル、２０…非接触通信入出力部、２４…メモリー部、２６…立体表示制御部、３０…入出力部、３２…記録媒体記録部、３４…利き目判定処理部、３６…画像調整・編集部、３８…関連付け処理部、４０…装置設定反映処理部、６０Ｌ，６０Ｒ…撮像部、７０…カメラ制御部、１００…立体撮影装置 DESCRIPTION OF SYMBOLS 10 ... Stereoscopic display apparatus, 12 ... Stereoscopic display part, 14 ... Touch panel, 20 ... Non-contact communication input / output part, 24 ... Memory part, 26 ... Stereoscopic display control part, 30 ... Input / output part, 32 ... Recording medium recording part, 34 ... dominant eye determination processing unit, 36 ... image adjustment / editing unit, 38 ... association processing unit, 40 ... device setting reflection processing unit, 60L, 60R ... imaging unit, 70 ... camera control unit, 100 ... stereoscopic imaging device

Claims

Stereoscopic display means for displaying a stereoscopic image composed of a plurality of viewpoint images;
A touch panel that is provided on the display surface of the stereoscopic display means and receives an operation input for image adjustment of a stereoscopic image displayed on the stereoscopic display means;
A dominant eye information acquisition means for acquiring dominant eye information indicating a user's dominant eye;
Image adjustment of the viewpoint image on the user's dominant eye side among the plurality of viewpoint images displayed on the stereoscopic display unit based on the dominant eye information acquired by the dominant eye information acquisition unit and the operation input received by the touch panel Image adjusting means for adjusting the dominant-eye viewpoint image in the same adjustment direction as the adjustment direction by the operation input input corresponding to the dominant-eye viewpoint image;
A stereoscopic display device comprising:

The touch panel simultaneously recognizes a plurality of touch positions or recognizes a motion vector, and expands / reduces the viewpoint image, rotates right / left, enlarges / reduces parallax, and moves up / down based on the recognition result. The stereoscopic display device according to claim 1, wherein at least one of the operation inputs is received.

The stereoscopic display device according to claim 2, wherein the touch panel further receives at least one operation input of white balance adjustment, contrast adjustment, and luminance adjustment.

The stereoscopic display device according to claim 1, further comprising a recording unit that records an adjustment result by the image adjusting unit in association with the stereoscopic image.

The recording means writes an adjustment result by the image adjusting means in a header of the image file when a stereoscopic image including the plurality of viewpoint images is recorded in one image file. Item 5. A stereoscopic display device according to Item 4.

In the case where a plurality of viewpoint images constituting the stereoscopic image are recorded in association with different image files, the recording unit records the image in a header of an image file corresponding to the adjusted viewpoint image. The stereoscopic display device according to claim 4, wherein an adjustment result by the adjusting unit is written.

The recording unit creates an adjustment value file in which the adjustment result by the image adjustment unit is recorded, and stores the adjustment value file in a folder in which a stereoscopic image including the plurality of viewpoint images is recorded. The stereoscopic display device according to claim 4.

The recording unit creates a folder for each stereoscopic image separately from the folder in which the stereoscopic image including the plurality of viewpoint images is recorded, and the adjustment result by the stereoscopic image and the image adjusting unit for each folder The stereoscopic display device according to claim 4, wherein an adjustment value file in which is recorded is recorded.

9. The stereoscopic display unit according to claim 4, wherein the stereoscopic display unit performs image adjustment of the stereoscopic image based on an adjustment result recorded in association with the stereoscopic image when the stereoscopic image is reproduced. The stereoscopic display device described in 1.

A recording unit for recording the adjustment result by the image adjusting unit in a storage unit built in the apparatus;
The said stereoscopic display means performs the image adjustment of the said stereoscopic vision image based on the adjustment result recorded on the said memory | storage means at the time of reproduction | regeneration of the said stereoscopic vision image. 3D display device.

Receiving a registration of the user's dominant eye information, comprising a dominant eye information registration means for registering the received dominant eye information;
The stereoscopic display device according to claim 1, wherein the dominant eye information acquisition unit acquires dominant eye information from the dominant eye information registration unit.

The dominant eye information acquisition means includes:
The stereoscopic display means is a dominant eye determination image including a left viewpoint image and a right viewpoint image for determining a user's dominant eye, and represents a dominant eye determination image representing different reference coordinates in the left viewpoint image and the right viewpoint image. Display control means to be displayed on,
Obtaining means for obtaining position coordinates of the dominant eye determination image touched by the touch panel with respect to the dominant eye determination image displayed on the stereoscopic display means;
Based on the reference coordinates and the acquired position coordinates of each dominant eye determination image composed of the left viewpoint image and the right viewpoint image, the acquired position coordinates are the reference coordinates of the left viewpoint image and the reference point of the right viewpoint image. Determination means for determining a dominant eye of a user who has input the position coordinates via the touch panel according to which of the coordinates is close,
12. The stereoscopic display device according to claim 1, wherein dominant eye information is acquired based on a determination result by the determination unit.

A stereoscopic imaging apparatus comprising the stereoscopic display device according to claim 1.

The stereoscopic photographing apparatus according to claim 13, further comprising a communication unit that outputs a stereoscopic image adjusted by the image adjusting unit to an external stereoscopic display device.