[go: up one dir, main page]

JP2017040734A - Display device, display method, and display system - Google Patents

Display device, display method, and display system Download PDF

Info

Publication number
JP2017040734A
JP2017040734A JP2015161650A JP2015161650A JP2017040734A JP 2017040734 A JP2017040734 A JP 2017040734A JP 2015161650 A JP2015161650 A JP 2015161650A JP 2015161650 A JP2015161650 A JP 2015161650A JP 2017040734 A JP2017040734 A JP 2017040734A
Authority
JP
Japan
Prior art keywords
image
display
unit
projection
installation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015161650A
Other languages
Japanese (ja)
Other versions
JP6545034B2 (en
Inventor
明日華 八木
Asuka Yagi
明日華 八木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2015161650A priority Critical patent/JP6545034B2/en
Publication of JP2017040734A publication Critical patent/JP2017040734A/en
Application granted granted Critical
Publication of JP6545034B2 publication Critical patent/JP6545034B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Transforming Electric Information Into Light Information (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)

Abstract

PROBLEM TO BE SOLVED: To maintain excellent operability regardless of an installation state.SOLUTION: A projector 1 comprises: an installation information acquisition unit 111 for acquiring installation information showing the installation state of the projector 1; a configuration information acquisition unit 112 for acquiring configuration information showing a configuration of a plurality of projectors, including the projector 1, which project a projection image on a screen 2; a CPU 11 for generating a menu image 40 corresponding to the installation state shown by the installation information acquired by the installation information acquisition unit 111 and to the configuration shown by the configuration information acquired by the configuration information acquisition unit 112; and an image output unit 25 for outputting a projection image 30 including the generated menu image 40.SELECTED DRAWING: Figure 3

Description

本発明は、スクリーンに画像を表示する表示装置、表示装置を用いて画像を表示する方法、及び複数の表示装置を含む表示システムに関するものである。   The present invention relates to a display device for displaying an image on a screen, a method for displaying an image using the display device, and a display system including a plurality of display devices.

従来、スクリーンに画像を投影して表示するプロジェクタの投影方法として、スクリーンに対して正面から投影するフロント投影、及び背面から投影するリア投影が知られている。リア投影は透過型スクリーンを用いて実現され、視聴者からプロジェクタが見えないという利点、及び視聴者の影がスクリーンに映らないといった利点があるため、様々な場面で使用されている。リア投影の際にフロント投影と同じ画像を投影すると、視聴者には左右が反転した画像が見えてしまう。特許文献1には、リア投影時に、元画像の左右を反転させた表示画像をプロジェクタが投影することにより、視聴者が、元画像と同じ向きに表示された投影画像を見ることができるようにする技術が記載されている。   Conventionally, as a projection method of a projector that projects and displays an image on a screen, a front projection that projects from the front and a rear projection that projects from the back are known. The rear projection is realized by using a transmissive screen, and is used in various scenes because it has an advantage that the viewer cannot see the projector and a shadow of the viewer is not reflected on the screen. When the same image as the front projection is projected at the time of rear projection, the viewer will see an image with the left and right reversed. In Patent Document 1, the projector projects a display image obtained by inverting the left and right of the original image during rear projection so that the viewer can see the projection image displayed in the same direction as the original image. The technology to do is described.

特開2006−293124号公報JP 2006-293124 A

プロジェクタは、画像を投影している間に、画質の調整操作や画像ソースの切り替え操作等を行えるように、投影中の画像に重畳させてメニュー画像40を表示する。ところが、プロジェクタは、設置状態に応じて、表示画像を上下反転させたり左右反転させたりする。表示画像に合わせてメニュー画像40が上下反転又は左右反転した状態で表示されると、操作性が低下するという問題があった。例えば、複数の表示装置が投影する複数の投影画像を組み合わせてリア投影をする場合に、複数の表示装置の夫々を調整するためのメニュー画像40の表示方法が適切でないと、調整すべき表示装置と異なる表示装置を調整してしまうという問題があった。   The projector displays the menu image 40 superimposed on the image being projected so that an image quality adjustment operation, an image source switching operation, and the like can be performed while the image is being projected. However, the projector flips the display image upside down or left and right depending on the installation state. When the menu image 40 is displayed upside down or left and right in accordance with the display image, there is a problem that operability is deteriorated. For example, when rear projection is performed by combining a plurality of projection images projected by a plurality of display devices, if the display method of the menu image 40 for adjusting each of the plurality of display devices is not appropriate, the display device to be adjusted There is a problem that a different display device is adjusted.

そこで、本発明は上述した点に鑑みてなされたものであり、設置状態によらず良好な操作性を維持できる表示装置、表示方法及び表示システムを提供することを目的とする。   Therefore, the present invention has been made in view of the above-described points, and an object thereof is to provide a display device, a display method, and a display system that can maintain good operability regardless of the installation state.

上記の課題を解決するために、本発明の表示装置は、スクリーンに投影画像を投影する表示装置であって、前記表示装置の設置状態を示す設置情報を取得する設置情報取得手段と、前記スクリーンに前記投影画像を投影する、前記表示装置を含む複数の表示装置の構成を示す構成情報を取得する構成情報取得手段と、設置情報取得手段が取得した前記設置情報が示す前記設置状態、及び前記構成情報取得手段が取得した前記構成情報が示す前記構成に対応する操作用画像を生成する画像作成手段と、前記操作用画像を含む前記投影画像を出力する画像出力手段と、を有することを特徴とする。   In order to solve the above problems, a display device of the present invention is a display device that projects a projection image on a screen, and includes an installation information acquisition unit that acquires installation information indicating an installation state of the display device, and the screen A configuration information acquisition unit that acquires configuration information indicating a configuration of a plurality of display devices including the display device, the installation state indicated by the installation information acquired by the installation information acquisition unit, and An image creation unit that generates an operation image corresponding to the configuration indicated by the configuration information acquired by the configuration information acquisition unit, and an image output unit that outputs the projection image including the operation image. And

また、本発明の表示方法は、表示装置を用いてスクリーンに投影画像を投影する表示方法であって、前記表示装置の設置状態を示す設置情報を取得するステップと、前記スクリーンに前記投影画像を投影する複数の表示装置の構成を示す構成情報を取得するステップと、前記設置情報が示す前記設置状態、及び前記構成情報が示す前記構成に対応する操作用画像を生成するステップと、前記操作用画像を含む前記投影画像を出力するステップと、を有することを特徴とする。   The display method of the present invention is a display method for projecting a projection image on a screen using a display device, the step of obtaining installation information indicating an installation state of the display device, and the projection image on the screen. Obtaining configuration information indicating configurations of a plurality of display devices to be projected; generating an operation image corresponding to the installation state indicated by the installation information; and the configuration indicated by the configuration information; Outputting the projection image including an image.

また、本発明の表示システムは、スクリーンに投影画像を投影するマスター装置及びスレーブ装置を含む複数の表示装置を有する表示システムであって、前記マスター装置は、前記複数の表示装置の設置状態を示す設置情報を取得する設置情報取得手段と、前記複数の表示装置の構成を示す構成情報を取得する構成情報取得手段と、設置情報取得手段が取得した前記設置情報が示す前記設置状態、及び前記構成情報取得手段が取得した前記構成情報が示す前記構成に対応する操作用画像を生成する画像作成手段と、前記操作用画像を含む前記投影画像を出力する画像出力手段と、前記操作用画像に基づく操作を受け付ける操作受付手段と、前記操作受付手段が受け付けた操作の対象となる前記スレーブ装置に対して、操作の内容を示す操作情報を送信するマスター通信手段と、を有し、前記スレーブ装置は、前記マスター表示装置が送信した前記操作情報を受信するスレーブ通信手段と、前記スレーブ通信手段が受信した前記操作情報に基づいて設定内容を変更する制御手段と、を有することを特徴とする。   The display system of the present invention is a display system having a plurality of display devices including a master device and a slave device that project a projected image on a screen, and the master device indicates an installation state of the plurality of display devices. Installation information acquisition means for acquiring installation information, configuration information acquisition means for acquiring configuration information indicating the configuration of the plurality of display devices, the installation state indicated by the installation information acquired by the installation information acquisition means, and the configuration Based on the image creation means for generating the operation image corresponding to the configuration indicated by the configuration information acquired by the information acquisition means, the image output means for outputting the projection image including the operation image, and the operation image Operation information indicating the content of the operation for the operation receiving means for receiving the operation and the slave device that is the target of the operation received by the operation receiving means. Master communication means for transmitting, and the slave device is configured based on the slave communication means for receiving the operation information transmitted by the master display device and the operation information received by the slave communication means. And a control means for changing.

本発明によれば、表示装置の設置状態によらず良好な操作性を維持できるという効果を奏する。   According to the present invention, it is possible to maintain good operability regardless of the installation state of the display device.

表示システムの概要を説明するための図である。It is a figure for demonstrating the outline | summary of a display system. 表示システムの概要を説明するための図である。It is a figure for demonstrating the outline | summary of a display system. 表示システムを用いた場合の投影態様の一例を示す図である。It is a figure which shows an example of the projection aspect at the time of using a display system. プロジェクタ1の構成を示す図である。1 is a diagram illustrating a configuration of a projector 1. FIG. 画像処理部21の構成を示す図である。2 is a diagram illustrating a configuration of an image processing unit 21. FIG. 画像処理部21が表示画像をどのように変換するかを示す表である。It is a table | surface which shows how the image process part 21 converts a display image. 画像処理部21がメニュー画像40をどのように変換するかを示す表である。It is a table | surface which shows how the image process part 21 converts the menu image 40. FIG. プロジェクタ1における動作手順を説明するためのフローチャートである。3 is a flowchart for explaining an operation procedure in projector 1; プロジェクタ1の設置状態に応じて投影画像の態様を決定する処理のフローチャートである。6 is a flowchart of processing for determining a mode of a projection image according to an installation state of the projector. 画像作成部113がOSD画像としてのメニュー画像40を作成する処理のフローチャートである。It is a flowchart of the process which the image preparation part 113 produces the menu image 40 as an OSD image. マルチ投影の際に画像作成部113が作成するメニュー画像40を示す図である。It is a figure which shows the menu image 40 which the image preparation part 113 produces in the case of multi projection. 第2の実施形態に係る画像処理部21の構成を示す図である。It is a figure which shows the structure of the image process part 21 which concerns on 2nd Embodiment. 第2の実施形態に係る画像処理部21がメニュー画像40をどのように変換するかを示す表である。It is a table | surface which shows how the image process part 21 which concerns on 2nd Embodiment converts the menu image 40. FIG. マルチ投影の際に第2の実施形態に係る画像作成部113が作成するメニュー画像40を示す図である。It is a figure which shows the menu image 40 which the image preparation part 113 which concerns on 2nd Embodiment produces in the case of multiprojection. マスター装置であるプロジェクタ1cのCPU11が、投影画像の態様を決定する処理のフローチャートである。It is a flowchart of the process which CPU11 of the projector 1c which is a master apparatus determines the aspect of a projection image.

<第1の実施形態>
[表示システムの概要]
図1は、第1の実施形態に係る表示システムの概要を説明するための図である。第1の実施形態に係る表示システムは、複数のプロジェクタ1a,1b,1cを含んで構成されている。プロジェクタ1a,1b,1cは、例えば、スクリーン2に投影画像30を投影する表示装置である。本明細書において、プロジェクタ1a,1b,1cに共通する機能について説明する場合に、プロジェクタ1と称することがある。
<First Embodiment>
[Overview of display system]
FIG. 1 is a diagram for explaining an overview of a display system according to the first embodiment. The display system according to the first embodiment includes a plurality of projectors 1a, 1b, and 1c. The projectors 1a, 1b, and 1c are display devices that project a projection image 30 onto the screen 2, for example. In this specification, when a function common to the projectors 1a, 1b, and 1c is described, the projector 1 may be referred to.

プロジェクタ1a,1b,1cは、コンピュータ等の外部装置(不図示)から入力された表示画像に基づいて投影画像30a,30b,30cを生成し、投影画像30a,30b,30cが一つに統合された投影画像30をスクリーン2に投影するマルチ投影モードで動作することができる。プロジェクタ1a,1b,1cは、外部装置からの制御に基づいて、入力された表示画像において、各プロジェクタ1が投影すべき領域の表示画像に基づく投影画像30を投影する。外部装置は、プロジェクタ100と通信を行うことができるものであれば、パーソナルコンピュータ、カメラ、携帯電話、スマートフォン、ハードディスクレコーダ、ゲーム機、又はリモコン等の任意の装置であってよい。   The projectors 1a, 1b, and 1c generate projected images 30a, 30b, and 30c based on display images input from an external device (not shown) such as a computer, and the projected images 30a, 30b, and 30c are integrated into one. It is possible to operate in a multi-projection mode in which the projected image 30 is projected onto the screen 2. The projectors 1a, 1b, and 1c project a projection image 30 based on the display image of the area to be projected by each projector 1 in the input display image based on the control from the external device. The external device may be any device such as a personal computer, a camera, a mobile phone, a smartphone, a hard disk recorder, a game machine, or a remote controller as long as it can communicate with the projector 100.

図1A(a)は、視聴者側にプロジェクタ1a,1b,1cが設置され、スクリーン2の正面から投影画像30が投影されるフロント投影に対応するフロント設置状態を示している。プロジェクタ1aは、投影画像30aを投影しており、プロジェクタ1bは、投影画像30bを投影しており、プロジェクタ1cは、投影画像30cを投影している。   FIG. 1A (a) shows a front installation state corresponding to the front projection in which the projectors 1a, 1b, and 1c are installed on the viewer side and the projection image 30 is projected from the front of the screen 2. The projector 1a projects the projection image 30a, the projector 1b projects the projection image 30b, and the projector 1c projects the projection image 30c.

プロジェクタ1cは、マスター装置として動作するモードに設定されており、投影画像30の色補正をしたり、投影画像30a,30b,30cの重なり領域の明るさの補正をしたりするための操作用画像であるメニュー画像40を、投影画像30cに重畳して表示させる。メニュー画像40には、投影画像30a,30b,30cの夫々に対応する複数の操作領域が含まれている。メニュー画像40には、例えば、何台のプロジェクタがどのような配置で設置されているかに関する情報、現在操作しているプロジェクタの物理的な位置を示す情報、物理的な配置に関わる設定情報が含まれている。マスター装置に設定されたプロジェクタ1cは、複数の表示画像のうち、どの表示画像を投影するかを指示する情報を、スレーブ装置として動作する他のプロジェクタ1(例えば、プロジェクタ1a,1b)に通知してもよい。   The projector 1c is set to a mode that operates as a master device, and is an operation image for correcting the color of the projected image 30 and correcting the brightness of the overlapping region of the projected images 30a, 30b, and 30c. The menu image 40 is superimposed on the projection image 30c and displayed. The menu image 40 includes a plurality of operation areas corresponding to the projection images 30a, 30b, and 30c. The menu image 40 includes, for example, information on how many projectors are installed and in what arrangement, information indicating the physical position of the currently operated projector, and setting information related to the physical arrangement. It is. The projector 1c set as the master device notifies other projectors 1 (for example, projectors 1a and 1b) operating as slave devices of information indicating which display image to project from among the plurality of display images. May be.

プロジェクタ1cは、マルチ投影モードで動作している間に操作者がメニュー画像40を表示させる操作をすると、投影画像30a,30b,30cの配置順を特定するための情報として、投影画像30a,30b,30cに表示された文字(例えば、図1A(a)における「A」,「B」,「C」の文字)、記号又は絵に対応する文字、記号又は絵を含むメニュー画像40を表示させる。これらの文字、記号又は絵によって、操作者は、メニュー画像40に含まれる複数の操作領域のうち、どの操作領域が投影画像30a,30b,30cのうちのどれに対応するかを把握することができる。メニュー画像40に含まれている文字A,B,Cの配置順が投影画像30a,30b,30cに含まれている文字A,B,Cの配置順と同一なので、操作者は、調整したい投影画像を正しく調整することができる。   When the operator performs an operation for displaying the menu image 40 while operating in the multi-projection mode, the projector 1c uses the projection images 30a, 30b as information for specifying the arrangement order of the projection images 30a, 30b, 30c. , 30c is displayed (for example, the characters “A”, “B”, and “C” in FIG. 1A (a)), a symbol or a picture corresponding to the picture, a menu image 40 including the symbol or picture. . With these characters, symbols, or pictures, the operator can grasp which operation region corresponds to which of the projection images 30a, 30b, and 30c among the plurality of operation regions included in the menu image 40. it can. Since the arrangement order of the characters A, B, and C included in the menu image 40 is the same as the arrangement order of the characters A, B, and C included in the projection images 30a, 30b, and 30c, the operator wants to adjust the projection to be adjusted. The image can be adjusted correctly.

図1A(b)は、操作者側にプロジェクタ1a,1b,1cが設置され、スクリーン2の背面から投影画像30が投影されるリア投影に対応するリア設置状態を示している。プロジェクタ1a,1b,1cが投影画像30を透過型のスクリーン2に投影することにより、視聴者は、投影画像30a,30b,30cを視認することができる。しかし、図1A(b)に示すように、プロジェクタ1a,1b,1cが、図1A(a)と同じように投影画像30を投影すると、視聴者は、裏返し状態の表示画像A,B,Cを視認することになる。   FIG. 1A (b) shows a rear installation state corresponding to rear projection in which the projectors 1a, 1b, and 1c are installed on the operator side and the projection image 30 is projected from the back of the screen 2. The projectors 1a, 1b, and 1c project the projection image 30 onto the transmissive screen 2, so that the viewer can visually recognize the projection images 30a, 30b, and 30c. However, as shown in FIG. 1A (b), when the projectors 1a, 1b, and 1c project the projection image 30 as in FIG. 1A (a), the viewer can display the display images A, B, and C in the inverted state. Will be visually recognized.

図1B(a)は、リア設置状態において、視聴者が正しい向きの画像を視認できるようにした状態を示している。プロジェクタ1aは、表示画像を左右に反転させることにより投影画像30aを生成し、プロジェクタ1bは、表示画像を左右に反転させることにより投影画像30bを生成し、プロジェクタ1cは、表示画像を左右に反転させることにより投影画像30cを生成している。このようにすることで、視聴者は、投影画像30a,30b,30cを正しい向きで視認することができる。しかし、プロジェクタ1cがメニュー画像40も左右に反転して投影しているので、図1B(b)に示すように、操作者がメニューの内容を視認しづらい状態になっている。   FIG. 1B (a) shows a state in which the viewer can visually recognize an image in the correct orientation in the rear installation state. The projector 1a generates the projection image 30a by inverting the display image to the left and right, the projector 1b generates the projection image 30b by inverting the display image to the left and right, and the projector 1c inverts the display image to the left and right. By doing so, the projected image 30c is generated. By doing in this way, the viewer can visually recognize the projected images 30a, 30b, and 30c in the correct orientation. However, since the projector 1c also projects the menu image 40 in the left-right direction, it is difficult for the operator to visually recognize the contents of the menu as shown in FIG. 1B (b).

そこで、図1B(c)に示すように、プロジェクタ1cがメニュー画像40を左右に反転させないように制御することが考えられる。しかし、この場合、投影画像30a,30b,30cの配置順とメニュー画像40に含まれている文字A,B,Cの配置順とが異なっているので、操作者が、調整したいと考えている投影画像と異なる投影画像を調整してしまうおそれが生じてしまう。   Therefore, as shown in FIG. 1B (c), it is conceivable that the projector 1c performs control so that the menu image 40 is not reversed left and right. However, in this case, since the arrangement order of the projected images 30a, 30b, and 30c is different from the arrangement order of the characters A, B, and C included in the menu image 40, the operator wants to adjust. There is a risk of adjusting a projection image different from the projection image.

図2は、第1の実施形態に係る表示システムを用いた場合の投影態様の一例を示す図である。図2(a)に示すように、プロジェクタ1a,1b,1cを連動させてリア投影をする場合であっても、視聴者は、投影画像30a,30b,30cを正しく視認することができる。また、図2(b)に示すように、操作者は、投影画像30a,30b,30cの配置順に対応する順番に操作領域が配置されたメニュー画像40を視認することができる。したがって、操作者が投影画像30a,30b,30cを調整する場合の操作性が向上する。   FIG. 2 is a diagram illustrating an example of a projection mode when the display system according to the first embodiment is used. As shown in FIG. 2A, the viewer can correctly view the projected images 30a, 30b, and 30c even when the rear projection is performed by linking the projectors 1a, 1b, and 1c. Further, as shown in FIG. 2B, the operator can visually recognize the menu image 40 in which the operation areas are arranged in an order corresponding to the arrangement order of the projection images 30a, 30b, and 30c. Therefore, the operability when the operator adjusts the projected images 30a, 30b, 30c is improved.

[プロジェクタ1の構成及び動作の説明]
以下、本実施形態に係るプロジェクタ1の構成及び動作について詳細に説明する。
図3は、プロジェクタ1の構成を示す図である。プロジェクタ1は、例えば、透過型液晶パネルを用いたプロジェクタである。プロジェクタ1は、表示画像に応じて液晶素子の光の透過率を制御して、液晶素子を透過した光源からの光をスクリーンに投影することで、表示画像に対応する投影画像30を視聴者に提示する。プロジェクタ1は、表示デバイスとして透過型液晶パネルを用いたプロジェクタに限らず、DLP、LCOS(反射型液晶)パネル等の表示デバイスを用いた任意のプロジェクタであってもよい。また、液晶プロジェクタとしては、単板式及び3板式が一般に知られているが、どちらの方式の液晶プロジェクタであってもよい。
[Description of Configuration and Operation of Projector 1]
Hereinafter, the configuration and operation of the projector 1 according to the present embodiment will be described in detail.
FIG. 3 is a diagram showing a configuration of the projector 1. The projector 1 is a projector using a transmissive liquid crystal panel, for example. The projector 1 controls the light transmittance of the liquid crystal element according to the display image, and projects the light from the light source that has passed through the liquid crystal element onto the screen, so that a projected image 30 corresponding to the display image is presented to the viewer. Present. The projector 1 is not limited to a projector using a transmissive liquid crystal panel as a display device, but may be an arbitrary projector using a display device such as a DLP or LCOS (reflection liquid crystal) panel. As a liquid crystal projector, a single-plate type and a three-plate type are generally known, but either type of liquid crystal projector may be used.

プロジェクタ1は、CPU11と、ROM12と、RAM13と、操作部14と、画像入力部15と、記録再生部16と、撮像部17と、通信部18と、表示制御部19と、表示部20と、画像処理部21と、光源制御部22と、光源23と、色分離部24と、画像出力部25と、を有する。画像入力部15、記録再生部16、撮像部17及び通信部18は、スクリーン2に投影する対象となる表示画像を取得する表示画像取得手段として機能する。また、CPU11及び画像処理部21は、連動することにより画像作成手段として機能する。   The projector 1 includes a CPU 11, a ROM 12, a RAM 13, an operation unit 14, an image input unit 15, a recording / playback unit 16, an imaging unit 17, a communication unit 18, a display control unit 19, and a display unit 20. The image processing unit 21, the light source control unit 22, the light source 23, the color separation unit 24, and the image output unit 25. The image input unit 15, the recording / playback unit 16, the imaging unit 17, and the communication unit 18 function as a display image acquisition unit that acquires a display image to be projected onto the screen 2. Further, the CPU 11 and the image processing unit 21 function as an image creating unit by interlocking with each other.

CPU11は、ROM12に記憶された制御プログラムを実行することにより、プロジェクタ1の各動作ブロックを制御する。ROM12は、CPU11の処理手順を記述した制御プログラムを記憶している。RAM13は、ワークメモリとして一時的に制御プログラムやデータを格納する。   The CPU 11 controls each operation block of the projector 1 by executing a control program stored in the ROM 12. The ROM 12 stores a control program describing the processing procedure of the CPU 11. The RAM 13 temporarily stores control programs and data as work memory.

CPU11は、記録再生部16が記録媒体161から読み込んだ静止画データ又は動画データを一時的に記憶した後に、画像又は映像を再生する。また、CPU11は、通信部18を介して受信した静止画データ又は動画データを一時的に記憶した後に、画像又は映像を再生することもできる。また、CPU11は、撮像部17が撮像することにより得られた画像又は映像の生データを一時的にRAM13に記憶し、生データを静止画データ又は動画データに変換して記録媒体161に記録させることもできる。   The CPU 11 reproduces an image or video after temporarily storing still image data or moving image data read from the recording medium 161 by the recording / reproducing unit 16. In addition, the CPU 11 can also reproduce an image or video after temporarily storing still image data or moving image data received via the communication unit 18. Further, the CPU 11 temporarily stores the raw data of the image or video obtained by imaging by the imaging unit 17 in the RAM 13, converts the raw data into still image data or moving image data, and records it on the recording medium 161. You can also

CPU11は、制御プログラムを実行することにより、設置情報取得部111、構成情報取得部112及び画像作成部113として機能する。
設置情報取得部111は、例えば操作部14又は通信部18を介して、プロジェクタ1の設置状態を示す設置情報を取得する。設置情報は、プロジェクタ1が設置されている位置又はプロジェクタ1が設置されている向きを示す情報を含んでいる。設置情報は、例えば、プロジェクタ1がスクリーン2の背面の位置に設置されたリア設置状態、プロジェクタ1がスクリーン2の正面の位置に設置されたフロント設置状態、プロジェクタ1が上下方向の第1の向きで机に設置される据置設置状態、及びプロジェクタ1が第1の方向と反対の第2の向きに天井に設置される天吊り設置状態のうち、どの状態であるかを示す情報である。
The CPU 11 functions as an installation information acquisition unit 111, a configuration information acquisition unit 112, and an image creation unit 113 by executing a control program.
The installation information acquisition unit 111 acquires installation information indicating the installation state of the projector 1 via, for example, the operation unit 14 or the communication unit 18. The installation information includes information indicating the position where the projector 1 is installed or the direction in which the projector 1 is installed. The installation information includes, for example, a rear installation state in which the projector 1 is installed at the rear position of the screen 2, a front installation state in which the projector 1 is installed at a front position of the screen 2, and the projector 1 in the first direction in the vertical direction. Information indicating which state is the stationary installation state installed on the desk and the ceiling-mounted installation state where the projector 1 is installed on the ceiling in the second direction opposite to the first direction.

構成情報取得部112は、例えば操作部14を介して、プロジェクタ1を含む複数のプロジェクタ1(プロジェクタ1a,1b,1c)の構成を示す構成情報を取得する。構成情報は、複数のプロジェクタ1の台数を示す情報を含んでいる。マスター装置に設定されているプロジェクタ1cの構成情報取得部112は、通信部18を介して、スレーブ装置に設定されているプロジェクタ1a,1bから、夫々に設定されている各種の設定情報を、構成情報の一部として取得してもよい。構成情報取得部112は、取得した設定情報に基づいて、どのプロジェクタ1がプロジェクタ1cに接続されているかという構成を特定することができる。なお、構成情報は、複数のプロジェクタ1が横方向に配置されている横置き構成であるか縦方向に配置されている縦置き構成であるかを示す情報を含んでもよい。図2に示したプロジェクタ1a,1b,1cは、横置き構成である。   The configuration information acquisition unit 112 acquires configuration information indicating the configuration of a plurality of projectors 1 (projectors 1a, 1b, 1c) including the projector 1 via the operation unit 14, for example. The configuration information includes information indicating the number of projectors 1. The configuration information acquisition unit 112 of the projector 1c set as the master device configures various setting information set respectively from the projectors 1a and 1b set as the slave devices via the communication unit 18. You may acquire as a part of information. The configuration information acquisition unit 112 can specify the configuration of which projector 1 is connected to the projector 1c based on the acquired setting information. Note that the configuration information may include information indicating whether the plurality of projectors 1 are in a horizontal configuration in which they are arranged in the horizontal direction or in a vertical configuration in which they are arranged in the vertical direction. Projectors 1a, 1b, and 1c shown in FIG. 2 have a horizontal configuration.

画像作成部113は、操作者がプロジェクタ1a,1b,1cの設定内容を変更するために用いられるメニュー画像40を作成する。画像作成部113は、プロジェクタ1が単独で使用される場合、プロジェクタ1自身の設定内容を変更するために用いられるメニュー画像40を作成する。画像作成部113は、プロジェクタ1が他のプロジェクタ1と連動してマルチ投影モードで使用される場合であり、かつプロジェクタ1がマスター装置に設定されている場合に、連動して使用される複数のプロジェクタ1の設定を変更するために用いられるメニュー画像40を作成する。画像作成部113は、作成したメニュー画像40を画像処理部21へと出力する。   The image creating unit 113 creates the menu image 40 used by the operator to change the setting contents of the projectors 1a, 1b, and 1c. When the projector 1 is used alone, the image creation unit 113 creates the menu image 40 that is used to change the setting contents of the projector 1 itself. The image creating unit 113 is a case where the projector 1 is used in the multi-projection mode in conjunction with another projector 1 and when the projector 1 is set as a master device, A menu image 40 used for changing the setting of the projector 1 is created. The image creation unit 113 outputs the created menu image 40 to the image processing unit 21.

具体的には、画像作成部113は、設置情報取得部111が取得した設置情報が示す設置状態、及び構成情報取得部112が取得した構成情報が示す構成に対応するメニュー画像40を生成する。画像作成部113は、例えば、複数のプロジェクタ1が投影する投影画像30a,30b,30cの配置順を特定するための情報を含むメニュー画像40を生成する。   Specifically, the image creation unit 113 generates the menu image 40 corresponding to the installation state indicated by the installation information acquired by the installation information acquisition unit 111 and the configuration indicated by the configuration information acquired by the configuration information acquisition unit 112. For example, the image creating unit 113 generates the menu image 40 including information for specifying the arrangement order of the projection images 30a, 30b, and 30c projected by the plurality of projectors 1.

より具体的には、画像作成部113は、設置情報がフロント設置状態を示している場合に、図1A(a)に示したフロント操作用画像としてのメニュー画像40を生成する。また、画像作成部113は、設置情報がリア設置状態を示している場合に、設置情報がフロント設置状態を示している場合に生成するフロント操作用画像に対応する第1の配置順と異なる第2の配置順に対応するリア操作用画像として、図2(b)に示したメニュー画像40を生成する。   More specifically, the image creation unit 113 generates the menu image 40 as the front operation image shown in FIG. 1A when the installation information indicates the front installation state. In addition, when the installation information indicates the rear installation state, the image creating unit 113 is different from the first arrangement order corresponding to the front operation image generated when the installation information indicates the front installation state. The menu image 40 shown in FIG. 2B is generated as a rear operation image corresponding to the arrangement order of 2.

操作部14は、ユーザの指示を受け付け、CPU11に指示信号を送信する操作受付手段として機能するデバイスであり、例えば、スイッチ、ダイヤル、表示部20上に設けられたタッチパネル等である。操作部14は、例えば、リモコンからの信号を受信する赤外線受信部を有しており、受信した信号に基づいて所定の指示信号をCPU11に送信してもよい。操作部14は、メニュー画像40がスクリーン2に投影されている際に、メニュー画像40に基づく操作を受け付けて、受け付けた操作内容をCPU11に通知する。   The operation unit 14 is a device that functions as an operation reception unit that receives a user instruction and transmits an instruction signal to the CPU 11. Examples of the operation unit 14 include a switch, a dial, and a touch panel provided on the display unit 20. For example, the operation unit 14 includes an infrared receiving unit that receives a signal from a remote controller, and may transmit a predetermined instruction signal to the CPU 11 based on the received signal. When the menu image 40 is projected on the screen 2, the operation unit 14 receives an operation based on the menu image 40 and notifies the CPU 11 of the received operation content.

画像入力部15は、外部装置から画像信号を受信するインタフェースを含んでおり、例えば、コンポジット端子、S映像端子、D端子、コンポーネント端子、アナログRGB端子、DVI−I端子、DVI−D端子、又はHDMI(登録商標)端子等を含む。画像入力部15は、アナログ画像信号を受信した場合には、受信したアナログ画像信号をデジタル画像信号に変換する。画像入力部15は、受信した画像信号を画像処理部21に送信する。   The image input unit 15 includes an interface that receives an image signal from an external device. For example, the image input unit 15 includes a composite terminal, an S video terminal, a D terminal, a component terminal, an analog RGB terminal, a DVI-I terminal, a DVI-D terminal, or Includes HDMI (registered trademark) terminals. When receiving an analog image signal, the image input unit 15 converts the received analog image signal into a digital image signal. The image input unit 15 transmits the received image signal to the image processing unit 21.

記録再生部16は、記録媒体161から静止画データ又は動画データを読み込んだり、撮像部17により得られた画像又は映像に基づく静止画データ又は動画データをCPU11から受信して記録媒体161に記録したりするものである。また、記録再生部16は、通信部18から受信した静止画データ又は動画データを記録媒体161に記録してもよい。   The recording / playback unit 16 reads still image data or moving image data from the recording medium 161, receives still image data or moving image data based on an image or video obtained by the imaging unit 17 from the CPU 11, and records it on the recording medium 161. It is something to do. The recording / reproducing unit 16 may record still image data or moving image data received from the communication unit 18 on the recording medium 161.

記録再生部16は、例えば、記録媒体161と電気的に接続されたインタフェース、及び記録媒体161と通信するためのマイクロプロセッサを含む。なお、記録再生部16が、専用のマイクロプロセッサを含む必要はなく、例えば、ROM12に記憶されたプログラムによって、CPU11が、記録再生部16が有するマイクロプロセッサと同様の処理を実行してもよい。   The recording / reproducing unit 16 includes, for example, an interface electrically connected to the recording medium 161 and a microprocessor for communicating with the recording medium 161. Note that the recording / reproducing unit 16 does not need to include a dedicated microprocessor. For example, the CPU 11 may execute the same processing as the microprocessor included in the recording / reproducing unit 16 by a program stored in the ROM 12.

記録媒体161は、静止画データ又は動画データの他に、プロジェクタ1の制御に必要な制御データを記録することもできる。記録媒体161は、磁気ディスク、光学式ディスク、半導体メモリなどのあらゆる方式の記録媒体であってよく、着脱可能な記録媒体であっても、内蔵型の記録媒体であってもよい。   The recording medium 161 can record control data necessary for controlling the projector 1 in addition to still image data or moving image data. The recording medium 161 may be any type of recording medium such as a magnetic disk, an optical disk, or a semiconductor memory, and may be a detachable recording medium or a built-in recording medium.

撮像部17は、プロジェクタ1の周辺を撮像して画像信号を取得するカメラである。撮像部17は、被写体の光学像を取得するレンズ、レンズを駆動するアクチュエータ、アクチュエータを制御するマイクロプロセッサ、レンズを介して取得した光学像を画像信号に変換する撮像素子、及び撮像素子により得られた画像信号をデジタル信号に変換するAD変換部等を有する。撮像部17は、例えば、画像出力部25を介してスクリーン2に投影された画像を撮影することができる。撮像部17は、撮影により得られた画像又は映像をCPU11に送信する。なお、撮像部17は、スクリーン2に投影された投影画像30を撮影するだけに限られず、例えば、スクリーン2を見ている視聴者側を撮影してもよい。   The imaging unit 17 is a camera that captures an image of the periphery of the projector 1 and acquires an image signal. The imaging unit 17 is obtained by a lens that acquires an optical image of a subject, an actuator that drives the lens, a microprocessor that controls the actuator, an imaging element that converts the optical image acquired via the lens into an image signal, and the imaging element. An AD converter for converting the image signal into a digital signal. For example, the imaging unit 17 can capture an image projected on the screen 2 via the image output unit 25. The imaging unit 17 transmits an image or video obtained by shooting to the CPU 11. Note that the image capturing unit 17 is not limited to capturing the projection image 30 projected on the screen 2, and may capture the viewer viewing the screen 2, for example.

通信部18は、外部装置からの制御信号や静止画データ、動画データなどを受信するためのインタフェースであり、例えば、無線LAN、有線LAN、USB、Bluetooth(登録商標)等であってよく、通信方式を特に限定するものではない。通信部18は、画像入力部15の端子が、例えばHDMI(登録商標)端子であれば、その端子を介してCEC通信を行ってもよい。   The communication unit 18 is an interface for receiving control signals, still image data, moving image data, and the like from an external device. For example, the communication unit 18 may be a wireless LAN, a wired LAN, USB, Bluetooth (registered trademark), etc. The method is not particularly limited. If the terminal of the image input unit 15 is, for example, an HDMI (registered trademark) terminal, the communication unit 18 may perform CEC communication via the terminal.

また、通信部18は、ケーブル(不図示)を介して、他のプロジェクタ1との間でデータを送受信することもできる。マスター装置に設定されているプロジェクタ1cの通信部18は、CPU11の制御に基づいて、操作部14がメニュー画像40に基づく操作を受け付けた場合に、操作部14が受け付けた操作の対象となるスレーブ装置に設定されたプロジェクタ1a,1bに対して、操作の内容を示す操作情報を送信する。例えば、通信部18は、設置情報及び構成情報に基づいて、プロジェクタ1a,1bが投影する表示画像を入れ替える必要がある場合、プロジェクタ1a,1bが投影する対象となる表示画像を特定するための情報を送信する。スレーブ装置に設定されたプロジェクタ1a,1bは、操作情報を受信すると、操作情報をCPU11に通知し、CPU11は操作情報に基づいて、投影する画質等に関する設定内容を変更したり、投影する表示画像を変更したりする。   The communication unit 18 can also transmit and receive data to and from other projectors 1 via a cable (not shown). The communication unit 18 of the projector 1c set as the master device is a slave that is a target of the operation received by the operation unit 14 when the operation unit 14 receives an operation based on the menu image 40 based on the control of the CPU 11. Operation information indicating the content of the operation is transmitted to the projectors 1a and 1b set in the apparatus. For example, when it is necessary to replace the display images projected by the projectors 1a and 1b based on the installation information and the configuration information, the communication unit 18 specifies information for specifying a display image to be projected by the projectors 1a and 1b. Send. When the projectors 1a and 1b set as slave devices receive the operation information, the CPU 11 notifies the CPU 11 of the operation information, and the CPU 11 changes the setting content relating to the image quality to be projected based on the operation information, or the display image to be projected. Or change.

また、マスター装置に設定されたプロジェクタ1cの通信部18は、スレーブ装置に設定されたプロジェクタ1a,1bから、夫々に設定された設定情報を、構成情報の一部として受信する。通信部18は、受信した設定情報をCPU11の構成情報取得部112に通知する。   Further, the communication unit 18 of the projector 1c set as the master device receives the setting information set for each from the projectors 1a and 1b set as the slave devices as part of the configuration information. The communication unit 18 notifies the configuration information acquisition unit 112 of the CPU 11 of the received setting information.

表示制御部19は、プロジェクタ1に備えられた表示部20に、プロジェクタ1を操作するための操作画面又はスイッチアイコン等の操作画像を表示させるための制御をする。表示制御部19は、例えば、表示制御を行うマイクロプロセッサを有する。表示制御部19が、専用のマイクロプロセッサを有する必要はなく、例えば、ROM12に記憶された制御プログラムによって、CPU11が表示制御部19に含まれるマイクロプロセッサと同様の処理を実行してもよい。   The display control unit 19 controls the display unit 20 provided in the projector 1 to display an operation screen for operating the projector 1 or an operation image such as a switch icon. The display control unit 19 includes, for example, a microprocessor that performs display control. The display control unit 19 does not need to have a dedicated microprocessor. For example, the CPU 11 may execute the same processing as the microprocessor included in the display control unit 19 by a control program stored in the ROM 12.

表示部20は、プロジェクタ1を操作するための操作画面及びスイッチアイコンを表示するディスプレイである。表示部20は、画像を表示できればどのようなものであってもよい。表示部20は、例えば、液晶ディスプレイ、CRTディスプレイ、有機ELディスプレイ、又はLEDディスプレイである。表示部20は、特定のボタンをユーザに認識しやすくするために、各ボタンに対応するLED等を発光させる機能を有してもよい。   The display unit 20 is a display that displays an operation screen and a switch icon for operating the projector 1. The display unit 20 may be anything as long as it can display an image. The display unit 20 is, for example, a liquid crystal display, a CRT display, an organic EL display, or an LED display. The display unit 20 may have a function of causing an LED or the like corresponding to each button to emit light so that a user can easily recognize a specific button.

画像処理部21は、画像入力部15から受信した画像信号にフレーム数、画素数、画像形状などの変更処理を施して、画像出力部25に送信する。画像処理部21は、フレーム間引き処理、フレーム補間処理、解像度変換処理、歪み補正処理(キーストン補正処理)といった機能を実行することが可能である。また、画像処理部21は、画像入力部15から受信した画像信号以外にも、CPU11によって再生された画像や映像に対して前述の変更処理を施すこともできる。   The image processing unit 21 performs a changing process such as the number of frames, the number of pixels, and the image shape on the image signal received from the image input unit 15 and transmits the image signal to the image output unit 25. The image processing unit 21 can execute functions such as frame thinning processing, frame interpolation processing, resolution conversion processing, and distortion correction processing (keystone correction processing). In addition to the image signal received from the image input unit 15, the image processing unit 21 can also perform the above-described change process on the image or video reproduced by the CPU 11.

また、画像処理部21は、表示画像にメニュー画像40を重畳することにより重畳画像を生成し、重畳画像の向きを設置情報に基づく向きに反転することにより投影画像30を生成する。画像処理部21の構成の詳細については、後述する。   The image processing unit 21 generates a superimposed image by superimposing the menu image 40 on the display image, and generates a projection image 30 by inverting the direction of the superimposed image to the direction based on the installation information. Details of the configuration of the image processing unit 21 will be described later.

なお、画像処理部21は、例えば画像処理用のマイクロプロセッサを有する。ただし、画像処理部21が専用のマイクロプロセッサを有する必要はなく、例えば、ROM12に記憶された制御プログラムによって、CPU11が、画像処理部21が有するマイクロプロセッサと同様の処理を実行してもよい。   Note that the image processing unit 21 includes, for example, a microprocessor for image processing. However, the image processing unit 21 does not need to have a dedicated microprocessor. For example, the CPU 11 may execute the same processing as the microprocessor included in the image processing unit 21 by a control program stored in the ROM 12.

光源制御部22は、光源23のオン/オフの制御及び光量の制御をするものであり、制御用のマイクロプロセッサを含んでいる。光源制御部22は、専用のマイクロプロセッサを含まなくてもよく、例えば、ROM12に記憶された制御プログラムに基づいて、CPU11が、光源制御部22が有するマイクロプロセッサと同様の処理を実行してもよい。   The light source control unit 22 controls the on / off of the light source 23 and the amount of light, and includes a control microprocessor. The light source control unit 22 may not include a dedicated microprocessor. For example, the CPU 11 may execute the same processing as the microprocessor included in the light source control unit 22 based on a control program stored in the ROM 12. Good.

光源23は、スクリーン2に投影画像30を投影するための光を出力する。光源23は、例えば、ハロゲンランプ、キセノンランプ、又は高圧水銀ランプ等である。   The light source 23 outputs light for projecting the projection image 30 onto the screen 2. The light source 23 is, for example, a halogen lamp, a xenon lamp, or a high-pressure mercury lamp.

色分離部24は、光源23から出力された光を、赤色(R)、緑色(G)、青色(B)に分離するものであり、例えば、ダイクロイックミラー及びプリズム等を有する。色分離部24は、分離後の光を画像出力部25に対して出力する。なお、光源23として、各色に対応するLED等を使用する場合には、色分離部24は不要である。   The color separation unit 24 separates light output from the light source 23 into red (R), green (G), and blue (B), and includes, for example, a dichroic mirror and a prism. The color separation unit 24 outputs the separated light to the image output unit 25. In addition, when using LED etc. corresponding to each color as the light source 23, the color separation part 24 is unnecessary.

画像出力部25は、画像処理部21が生成した投影画像30を出力し、スクリーン2に投影する。画像出力部25は、液晶素子251と、液晶制御部252と、色合成部253と、投影光学系254と、光学系制御部255とを有する。   The image output unit 25 outputs the projection image 30 generated by the image processing unit 21 and projects it onto the screen 2. The image output unit 25 includes a liquid crystal element 251, a liquid crystal control unit 252, a color synthesis unit 253, a projection optical system 254, and an optical system control unit 255.

液晶素子251は、赤色、緑色及び青色に対応する素子を有しており、液晶制御部252の制御に基づいて、画像処理部21から入力された投影画像30に対応する透過率の光を出力する。
液晶制御部252は、液晶素子251を制御するマイクロプロセッサを有している。液晶制御部252の代わりに、CPU11が液晶素子251を制御してもよい。
The liquid crystal element 251 includes elements corresponding to red, green, and blue, and outputs light having a transmittance corresponding to the projection image 30 input from the image processing unit 21 based on the control of the liquid crystal control unit 252. To do.
The liquid crystal control unit 252 includes a microprocessor that controls the liquid crystal element 251. Instead of the liquid crystal control unit 252, the CPU 11 may control the liquid crystal element 251.

色合成部253は、液晶素子251を透過した赤色(R)、緑色(G)、青色(B)の光を合成するものであり、例えば、ダイクロイックミラーやプリズム等を有する。色合成部253は、赤色(R)、緑色(G)、青色(B)の各成分を合成した光を、投影光学系254へと出力する。   The color synthesis unit 253 synthesizes red (R), green (G), and blue (B) light transmitted through the liquid crystal element 251 and includes, for example, a dichroic mirror and a prism. The color synthesizing unit 253 outputs light obtained by synthesizing red (R), green (G), and blue (B) components to the projection optical system 254.

投影光学系254は、色合成部253から出力された合成光をスクリーンに投影するためのものであり、複数のレンズ、及びレンズ駆動用のアクチュエータを有している。投影光学系254は、光学系制御部255の制御に基づいて、アクチュエータによりレンズを駆動することで、投影画像30の拡大、縮小及び焦点調整等を行うことができる。   The projection optical system 254 is for projecting the combined light output from the color combining unit 253 onto a screen, and includes a plurality of lenses and lens driving actuators. The projection optical system 254 can perform enlargement, reduction, focus adjustment, and the like of the projection image 30 by driving a lens with an actuator based on the control of the optical system control unit 255.

光学系制御部255は、投影光学系254を制御するマイクロプロセッサを有する。光学系制御部255が、専用のマイクロプロセッサを有する代わりに、CPU11が光学系制御部255と同様の処理を実行してもよい。   The optical system control unit 255 includes a microprocessor that controls the projection optical system 254. Instead of the optical system control unit 255 having a dedicated microprocessor, the CPU 11 may execute the same processing as the optical system control unit 255.

以上の構成により、プロジェクタ1は、画像入力部15、記録再生部16、撮像部17又は通信部18を介して入力された表示画像にメニュー画像40が重畳された投影画像30を、プロジェクタ1の設置状態及び複数のプロジェクタ1の構成状態によらず、視聴者にも操作者にも適した態様でスクリーン2に表示させることができる。   With the above configuration, the projector 1 displays the projection image 30 in which the menu image 40 is superimposed on the display image input via the image input unit 15, the recording / playback unit 16, the imaging unit 17, or the communication unit 18. Regardless of the installation state and the configuration state of the plurality of projectors 1, the screen 2 can be displayed in a manner suitable for both the viewer and the operator.

続いて、画像処理部21の詳細な構成及び動作について説明する。
図4は、画像処理部21の構成を示す図である。画像処理部21は、画像変換部211、OSD(On-Screen Display)重畳部212、及び画像反転部213を含む。画像処理部21は、CPU11の制御に基づいてタイミング信号に同期して動作し、表示画像にメニュー画像40が重畳されるとともに、設置状態に応じて適切な状態に変換された投影画像30を出力する。タイミング信号は、表示画像の供給元から供給される、表示画像に同期した垂直同期信号、水平同期信号及びクロック等の信号である。画像処理部21は、タイミング信号に基づいて内部で生成し直したタイミング信号を用いて動作してもよい。
Next, a detailed configuration and operation of the image processing unit 21 will be described.
FIG. 4 is a diagram illustrating a configuration of the image processing unit 21. The image processing unit 21 includes an image conversion unit 211, an OSD (On-Screen Display) superimposition unit 212, and an image inversion unit 213. The image processing unit 21 operates in synchronization with a timing signal based on the control of the CPU 11, and the menu image 40 is superimposed on the display image, and the projection image 30 converted into an appropriate state according to the installation state is output. To do. The timing signal is a signal such as a vertical synchronization signal, a horizontal synchronization signal, and a clock that are supplied from a display image supply source and synchronized with the display image. The image processing unit 21 may operate using a timing signal regenerated internally based on the timing signal.

画像入力部15、記録再生部16、撮像部17又は通信部18から入力された表示画像データは、画像変換部211に入力される。画像変換部211は、CPU11の制御に基づいて、表示画像に各種の画像処理及び変換処理を施す。画像変換部211は、画像処理を施した後の画像データをOSD重畳部212に対して出力する。各種の画像処理及び変換処理は、画像信号のヒストグラム及びAPLをはじめとする統計情報の取得、IP変換、フレームレート変換、解像度変換、γ変換、色域変換、色補正及びエッジ強調等の画像変換処理である。   Display image data input from the image input unit 15, the recording / playback unit 16, the imaging unit 17, or the communication unit 18 is input to the image conversion unit 211. The image conversion unit 211 performs various types of image processing and conversion processing on the display image based on the control of the CPU 11. The image conversion unit 211 outputs the image data after the image processing to the OSD superimposing unit 212. Various image processing and conversion processes include acquisition of statistical information including image signal histogram and APL, image conversion such as IP conversion, frame rate conversion, resolution conversion, γ conversion, color gamut conversion, color correction and edge enhancement. It is processing.

OSD重畳部212は、画像作成部113が作成したメニュー画像40を、画像変換部211から入力された画像データに重畳することにより、OSD重畳画像データを生成する。OSD重畳部212は、生成したOSD重畳画像データを画像反転部213に対して出力する。   The OSD superimposing unit 212 generates OSD superimposed image data by superimposing the menu image 40 created by the image creating unit 113 on the image data input from the image converting unit 211. The OSD superimposing unit 212 outputs the generated OSD superimposed image data to the image inverting unit 213.

画像反転部213は、CPU11から入力される左右反転又は上下反転の指示に応じて、OSD重畳画像データに左右反転処理又は上下反転処理を施すことにより投影画像データを生成する。画像反転部213は、生成した投影画像データを画像出力部25に対して出力する。   The image inversion unit 213 generates projection image data by performing left-right inversion processing or up-down inversion processing on the OSD superimposed image data in accordance with a left-right inversion or up-down inversion instruction input from the CPU 11. The image reversing unit 213 outputs the generated projection image data to the image output unit 25.

図5は、プロジェクタ1の設置状態、及び複数のプロジェクタ1の構成状態の組み合わせごとに、画像処理部21が表示画像をどのように変換するかを示す表である。図5に示すように、画像処理部21は、設置状態が天吊り投影用の設置状態である場合に、表示画像を上下反転させ、設置状態が天吊り設置状態でない場合に、表示画像を上下反転させない。   FIG. 5 is a table showing how the image processing unit 21 converts the display image for each combination of the installation state of the projector 1 and the configuration states of the plurality of projectors 1. As shown in FIG. 5, the image processing unit 21 flips the display image upside down when the installation state is the installation state for the ceiling projection, and moves the display image up and down when the installation state is not the ceiling installation state. Do not invert.

また、画像処理部21は、設置状態がリア投影用のリア設置状態であり、かつ天吊り設置状態でない場合、及び設置状態がフロント投影用のフロント設置状態であり、かつ天吊り設置状態である場合に、表示画像を左右反転させる。画像処理部21は、設置状態がフロント設置状態であり、かつ天吊り設置状態でない場合、及び設置状態がリア設置状態であり、かつ天吊り設置状態である場合に、表示画像を左右反転させない。   The image processing unit 21 is in a rear installation state for rear projection and is not a ceiling installation state, and the installation state is a front installation state for front projection and a ceiling installation state. In this case, the display image is reversed left and right. The image processing unit 21 does not horizontally flip the display image when the installation state is the front installation state and is not the ceiling installation state, and when the installation state is the rear installation state and the ceiling installation state.

また、画像処理部21は、設定状態がリア設置状態であり、かつ構成状態がマルチ設置状態である場合に、複数のプロジェクタ1の夫々が投影する画像を、フロント設置状態である場合に投影する画像と入れ替える。例えば、プロジェクタ1cの画像処理部21は、フロント設置状態で、図1A(a)に示したように文字Cが付された投影画像30cを表示する場合、リア設置状態である場合に、図2(b)に示したように、文字Cが付された投影画像30cを表示する。   Further, the image processing unit 21 projects an image projected by each of the plurality of projectors 1 when the setting state is the rear installation state and the configuration state is the multi-installation state when the setting state is the front installation state. Replace with image. For example, when the image processing unit 21 of the projector 1c displays the projection image 30c with the letter C attached as shown in FIG. 1A in the front installation state, or in the rear installation state, FIG. As shown in (b), the projected image 30c with the letter C attached is displayed.

図6は、プロジェクタ1の設置状態、及び複数のプロジェクタ1の構成状態の組み合わせごとに、画像処理部21がメニュー画像40をどのように変換するかを示す表である。画像処理部21は、設置状態及び構成状態によらず、画像作成部113から入力されたメニュー画像40を上下方向に反転させない。また、画像処理部21は、設置状態がリア設置状態である場合に、画像作成部113から入力されたメニュー画像40を左右反転する。   FIG. 6 is a table showing how the image processing unit 21 converts the menu image 40 for each combination of the installation state of the projector 1 and the configuration states of the plurality of projectors 1. The image processing unit 21 does not invert the menu image 40 input from the image creation unit 113 in the vertical direction regardless of the installation state and the configuration state. Further, the image processing unit 21 flips the menu image 40 input from the image creation unit 113 left and right when the installation state is the rear installation state.

[プロジェクタ1における動作手順]
図7は、プロジェクタ1における動作手順を説明するためのフローチャートである。図7に示す動作は、CPU11が、ROM12に記憶された制御プログラムに基づいて、各機能ブロックを制御することにより実行されるものである。図7のフローチャートは、操作部14又はリモコン(不図示)における操作入力により、操作者がプロジェクタ1の電源のオンを指示した時点から開始している。
[Operation Procedure in Projector 1]
FIG. 7 is a flowchart for explaining an operation procedure in the projector 1. The operation shown in FIG. 7 is executed by the CPU 11 controlling each functional block based on a control program stored in the ROM 12. The flowchart in FIG. 7 starts when the operator instructs the projector 1 to be turned on by an operation input on the operation unit 14 or a remote controller (not shown).

CPU11は、プロジェクタ1の電源をオンするための操作者の指示を取得すると、プロジェクタ1の各部への電源の供給を開始し、投影開始処理を実行する(S11)。具体的には、CPU11は、光源制御部22に指示して光源23の点灯制御を開始し、液晶制御部252に指示して液晶素子251の駆動制御を開始し、画像処理部21の初期設定を行う。   When the CPU 11 obtains an operator's instruction to turn on the power of the projector 1, the CPU 11 starts supplying power to each unit of the projector 1 and executes a projection start process (S11). Specifically, the CPU 11 instructs the light source control unit 22 to start lighting control of the light source 23, instructs the liquid crystal control unit 252 to start driving control of the liquid crystal element 251, and initializes the image processing unit 21. I do.

次に、CPU11は、画像入力部15から入力された画像データを含む画像信号に変化があったか否かを判定する(S12)。CPU11は、画像信号に変化がないと判定した場合(S12においてNo)、ステップS14に進む。CPU11は、画像信号に変化があったと判定した場合(S12においてYes)、入力切替処理を実行する(S13)。具体的には、CPU11は、入力された画像信号の解像度及びフレームレート等を検知して、画像信号に適したタイミングで画像信号をサンプリングする。   Next, the CPU 11 determines whether or not there is a change in the image signal including the image data input from the image input unit 15 (S12). If the CPU 11 determines that there is no change in the image signal (No in S12), the CPU 11 proceeds to step S14. When the CPU 11 determines that the image signal has changed (Yes in S12), the CPU 11 executes an input switching process (S13). Specifically, the CPU 11 detects the resolution and frame rate of the input image signal, and samples the image signal at a timing suitable for the image signal.

続いて、CPU11は、ユーザ操作があったか否かを判定する(S14)。CPU11は、ユーザによる操作がなかったと判定した場合(S14においてNo)、ステップS17に進む。CPU11は、ユーザによる操作が行われたと判定した場合(S14においてYes)、操作が動作の終了を指示する終了操作か否かを判定する(S15)。CPU11は、ユーザによる操作が終了のための操作であった場合(S15においてYes)、投影終了処理を実行し、投影動作を終了する(S20)。具体的には、CPU11は、光源制御部22に指示して光源23を消灯させ、液晶制御部252に指示して液晶素子251の駆動を停止させ、設定情報をROM12に保存させる。   Subsequently, the CPU 11 determines whether or not there is a user operation (S14). If the CPU 11 determines that there is no operation by the user (No in S14), the CPU 11 proceeds to step S17. When determining that the operation by the user has been performed (Yes in S14), the CPU 11 determines whether or not the operation is an end operation instructing the end of the operation (S15). When the operation by the user is an operation for ending (Yes in S15), the CPU 11 executes a projection ending process and ends the projection operation (S20). Specifically, the CPU 11 instructs the light source control unit 22 to turn off the light source 23, instructs the liquid crystal control unit 252 to stop driving the liquid crystal element 251, and stores the setting information in the ROM 12.

CPU11は、ユーザ操作が終了操作でなかった場合(S15においてNo)、ユーザ操作の内容に対応したユーザ処理を実行する(S16)。例えば、CPU11は、設置状態に関する設定、入力信号種別の設定、画像処理のパラメータの設定、及び情報の表示等である。   When the user operation is not an end operation (No in S15), the CPU 11 executes a user process corresponding to the content of the user operation (S16). For example, the CPU 11 performs settings related to installation conditions, input signal type settings, image processing parameter settings, information display, and the like.

続いて、CPU11は、通信部18からコマンド受信があったか否かを判定する(S17)。CPU11は、コマンド受信がないと判定した場合(S17においてNo)、ステップS12に戻る。CPU11は、コマンド受信があったと判定した場合(S17においてYes)、受信したコマンドが終了操作を示しているか否かを判定する(S18)。CPU11は、受信したコマンドが終了操作を示していると判定した場合(S18においてYes)、ステップS20に進む。CPU11は、受信したコマンドが終了操作ではなかったことを示している場合(S18においてNo)、受信したコマンドの内容に対応したコマンド処理を実行する(S19)。   Subsequently, the CPU 11 determines whether or not a command is received from the communication unit 18 (S17). If the CPU 11 determines that no command has been received (No in S17), the CPU 11 returns to step S12. When it is determined that the command has been received (Yes in S17), the CPU 11 determines whether or not the received command indicates an end operation (S18). If the CPU 11 determines that the received command indicates an end operation (Yes in S18), the CPU 11 proceeds to step S20. If the CPU 11 indicates that the received command is not an end operation (No in S18), the CPU 11 executes command processing corresponding to the content of the received command (S19).

図8は、CPU11がプロジェクタ1の設置状態に応じて投影画像30の態様を決定する処理のフローチャートである。設置状態は、操作部14において操作者が入力した内容、又は通信部18を介して取得した外部装置において操作者が入力した内容に基づいて、CPU11がRAM13に記録する。   FIG. 8 is a flowchart of processing in which the CPU 11 determines the aspect of the projection image 30 according to the installation state of the projector 1. The installation state is recorded in the RAM 13 by the CPU 11 based on the content input by the operator in the operation unit 14 or the content input by the operator in the external device acquired through the communication unit 18.

まず、CPU11は、RAM13に設定されている設置状態を読み込み、設置状態が天吊り設置状態であるか否かを判定する(S21)。CPU11は、設置状態が天吊り設置状態でない場合(S21においてNo)、ステップS23に遷移する。CPU11は、設置状態が天吊り設置状態である場合(S21においてYes)、画像反転部213に指示し、投影画像30を上下左右反転させた後に(S22)、ステップS23に遷移する。   First, the CPU 11 reads the installation state set in the RAM 13 and determines whether or not the installation state is a ceiling-mounted installation state (S21). If the installation state is not the ceiling installation state (No in S21), the CPU 11 proceeds to step S23. When the installation state is the ceiling installation state (Yes in S21), the CPU 11 instructs the image inversion unit 213 to invert the projection image 30 up and down and left and right (S22), and then proceeds to step S23.

ステップS23において、CPU11は、RAM13に設定されている設置状態を読み込み、設置状態がリア設置状態である場合(S23においてYes)、ステップS24に遷移し、リア設置状態でない場合(S23においてNo)、処理を終了する。ステップS24において、CPU11は、画像反転部213に投影画像30を左右反転させ、処理を終了する。さらに、マスター装置に設定されているプロジェクタ1のCPU11は、設置状態がマルチ設置状態であった場合、図8に示す処理の前後のいずれかのタイミングにおいて、スレーブ装置に設定されているプロジェクタ1に対して、表示画像を入れ替える指示を通知する。上記の処理によって、投影画像30に含まれる表示画像は、設置状態に応じて、図5に示したように上下反転、左右反転、表示画像入替が施される。   In step S23, the CPU 11 reads the installation state set in the RAM 13, and when the installation state is the rear installation state (Yes in S23), the process proceeds to step S24, and when the rear state is not the rear (No in S23), End the process. In step S24, the CPU 11 causes the image reversing unit 213 to flip the projected image 30 left and right, and ends the process. Further, when the installation state is the multi-installation state, the CPU 11 of the projector 1 set as the master device sets the projector 1 set as the slave device at any timing before and after the processing shown in FIG. An instruction to replace the display image is notified. As a result of the above processing, the display image included in the projection image 30 is flipped upside down, horizontally reversed, and replaced with the display image as shown in FIG. 5 according to the installation state.

図9は、CPU11の画像作成部113がOSD画像としてのメニュー画像40を作成する処理のフローチャートである。画像作成部113は、RAM13に設定されている設置状態を読み込む(S31)。続いて、画像作成部113は、ステップS31においてRAM13から読み込んだ設置状態に基づいてメニュー画像40を作成する(S32)。続いて、画像作成部113は、作成したメニュー画像40をOSD画像としてOSD重畳部212に設定する(S33)。   FIG. 9 is a flowchart of processing in which the image creating unit 113 of the CPU 11 creates the menu image 40 as an OSD image. The image creation unit 113 reads the installation state set in the RAM 13 (S31). Subsequently, the image creating unit 113 creates the menu image 40 based on the installation state read from the RAM 13 in step S31 (S32). Subsequently, the image creating unit 113 sets the created menu image 40 as an OSD image in the OSD superimposing unit 212 (S33).

画像作成部113が作成したメニュー画像40は、画像処理部21において、図6に示したように上下反転、左右反転、配置入替が施される。具体的には、OSD重畳部212が、画像作成部113が作成したメニュー画像40に基づいてOSD重畳画像を作成した後に、画像反転部213が図5に示した反転処理を施す。そこで、画像作成部113は、メニュー画像40作成時に、投影画像30及びメニュー画像40の両方を反転する必要があるリア設置状態において、左右反転を施す。   The menu image 40 created by the image creation unit 113 is flipped upside down, horizontally flipped, and rearranged in the image processing unit 21 as shown in FIG. Specifically, after the OSD superimposing unit 212 creates an OSD superimposed image based on the menu image 40 created by the image creating unit 113, the image reversing unit 213 performs the reversing process shown in FIG. Therefore, when creating the menu image 40, the image creation unit 113 performs left-right reversal in the rear installation state where both the projection image 30 and the menu image 40 need to be reversed.

図10は、マルチ投影の際に画像作成部113が作成するメニュー画像40を示す図である。設置情報がフロントマルチ設置状態又は天吊りマルチ設置状態を示している場合、画像処理部21が上下反転、左右反転及び配置入替のいずれも施さないので、画像作成部113は、図10(a)に示すようなデフォルト状態のメニュー画像40を作成する。そして、画像処理部21は、図10(a)に示すメニュー画像40を含む投影画像30を生成する。   FIG. 10 is a diagram illustrating the menu image 40 created by the image creation unit 113 during multi-projection. When the installation information indicates the front multi-installation state or the ceiling-mounted multi-installation state, the image processing unit 21 does not perform any of upside-down inversion, left-right inversion, and rearrangement. A menu image 40 in a default state as shown in FIG. Then, the image processing unit 21 generates a projection image 30 including the menu image 40 shown in FIG.

設置情報が、設置状態がリアマルチ投影又はリア天吊りマルチ投影であることを示している場合、画像処理部21が左右反転処理を施すとともに、表示画像の配置の入替が施されるので、画像作成部113は、図10(b)に示すようなメニュー画像40を作成する。具体的には、画像作成部113は、構成情報が示す複数のプロジェクタ1の配置順に基づいて、デフォルト状態のメニュー画像40に対して、メニュー画像40内の各プロジェクタ1に対応する操作領域の配置を入れ替える。また、画像作成部113は、設置情報がリアマルチ設置状態及びリア天吊りマルチ設置状態を示していることに基づいて、操作領域の配置を入れ替えた後のメニュー画像40の左右を反転する。そして、画像処理部21は、図10(b)に示すメニュー画像40の左右を反転することにより、図10(c)に示すメニュー画像40を含む投影画像30を生成する。   When the installation information indicates that the installation state is rear multi-projection or rear-ceiling multi-projection, the image processing unit 21 performs left-right reversal processing, and the display image layout is switched, so that image creation is performed. The unit 113 creates a menu image 40 as shown in FIG. Specifically, the image creation unit 113 arranges operation areas corresponding to the projectors 1 in the menu image 40 with respect to the menu image 40 in the default state based on the arrangement order of the plurality of projectors 1 indicated by the configuration information. Replace. Further, the image creation unit 113 inverts the left and right of the menu image 40 after changing the arrangement of the operation areas based on the installation information indicating the rear multi-installation state and the rear ceiling multi-installation state. Then, the image processing unit 21 generates the projection image 30 including the menu image 40 illustrated in FIG. 10C by inverting the left and right of the menu image 40 illustrated in FIG.

以上説明したように、第1の実施形態に係るプロジェクタ1は、画像作成部113が、リア投影及び天吊り投影等のプロジェクタ1の設置状態、並びにマルチ投影の際の複数のプロジェクタ1の構成に対応するメニュー画像40を生成する。そして、画像処理部21は、メニュー画像40を表示画像に重畳させた後に、設置状態に応じて画像を反転させた投影画像30を生成し、画像出力部25が投影画像30を出力する。このようにすることで、複数のプロジェクタ1を連動させるマルチ投影であり、かつリア投影の場合に、操作者が操作しやすいメニュー画像40を表示することができる。操作者は、投影画像30a,30b,30cの配置順に対応したメニュー画像40を見ながら、一台のプロジェクタ1cを操作して、プロジェクタ1a,1bの設定を変更することができるので、操作性が向上する。   As described above, in the projector 1 according to the first embodiment, the image creating unit 113 has the configuration of the plurality of projectors 1 in the installation state of the projector 1 such as rear projection and ceiling projection and the multi-projection. A corresponding menu image 40 is generated. Then, after superimposing the menu image 40 on the display image, the image processing unit 21 generates a projection image 30 in which the image is inverted according to the installation state, and the image output unit 25 outputs the projection image 30. By doing so, it is possible to display a menu image 40 that is easy for an operator to operate in the case of multi-projection in which a plurality of projectors 1 are linked and rear projection. The operator can change the settings of the projectors 1a and 1b by operating one projector 1c while viewing the menu image 40 corresponding to the arrangement order of the projected images 30a, 30b, and 30c. improves.

<第2の実施形態>
第1の実施形態に係るプロジェクタ1においては、OSD重畳部212が、画像作成部113が作成したメニュー画像40を表示画像に重畳した後に、画像反転部213が反転処理を施すことにより投影画像30を生成した。これに対して、第2の実施形態に係るプロジェクタ1においては、画像反転部213が、表示画像に反転処理を施して反転画像を生成した後に、OSD重畳部212が、反転画像にメニュー画像40を重畳することにより投影画像30を生成する点で、第1の実施形態と異なり、他の点で同じである。以下、第1の実施形態と異なる点を中心に説明する。
<Second Embodiment>
In the projector 1 according to the first embodiment, the OSD superimposing unit 212 superimposes the menu image 40 created by the image creating unit 113 on the display image, and then the image reversing unit 213 performs the reversing process so that the projected image 30 is obtained. Was generated. In contrast, in the projector 1 according to the second embodiment, after the image reversing unit 213 performs a reversing process on the display image to generate a reversed image, the OSD superimposing unit 212 converts the menu image 40 into the reversed image. Unlike the first embodiment, it is the same in other points in that the projection image 30 is generated by superimposing. Hereinafter, a description will be given focusing on differences from the first embodiment.

図11は、第2の実施形態に係る画像処理部21の構成を示す図である。図4に示した第1の実施形態に係る画像処理部21の構成と比較すると、OSD重畳部212及び画像反転部213の配置が異なっている。画像反転部213は、CPU11の制御に基づいて、表示画像を左右反転することにより反転画像を生成し、生成した反転画像をOSD重畳部212に対して出力する。OSD重畳部212は、CPU11の制御に基づいて、画像作成部113が作成したメニュー画像40をOSD画像として反転画像に重畳することにより投影画像30を生成し、投影画像30を画像出力部25に対して出力する。   FIG. 11 is a diagram illustrating a configuration of the image processing unit 21 according to the second embodiment. Compared to the configuration of the image processing unit 21 according to the first embodiment illustrated in FIG. 4, the arrangement of the OSD superimposing unit 212 and the image inverting unit 213 is different. Based on the control of the CPU 11, the image reversing unit 213 generates a reversed image by horizontally inverting the display image, and outputs the generated reversed image to the OSD superimposing unit 212. Based on the control of the CPU 11, the OSD superimposing unit 212 generates the projected image 30 by superimposing the menu image 40 created by the image creating unit 113 on the inverted image as an OSD image, and the projected image 30 is sent to the image output unit 25. Output.

図12は、プロジェクタ1の設置状態、及び複数のプロジェクタ1の構成状態の組み合わせごとに、第2の実施形態に係る画像処理部21がメニュー画像40をどのように変換するかを示す表である。画像処理部21は、設置状態が天吊り投影であることを示している場合に、その他の条件によらず、画像作成部113から入力されたメニュー画像40を上下反転及び左右反転することにより、投影画像30を生成する。   FIG. 12 is a table showing how the image processing unit 21 according to the second embodiment converts the menu image 40 for each combination of the installation state of the projector 1 and the configuration states of the plurality of projectors 1. . When the image processing unit 21 indicates that the installation state is the ceiling-mounted projection, the menu image 40 input from the image creation unit 113 is reversed upside down and left and right regardless of other conditions. A projection image 30 is generated.

第2の実施形態に係る画像処理部21は、第1の実施形態に係る画像処理部21と比べて、画像反転部213がOSD重畳部212よりも先に処理を実行する点が異なる。その結果、画像作成部113が設置情報に基づいて作成するメニュー画像40の態様が、図10に示した第1の実施形態におけるメニュー画像40の態様と異なる。   The image processing unit 21 according to the second embodiment is different from the image processing unit 21 according to the first embodiment in that the image inversion unit 213 executes processing before the OSD superimposing unit 212. As a result, the mode of the menu image 40 created by the image creation unit 113 based on the installation information is different from the mode of the menu image 40 in the first embodiment shown in FIG.

図13は、マルチ投影の際に第2の実施形態に係る画像作成部113が作成するメニュー画像40を示す図である。
フロントマルチ投影の場合、画像処理部21は上下反転及び左右反転を行わず、表示画像の配置の入れ替えも施されないので、画像作成部113は、図13(a)に示すメニュー画像40を作成する。リアマルチ投影の場合、画像処理部21は上下反転及び左右反転を行わず、表示画像の配置の入れ替えが施されるので、画像作成部113は、図13(b)に示すメニュー画像40を作成する。
FIG. 13 is a diagram illustrating a menu image 40 created by the image creation unit 113 according to the second embodiment during multi-projection.
In the case of front multi-projection, the image processing unit 21 does not perform upside down and left / right inversion, and the arrangement of the display image is not changed. Therefore, the image creation unit 113 creates the menu image 40 shown in FIG. . In the case of rear multi-projection, the image processing unit 21 does not perform upside down and left / right reversal, and the arrangement of the display image is switched. Therefore, the image creation unit 113 creates the menu image 40 shown in FIG. .

天吊りマルチ投影の場合、画像処理部21は上下反転及び左右反転を行うが、表示画像の配置の入れ替えが施されないので、画像作成部113は、図13(c)に示すメニュー画像40を作成する。リア天吊りマルチ投影の場合、画像処理部21は上下反転及び左右反転を行い、表示画像の配置の入れ替えも施されるので、画像作成部113は、図13(d)に示すメニュー画像40を作成する。   In the case of ceiling-mounted multi-projection, the image processing unit 21 performs upside down and left / right inversion, but since the arrangement of the display image is not changed, the image creation unit 113 creates the menu image 40 shown in FIG. To do. In the case of rear ceiling multi-projection, the image processing unit 21 performs upside down and left / right inversion, and the arrangement of the display image is also changed. Therefore, the image creating unit 113 displays the menu image 40 shown in FIG. create.

<第3の実施形態>
第1の実施形態においては、プロジェクタ1a,1b,1cが、夫々に接続された外部装置からの制御に基づいて、入力された表示画像のうち、各プロジェクタ1が投影すべき領域の表示画像に基づく投影画像30を生成した。これに対して、第3の実施形態に係るプロジェクタ1a,1b,1cは、プロジェクタ1a,1b,1cのうち、マスター装置に設定されたプロジェクタ1(例えば、プロジェクタ1c)の制御に基づいて、各プロジェクタ1が投影すべき領域の表示画像に基づく投影画像30を生成する点で、第1の実施形態と異なる。また、第3の実施形態は、マルチ投影時に、プロジェクタ1a,1b,1cが縦方向に並んで設置されているか横方向に並んで設置されているかに基づいて処理を変更する点で、第1の実施形態と異なる。
<Third Embodiment>
In the first embodiment, the projectors 1a, 1b, and 1c are converted into display images of areas to be projected by the projectors 1 out of the input display images based on control from external devices connected to the projectors 1a, 1b, and 1c, respectively. A projection image 30 based on it was generated. On the other hand, the projectors 1a, 1b, and 1c according to the third embodiment are based on the control of the projector 1 (for example, the projector 1c) set as the master device among the projectors 1a, 1b, and 1c. The projector 1 is different from the first embodiment in that a projection image 30 is generated based on a display image of an area to be projected. In the third embodiment, the processing is changed based on whether the projectors 1a, 1b, and 1c are installed side by side in the vertical direction or in the horizontal direction at the time of multi-projection. Different from the embodiment.

プロジェクタ1a,1bは、マスター装置となるプロジェクタ1cに、通信部18及びケーブル(不図示)を介して接続されている。マスター装置に設定されているプロジェクタ1cは、設置情報及び構成情報の少なくとも一つを、スレーブ装置に設定されているプロジェクタ1a,1bに送信する。また、プロジェクタ1cは、プロジェクタ1a,1bに投影画像30を配信することもできる。   The projectors 1a and 1b are connected to a projector 1c serving as a master device via a communication unit 18 and a cable (not shown). The projector 1c set as the master device transmits at least one of the installation information and the configuration information to the projectors 1a and 1b set as the slave devices. The projector 1c can also deliver the projection image 30 to the projectors 1a and 1b.

図14は、マスター装置であるプロジェクタ1cのCPU11が、プロジェクタ1a,1b,1cの設置状態に応じて、投影画像30の態様を決定する処理のフローチャートである。
まず、CPU11は、RAM13に設定されている設置状態を読み込み、設置状態が天吊り設置状態であるか否かを判定する(S41)。CPU11は、設置状態が天吊り設置状態でない場合(S41においてNo)、ステップS45に遷移する。CPU11は、設置状態が天吊り設置状態である場合(S41においてYes)、画像反転部213に対して投影画像30を上下左右反転するように指示する(S42)。
FIG. 14 is a flowchart of a process in which the CPU 11 of the projector 1c, which is the master device, determines the aspect of the projection image 30 according to the installation state of the projectors 1a, 1b, and 1c.
First, the CPU 11 reads the installation state set in the RAM 13 and determines whether the installation state is a ceiling-mounted installation state (S41). If the installation state is not the ceiling installation state (No in S41), the CPU 11 proceeds to step S45. When the installation state is the ceiling-suspended installation state (Yes in S41), the CPU 11 instructs the image inversion unit 213 to invert the projection image 30 vertically and horizontally (S42).

続いて、CPU11は、設置状態が、縦方向に複数のプロジェクタが並べられている縦方向マルチ投影であるか否かを判定する(S43)。CPU11は、縦方向マルチ投影でないと判定した場合(S43においてNo)、ステップS45に遷移する。CPU11は、縦方向マルチ投影であると判定した場合(S43においてYes)、ステップS44に遷移し、マルチ投影を構成するプロジェクタ1a,1cが投影する表示画像を入れ替えるために、通常の縦方向マルチ投影をする場合にプロジェクタ1cが投影する表示画像(例えば、投影画像30の一番下の領域に対応する表示画像)をプロジェクタ1aに配信する(S44)。   Subsequently, the CPU 11 determines whether or not the installation state is vertical multi-projection in which a plurality of projectors are arranged in the vertical direction (S43). If the CPU 11 determines that the projection is not vertical multi-projection (No in S43), the process proceeds to step S45. If the CPU 11 determines that the projection is vertical multi-projection (Yes in S43), the CPU 11 proceeds to step S44 and performs normal vertical multi-projection in order to replace the display images projected by the projectors 1a and 1c constituting the multi-projection. The display image projected by the projector 1c when the projector 1c is performed (for example, the display image corresponding to the lowermost region of the projection image 30) is distributed to the projector 1a (S44).

続いて、CPU11は、設置状態がリア投影であるか否かを判定する(S45)。CPU11は、リア投影でないと判定した場合(S45においてNo)、処理を終了する。CPU11は、リア投影であると判定した場合(S45においてYes)、ステップS46に遷移し、画像反転部213に対して投影画像30を左右反転するように指示する(S46)。   Subsequently, the CPU 11 determines whether or not the installation state is rear projection (S45). CPU11 complete | finishes a process, when it determines with it not being rear projection (in S45 No). If the CPU 11 determines that the projection is rear projection (Yes in S45), the process proceeds to step S46, and instructs the image inversion unit 213 to invert the projection image 30 left and right (S46).

続いて、CPU11は、設置状態が、横方向に複数のプロジェクタが並べられている横方向マルチ投影であるか否かを判定する(S47)。CPU11は、横方向マルチ投影でないと判定した場合(S47においてNo)、処理を終了する。CPU11は、横方向マルチ投影であると判定した場合(S47においてYes)、ステップS48に遷移し、マルチ投影を構成するプロジェクタ1a,1cが投影する表示画像を入れ替えるために、横方向のフロントマルチ投影をする場合にプロジェクタ1cが投影する表示画像(例えば、投影画像30の左端の領域に対応する表示画像)をプロジェクタ1aに配信する(S48)。   Subsequently, the CPU 11 determines whether or not the installation state is horizontal multi-projection in which a plurality of projectors are arranged in the horizontal direction (S47). If the CPU 11 determines that the projection is not horizontal multi-projection (No in S47), the process ends. When the CPU 11 determines that the multi-projection is in the horizontal direction (Yes in S47), the process proceeds to step S48, and in order to replace the display images projected by the projectors 1a and 1c constituting the multi-projection, the front multi-projection in the horizontal direction The display image projected by the projector 1c when performing the operation (for example, the display image corresponding to the leftmost region of the projection image 30) is distributed to the projector 1a (S48).

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment, A various deformation | transformation and change are possible within the range of the summary. is there.

1・・・プロジェクタ
11・・・CPU
111・・・設置情報取得部
112・・・構成情報取得部
25・・・画像出力部



1 ... Projector 11 ... CPU
111 ... Installation information acquisition unit 112 ... Configuration information acquisition unit 25 ... Image output unit



Claims (18)

スクリーンに投影画像を投影する表示装置であって、
前記表示装置の設置状態を示す設置情報を取得する設置情報取得手段と、
前記スクリーンに前記投影画像を投影する、前記表示装置を含む複数の表示装置の構成を示す構成情報を取得する構成情報取得手段と、
設置情報取得手段が取得した前記設置情報が示す前記設置状態、及び前記構成情報取得手段が取得した前記構成情報が示す前記構成に対応する操作用画像を生成する画像作成手段と、
前記操作用画像を含む前記投影画像を出力する画像出力手段と、
を有することを特徴とする表示装置。
A display device that projects a projected image on a screen,
Installation information acquisition means for acquiring installation information indicating an installation state of the display device;
Configuration information acquisition means for acquiring configuration information indicating the configuration of a plurality of display devices including the display device, which projects the projection image on the screen;
An image creating unit that generates an operation image corresponding to the configuration indicated by the installation state indicated by the installation information acquired by the installation information acquisition unit and the configuration information acquired by the configuration information acquisition unit;
Image output means for outputting the projection image including the operation image;
A display device comprising:
前記画像作成手段は、前記複数の表示装置が投影する前記投影画像の配置順を特定するための情報を含む前記操作用画像を生成することを特徴とする、
請求項1に記載の表示装置。
The image creating means generates the operation image including information for specifying an arrangement order of the projection images projected by the plurality of display devices.
The display device according to claim 1.
前記画像作成手段は、前記設置情報が、前記スクリーンの背面から前記投影画像が投影されるリア設置状態を示している場合に、前記設置情報が、前記スクリーンの正面から前記投影画像が投影されるフロント設置状態を示している場合に生成するフロント操作用画像に対応する第1の配置順と異なる第2の配置順に対応するリア操作用画像を生成することを特徴とする、
請求項2に記載の表示装置。
The image creation means projects the projection image from the front of the screen when the installation information indicates a rear installation state in which the projection image is projected from the back of the screen. Generating a rear operation image corresponding to a second arrangement order different from the first arrangement order corresponding to the front operation image to be generated when the front installation state is indicated;
The display device according to claim 2.
前記スクリーンに投影する対象となる表示画像を取得する表示画像取得手段をさらに有し、
前記画像作成手段は、前記表示画像に前記操作用画像を重畳することにより重畳画像を生成し、前記重畳画像の向きを前記設置情報に基づく向きに反転することにより前記投影画像を生成することを特徴とする、
請求項1から3のいずれか1項に記載の表示装置。
A display image acquisition means for acquiring a display image to be projected on the screen;
The image creating means generates a superimposed image by superimposing the operation image on the display image, and generates the projection image by inverting the direction of the superimposed image to a direction based on the installation information. Features
The display device according to claim 1.
前記スクリーンに投影する対象となる表示画像を取得する表示画像取得手段をさらに有し、
前記画像作成手段は、前記表示画像の向きを、前記設置情報取得手段が取得した前記設置情報に基づく向きに反転することにより反転画像を生成するとともに、前記反転画像に前記操作用画像を重畳することにより前記投影画像を生成することを特徴とする、
請求項1から3のいずれか1項に記載の表示装置。
A display image acquisition means for acquiring a display image to be projected on the screen;
The image creation unit generates a reversed image by inverting the direction of the display image to a direction based on the installation information acquired by the installation information acquisition unit, and superimposes the operation image on the inverted image. Generating the projected image by:
The display device according to claim 1.
他の前記表示装置との間で互いにデータを送受信するための通信手段と、
前記操作用画像に基づく操作を受け付ける操作受付手段をさらに有し、
前記通信手段は、マスター装置に設定された場合に、前記操作受付手段が受け付けた操作の対象となるスレーブ装置に設定された他の表示装置に対して、操作の内容を示す操作情報を送信することを特徴とする、
請求項1から5のいずれか1項に記載の表示装置。
Communication means for transmitting and receiving data to and from the other display device;
An operation accepting unit for accepting an operation based on the operation image;
When the communication unit is set as the master device, the communication unit transmits operation information indicating the content of the operation to another display device set as the slave device to be operated by the operation receiving unit. It is characterized by
The display device according to claim 1.
前記通信手段は、前記マスター装置に設定された場合に、前記スレーブ装置に設定された他の表示装置から前記構成情報を受信することを特徴とする、
請求項6に記載の表示装置。
The communication means, when set to the master device, receives the configuration information from another display device set to the slave device,
The display device according to claim 6.
前記設置情報取得手段は、前記表示装置が、前記スクリーンの背面から前記投影画像が投影されるリア設置状態、前記スクリーンの正面から前記投影画像が投影されるフロント設置状態、前記表示装置が上下方向の第1の向きで設置される据置設置状態、及び前記表示装置が前記第1の向きと反対の第2の向きで設置される天吊り設置状態のいずれの状態であるかを示す前記設置情報を取得することを特徴とする、
請求項1から7のいずれか1項に記載の表示装置。
The installation information acquisition means includes a rear installation state in which the display device projects the projection image from the back of the screen, a front installation state in which the projection image is projected from the front of the screen, and the display device in the up-down direction. The installation information indicating which state is a stationary installation state installed in the first orientation of the projector and a suspended installation state in which the display device is installed in a second orientation opposite to the first orientation. Is characterized by acquiring
The display device according to claim 1.
前記構成情報取得手段は、前記複数の表示装置が、横方向に配置されている横置き構成であるか、縦方向に配置されている縦置き構成であるかを示す前記構成情報を取得することを特徴とする、
請求項1から8のいずれか1項に記載の表示装置。
The configuration information acquisition unit acquires the configuration information indicating whether the plurality of display devices have a horizontal configuration arranged in a horizontal direction or a vertical configuration arranged in a vertical direction. Characterized by
The display device according to claim 1.
表示装置を用いてスクリーンに投影画像を投影する表示方法であって、
前記表示装置の設置状態を示す設置情報を取得するステップと、
前記スクリーンに前記投影画像を投影する複数の表示装置の構成を示す構成情報を取得するステップと、
前記設置情報が示す前記設置状態、及び前記構成情報が示す前記構成に対応する操作用画像を生成するステップと、
前記操作用画像を含む前記投影画像を出力するステップと、
を有することを特徴とする表示方法。
A display method for projecting a projection image on a screen using a display device,
Obtaining installation information indicating an installation state of the display device;
Obtaining configuration information indicating configurations of a plurality of display devices that project the projection image onto the screen;
Generating an operation image corresponding to the installation state indicated by the installation information and the configuration indicated by the configuration information;
Outputting the projection image including the operation image;
A display method characterized by comprising:
前記操作用画像を生成するステップにおいて、前記複数の表示装置が投影する前記投影画像の配置順を特定するための情報を含む前記操作用画像を生成することを特徴とする、
請求項10に記載の表示方法。
In the step of generating the operation image, the operation image including information for specifying an arrangement order of the projection images projected by the plurality of display devices is generated.
The display method according to claim 10.
前記操作用画像を生成するステップは、
前記設置情報が、前記スクリーンの背面から前記投影画像が投影されるリア設置状態を示しているか否かを判定するステップと、
前記設置情報が、前記スクリーンの背面から前記投影画像が投影されるリア設置状態を示していると判定した場合に、前記設置情報が、前記スクリーンの正面から前記投影画像が投影されるフロント設置状態を示している場合に生成するフロント操作用画像に対応する第1の配置順と異なる第2の配置順に対応するリア操作用画像を生成するステップと、
を有することを特徴とする、
請求項11に記載の表示方法。
The step of generating the operation image includes
Determining whether the installation information indicates a rear installation state in which the projection image is projected from the back of the screen;
When it is determined that the installation information indicates a rear installation state in which the projection image is projected from the back of the screen, the installation information is a front installation state in which the projection image is projected from the front of the screen. Generating a rear operation image corresponding to a second arrangement order different from the first arrangement order corresponding to the front operation image to be generated when
It is characterized by having
The display method according to claim 11.
前記スクリーンに投影する対象となる表示画像を取得するステップと、
前記表示画像に前記操作用画像を重畳することにより重畳画像を生成するステップと、
前記重畳画像の向きを前記設置情報に基づく向きに反転することにより前記投影画像を生成するステップと、
を有することを特徴とする、
請求項10から12のいずれか1項に記載の表示方法。
Obtaining a display image to be projected onto the screen;
Generating a superimposed image by superimposing the operation image on the display image;
Generating the projection image by inverting the direction of the superimposed image to a direction based on the installation information;
It is characterized by having
The display method according to claim 10.
前記スクリーンに投影する対象となる表示画像を取得するステップと、
前記表示画像の向きを前記設置情報に基づく向きに反転することにより反転画像を生成するステップと、
前記反転画像に前記操作用画像を重畳することにより前記投影画像を生成するステップと、
を有することを特徴とする、
請求項10から12のいずれか1項に記載の表示方法。
Obtaining a display image to be projected onto the screen;
Generating an inverted image by inverting the orientation of the display image to an orientation based on the installation information;
Generating the projection image by superimposing the operation image on the inverted image;
It is characterized by having
The display method according to claim 10.
前記操作用画像に基づく操作を受け付けるステップと、
前記表示装置がマスター装置に設定された場合に、受け付けた操作の対象となるスレーブ装置に設定された他の表示装置に対して、操作の内容を示す操作情報を送信するステップと、
をさらに有することを特徴とする、
請求項10から13のいずれか1項に記載の表示方法。
Receiving an operation based on the operation image;
When the display device is set as a master device, the step of transmitting operation information indicating the content of the operation to another display device set as a slave device that is the target of the accepted operation;
Further comprising:
The display method according to claim 10.
前記表示装置が前記マスター装置に設定された場合に、前記スレーブ装置に設定された他の表示装置から前記構成情報を受信するステップをさらに有することを特徴とする、
請求項15に記載の表示方法。
When the display device is set as the master device, the method further comprises receiving the configuration information from another display device set as the slave device.
The display method according to claim 15.
スクリーンに投影画像を投影するマスター装置及びスレーブ装置を含む複数の表示装置を有する表示システムであって、
前記マスター装置は、
前記複数の表示装置の設置状態を示す設置情報を取得する設置情報取得手段と、
前記複数の表示装置の構成を示す構成情報を取得する構成情報取得手段と、
設置情報取得手段が取得した前記設置情報が示す前記設置状態、及び前記構成情報取得手段が取得した前記構成情報が示す前記構成に対応する操作用画像を生成する画像作成手段と、
前記操作用画像を含む前記投影画像を出力する画像出力手段と、
前記操作用画像に基づく操作を受け付ける操作受付手段と、
前記操作受付手段が受け付けた操作の対象となる前記スレーブ装置に対して、前記操作の内容を示す操作情報を送信するマスター通信手段と、
を有し、
前記スレーブ装置は、
前記マスター装置が送信した前記操作情報を受信するスレーブ通信手段と、
前記スレーブ通信手段が受信した前記操作情報に基づいて設定内容を変更する制御手段と、
を有することを特徴とする表示システム。
A display system having a plurality of display devices including a master device and a slave device that project a projected image on a screen,
The master device is
Installation information acquisition means for acquiring installation information indicating an installation state of the plurality of display devices;
Configuration information acquisition means for acquiring configuration information indicating the configuration of the plurality of display devices;
An image creating unit that generates an operation image corresponding to the configuration indicated by the installation state indicated by the installation information acquired by the installation information acquisition unit and the configuration information acquired by the configuration information acquisition unit;
Image output means for outputting the projection image including the operation image;
Operation accepting means for accepting an operation based on the operation image;
Master communication means for transmitting operation information indicating the content of the operation to the slave device that is the target of the operation received by the operation receiving means;
Have
The slave device is
Slave communication means for receiving the operation information transmitted by the master device;
Control means for changing setting contents based on the operation information received by the slave communication means;
A display system comprising:
前記マスター通信手段は、前記スレーブ通信手段から、前記スレーブ装置の前記設定内容を示す設定情報を受信することを特徴とする、
請求項17に記載の表示システム。

The master communication unit receives setting information indicating the setting content of the slave device from the slave communication unit,
The display system according to claim 17.

JP2015161650A 2015-08-19 2015-08-19 Display device, display method and display system Expired - Fee Related JP6545034B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015161650A JP6545034B2 (en) 2015-08-19 2015-08-19 Display device, display method and display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015161650A JP6545034B2 (en) 2015-08-19 2015-08-19 Display device, display method and display system

Publications (2)

Publication Number Publication Date
JP2017040734A true JP2017040734A (en) 2017-02-23
JP6545034B2 JP6545034B2 (en) 2019-07-17

Family

ID=58206407

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015161650A Expired - Fee Related JP6545034B2 (en) 2015-08-19 2015-08-19 Display device, display method and display system

Country Status (1)

Country Link
JP (1) JP6545034B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021060724A (en) * 2019-10-04 2021-04-15 キヤノン株式会社 Operating device for multi device system and control method
JPWO2022070462A1 (en) * 2020-09-29 2022-04-07

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002207247A (en) * 2001-01-11 2002-07-26 Seiko Epson Corp Projection display system and projector therefor
JP2008216805A (en) * 2007-03-06 2008-09-18 Canon Inc Image projection system and image projection apparatus
JP2012088636A (en) * 2010-10-22 2012-05-10 Seiko Epson Corp Projector and control method for projector
JP2013009057A (en) * 2011-06-22 2013-01-10 Sharp Corp Multi-display system
JP2013076949A (en) * 2011-09-30 2013-04-25 Canon Inc Projector device and its control method
JP2014122953A (en) * 2012-12-20 2014-07-03 Seiko Epson Corp Projector, multiple projection system, connection member and control method of projector

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002207247A (en) * 2001-01-11 2002-07-26 Seiko Epson Corp Projection display system and projector therefor
JP2008216805A (en) * 2007-03-06 2008-09-18 Canon Inc Image projection system and image projection apparatus
JP2012088636A (en) * 2010-10-22 2012-05-10 Seiko Epson Corp Projector and control method for projector
JP2013009057A (en) * 2011-06-22 2013-01-10 Sharp Corp Multi-display system
JP2013076949A (en) * 2011-09-30 2013-04-25 Canon Inc Projector device and its control method
JP2014122953A (en) * 2012-12-20 2014-07-03 Seiko Epson Corp Projector, multiple projection system, connection member and control method of projector

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021060724A (en) * 2019-10-04 2021-04-15 キヤノン株式会社 Operating device for multi device system and control method
JPWO2022070462A1 (en) * 2020-09-29 2022-04-07
WO2022070462A1 (en) * 2020-09-29 2022-04-07 富士フイルム株式会社 Control device, control method, control program, and projection system
JP7427804B2 (en) 2020-09-29 2024-02-05 富士フイルム株式会社 Control device, control method, control program, and projection system

Also Published As

Publication number Publication date
JP6545034B2 (en) 2019-07-17

Similar Documents

Publication Publication Date Title
US10989993B2 (en) Control device for correcting projection image, projection system, method of controlling same, and storage medium
US20170214895A1 (en) Projection apparatus, projection method, and storage medium
JP2013083755A (en) Display device, method of controlling display device, and program
JP6143473B2 (en) Image output device, system, control method thereof, program, and storage medium
JP2017085446A (en) Projection device, projection method and projection system
JP6545034B2 (en) Display device, display method and display system
JP2017079409A (en) Display, control method of display, and program
JP2017017509A (en) Projection apparatus and projection method
JP2018180105A (en) Projection apparatus and image projection method
JP2015114443A (en) Display device and display device control method
JP2015053558A (en) Image display apparatus and control method thereof
JP2014137386A (en) Projector, control method therefor, and image projection system
JP6700955B2 (en) Projection apparatus and projection method
JP2013055505A (en) Projection device
JP2014036394A (en) Distortion correction method of projection image and projection display device
JP2018054912A (en) Projection display apparatus and control method thereof
JP6598633B2 (en) Projection apparatus and control method of projection apparatus
JP2017200060A (en) Projection type display device and control method thereof
JP6562653B2 (en) Projection device
JP2017083705A (en) Imaging device and imaging method
JP2014142466A (en) Projection device and control method of the same, program, and storage medium
JP2019129471A (en) Video display device and display control method
JP2020079895A (en) PROJECTOR, PROJECTION SYSTEM, PROJECTOR CONTROL METHOD, PROJECTION METHOD, AND PROGRAM
JP2017198779A (en) Projection display apparatus and control method thereof
JP6772045B2 (en) Display system, control device and method of projection type display device

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20180227

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180725

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190419

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190521

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190618

R151 Written notification of patent or utility model registration

Ref document number: 6545034

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees