JP2017181683A

JP2017181683A - Display processing device, display processing method, and program

Info

Publication number: JP2017181683A
Application number: JP2016066494A
Authority: JP
Inventors: 透片山; Toru Katayama
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2016-03-29
Filing date: 2016-03-29
Publication date: 2017-10-05

Abstract

PROBLEM TO BE SOLVED: To provide a display processing device capable of suppressing enlarged display which is not desired by a browser and to provide a display processing method and a program.SOLUTION: A display processing device 10 includes a screen data generation part 11, an operation determination part 12, and a browsing state specification part 13. The screen data generation part 11 generates screen data and outputs the generated screen data to a display device 20. The operation determination part 12 determines whether or not a browser 40 performs an operation for requesting the enlarged display of a content on the basis of the image data of the browser 40 acquired from a photographing device 30. The browsing state specification part 13 specifies the browsing state of the browser 40 on the basis of the image data of the browser 40 acquired from the photographing device 30. When it is determined that the browser 40 performs the operation for requesting the enlarged display of the content and the browsing state of the browser 40 satisfies a predetermined condition, the screen data generation part 11 generates the screen data for the enlarged display of the content on a screen.SELECTED DRAWING: Figure 1

Description

本発明は、表示処理装置、表示処理方法およびこれらを実現するためのプログラムに関する。具体的には、本発明は、表示装置によって表示される画面を、必要に応じて拡大して表示することが可能な表示処理装置、表示処理方法およびこれらを実現するためのプログラムに関する。 The present invention relates to a display processing device, a display processing method, and a program for realizing them. Specifically, the present invention relates to a display processing apparatus, a display processing method, and a program for realizing the display processing apparatus capable of enlarging and displaying a screen displayed by the display device as necessary.

表示装置の画面において、画像または文字等のコンテンツが小さく表示されていると、画面の閲覧者は、そのコンテンツを見づらいと感じることがある。特に、視力が低い閲覧者にとっては、画面に表示される文字を読み取ることができず、文書の内容を理解できないという問題が生じる場合がある。 When content such as images or characters is displayed small on the screen of the display device, the viewer of the screen may find it difficult to see the content. In particular, a viewer with low vision may not be able to read characters displayed on the screen and may not understand the content of the document.

表示装置が拡大表示機能を備えている場合、閲覧者が表示装置を操作して画像および文字等のコンテンツを拡大表示することで、コンテンツの見えにくさを解消できると考えられる。しかしながら、この場合、閲覧者が表示装置を操作しなければならず、手間がかかる。 In the case where the display device has an enlarged display function, it is considered that the difficulty of viewing the content can be eliminated by the viewer operating the display device to enlarge and display the content such as images and characters. However, in this case, the viewer must operate the display device, which is troublesome.

また、閲覧者と表示装置の操作者とが異なる場合、閲覧者は、操作者にコンテンツの拡大表示を依頼する必要がある。この場合も、手間がかかる。 When the viewer is different from the operator of the display device, the viewer needs to request the operator to enlarge the content. This also takes time.

そこで、従来、閲覧者または操作者が表示装置を操作しなくても、画面に表示されたコンテンツを拡大できる技術が提案されている（例えば、特許文献１〜４参照）。 Therefore, conventionally, there has been proposed a technique capable of enlarging the content displayed on the screen even when the viewer or the operator does not operate the display device (see, for example, Patent Documents 1 to 4).

特許文献１に開示された情報表示システムでは、ＣＣＤカメラによって撮影されたユーザの画像に基づいて、画面に表示される文字情報または画像情報の表示形態が変更される。具体的には、特許文献１の情報表示システムでは、例えば、ユーザの画像に基づいてユーザと画面との距離が測定される。そして、ユーザが画面に近づいたときに、ユーザが低視力者であると判断され、画面上の文字が大きく表示される。 In the information display system disclosed in Patent Document 1, the display form of character information or image information displayed on the screen is changed based on a user image taken by a CCD camera. Specifically, in the information display system of Patent Document 1, for example, the distance between the user and the screen is measured based on the user's image. When the user approaches the screen, it is determined that the user is a low vision person, and the characters on the screen are displayed large.

特許文献２に開示されたユーザ・インターフェイス装置では、デジタルカメラによって撮像された被写体の顔画像に基づいて、表示画面における表示の態様が変更される。具体的には、特許文献２のユーザ・インターフェイス装置では、例えば、ユーザの顔画像が、表示画面を見づらそうにしている顔になったと判断された場合に、表示されている数字が大きくされる。 In the user interface device disclosed in Patent Document 2, the display mode on the display screen is changed based on the face image of the subject imaged by the digital camera. Specifically, in the user interface device of Patent Document 2, for example, when it is determined that the face image of the user is a face that is difficult to see the display screen, the displayed number is increased. .

特許文献３に開示された画像表示装置では、カメラによって撮影された画像情報に基づいて、表示部に表示されている情報が拡大表示される。具体的には、特許文献３の画像表示装置では、例えば、カメラによって撮影された画像情報に基づいて、顔が近づいたと判断された場合は、表示部の表示が拡大表示される。 In the image display device disclosed in Patent Literature 3, the information displayed on the display unit is enlarged and displayed based on the image information captured by the camera. Specifically, in the image display device disclosed in Patent Document 3, for example, when it is determined that the face is approaching based on image information captured by a camera, the display on the display unit is enlarged.

特許文献４に開示された表示装置では、撮影部によって取得されたユーザの顔画像に基づいて、液晶パネルに表示される画像の表示態様が決定される。具体的には、特許文献４の表示装置では、例えば、ユーザが眉間にしわを寄せて液晶パネルを見ている場合には、液晶パネルに表示されているコンテンツが拡大される。 In the display device disclosed in Patent Literature 4, the display mode of the image displayed on the liquid crystal panel is determined based on the user's face image acquired by the photographing unit. Specifically, in the display device of Patent Document 4, for example, when the user is looking at the liquid crystal panel with wrinkles between the eyebrows, the content displayed on the liquid crystal panel is enlarged.

特開２００６−０２３９５３号公報JP 2006-023953 A 特開２００８−２３４４０１号公報JP 2008-234401 A 特開２０１０−１６０２７４号公報JP 2010-160274 A 特開２０１３−２２８４９０号公報JP 2013-228490 A

特許文献１〜４に開示された技術を利用すれば、閲覧者または他の操作者が表示装置を操作しなくても、表示装置の画面に表示されたコンテンツを拡大することができると考えられる。これにより、閲覧者は、表示装置を操作する手間または操作者に拡大表示を依頼する手間を省くことができる。 If the techniques disclosed in Patent Documents 1 to 4 are used, it is considered that the content displayed on the screen of the display device can be expanded without the viewer or other operator operating the display device. . Thereby, the viewer can save the effort which operates a display apparatus, or the effort which asks an operator for an enlarged display.

しかしながら、上記特許文献１〜４の技術では、閲覧者が望んでいない拡大表示が行われる場合がある。 However, in the techniques of Patent Documents 1 to 4, there are cases where enlarged display that the viewer does not want is performed.

本発明の目的の一例は、閲覧者の望まないコンテンツの拡大表示を抑制することができる、表示処理装置、表示処理方法およびプログラムを提供することにある。 An example of an object of the present invention is to provide a display processing device, a display processing method, and a program that can suppress enlarged display of content that a viewer does not want.

上記目的を達成するため、本発明の一側面における表示処理装置は、表示装置によって表示される画面のコンテンツを拡大表示するための表示処理装置であって、
コンテンツを含む画面を表示するための画面データを生成する画面データ生成部と、
前記画面の閲覧者を撮影する撮影装置から取得した、前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する動作判定部と、
前記撮影装置から取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する閲覧状況特定部と、
を備え、
前記画面データ生成部は、前記動作判定部によって前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記閲覧状況特定部によって特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、ことを特徴とする。 In order to achieve the above object, a display processing device according to one aspect of the present invention is a display processing device for enlarging and displaying a screen content displayed by a display device,
A screen data generation unit for generating screen data for displaying a screen including content;
An operation determination unit that determines whether or not the viewer is performing an operation for requesting an enlarged display of content based on the image data of the viewer acquired from a photographing device that photographs the viewer of the screen;
Based on the image data of the browser acquired from the imaging device, a browsing status specifying unit that specifies the browsing status of the browser;
With
The screen data generation unit determines that the viewer is performing an operation for requesting enlarged display of content by the operation determination unit, and the browsing status specified by the browsing status specifying unit satisfies a predetermined condition. Screen data for enlarging and displaying the content is generated.

また、上記目的を達成するため、本発明の一側面における表示処理方法は、表示装置によって表示される画面のコンテンツを拡大表示するための表示処理方法であって、
（ａ）コンテンツを含む画面を表示するための画面データを生成する、ステップと、
（ｂ）前記画面の閲覧者を撮影する撮影装置から前記閲覧者の画像データを取得する、ステップと、
（ｃ）前記（ｂ）のステップで取得した前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する、ステップと、
（ｄ）前記（ｂ）のステップで取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する、ステップと、
（ｅ）前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記（ｄ）のステップで特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、ステップと、
を有する、ことを特徴とする。 In order to achieve the above object, a display processing method according to one aspect of the present invention is a display processing method for enlarging and displaying a content of a screen displayed by a display device,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
It is characterized by having.

また、上記目的を達成するため、本発明の一側面におけるプログラムは、コンピュータによって、表示装置によって表示される画面のコンテンツを拡大表示するためのプログラムであって、
前記コンピュータに、
（ａ）コンテンツを含む画面を表示するための画面データを生成する、ステップと、
（ｂ）前記画面の閲覧者を撮影する撮影装置から前記閲覧者の画像データを取得する、ステップと、
（ｃ）前記（ｂ）のステップで取得した前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する、ステップと、
（ｄ）前記（ｂ）のステップで取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する、ステップと、
（ｅ）前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記（ｄ）のステップで特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、ステップと、
を実行させる、ことを特徴とする。 In order to achieve the above object, a program according to one aspect of the present invention is a program for enlarging and displaying a screen content displayed by a display device by a computer,
In the computer,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
Is executed.

以上のように本発明の構成によれば、閲覧者の望まないコンテンツの拡大表示を抑制することができる。 As described above, according to the configuration of the present invention, it is possible to suppress the enlarged display of content that the viewer does not want.

図１は、本発明の一実施形態に係る表示処理装置の概略構成を示すブロック図である。FIG. 1 is a block diagram showing a schematic configuration of a display processing apparatus according to an embodiment of the present invention. 図２は、表示処理装置の具体的な構成を示すブロック図である。FIG. 2 is a block diagram showing a specific configuration of the display processing apparatus. 図３は、表示装置によって表示された画面の一例を示す図である。FIG. 3 is a diagram illustrating an example of a screen displayed by the display device. 図４は、表示処理装置の動作を示すフロー図である。FIG. 4 is a flowchart showing the operation of the display processing apparatus. 図５は、表示処理装置の変形例を示すブロック図である。FIG. 5 is a block diagram illustrating a modification of the display processing device. 図６は、コンピュータの構成の一例を示す図である。FIG. 6 is a diagram illustrating an example of the configuration of a computer.

以下、本発明の実施形態に係る表示処理装置、表示方法およびプログラムについて、図１から図６を参照しながら説明する。 Hereinafter, a display processing device, a display method, and a program according to an embodiment of the present invention will be described with reference to FIGS.

［装置構成］
図１は、本発明の一実施形態に係る表示処理装置１０の概略構成を示すブロック図である。詳細は後述するが、表示処理装置１０は、コンテンツデータ（画像データおよび／またはテキストデータ）を含む画面データを生成し、表示装置２０へ出力する。表示装置２０は、表示処理装置１０から出力された画面データに基づいて、画面を表示する。表示装置２０によって表示される画面には、画像および／または文字を含むコンテンツが表示される。また、表示処理装置１０は、撮影装置３０から、表示装置２０によって表示された画面を閲覧する閲覧者４０の画像データを取得する。本実施形態では、撮影装置３０は、例えば、閲覧者４０の顔を撮影し、顔の画像データを表示処理装置１０へ出力する。表示処理装置１０は、取得した閲覧者４０の画像データに基づいて、表示装置２０によって表示されているコンテンツを拡大表示する。表示装置２０は、例えば、液晶表示パネル、または有機ＥＬ（Electro Luminescence）パネル等のパネルディスプレーであってもよく、プロジェクタであってもよい。また、撮影装置３０は、例えば、カメラである。なお、表示装置２０がプロジェクタの場合には、表示装置２０によって表示された画面とは、プロジェクタによって投影された画面を意味する。 [Device configuration]
FIG. 1 is a block diagram showing a schematic configuration of a display processing apparatus 10 according to an embodiment of the present invention. Although details will be described later, the display processing device 10 generates screen data including content data (image data and / or text data) and outputs the screen data to the display device 20. The display device 20 displays a screen based on the screen data output from the display processing device 10. On the screen displayed by the display device 20, content including images and / or characters is displayed. Further, the display processing device 10 acquires image data of the viewer 40 who browses the screen displayed by the display device 20 from the photographing device 30. In the present embodiment, for example, the imaging device 30 images the face of the viewer 40 and outputs face image data to the display processing device 10. The display processing device 10 enlarges and displays the content displayed by the display device 20 based on the acquired image data of the viewer 40. The display device 20 may be a panel display such as a liquid crystal display panel or an organic EL (Electro Luminescence) panel, or may be a projector. Moreover, the imaging device 30 is a camera, for example. When the display device 20 is a projector, the screen displayed by the display device 20 means a screen projected by the projector.

本実施形態に係る表示処理装置１０は、例えば、デスクトップ型およびラップトップ型等のパーソナルコンピュータにおいて利用されてもよく、スマートフォンおよびタブレット型端末等の携帯型の情報端末装置において利用されてもよい。詳細な説明は省略するが、表示処理装置１０が携帯型の情報端末装置において利用される場合には、例えば、表示処理装置１０は、表示装置２０および撮影装置３０とともに、一つの情報端末装置に組み込まれる。 The display processing device 10 according to the present embodiment may be used in, for example, a desktop computer and a laptop computer, and may be used in a portable information terminal device such as a smartphone and a tablet terminal. Although detailed description is omitted, when the display processing device 10 is used in a portable information terminal device, for example, the display processing device 10 is combined with the display device 20 and the imaging device 30 into one information terminal device. Incorporated.

以下、表示処理装置１０の各構成要素について説明する。図１に示すように、表示処理装置１０は、画面データ生成部１１、動作判定部１２および閲覧状況特定部１３を備える。 Hereinafter, each component of the display processing apparatus 10 will be described. As illustrated in FIG. 1, the display processing device 10 includes a screen data generation unit 11, an operation determination unit 12, and a browsing status identification unit 13.

画面データ生成部１１は、画像データおよび／またはテキストデータを含む画面データを生成し、生成した画面データを表示装置２０へ出力する。これにより、表示装置２０は、コンテンツ（画像および／または文字）を含む画面を表示する。詳細な説明は省略するが、画面データ生成部１１は、例えば、撮影装置３０によって撮影された画像、ネットワークを介して外部装置から入力された情報、およびユーザが表示処理装置１０に入力した情報等に基づいて、画面データを生成する。 The screen data generation unit 11 generates screen data including image data and / or text data, and outputs the generated screen data to the display device 20. Thereby, the display device 20 displays a screen including content (images and / or characters). Although detailed description is omitted, the screen data generation unit 11, for example, an image captured by the imaging device 30, information input from an external device via a network, information input by the user to the display processing device 10, etc. The screen data is generated based on the above.

動作判定部１２は、撮影装置３０から取得した閲覧者４０の画像データに基づいて、閲覧者４０がコンテンツの拡大表示を求める動作を行っているか否かを判定する。閲覧状況特定部１３は、撮影装置３０から取得した閲覧者４０の画像データに基づいて、閲覧者４０の閲覧状況を特定する。動作判定部１２および閲覧状況特定部１３の処理については、後述する。 Based on the image data of the viewer 40 acquired from the image capturing device 30, the operation determination unit 12 determines whether the viewer 40 is performing an operation for requesting enlarged display of content. The browsing status specifying unit 13 specifies the browsing status of the browser 40 based on the image data of the viewer 40 acquired from the imaging device 30. Processing of the operation determination unit 12 and the browsing status identification unit 13 will be described later.

本実施形態では、画面データ生成部１１は、閲覧者４０がコンテンツの拡大表示を求める動作を行っていると動作判定部１２によって判定され、かつ閲覧状況特定部１３によって特定された閲覧状況が所定の条件を満たしている場合に、画面上のコンテンツを拡大表示するための画面データ（以下、コンテンツ拡大用画面データとも記す。）を生成する。 In the present embodiment, the screen data generation unit 11 determines that the browsing situation specified by the movement determination unit 12 and the browsing situation specifying unit 13 is determined that the viewer 40 is performing an operation for requesting enlarged display of content. When the above condition is satisfied, screen data for enlarging and displaying the content on the screen (hereinafter also referred to as content enlarging screen data) is generated.

以上のように、本実施形態では、閲覧者４０の動作だけでなく、閲覧者４０の閲覧状況も加味して、画面上のコンテンツを拡大するか否かが判別される。これにより、閲覧者４０の望まないコンテンツの拡大表示を抑制することができる。 As described above, in the present embodiment, it is determined whether or not to enlarge the content on the screen, considering not only the operation of the viewer 40 but also the browsing status of the viewer 40. Thereby, the enlarged display of the content which the viewer 40 does not want can be suppressed.

次に、本実施形態に係る表示処理装置の構成について具体的に説明する。図２は、本実施形態に係る表示処理装置の具体的な構成を示すブロック図である。 Next, the configuration of the display processing apparatus according to the present embodiment will be specifically described. FIG. 2 is a block diagram showing a specific configuration of the display processing apparatus according to the present embodiment.

図２を参照して、本実施形態に係る表示処理装置１０は、上述の画面データ生成部１１、動作判定部１２および閲覧状況特定部１３に加えてさらに、画像データ取得部１４および拡大判定部１５を備える。 With reference to FIG. 2, the display processing apparatus 10 according to the present embodiment further includes an image data acquisition unit 14 and an enlargement determination unit in addition to the screen data generation unit 11, the operation determination unit 12, and the browsing status identification unit 13 described above. 15 is provided.

画像データ取得部１４は、撮影装置３０から閲覧者４０の顔の画像データを取得する。画像データ取得部１４は、取得した画像データを動作判定部１２および閲覧状況特定部１３へ出力する。 The image data acquisition unit 14 acquires image data of the face of the viewer 40 from the imaging device 30. The image data acquisition unit 14 outputs the acquired image data to the operation determination unit 12 and the browsing status identification unit 13.

動作判定部１２は、画像データ取得部１４から取得した画像データに基づいて、閲覧者４０が拡大表示を求める動作を行っているか否かを判定し、判定結果を拡大判定部１５へ出力する。本実施形態では、動作判定部１２は、予め設定された特定の動作を閲覧者４０が行った場合に、閲覧者４０が拡大表示を求める動作を行っていると判定する。特定の動作としては、例えば、閲覧者４０がメガネを外す動作、閲覧者４０がメガネを上下にずらす動作、閲覧者４０が目を細める動作、および閲覧者４０が表示装置２０から離れる動作等が挙げられる。本実施形態では、動作判定部１２は、例えば、図示しない記憶部に予め記憶された顔画像の特徴点と、撮影装置３０によって撮影された閲覧者４０の顔画像とを比較することによって、閲覧者４０が特定の動作を行っているか否かを判定する。なお、動作判定部１２は、公知の種々の画像認識技術を用いて、閲覧者４０の動作を判定することができる。したがって、動作判定部１２の判定動作の詳細な説明は省略する。 Based on the image data acquired from the image data acquisition unit 14, the operation determination unit 12 determines whether the viewer 40 is performing an operation for requesting an enlarged display, and outputs the determination result to the enlargement determination unit 15. In this embodiment, the operation determination unit 12 determines that the viewer 40 is performing an operation for requesting an enlarged display when the viewer 40 performs a specific operation set in advance. Specific operations include, for example, an operation in which the viewer 40 removes the glasses, an operation in which the viewer 40 shifts the glasses up and down, an operation in which the viewer 40 narrows his eyes, and an operation in which the viewer 40 leaves the display device 20. Can be mentioned. In the present embodiment, the operation determination unit 12 browses, for example, by comparing the feature points of the face image stored in advance in a storage unit (not shown) with the face image of the viewer 40 photographed by the photographing device 30. It is determined whether the person 40 is performing a specific operation. In addition, the operation | movement determination part 12 can determine the operation | movement of the viewer 40 using various well-known image recognition techniques. Therefore, detailed description of the determination operation of the operation determination unit 12 is omitted.

閲覧状況特定部１３は、画像データ取得部１４から取得した画像データに基づいて、閲覧者４０の閲覧状況を特定し、特定した閲覧状況を拡大判定部１５へ出力する。本実施形態では、閲覧状況特定部１３は、上記画像データに基づいて、閲覧者４０の視線を特定する。なお、閲覧状況特定部１３は、公知の種々の視線検出技術を用いて、閲覧者４０の視線を特定することができる。したがって、閲覧状況特定部１３の特定動作の詳細な説明は省略する。 The browsing status specifying unit 13 specifies the browsing status of the viewer 40 based on the image data acquired from the image data acquisition unit 14 and outputs the specified browsing status to the enlargement determination unit 15. In the present embodiment, the browsing status specifying unit 13 specifies the line of sight of the viewer 40 based on the image data. In addition, the browsing condition specific | specification part 13 can specify the eyes | visual_axis of the browsing person 40 using well-known various gaze detection techniques. Therefore, detailed description of the specific operation of the browsing status specifying unit 13 is omitted.

拡大判定部１５は、動作判定部１２の判定結果および閲覧状況特定部１３によって特定された閲覧状況に基づいて、表示装置２０によって表示された画面上のコンテンツを拡大するか否かを判定し、判定結果を画面データ生成部１１へ出力する。本実施形態では、閲覧者４０がコンテンツの拡大表示を求める動作を行っていると動作判定部１２によって判定され、かつ表示装置２０によって表示されたコンテンツが、閲覧状況特定部１３によって特定された閲覧者４０の視線上に存在する場合に、拡大判定部１５は、そのコンテンツを拡大して表示すると判定する。図３は、表示装置２０によって表示された画面の一例を示す図である。図３に示した画面５０上には、コンテンツＡ，Ｂ，Ｃが表示されている。本実施形態では、例えば、閲覧者４０の視線上にコンテンツＣが存在する場合には、拡大判定部１５は、図３に点線で示すように、コンテンツＣを拡大して表示すると判定する。なお、本実施形態では、拡大判定部１５は、例えば、閲覧者４０の視線が画面から外れている場合には、コンテンツの拡大表示を中止すると判定してもよい。 The enlargement determination unit 15 determines whether to enlarge the content on the screen displayed by the display device 20 based on the determination result of the operation determination unit 12 and the browsing status specified by the browsing status specifying unit 13. The determination result is output to the screen data generation unit 11. In the present embodiment, the operation determining unit 12 determines that the viewer 40 is performing an operation for requesting enlarged display of content, and the content displayed by the display device 20 is specified by the browsing status specifying unit 13. When it exists on the line of sight of the person 40, the enlargement determination unit 15 determines that the content is enlarged and displayed. FIG. 3 is a diagram illustrating an example of a screen displayed by the display device 20. Contents A, B, and C are displayed on the screen 50 shown in FIG. In the present embodiment, for example, when the content C exists on the line of sight of the viewer 40, the enlargement determination unit 15 determines to display the content C in an enlarged manner as indicated by a dotted line in FIG. In the present embodiment, the enlargement determination unit 15 may determine that the enlarged display of the content is to be stopped, for example, when the viewer's 40 line of sight is off the screen.

図２を参照して、画面データ生成部１１は、拡大判定部１５がコンテンツを拡大して表示すると判定した場合、その判定結果に従って、コンテンツを拡大表示するための画面データ（コンテンツ拡大用画面データ）を生成する。そして、画面データ生成部１１は、生成したコンテンツ拡大用画面データを、表示装置２０へ出力する。これにより、例えば、図３に破線で示したように、表示装置２０によって表示される画面５０において、コンテンツＣが拡大して表示される。 Referring to FIG. 2, screen data generating unit 11, when it is determined that enlargement determination unit 15 enlarges and displays the content, screen data for displaying the content in an enlarged manner (content enlargement screen data) according to the determination result. ) Is generated. Then, the screen data generation unit 11 outputs the generated content enlargement screen data to the display device 20. Thereby, for example, as indicated by a broken line in FIG. 3, the content C is enlarged and displayed on the screen 50 displayed by the display device 20.

以上のように、本実施形態では、閲覧者４０がコンテンツの拡大表示を求める動作を行っていると判定され、かつ表示装置２０によって表示されたコンテンツが閲覧者４０の視線上に存在する場合に、そのコンテンツを拡大表示するための画面データが生成される。これにより、閲覧者４０が見ているコンテンツを確実に拡大表示することができる。したがって、例えば、閲覧者４０が見ていないコンテンツのみが拡大表示されることを防止することができる。また、例えば、閲覧者４０が見ていないコンテンツを中心として画面が拡大表示されることを防止することができる。これにより、コンテンツの拡大表示時に、閲覧者４０が見ているコンテンツの一部または全部が、画面から消えてしまうことを防止することができる。これらの結果、閲覧者４０の望まないコンテンツの拡大表示を抑制することができる。 As described above, in the present embodiment, when it is determined that the viewer 40 is performing an operation for requesting enlarged display of the content, and the content displayed by the display device 20 exists on the viewer's 40 line of sight. Then, screen data for enlarging and displaying the content is generated. As a result, it is possible to reliably enlarge and display the content viewed by the viewer 40. Therefore, for example, it is possible to prevent only content that the viewer 40 has not seen from being enlarged. Further, for example, it is possible to prevent the screen from being enlarged and displayed centering on content that the viewer 40 has not seen. Thereby, it is possible to prevent part or all of the content viewed by the viewer 40 from disappearing from the screen when the content is enlarged and displayed. As a result, it is possible to suppress the enlarged display of content that the viewer 40 does not want.

なお、図３においては、閲覧者４０の視線上に存在するコンテンツのみを拡大する場合について説明したが、コンテンツの拡大方法は上述の例に限定されない。例えば、閲覧者４０の視線上に存在するコンテンツの全体が画面内に収まるように、閲覧者４０の視線上に存在するコンテンツとともに、他のコンテンツも拡大表示してもよい。 In addition, in FIG. 3, although the case where only the content which exists on the eyes | visual_axis of the viewer 40 was expanded was demonstrated, the expansion method of a content is not limited to the above-mentioned example. For example, other content may be enlarged and displayed together with the content existing on the viewer's 40 line of sight so that the entire content existing on the viewer's 40 line of sight fits within the screen.

また、表示装置２０において複数の画面が表示されるように、画面データ生成部１１が、複数の画面それぞれの画面データを生成してもよい。この場合、例えば、拡大判定部１５は、閲覧者４０の視線上の画面に表示されたコンテンツを拡大表示し、閲覧者４０の視線から外れている画面に表示されたコンテンツの拡大表示を中止すると判定してもよい。そして、画面データ生成部１１は、拡大判定部１５の判定結果に基づいて、画面ごとに、画面データを生成してもよい。この場合、閲覧者４０が見ている画面のコンテンツを確実に拡大表示することができる。したがって、例えば、閲覧者４０が見ていない画面のコンテンツのみが拡大表示されることを防止することができる。これにより、閲覧者４０の望まないコンテンツの拡大表示を抑制することができる。 Further, the screen data generation unit 11 may generate screen data for each of the plurality of screens so that the display device 20 displays a plurality of screens. In this case, for example, the enlargement determination unit 15 enlarges the content displayed on the screen on the viewer's 40 line of sight, and cancels the enlarged display of the content displayed on the screen that is out of the viewer's 40 line of sight. You may judge. Then, the screen data generation unit 11 may generate screen data for each screen based on the determination result of the enlargement determination unit 15. In this case, the content of the screen that the viewer 40 is viewing can be surely enlarged and displayed. Therefore, for example, it is possible to prevent only the content of the screen that the viewer 40 has not seen from being enlarged. Thereby, the enlarged display of the content which the viewer 40 does not want can be suppressed.

また、画面データ生成部１１が、複数の表示装置２０の画面データを生成してもよい。この場合、例えば、拡大判定部１５は、閲覧者４０の視線上の表示装置２０に表示されたコンテンツを拡大表示し、閲覧者４０の視線から外れている表示装置２０に表示されたコンテンツの拡大表示を中止すると判定してもよい。そして、画面データ生成部１１は、拡大判定部１５の判定結果に基づいて、表示装置２０ごとに、画面データを生成してもよい。この場合、閲覧者４０が見ている表示装置２０の画面のコンテンツを確実に拡大表示することができる。したがって、例えば、閲覧者４０が見ていない表示装置２０の画面のコンテンツのみが拡大表示されることを防止することができる。これにより、閲覧者４０の望まないコンテンツの拡大表示を抑制することができる。 Further, the screen data generation unit 11 may generate screen data of the plurality of display devices 20. In this case, for example, the enlargement determination unit 15 enlarges the content displayed on the display device 20 on the line of sight of the viewer 40 and enlarges the content displayed on the display device 20 that is out of the line of sight of the viewer 40. It may be determined that display is to be stopped. Then, the screen data generation unit 11 may generate screen data for each display device 20 based on the determination result of the enlargement determination unit 15. In this case, the content of the screen of the display device 20 viewed by the viewer 40 can be surely enlarged and displayed. Therefore, for example, it is possible to prevent only the content of the screen of the display device 20 that is not viewed by the viewer 40 from being enlarged. Thereby, the enlarged display of the content which the viewer 40 does not want can be suppressed.

［装置動作］
次に、本実施形態に係る表示処理装置の動作について、図４を用いて説明する。図４は、表示処理装置１０の動作を示すフロー図である。以下の説明においては、図１および図２を適宜参酌する。また、本実施形態では、表示処理装置１０を動作させることによって、表示処理方法が実施される。よって、本実施形態における表示処理方法の説明は、以下の表示処理装置１０の動作説明に代える。 [Device operation]
Next, the operation of the display processing apparatus according to the present embodiment will be described with reference to FIG. FIG. 4 is a flowchart showing the operation of the display processing apparatus 10. In the following description, FIGS. 1 and 2 will be referred to as appropriate. In the present embodiment, the display processing method is performed by operating the display processing apparatus 10. Therefore, the description of the display processing method in the present embodiment is replaced with the following description of the operation of the display processing apparatus 10.

図４を参照して、表示処理装置１０において、まず、画面データ生成部１１は、コンテンツを含む画面を表示するための画面データを生成する（ステップＳ１）。次に、画像データ取得部１４は、撮影装置３０から閲覧者４０の画像データを取得する（ステップＳ２）。 Referring to FIG. 4, in display processing apparatus 10, first, screen data generating unit 11 generates screen data for displaying a screen including content (step S1). Next, the image data acquisition unit 14 acquires the image data of the viewer 40 from the imaging device 30 (step S2).

次に、動作判定部１２は、ステップＳ２において取得した閲覧者４０の画像データに基づいて、閲覧者４０が、コンテンツの拡大表示を求める動作を行っているか否かを判定する（ステップＳ３）。閲覧者４０がコンテンツの拡大表示を求める動作を行っていないと判定された場合、表示処理装置１０は、ステップＳ２の処理に戻る。 Next, the operation | movement determination part 12 determines whether the viewer 40 is performing the operation | movement which requests | requires the enlarged display of a content based on the image data of the viewer 40 acquired in step S2 (step S3). If it is determined that the viewer 40 is not performing an operation for requesting an enlarged display of the content, the display processing device 10 returns to the process of step S2.

ステップＳ３において、閲覧者４０がコンテンツの拡大表示を求める動作を行っていると判定された場合、閲覧状況特定部１３は、ステップＳ２において取得した閲覧者４０の画像データに基づいて、閲覧者４０の閲覧状況を特定する（ステップＳ４）。本実施形態では、閲覧状況特定部１３は、閲覧者４０の視線を特定する。 When it is determined in step S3 that the viewer 40 is performing an operation for requesting an enlarged display of the content, the browsing status specifying unit 13 is based on the image data of the viewer 40 acquired in step S2. Is identified (step S4). In the present embodiment, the browsing status specifying unit 13 specifies the line of sight of the viewer 40.

次に、拡大判定部１５は、ステップＳ４において特定された閲覧者４０の閲覧状況が、所定の条件を満たしているか否かを判定する（ステップＳ５）。本実施形態では、拡大判定部１５は、表示装置２０において表示された画面において、閲覧者４０の視線上にコンテンツが存在するか否かを判別する。なお、閲覧者４０の視線上に存在するか否かが判定されるコンテンツとは、ステップＳ１において生成された画面データに基づいて表示されるコンテンツである。 Next, the enlargement determination unit 15 determines whether or not the browsing status of the viewer 40 specified in step S4 satisfies a predetermined condition (step S5). In the present embodiment, the enlargement determination unit 15 determines whether content exists on the line of sight of the viewer 40 on the screen displayed on the display device 20. The content that is determined whether or not it exists on the line of sight of the viewer 40 is content that is displayed based on the screen data generated in step S1.

本実施形態では、ステップＳ５において、閲覧者４０の視線上にコンテンツが存在していない場合（コンテンツが視線から外れている場合）、拡大判定部１５は、閲覧状況が所定の条件を満たしていないと判定する。一方、閲覧者４０の視線上にコンテンツが存在している場合、拡大判定部１５は、閲覧状況が所定の条件を満たしていると判定する。 In the present embodiment, in step S5, when the content does not exist on the line of sight of the viewer 40 (when the content is out of the line of sight), the enlargement determination unit 15 does not satisfy the predetermined condition of the browsing state. Is determined. On the other hand, when the content exists on the line of sight of the viewer 40, the enlargement determination unit 15 determines that the browsing state satisfies a predetermined condition.

ステップＳ５において、閲覧状況が所定の条件を満たしていないと判定された場合、表示処理装置１０は、ステップＳ２の処理に戻る。一方、閲覧状況が所定の条件を満たしていると判定された場合、画面データ生成部１１は、コンテンツ拡大用画面データを生成し、表示装置２０へ出力する（ステップＳ６）。これにより、表示装置２０によって表示された画面において、所定のコンテンツが拡大される。 In step S5, when it is determined that the browsing status does not satisfy the predetermined condition, the display processing device 10 returns to the process of step S2. On the other hand, when it is determined that the browsing state satisfies the predetermined condition, the screen data generation unit 11 generates screen data for content enlargement and outputs it to the display device 20 (step S6). Thereby, the predetermined content is enlarged on the screen displayed by the display device 20.

［変形例］
図５は、表示処理装置の変形例を示すブロック図である。なお、以下においては、図２を用いて説明した表示処理装置１０と異なる機能を有する構成について主に説明し、図２の表示処理装置１０と同様の機能を有する構成については説明を省略する。また、以下においては、複数の閲覧者４０によって表示装置２０に表示された画面が閲覧されている場合について説明する。 [Modification]
FIG. 5 is a block diagram illustrating a modification of the display processing device. In the following, a configuration having a function different from that of the display processing apparatus 10 described with reference to FIG. 2 will be mainly described, and description of a configuration having the same function as the display processing apparatus 10 of FIG. 2 will be omitted. Moreover, below, the case where the screen displayed on the display apparatus 20 by the some browsing person 40 is browsed is demonstrated.

図５を参照して、本実施形態に係る表示処理装置１０ａは、上述の表示処理装置１０と同様に、画面データ生成部１１、動作判定部１２、閲覧状況特定部１３、画像データ取得部１４および拡大判定部１５を備えている。 With reference to FIG. 5, the display processing apparatus 10 a according to the present embodiment is similar to the display processing apparatus 10 described above, the screen data generation unit 11, the operation determination unit 12, the browsing status identification unit 13, and the image data acquisition unit 14. And an enlargement determination unit 15.

本実施形態では、画像データ取得部１４は、撮影装置３０から、複数の閲覧者４０の画像データを取得し、動作判定部１２へ出力する（図４のステップＳ２の処理に対応。）。動作判定部１２は、複数の閲覧者４０の画像データに基づいて、各閲覧者４０について、コンテンツの拡大表示を求める動作を行っているか否かを判定する（図４のステップＳ３の処理に対応。）。動作判定部１２は、閲覧者４０ごとの判定結果を、閲覧状況特定部１３へ出力する。 In the present embodiment, the image data acquisition unit 14 acquires image data of a plurality of viewers 40 from the imaging device 30 and outputs the acquired image data to the operation determination unit 12 (corresponding to the process of step S2 in FIG. 4). Based on the image data of the plurality of viewers 40, the operation determination unit 12 determines whether or not each viewer 40 is performing an operation for requesting enlarged display of content (corresponding to the process of step S3 in FIG. 4). .) The operation determination unit 12 outputs the determination result for each viewer 40 to the browsing status identification unit 13.

閲覧状況特定部１３は、動作判定部１２の判定結果に基づいて、複数の閲覧者４０のうちの何人の閲覧者４０がコンテンツの拡大表示を求める動作を行っているのかを特定する（図４のステップＳ４の処理に対応。）。閲覧状況特定部１３は、特定した結果を拡大判定部１５へ出力する。 Based on the determination result of the operation determination unit 12, the browsing status specifying unit 13 specifies how many viewers 40 among the plurality of viewers 40 are performing an operation for requesting enlarged display of content (FIG. 4). Corresponding to the process of step S4). The browsing status identification unit 13 outputs the identified result to the enlargement determination unit 15.

拡大判定部１５は、閲覧状況特定部１３によって特定された閲覧状況が、所定の条件を満たしているか否かを判定する（図４のステップＳ５の処理に対応。）。本実施形態では、拡大判定部１５は、例えば、複数の閲覧者４０の全人数に対する、コンテンツの拡大表示を求める動作を行っている閲覧者４０の人数の割合が、所定の閾値（例えば、５割）以上の場合に、上記閲覧状況が所定の条件を満たしていると判定する。 The enlargement determination unit 15 determines whether or not the browsing status specified by the browsing status specifying unit 13 satisfies a predetermined condition (corresponding to the process of step S5 in FIG. 4). In the present embodiment, the enlargement determination unit 15 is configured such that, for example, the ratio of the number of viewers 40 who are performing an operation for requesting enlarged display of content to the total number of viewers 40 is a predetermined threshold (for example, 5 In the case of the above, it is determined that the browsing status satisfies a predetermined condition.

複数の閲覧者４０の閲覧状況が所定の条件を満たしていると拡大判定部１５によって判定された場合、画面データ生成部１１は、画面上のコンテンツを拡大表示するための画面データ（コンテンツ拡大用画面データ）を生成する（図４のステップＳ６の処理に対応。）。 When the enlargement determination unit 15 determines that the browsing status of the plurality of viewers 40 satisfies a predetermined condition, the screen data generation unit 11 displays screen data (for content enlargement) for displaying the content on the screen in an enlarged manner. Screen data) is generated (corresponding to step S6 in FIG. 4).

以上のように、本実施形態では、複数の閲覧者４０の閲覧状況が所定の条件を満たしている場合に、コンテンツを拡大表示するための画面データが生成される。これにより、例えば、複数の閲覧者４０のうち、大多数の閲覧者４０がコンテンツの拡大表示を求めていない場合に、コンテンツが拡大表示されることを防止することができる。その結果、閲覧者４０の望まないコンテンツの拡大表示を抑制することができる。 As described above, in the present embodiment, screen data for enlarging and displaying content is generated when the browsing status of a plurality of viewers 40 satisfies a predetermined condition. Thereby, for example, when the majority of the viewers 40 among the plurality of viewers 40 do not request the enlarged display of the content, the content can be prevented from being displayed in an enlarged manner. As a result, it is possible to suppress the enlarged display of content that the viewer 40 does not want.

なお、閲覧状況特定部１３は、表示処理装置１０と同様に、複数の閲覧者４０の視線をそれぞれ検出してもよい。そして、画面データ生成部１１は、例えば、より多くの閲覧者４０の視線上に存在するコンテンツ（より多くの閲覧者４０が見ているコンテンツ）を拡大表示するように、コンテンツ拡大用画面データを生成してもよい。また、画面データ生成部１１は、例えば、複数のコンテンツを拡大表示するためのコンテンツ拡大用画面データを生成する場合、コンテンツを通る視線の数（コンテンツを見ている閲覧者４０の数）に応じてコンテンツの拡大量を調整してもよい。 In addition, the browsing situation specific | specification part 13 may detect the eyes | visual_axis of the several browsing person 40 similarly to the display processing apparatus 10, respectively. Then, for example, the screen data generation unit 11 displays the content enlargement screen data so as to enlarge and display content existing on the line of sight of more viewers 40 (content viewed by more viewers 40). It may be generated. For example, when generating screen data for enlarging content for enlarging and displaying a plurality of contents, the screen data generation unit 11 depends on the number of lines of sight that pass through the contents (the number of viewers 40 who are viewing the contents). The amount of content expansion may be adjusted.

また、表示装置２０において複数の画面が表示されるように、画面データ生成部１１が、複数の画面それぞれの画面データを生成してもよい。この場合、閲覧状況特定部１３は、表示処理装置１０と同様に、複数の閲覧者４０の視線をそれぞれ検出してもよい。そして、画面データ生成部１１は、例えば、より多くの閲覧者４０の視線上に存在する画面に表示されたコンテンツを拡大表示するように、コンテンツ拡大用画面データを生成してもよい。 Further, the screen data generation unit 11 may generate screen data for each of the plurality of screens so that the display device 20 displays a plurality of screens. In this case, similarly to the display processing device 10, the browsing status specifying unit 13 may detect the line of sight of a plurality of viewers 40. Then, the screen data generation unit 11 may generate content enlargement screen data so as to enlarge and display the content displayed on the screen existing on the line of sight of more viewers 40, for example.

また、画面データ生成部１１が、複数の表示装置２０の画面データを生成してもよい。この場合も、閲覧状況特定部１３は、表示処理装置１０と同様に、複数の閲覧者４０の視線をそれぞれ検出してもよい。そして、画面データ生成部１１は、例えば、より多くの閲覧者４０の視線上に存在する表示装置２０に表示されたコンテンツを拡大表示するように、コンテンツ拡大用画面データを生成してもよい。 Further, the screen data generation unit 11 may generate screen data of the plurality of display devices 20. Also in this case, the browsing situation specifying unit 13 may detect the line of sight of a plurality of viewers 40 as with the display processing device 10. Then, for example, the screen data generation unit 11 may generate content enlargement screen data so that the content displayed on the display device 20 existing on the line of sight of more viewers 40 is enlarged.

［プログラム］
本発明の実施形態におけるプログラムは、コンピュータに、図４に示すステップＳ１からステップＳ６を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施形態における表示処理装置および表示処理方法を実現することができる。この場合、コンピュータのＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）は、表示処理装置１０の画面データ生成部１１、動作判定部１２、閲覧状況特定部１３、画像データ取得部１４および拡大判定部１５として機能し、処理を行う。 [program]
The program in the embodiment of the present invention may be a program that causes a computer to execute steps S1 to S6 shown in FIG. By installing and executing this program on a computer, the display processing apparatus and the display processing method in the present embodiment can be realized. In this case, the CPU (Central Processing Unit) of the computer functions as the screen data generation unit 11, the operation determination unit 12, the browsing status identification unit 13, the image data acquisition unit 14, and the enlargement determination unit 15 of the display processing device 10. I do.

また、本実施の形態におけるプログラムは、複数のコンピュータによって構築されたコンピュータシステムによって実行されても良い。この場合は、例えば、各コンピュータが、それぞれ、画面データ生成部１１、動作判定部１２、閲覧状況特定部１３、画像データ取得部１４および拡大判定部１５のいずれかとして機能しても良い。 The program in the present embodiment may be executed by a computer system constructed by a plurality of computers. In this case, for example, each computer may function as any one of the screen data generation unit 11, the operation determination unit 12, the browsing status identification unit 13, the image data acquisition unit 14, and the enlargement determination unit 15, respectively.

ここで、本実施形態におけるプログラムを実行することによって、表示処理装置１０を実現するコンピュータについて図６を用いて説明する。図６は、本発明の実施形態における表示処理装置１０を実現するコンピュータの一例を示すブロック図である。なお、表示処理装置１０を実現するコンピュータは下記の構成に限定されず、情報端末装置に組み込まれたコンピュータであってもよい。 Here, a computer that realizes the display processing apparatus 10 by executing the program according to the present embodiment will be described with reference to FIG. FIG. 6 is a block diagram illustrating an example of a computer that implements the display processing apparatus 10 according to the embodiment of the present invention. In addition, the computer which implement | achieves the display processing apparatus 10 is not limited to the following structure, The computer integrated in the information terminal device may be sufficient.

図６に示すように、コンピュータ１１０は、ＣＰＵ１１１と、メインメモリ１１２と、記憶装置１１３と、入力インターフェイス１１４と、表示コントローラ１１５と、データリーダ／ライタ１１６と、通信インターフェイス１１７とを備える。これらの各部は、バス１２１を介して、互いにデータ通信可能に接続される。 As shown in FIG. 6, the computer 110 includes a CPU 111, a main memory 112, a storage device 113, an input interface 114, a display controller 115, a data reader / writer 116, and a communication interface 117. These units are connected to each other via a bus 121 so that data communication is possible.

ＣＰＵ１１１は、記憶装置１１３に格納された、本実施形態におけるプログラム（コード）をメインメモリ１１２に展開し、これらを所定順序で実行することにより、各種の演算を実施する。メインメモリ１１２は、典型的には、ＤＲＡＭ（ＤｙｎａｍｉｃＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）等の揮発性の記憶装置である。また、本実施形態におけるプログラムは、コンピュータ読み取り可能な記録媒体１２０に格納された状態で提供される。なお、本実施形態におけるプログラムは、通信インターフェイス１１７を介して接続されたインターネット上で流通するものであっても良い。 The CPU 111 performs various calculations by expanding the program (code) in the present embodiment stored in the storage device 113 in the main memory 112 and executing them in a predetermined order. The main memory 112 is typically a volatile storage device such as a DRAM (Dynamic Random Access Memory). In addition, the program in the present embodiment is provided in a state of being stored in the computer-readable recording medium 120. Note that the program in the present embodiment may be distributed on the Internet connected via the communication interface 117.

また、記憶装置１１３の具体例としては、ハードディスクドライブの他、フラッシュメモリ等の半導体記憶装置が挙げられる。入力インターフェイス１１４は、ＣＰＵ１１１と、キーボードおよびマウスといった入力機器１１８との間のデータ伝送を仲介する。表示コントローラ１１５は、ディスプレイ装置１１９と接続され、ディスプレイ装置１１９での表示を制御する。 Specific examples of the storage device 113 include a hard disk drive and a semiconductor storage device such as a flash memory. The input interface 114 mediates data transmission between the CPU 111 and an input device 118 such as a keyboard and a mouse. The display controller 115 is connected to the display device 119 and controls display on the display device 119.

データリーダ／ライタ１１６は、ＣＰＵ１１１と記録媒体１２０との間のデータ伝送を仲介し、記録媒体１２０からのプログラムの読み出し、およびコンピュータ１１０における処理結果の記録媒体１２０への書き込みを実行する。通信インターフェイス１１７は、ＣＰＵ１１１と、他のコンピュータとの間のデータ伝送を仲介する。 The data reader / writer 116 mediates data transmission between the CPU 111 and the recording medium 120, and reads a program from the recording medium 120 and writes a processing result in the computer 110 to the recording medium 120. The communication interface 117 mediates data transmission between the CPU 111 and another computer.

また、記録媒体１２０の具体例としては、ＣＦ（ＣｏｍｐａｃｔＦｌａｓｈ（登録商標））およびＳＤ（ＳｅｃｕｒｅＤｉｇｉｔａｌ）等の汎用的な半導体記憶デバイス、フレキシブルディスク（ＦｌｅｘｉｂｌｅＤｉｓｋ）等の磁気記憶媒体、又はＣＤ−ＲＯＭ（ＣｏｍｐａｃｔＤｉｓｋＲｅａｄＯｎｌｙＭｅｍｏｒｙ）などの光学記憶媒体が挙げられる。 Specific examples of the recording medium 120 include a general-purpose semiconductor storage device such as CF (Compact Flash (registered trademark)) and SD (Secure Digital), a magnetic storage medium such as a flexible disk, or a CD- An optical storage medium such as ROM (Compact Disk Read Only Memory) may be used.

なお、本実施の形態における表示処理装置１０は、プログラムがインストールされたコンピュータではなく、各部に対応したハードウェアを用いることによっても実現可能である。更に、表示処理装置１０は、一部がプログラムで実現され、残りの部分がハードウェアで実現されていてもよい。 Note that the display processing apparatus 10 according to the present embodiment can be realized not by using a computer in which a program is installed but also by using hardware corresponding to each unit. Further, a part of the display processing device 10 may be realized by a program, and the remaining part may be realized by hardware.

上述した実施の形態の一部又は全部は、以下に記載する（付記１）〜（付記１２）によって表現することができるが、以下の記載に限定されるものではない。 Part or all of the above-described embodiments can be expressed by (Appendix 1) to (Appendix 12) described below, but is not limited to the following description.

（付記１）
表示装置によって表示される画面のコンテンツを拡大表示するための表示処理装置であって、
コンテンツを含む画面の画面データを生成する画面データ生成部と、
前記画面の閲覧者を撮影する撮影装置から取得した、前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する動作判定部と、
前記撮影装置から取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する閲覧状況特定部と、
を備え、
前記画面データ生成部は、前記動作判定部によって前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記閲覧状況特定部によって特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、表示処理装置。 (Appendix 1)
A display processing device for enlarging and displaying a screen content displayed by a display device,
A screen data generation unit that generates screen data of a screen including content;
An operation determination unit that determines whether or not the viewer is performing an operation for requesting an enlarged display of content based on the image data of the viewer acquired from a photographing device that photographs the viewer of the screen;
Based on the image data of the browser acquired from the imaging device, a browsing status specifying unit that specifies the browsing status of the browser;
With
The screen data generation unit determines that the viewer is performing an operation for requesting enlarged display of content by the operation determination unit, and the browsing status specified by the browsing status specifying unit satisfies a predetermined condition. A display processing device for generating screen data for enlarging and displaying the content when the content is displayed;

（付記２）
前記閲覧状況特定部は、前記画像データに基づいて前記閲覧者の視線を特定し、
前記画面データ生成部は、前記動作判定部によって前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記表示装置によって表示されたコンテンツが、前記閲覧状況特定部によって特定された前記閲覧者の視線上に存在する場合に、そのコンテンツを拡大表示するための画面データを生成する、付記１に記載の表示処理装置。 (Appendix 2)
The browsing status specifying unit specifies the viewer's line of sight based on the image data,
The screen data generation unit is determined by the operation determination unit that the viewer is performing an operation for requesting an enlarged display of content, and the content displayed by the display device is specified by the browsing status specifying unit. The display processing apparatus according to appendix 1, wherein screen data for enlarging and displaying the content when the user exists on the line of sight of the viewer is generated.

（付記３）
前記動作判定部は、前記撮影装置から取得した複数の閲覧者の画像データに基づいて、各閲覧者について、コンテンツの拡大表示を求める動作を行っているか否かを判定し、
前記閲覧状況特定部は、前記動作判定部の判定結果に基づいて、前記複数の閲覧者のうちの何人の閲覧者がコンテンツの拡大表示を求める動作を行っているのかを特定し、
前記画面データ生成部は、前記閲覧状況特定部によって特定された、前記拡大表示を求める動作を行っている閲覧者の人数が、所定の条件を満たしている場合に、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記１または２に記載の表示処理装置。 (Appendix 3)
The operation determination unit determines whether or not an operation for requesting enlarged display of content is performed for each viewer based on the image data of the plurality of viewers acquired from the imaging device,
The browsing status specifying unit specifies, based on the determination result of the operation determination unit, how many viewers of the plurality of viewers are performing an operation for requesting enlarged display of content,
The screen data generation unit is displayed by the display device when the number of viewers who are performing the operation for obtaining the enlarged display specified by the browsing status specifying unit satisfies a predetermined condition. The display processing device according to attachment 1 or 2, which generates screen data for enlarging and displaying content.

（付記４）
前記閲覧状況特定部は、前記複数の閲覧者の画像データに基づいて閲覧者ごとに視線を特定し、
前記画面データ生成部は、前記閲覧状況特定部によって特定された前記複数の閲覧者の視線に基づいて、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記３に記載の表示処理装置。 (Appendix 4)
The browsing status specifying unit specifies a line of sight for each viewer based on the image data of the plurality of viewers,
The screen data generation unit generates screen data for enlarging and displaying the content displayed by the display device based on the line of sight of the plurality of viewers specified by the browsing status specifying unit. The display processing apparatus as described.

（付記５）
表示装置によって表示される画面のコンテンツを拡大表示するための表示処理方法であって、
（ａ）コンテンツを含む画面を表示するための画面データを生成する、ステップと、
（ｂ）前記画面の閲覧者を撮影する撮影装置から前記閲覧者の画像データを取得する、ステップと、
（ｃ）前記（ｂ）のステップで取得した前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する、ステップと、
（ｄ）前記（ｂ）のステップで取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する、ステップと、
（ｅ）前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記（ｄ）のステップで特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、ステップと、
を有する、表示処理方法。 (Appendix 5)
A display processing method for enlarging and displaying a screen content displayed by a display device,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
A display processing method.

（付記６）
前記（ｄ）のステップでは、前記（ｂ）のステップで取得した画像データに基づいて前記閲覧者の視線を特定し、
前記（ｅ）のステップでは、前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記表示装置によって表示されたコンテンツが、前記（ｄ）のステップで特定された前記閲覧者の視線上に存在する場合に、そのコンテンツを拡大表示するための画面データを生成する、付記５に記載の表示処理方法。 (Appendix 6)
In the step (d), the line of sight of the viewer is specified based on the image data acquired in the step (b).
In the step (e), it is determined in the step (c) that the viewer is performing an operation for requesting an enlarged display of the content, and the content displayed by the display device is the same as in the step (d). The display processing method according to appendix 5, wherein screen data for enlarging and displaying the content is generated when it exists on the line of sight of the viewer specified in the step.

（付記７）
前記（ｂ）のステップでは、前記撮影装置から、複数の閲覧者の画像データを取得し、
前記（ｃ）のステップでは、前記（ｂ）のステップで取得した前記複数の閲覧者の画像データに基づいて、各閲覧者について、コンテンツの拡大表示を求める動作を行っているか否かを判定し、
前記（ｄ）のステップでは、前記（ｃ）のステップにおける判定結果に基づいて、前記複数の閲覧者のうちの何人の閲覧者がコンテンツの拡大表示を求める動作を行っているのかを特定し、
前記（ｅ）のステップでは、前記（ｄ）のステップで特定された、前記拡大表示を求める動作を行っている閲覧者の人数が、所定の条件を満たしている場合に、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記５または６に記載の表示処理方法。 (Appendix 7)
In the step (b), image data of a plurality of viewers are acquired from the photographing device,
In the step (c), based on the image data of the plurality of viewers acquired in the step (b), it is determined whether or not an operation for obtaining an enlarged display of content is performed for each viewer. ,
In the step (d), based on the determination result in the step (c), the number of viewers of the plurality of viewers is performing an operation for requesting an enlarged display of content,
In the step (e), when the number of viewers performing the operation for obtaining the enlarged display specified in the step (d) satisfies a predetermined condition, the display is performed by the display device. The display processing method according to appendix 5 or 6, wherein screen data for enlarging the displayed content is generated.

（付記８）
（ｆ）前記（ｂ）のステップで取得した前記複数の閲覧者の画像データに基づいて、閲覧者ごとに視線を特定する、ステップ、をさらに有し、
前記（ｅ）のステップでは、前記（ｆ）のステップで特定された前記複数の閲覧者の視線に基づいて、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記７に記載の表示処理方法。 (Appendix 8)
(F) further comprising a step of identifying a line of sight for each viewer based on the image data of the plurality of viewers acquired in the step of (b),
In the step (e), screen data for enlarging the content displayed by the display device is generated based on the line of sight of the plurality of viewers specified in the step (f). 8. The display processing method according to 7.

（付記９）
コンピュータによって、表示装置によって表示される画面のコンテンツを拡大表示するためのプログラムであって、
前記コンピュータに、
（ａ）コンテンツを含む画面を表示するための画面データを生成する、ステップと、
（ｂ）前記画面の閲覧者を撮影する撮影装置から前記閲覧者の画像データを取得する、ステップと、
（ｃ）前記（ｂ）のステップで取得した前記閲覧者の画像データに基づいて、前記閲覧者がコンテンツの拡大表示を求める動作を行っているか否かを判定する、ステップと、
（ｄ）前記（ｂ）のステップで取得した前記閲覧者の前記画像データに基づいて、前記閲覧者の閲覧状況を特定する、ステップと、
（ｅ）前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記（ｄ）のステップで特定された閲覧状況が所定の条件を満たしている場合に、前記コンテンツを拡大表示するための画面データを生成する、ステップと、
を実行させる、プログラム。 (Appendix 9)
A program for enlarging and displaying content of a screen displayed by a display device by a computer,
In the computer,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
A program that executes

（付記１０）
前記（ｄ）のステップでは、前記（ｂ）のステップで取得した画像データに基づいて前記閲覧者の視線を特定し、
前記（ｅ）のステップでは、前記（ｃ）のステップで前記閲覧者がコンテンツの拡大表示を求める動作を行っていると判定され、かつ前記表示装置によって表示されたコンテンツが、前記（ｄ）のステップで特定された前記閲覧者の視線上に存在する場合に、そのコンテンツを拡大表示するための画面データを生成する、付記９に記載のプログラム。 (Appendix 10)
In the step (d), the line of sight of the viewer is specified based on the image data acquired in the step (b).
In the step (e), it is determined in the step (c) that the viewer is performing an operation for requesting an enlarged display of the content, and the content displayed by the display device is the same as in the step (d). The program according to appendix 9, which generates screen data for enlarging and displaying the content when it exists on the viewer's line of sight identified in the step.

（付記１１）
前記（ｂ）のステップでは、前記撮影装置から、複数の閲覧者の画像データを取得し、
前記（ｃ）のステップでは、前記（ｂ）のステップで取得した前記複数の閲覧者の画像データに基づいて、各閲覧者について、コンテンツの拡大表示を求める動作を行っているか否かを判定し、
前記（ｄ）のステップでは、前記（ｃ）のステップにおける判定結果に基づいて、前記複数の閲覧者のうちの何人の閲覧者がコンテンツの拡大表示を求める動作を行っているのかを特定し、
前記（ｅ）のステップでは、前記（ｄ）のステップで特定された、前記拡大表示を求める動作を行っている閲覧者の人数が、所定の条件を満たしている場合に、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記９または１０に記載のプログラム。 (Appendix 11)
In the step (b), image data of a plurality of viewers are acquired from the photographing device,
In the step (c), based on the image data of the plurality of viewers acquired in the step (b), it is determined whether or not an operation for obtaining an enlarged display of content is performed for each viewer. ,
In the step (d), based on the determination result in the step (c), the number of viewers of the plurality of viewers is performing an operation for requesting an enlarged display of content,
In the step (e), when the number of viewers performing the operation for obtaining the enlarged display specified in the step (d) satisfies a predetermined condition, the display is performed by the display device. The program according to appendix 9 or 10, which generates screen data for enlarging the displayed content.

（付記１２）
（ｆ）前記（ｂ）のステップで取得した前記複数の閲覧者の画像データに基づいて、閲覧者ごとに視線を特定する、ステップ、をさらに前記コンピュータに実行させ、
前記（ｅ）のステップでは、前記（ｆ）のステップで特定された前記複数の閲覧者の視線に基づいて、前記表示装置によって表示されたコンテンツを拡大表示するための画面データを生成する、付記１１に記載のプログラム。 (Appendix 12)
(F) Based on the image data of the plurality of viewers acquired in the step of (b), specifying the line of sight for each viewer, further causing the computer to execute,
In the step (e), screen data for enlarging the content displayed by the display device is generated based on the line of sight of the plurality of viewers specified in the step (f). 11. The program according to 11.

本発明は、スマートフォン、パーソナルコンピュータおよびプロジェクタ等によって表示されている画面上の特定のコンテンツを拡大表示する技術として好適に利用できる。 The present invention can be suitably used as a technique for enlarging and displaying specific content on a screen displayed by a smartphone, a personal computer, a projector, or the like.

１０，１０ａ表示処理装置
１１画面データ生成部
１２動作判定部
１３閲覧状況特定部
１４画像データ取得部
１５拡大判定部
２０表示装置
３０撮影装置
４０閲覧者
５０画面
１１０コンピュータ
１１１ＣＰＵ
１１２メインメモリ
１１３記憶装置
１１４入力インターフェイス
１１５表示コントローラ
１１６データリーダ／ライタ
１１７通信インターフェイス
１１８入力機器
１１９ディスプレイ装置
１２０記録媒体
１２１バス DESCRIPTION OF SYMBOLS 10, 10a Display processing apparatus 11 Screen data production | generation part 12 Operation | movement determination part 13 Browsing condition specific | specification part 14 Image data acquisition part 15 Enlargement determination part 20 Display apparatus 30 Imaging device 40 Viewer 50 Screen 110 Computer 111 CPU
112 Main memory 113 Storage device 114 Input interface 115 Display controller 116 Data reader / writer 117 Communication interface 118 Input device 119 Display device 120 Recording medium 121 Bus

Claims

A display processing device for enlarging and displaying a screen content displayed by a display device,
A screen data generation unit that generates screen data of a screen including content;
An operation determination unit that determines whether or not the viewer is performing an operation for requesting an enlarged display of content based on the image data of the viewer acquired from a photographing device that photographs the viewer of the screen;
Based on the image data of the browser acquired from the imaging device, a browsing status specifying unit that specifies the browsing status of the browser;
With
The screen data generation unit determines that the viewer is performing an operation for requesting enlarged display of content by the operation determination unit, and the browsing status specified by the browsing status specifying unit satisfies a predetermined condition. A display processing device for generating screen data for enlarging and displaying the content when the content is displayed;

The browsing status specifying unit specifies the viewer's line of sight based on the image data,
The screen data generation unit is determined by the operation determination unit that the viewer is performing an operation for requesting an enlarged display of content, and the content displayed by the display device is specified by the browsing status specifying unit. The display processing apparatus according to claim 1, wherein screen data for enlarging and displaying the content when the user exists on the line of sight of the viewer is generated.

The operation determination unit determines whether or not an operation for requesting enlarged display of content is performed for each viewer based on the image data of the plurality of viewers acquired from the imaging device,
The browsing status specifying unit specifies, based on the determination result of the operation determination unit, how many viewers of the plurality of viewers are performing an operation for requesting enlarged display of content,
The screen data generation unit is displayed by the display device when the number of viewers who are performing the operation for obtaining the enlarged display specified by the browsing status specifying unit satisfies a predetermined condition. The display processing apparatus according to claim 1, wherein screen data for enlarging and displaying content is generated.

The browsing status specifying unit specifies a line of sight for each viewer based on the image data of the plurality of viewers,
The screen data generation unit generates screen data for enlarging and displaying the content displayed by the display device based on the line of sight of the plurality of viewers specified by the browsing status specifying unit. The display processing device according to 1.

A display processing method for enlarging and displaying a screen content displayed by a display device,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
A display processing method.

A program for enlarging and displaying content of a screen displayed by a display device by a computer,
In the computer,
(A) generating screen data for displaying a screen including content;
(B) obtaining image data of the viewer from a photographing device that photographs the viewer of the screen;
(C) based on the image data of the viewer acquired in the step (b), determining whether or not the viewer is performing an operation for requesting enlarged display of content;
(D) identifying the browsing status of the viewer based on the image data of the viewer acquired in the step of (b);
(E) It is determined in the step (c) that the viewer is performing an operation for requesting enlarged display of the content, and the browsing situation specified in the step (d) satisfies a predetermined condition. And generating screen data for displaying the content in an enlarged manner, and
A program that executes