[go: up one dir, main page]

JP7188175B2 - 表示システムの制御方法、表示システム及び表示装置 - Google Patents

表示システムの制御方法、表示システム及び表示装置 Download PDF

Info

Publication number
JP7188175B2
JP7188175B2 JP2019031326A JP2019031326A JP7188175B2 JP 7188175 B2 JP7188175 B2 JP 7188175B2 JP 2019031326 A JP2019031326 A JP 2019031326A JP 2019031326 A JP2019031326 A JP 2019031326A JP 7188175 B2 JP7188175 B2 JP 7188175B2
Authority
JP
Japan
Prior art keywords
image
terminal
transmission data
display device
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019031326A
Other languages
English (en)
Other versions
JP2020134850A (ja
Inventor
達彦 昇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2019031326A priority Critical patent/JP7188175B2/ja
Priority to US16/798,815 priority patent/US11048463B2/en
Publication of JP2020134850A publication Critical patent/JP2020134850A/ja
Application granted granted Critical
Publication of JP7188175B2 publication Critical patent/JP7188175B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/042Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/20Details of the management of multiple sources of image data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、表示システム、表示システムの制御方法及び表示装置に関する。
特許文献1は、複数の端末から受信した複数の画像データをメモリーに書き込み、メモリーから読みだした画像を表示する多地点間通信装置において、受信能力を各端末に伝える技術を開示する。
特開平9-18846号公報
しかしながら、特許文献1に記載の技術において、端末の数が増加すると、通信トラフィックの増大によりネットワークの帯域が逼迫し、表示される画像の質が低下する可能性がある。
第1態様は、第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムの制御方法であって、前記第1端末から、第1画像を表す第1伝送データを前記表示装置に送信し、前記第2端末から、第2画像を表す第2伝送データを前記表示装置に送信し、前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する表示システムの制御方法である。
第2態様は、第1態様において、前記表示装置が、前記第1画像の画質を定義する第1情報を前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第3態様は、第2態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第4態様は、第1乃至第3態様の何れかにおいて、前記表示装置が、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成し、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第5態様は、第4態様において、前記表示装置が、ユーザーの操作に応じて前記表示領域と相対的に前記第1画像及び前記第2画像を移動させることである。
第6態様は、第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムであって、前記第1端末は、第1画像を表す第1伝送データを前記表示装置に送信し、前記第2端末は、第2画像を表す第2伝送データを前記表示装置に送信し、前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する表示システムである。
第7態様は、第6態様において、前記表示装置が、前記第1画像の画質を定義する第1情報を前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第8態様は、第7態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第9態様は、第6乃至第8態様の何れかにおいて、前記表示装置が、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成し、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第10態様は、第9態様において、前記表示装置が、ユーザーの操作に応じて前記表示領域と相対的に前記第1画像及び前記第2画像を移動させることである。
第11態様は、画面に画像を表示する表示機器と、第1端末から送信され、第1画像を表す第1伝送データと、第2端末から送信され、第2画像を表す第2伝送データとを受信する通信インターフェイスと、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する制御回路とを備える表示装置である。
第12態様は、第11態様において、前記制御回路が、前記第1画像の画質を定義する第1情報を前記通信インターフェイスを介して前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記通信インターフェイスを介して前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第13態様は、第12態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第14態様は、第11乃至第13態様において、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成する画像生成回路を更に備え、前記表示機器が、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第15態様は、第14態様において、ユーザーによる操作を受け付ける入力機器を更に備え、前記制御回路が、前記操作に応じて前記表示領域と相対的に前記第1画像及び第2画像を移動させることである。
実施形態に係る表示システムを説明する模式図。 実施形態に係る表示システムの構成を説明するブロック図。 仮想的な統合画像の一例を説明する図。 表示装置の動作を説明するフローチャート。 表示装置によるパラメーター決定方法を説明するフローチャート。 端末の動作を説明するフローチャート。 実施形態の変形例における仮想的な統合画像の一例を説明する図。
以下、図面を参照して本発明の実施形態を説明する。図面においては同一又は類似の要素には同一又は類似の符号をそれぞれ付して、重複する説明を省略する。以下に示す実施形態は、本発明の技術的思想を具体化するためのシステム、このシステムに用いられる装置や方法を例示するものである。本発明の技術的思想は、各装置の種類及び構成、ネットワークトポロジー、一連の処理等を下記のものに特定するものでない。本実施形態で説明される構成の全てが、本発明の必須構成要件であるとも限らない。
[表示システム]
図1に示すように、本実施形態に係る表示システムは、複数の端末10-1,10-2,……,10-nと、画面30に画像31を表示する表示装置20とを備える。複数の端末10-1~10-nは、例えば、第1端末10-1、第2端末10-2及び第n端末10-nから構成される。図1において、図示された複数の端末10-1~10-nの数は3であるが、複数の端末10-1~10-nの数は2であってもよく、4以上であってもよい。即ち、nは2以上の整数である。
複数の端末10-1~10-nは、画像データを表示装置20に送信する機能を有する任意の機器である。複数の端末10-1~10-nのそれぞれは、例えば、パーソナルコンピューター、スマートフォン、カメラ、ムービープレイヤー、テレビチューナー、ゲーム機等である。図1に示すように、本実施形態において、複数の端末10-1~10-nのそれぞれを、互いに同様の構成を有するノートパソコンとして例示的に説明する。
表示装置20は、複数の端末10-1~10-nのそれぞれから取得する画像データに応じて、画面30に画像31を表示する。表示装置20は、例えば、プロジェクター、液晶ディスプレイ装置、プラズマディスプレイ装置、有機エレクトロルミネッセンス(EL)ディスプレイ装置等である。図1に示すように、本実施形態において、表示装置20を、画面30に光を投射することにより画像31を表示するプロジェクターとして例示的に説明する。
図2に示すように、第k端末10-kは、例えば、画像生成部11と、表示器12と、符号化回路13と、処理回路14と、ネットワークインターフェイス(I/F)15とを備える。第k端末10-kは、複数の端末10-1~10-nのうちの何れか1つの端末である。即ち、kは1以上n以下の整数である。図2において、複数の端末10-1~10-nのうち第k端末10-kのみが示されるように、複数の端末10-1~10-nに関して代表として第k端末10-kについて説明する。第1端末10-1、第2端末10-2等の他の端末の説明は、序数kを1以上n以下の整数に置き換えた第k端末10-kの説明と等価である。
第k端末10-kの画像生成部11は、処理回路14による制御に応じて、圧縮前の第k画像を表す第k生画像データを生成する回路である。処理回路14は、第k画像を特定する情報を画像生成部11に出力する。画像生成部11は、例えば、レンダリングエンジン、グラフィックスメモリー等を備え得る。表示器12は、画像生成部11により生成された第k生画像データに応じて第k画像を表示する。表示器12として、液晶ディスプレイ、有機ELディスプレイ等の各種ディスプレイが採用され得る。
符号化回路13は、処理回路14による制御に応じて、画像生成部11により生成された第k生画像データを符号化することにより第k伝送データを生成する。例えば、符号化回路13は、例えばJPEG等の規格に基づく圧縮方式で、フレームレートとして指定されたタイミングで第k生画像データを周期的に圧縮することにより第k伝送データを生成する。符号化回路13は、第k伝送データから表される第k画像が、処理回路14により設定されるパラメーターを有するように、第k生画像データに対して情報源符号化を実行する。
処理回路14は、例えば、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを、符号化回路13による符号化のパラメーターとして設定する。符号化のパラメーターは、符号化後の第k伝送データから表される第k画像の画質を定義する指標である。フレームレートが大きくなる程画質は向上し、フレームレートが小さくなる程画質は悪化する。解像度が大きくなる程画質は向上し、解像度が小さくなる程画質は低下する。圧縮率が大きくなる程画質は低下し、圧縮率が小さくなる程画質は向上する。本実施形態において、符号化後の第k画像の画質は、例えば符号化前と第k画像との類似度として定義され、第k伝送データのサイズに相関する。なお、処理回路14により設定されるパラメーターは、表示装置20において決定される。
処理回路14は、例えば、中央演算処理装置(CPU)等からなる処理装置と、半導体メモリー等からなる記憶装置とを備える。処理回路14は、第k端末10-kの動作に必要な演算を処理する。処理回路14は、例えば記憶装置に記憶されたプログラムを実行することにより、実施形態に記載された各機能を実現する。処理回路14の記憶装置は、例えば、第k端末10-kの動作に必要な一連の処理のプログラムや各種データを記憶する。処理回路14及び符号化回路13は、一体のハードウェアから構成されてもよく、別個の複数のハードウェアから構成されてもよい。
ネットワークI/F15は、表示装置20との間に通信リンクを確立することにより、表示装置20と通信可能に接続される。ネットワークI/F15は、符号化回路13により符号化された第k伝送データを、通信リンクを介して表示装置20に送信する。ネットワークI/F15と表示装置20との間の通信リンクは、有線、無線を問わず、有線及び無線の組み合わせであってもよい。即ち、ネットワークI/F15は、表示装置20に直接的に接続されてもよく、他の通信装置を介して表示装置20に間接的に接続されてもよい。ネットワークI/F15は、例えば、無線信号を送受信するアンテナ、通信用ケーブルのプラグが差し込まれるレセプタクル、通信リンクにおいて伝送される信号を処理する通信回路等を含み得る。
表示装置20は、例えば、通信I/F21と、復号化回路22と、制御回路23と、画像生成回路24と、メモリー25と、表示機器26と、入力機器27とを備える。通信I/F21は、複数の端末10-1~10-nのそれぞれから送信された伝送データを受信する。通信I/F21は、制御回路23による制御に応じて、複数の端末10-1~10-nのそれぞれのネットワークI/F15との間に通信リンクを確立する。通信I/F21は、例えば、無線信号を送受信するアンテナ、通信用ケーブルのプラグが差し込まれるレセプタクル、通信リンクにおいて伝送される信号を処理する通信回路等を含み得る。
通信I/F21は、制御回路23において決定されたパラメーターを含む第k情報を第k端末10-kに送信する。第k情報は、符号化後の第k画像の画質を定義するパラメーターを含む。第k情報は、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含む。通信I/F21は、第k端末10-kから送信された第k伝送データを受信する。復号化回路22は、通信I/F21により受信された第k伝送データを復号化することにより、復号化された第k画像を表す第k画像データを生成する。
制御回路23は、例えば、CPU等からなる処理部231と、半導体メモリー等からなる記憶部232とを備える。処理部231は、表示装置20の動作に必要な演算を処理する、コンピューターの処理装置を構成する。処理部231は、例えば記憶部232に記憶されたプログラムを実行することにより、実施形態に記載された各機能を実現する。記憶部232は、例えば、表示装置20の動作に必要な一連の処理のプログラムや各種データを記憶する、コンピューターにより読み取り可能な記憶媒体である。記憶部232は、不揮発性の補助記憶装置に限るものでなく、CPUに内蔵されるレジスター等の揮発性の主記憶装置を含み得る。制御回路23は、一体のハードウェアから構成されてもよく、別個の複数のハードウェアから構成されてもよい。
画像生成回路24は、制御回路23による制御に応じて、復号化回路22において復号化された第k画像データと、制御回路23により生成された画像データとから、統合画像データを生成する。統合画像データは、第k画像をプレビュー画像として画面30に表示するための画像データである。画像生成回路24は、制御回路23を構成する回路として兼用されてもよい。制御回路23により生成される画像データは、例えば画面30におけるカーソル、メニュー、背景等を構成し、オンスクリーンディスプレイ(OSD)として実現され得る。
メモリー25は、例えばビデオランダムアクセスメモリー(VRAM)等のグラフィックスメモリーからなる。メモリー25は、画像生成回路24により生成された統合画像データを循環的に記憶する。メモリー25は、記憶する統合画像データのうち、表示機器26により表示される表示領域の画像データを、表示機器26に逐次出力する。メモリー25は、例えば、表示領域の画像データが更新される毎に、更新された表示領域の画像データを表示機器26に出力する。
表示機器26は、例えば、複数の画素を有する液晶パネル等の表示素子と、光源、レンズ、ミラー等の光学系とを備える。表示素子は、メモリー25から入力された表示領域の画像データに応じて、光源から発せられた光を変調する。表示機器26は、表示素子を経由した光を、光学系を用いて画面30に投射することにより、表示領域の画像データにより表される画像31を画面30に表示する。
例えば、通信I/F21は、第1画像を示す第1伝送データを第1端末10-1から受信し、第2画像を示す第2伝送データを第2端末10-2から受信する。このとき、表示機器26は、第1伝送データに基づいて第1画像を画面30に表示し、第2伝送データに基づいて第2画像を画面30に表示しない。
この場合、制御回路23は、第1伝送データが第2伝送データより大きな通信量を有するように、第1端末10-1及び第2端末10-2の少なくとも何れかを制御する。例えば、制御回路23は、第1画像の画質を定義する第1情報を通信I/F21を介して第1端末10-1に送信し、第2画像の画質を定義する第2情報を通信I/F21を介して第2端末10-2に送信することにより、第1端末10-1及び第2端末10-2を制御する。画像生成回路24は、第1伝送データ及び第2伝送データに基づいて、ずれた位置にマッピングされた第1画像及び第2画像を表す統合画像データを生成する。表示機器26は、統合画像データに基づいて、画面30に第1画像を表示する。
入力機器27は、ユーザーによる操作を受け付け、ユーザーによる操作に応じた信号を制御回路23に出力する。入力機器27として、例えば、プッシュボタン、タッチセンサー、キーボード等の他、マウス、タッチパネル、デジタイザー、測距センサー等を用いたポインティングデバイス等、種々の入力機器が採用可能である。ユーザーは、入力機器27を用いて、画面30に表示された画像31をスクロールしたり、画像31に含まれる複数の項目から任意の項目を選択したりする等、画像31に対する種々の操作を行うことができる。例えば、入力機器27は、ユーザーのスクロール操作に応じて、統合画像データにおいて互いにずれた位置にマッピングされた第1画像及び第2画像を、表示領域41と相対的に移動させる。
図3に示すように、画像生成回路24により生成される統合画像データは、実際にはメモリー25のアドレス空間において定義される、仮想的な統合画像40として説明可能である。統合画像40は、画面30に対応して実際に画面30に表示される表示領域41と、表示領域41にそれぞれ隣接する第1バッファー領域421及び第2バッファー領域422とを有する。第1バッファー領域421及び第2バッファー領域422は、画面30には表示されないダミー領域である。図3に示す例において、第1バッファー領域421、表示領域41及び第2バッファー領域422は、上方から順に垂直に配列される。なお、統合画像データは、複数のレイヤーから構成されてもよく、1つのレイヤーから構成されてもよい。
図3に示す例において、表示領域41は、2×4のマトリクス状に配列された8つのプレビュー領域V11~V14,V21~V24を有する。第1バッファー領域421は、水平方向に1列に配列された4つの候補領域I11~I14を有する。第2バッファー領域422は、水平方向に1列に配列された4つの候補領域I21~I24を有する。8つのプレビュー領域V11~V14,V21~V24及び8つの候補領域I11~I14,I21~I24は、4×4のマトリクス状に配列される。プレビュー領域V11~V14,V21~V24及び候補領域I11~I14,I21~I24のそれぞれには、複数の端末10-1~10-nに含まれる16の各端末から取得される16の画像が、16のプレビュー画像として互いにずれた位置に1つずつマッピングされる。即ち、図3に示す例は、表示装置20に接続された複数の端末10-1~10-nの数であるnが16以上であることを意味する。
例えば、第k画像が表示領域41にプレビュー画像としてマッピングされる場合、第k端末10-kは、表示装置20において決定された基準のパラメーターを用いて第k生画像データを符号化することにより第k伝送データを生成する。即ち、第k伝送データに基づいて表示領域41にマッピングされる第k画像は、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターについて、予め定められた基準値を有する。
制御回路23は、例えば、表示領域41にマッピングされる端末の数に応じて、基準のパラメーターを決定する。即ち、基準のパラメーターは、画面30に表示されるプレビュー画像の数が大きくなる程、画質が低下するように決定される。このとき、制御回路23は、画面30に表示されるプレビュー画像の数に上限値を設定し得る。これにより、制御回路23は、画面30に表示されるプレビュー画像が視認可能であることを確保できる。制御回路23は、統合画像40にマッピングされる端末の数に応じて、基準のパラメーターを決定してもよく、表示領域41にマッピングされるプレビュー画像の解像度に下限値を設定してもよい。なお、基準のパラメーターとして、解像度を画面に表示されるプレビュー画像の解像度に設定することにより、画像生成回路24における解像度変換による処理負荷を低減することができる。
第k画像が第1バッファー領域421又は第2バッファー領域422にマッピングされる場合、第k端末10-kは、基準のパラメーターを用いた場合と比べて、符号化後の第k伝送データのサイズが小さくなるパラメーターを用いて第k生画像データを符号化する。第k伝送データに基づいて第1バッファー領域421又は第2バッファー領域422にマッピングされる第k画像は、基準のパラメーターと比べて、画質が低下する、即ちデータサイズが小さくなるパラメーターを有する。この場合、第k画像は、例えば表示領域41にマッピングされるプレビュー画像より低いフレームレート及び解像度を有する。
第k画像が表示領域41にマッピングされ、且つ入力機器27により選択される場合、第k端末10-kは、基準のパラメーターを用いた場合と比べて、符号化後の第k伝送データのサイズが大きくなるパラメーターを用いて第k生画像データを符号化する。この場合、第k画像は、基準のパラメーターと比べて画質が向上する、即ちデータサイズが大きくなるパラメーターを有する。図3に示すように、第k画像は、プレビュー領域V12にマッピングされ、且つ入力機器27により選択される場合、例えば画面30において他のプレビュー画像より高いフレームレート及び解像度を有することにより強調表示される。加えて、選択された第k画像は、画面30におけるサイズの拡大、周縁部の変色、他の視覚効果等により強調表示されてもよい。
第k画像が統合画像40にマッピングされない場合、第k端末10-kは、第k生画像データを符号化せず、第k伝送データを表示装置20に送信しない。
制御回路23は、第k画像の表示状態、即ち、統合画像データにおける第k画像の位置に応じて、第k画像の画質を定義するパラメーターを含む第k情報を決定し、第k端末10-kに送信することにより、第k伝送データのサイズ、即ち第k伝送データの通信量を変更する。第k端末10-kは、第k情報に含まれるパラメーターを用いて、第k生画像データを符号化することにより第k伝送データを生成する。複数の端末10-1~10-nのそれぞれに対して決定されるパラメーターの種類は、互いに同一であり得る。これにより、表示装置20は、各伝送データの通信量、即ちデータサイズが上述の大小関係を有するように複数の端末10-1~10-nを制御することができる。
図3の状態において、画面30には、プレビュー領域V11~V14,V21~V24にそれぞれマッピングされた8つのプレビュー画像を含む画像31が表示される。入力機器27により、画像31が図3の状態から1行上にスクロールされると、候補領域I11~I14にマッピングされていた4つのプレビュー画像と、プレビュー領域V11~V14にマッピングされていた4つのプレビュー画像とは、新たに表示領域41にマッピングされ、画面30に表示される。図3の状態において、メモリー25は、候補領域I11~I14にマッピングされる4つのプレビュー画像の画像データを予め記憶している。このため、表示装置20は、スクロールアップ時のプレビュー画像の変更による遅延時間を低減することができ、画像31のスクロールをスムーズに行うことができる。
同様に、画像31が図3の状態から1行下にスクロールされると、画面30には、プレビュー領域V21~V24にマッピングされていた4つのプレビュー画像と、候補領域I21~I24にマッピングされていた4つのプレビュー画像とが表示される。この直前において、メモリー25は、候補領域I21~I24にマッピングされる4つのプレビュー画像の画像データを予め記憶している。このため、表示装置20は、画面30におけるプレビュー画像の変更による遅延時間を低減することができ、画像31のスクロールをスムーズに行うことができる。
[表示システムの制御方法]
図4~図6のフローチャートを参照して、本実施形態に係る表示システムの制御方法として、複数の端末10-1~10-n及び表示装置20の動作の一例を説明する。
{表示装置の動作}
先ず、図4のフローチャートを参照して、表示装置20の動作の一例を説明する。ステップS101において、通信I/F21は、制御回路23による制御に応じて、複数の端末10-1~10-nのそれぞれとの間の通信リンクを確立する。具体的には、通信I/F21は、複数の端末10-1~10-nの各ネットワークI/F15と所定のプロトコルで協働することにより、各通信リンクを確立する。
ステップS102において、制御回路23は、統合画像40の初期状態を決定する。例えば、制御回路23は、予めインストールされたプログラムを実行することにより、複数の端末10-1~10-nのうちプレビュー画像を統合画像40にマッピングされる端末や、統合画像40におけるプレビュー画像の配列等を決定する。制御回路23は、例えば、各端末10-1~10-nに対応する識別子を、プレビュー領域V11~V14,V21~V24及び候補領域I11~I14,I21~I24に所定の順序でマッピングすることにより初期状態を決定し得る。
ステップS103において、制御回路23は、複数の端末10-1~10-nのそれぞれに対応するプレビュー画像の画質を定義するパラメーターを決定する。制御回路23は、決定したパラメーターをそれぞれ含み、複数の端末10-1~10-nにそれぞれ対応する複数の第1~第n情報を生成する。
ステップS104において、制御回路23は、ステップS103で生成した情報を、対応する各端末10-1~10-nに宛てて送信する。即ち、制御回路23は、第k画像の画質を定義するパラメーターを含む第k情報を、通信I/F21を介して、第k端末10-kに送信する。ステップS104で送信された情報は、各端末10-1~10-nにおいて受信される。第k画像がプレビュー画像として統合画像40に含まれる場合、第k端末10-kは、第k情報に含まれるパラメーターを用いて符号化された第k伝送データを、表示装置20に送信する。
ステップS105において、通信I/F21は、ステップS104で送信した情報に応じて各端末から送信された伝送データを受信する。即ち、第k画像がプレビュー画像として統合画像40に含まれる場合、通信I/F21は、第k情報に含まれるパラメーターを用いて符号化され、第k端末10-kから送信された第k伝送データを受信する。
ステップS106において、復号化回路22は、ステップS105で通信I/F21が受信した伝送データを復号化することにより、画像データを生成する。即ち、復号化回路22は、第k端末10-kから送信された第k伝送データを復号化することにより、復号化された第k画像を表す第k画像データを取得する。
ステップS107において、画像生成回路24は、ステップS106で取得された複数の画像データから、統合画像データを生成する。統合画像データは、制御回路23により生成された画像データを含んでもよい。初回のステップS107では、画像生成回路24は、ステップS102において決定された初期状態の統合画像40を表す統合画像データを生成する。なお、次回以降のステップS107では、画像生成回路24は、入力機器27を用いた画像31に対する操作に応じて、統合画像データを変更し得る。
ステップS108において、表示機器26は、ステップS107で生成された統合画像データのうち、表示領域41に相当する画像データにより表される画像31を画面30に表示する。これにより、表示機器26は、初回のステップS108において、複数の端末10-1~10-nのそれぞれに表示される画像を選択的に画面30に表示するプレビュー表示を開始する。
ステップS109において、制御回路23は、画面30に表示された画像31を変更する操作が、入力機器27により行われたか否かを判定する。制御回路23は、操作が行われたと判定する場合、ステップS110に処理を進め、操作が行われていないと判定する場合、ステップS111に処理を進める。画像31を変更する操作は、入力機器27により行われる操作に限るものでなく、制御回路23により自動的に行われてもよい。
ステップS110において、制御回路23は、ステップS109の操作に応じて、生成する統合画像データを変更するように画像生成回路24を制御する。画像生成回路24は、制御回路23による制御に応じて、統合画像データを変更することにより、操作に応じてスクロールする画像31を生成したり、強調表示されたプレビュー画像を生成したりする。よって、メモリー25の内容が変更され、画面30に表示される画像31が変更される。制御回路23は、ステップS110で画像生成回路24を制御すると、ステップS103に処理を戻す。
ステップS111において、制御回路23は、表示機器26によるプレビュー表示を終了するか否かを判定する。例えば、制御回路23は、画面30に表示され、且つ入力機器27により選択されるプレビュー画像に対して、入力機器27により決定する操作が行われた場合、プレビュー表示を終了すると判定する。例えば、決定する操作が行われたプレビュー画像が第k画像の場合、制御回路23は、プレビュー画像より高画質の第k画像を画面30に拡大表示する。制御回路23は、プレビュー表示を終了すると判定する場合、処理を終了し、プレビュー表示を終了しないと判定する場合、ステップS105に処理を戻す。
{第1~第n情報の決定}
次に、図5のフローチャートを参照して、図4のフローチャートに示す一連の処理のうちステップS103の処理の詳細の一例として、複数の端末10-1~10-nにそれぞれ送信する第1~第n情報を決定する方法について説明する。
ステップS21において、制御回路23は、複数の端末10-1~10-nのうち何れかである第k端末10-kから取得される第k画像が、統合画像40に含まれる画像か否かを判定する。制御回路23は、第k画像が統合画像40に含まれる場合、ステップS22に処理を進め、第k画像が統合画像40に含まれない場合、ステップS23に処理を進める。
ステップS22において、制御回路23は、第k画像が表示領域41に含まれるか否かを判定する。制御回路23は、第k画像が表示領域41に含まれる場合、ステップS24に処理を進める。制御回路23は、第k画像が表示領域に含まれない場合、即ち、第k画像が第1バッファー領域421又は第2バッファー領域422に含まれる場合、ステップS25に処理を進める。
ステップS23において、制御回路23は、第k伝送データの通信量が0となるように、即ち、第k端末10-kが第k伝送データを表示装置20に送信しないように、第k情報を決定する。この場合、第k情報は、フレームレートや解像度が0となるパラメーターや、第k伝送データの送信を停止する命令等を含み得る。制御回路23は、ステップS23で第k情報を決定すると、ステップS28に処理を進める。
ステップS24において、制御回路23は、表示領域41に含まれる第k画像が入力機器27により選択されているか否かを判定する。制御回路23は、第k画像が選択されている場合、ステップS26に処理を進め、第k画像が選択されていない場合、ステップS27に処理を進める。
ステップS25において、制御回路23は、第1バッファー領域421又は第2バッファー領域422に含まれる第k画像を表す第k伝送データの通信量が、表示領域41に含まれるプレビュー画像の通信量より小さくなるように第k情報を決定する。即ち、第k情報は、表示領域41のプレビュー画像と同一内容の場合の第k画像が、表示領域41のプレビュー画像よりも低い画質を有するように決定される。制御回路23は、ステップS25で第k情報を決定すると、ステップS28に処理を進める。
ステップS26において、制御回路23は、表示領域41に含まれ、且つ入力機器27により選択された第k画像を表す第k伝送データの通信量が、表示領域41に含まれる他のプレビュー画像の通信量より大きくなるように第k情報を決定する。即ち、第k情報は、表示領域41の他のプレビュー画像と同一内容の場合の第k画像が、表示領域41の他のプレビュー画像よりも高い画質を有するように決定される。制御回路23は、ステップS26で第k情報を決定すると、ステップS28に処理を進める。
ステップS27において、制御回路23は、表示領域41に含まれ、且つ入力機器27により選択されていない第k画像を表す第k伝送データの通信量が基準値となるように第k情報を決定する。即ち、第k情報は、第k画像の画質が基準値を有するように決定される。制御回路23は、ステップS27で第k情報を決定すると、ステップS28に処理を進める。
ステップS28において、制御回路23は、全ての第1~第n情報の決定が終了したか否かを判定する。制御回路23は、決定が終了したと判定する場合、処理を終了し、決定が終了しないと判定する場合、ステップS21に処理を戻す。制御回路23は、例えば、初回のステップS21においてkを1に設定し、ステップS21毎にkをインクリメントし、kがnに到達するまで決定が終了していないと判定する。
{端末の動作}
次に、図6のフローチャートを参照し、複数の端末10-1~10-nのうち、統合画像データにマッピングされた第k画像に対応する第k端末10-kの動作の一例について説明する。
ステップS31において、第k端末10-kのネットワークI/F15は、処理回路14による制御に応じて、表示装置20の通信I/F21と協働することにより、表示装置20との間に通信リンクを確立する。
ステップS32において、処理回路14は、ネットワークI/F15が表示装置20から受信した第k情報に含まれるパラメーターを取得したか否かを判定する。処理回路14は、パラメーターを取得した場合、ステップS33に処理を進め、パラメーターを取得しない場合、ステップS34に処理を進める。
ステップS33において、処理回路14は、ステップS32で取得したパラメーターを符号化回路13における符号化に用いるパラメーターとして設定する。パラメーターは、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含む。
ステップS34において、符号化回路13は、予め設定されたパラメーターを用いて第k生画像データを符号化することにより、第k伝送データを生成する。例えば、符号化回路13は、ステップS32でパラメーターが取得されている場合、ステップS33で設定されたパラメーターを用いて第k生画像データを符号化し、ステップS32でパラメーターが取得されていない場合、予め定められた初期パラメーターを用いて第k生画像データを符号化する。
ステップS35において、通信I/F21は、処理回路14による制御に応じて、ステップS34で生成された第k伝送データを表示装置20に宛てて送信する。以上のように、第k端末10-kは、表示装置20による制御に応じて、第k伝送データの通信量を変更し得る。表示装置20は、受信した第k伝送データに基づいて画面30にプレビュー画像を表示する。
ステップS36において、処理回路14は、プレビュー表示のための第k伝送データの送信を終了するか否かを判定する。処理回路14は、第k伝送データの送信を終了する場合、処理を終了し、第k伝送データの送信を終了しない場合、ステップS32に処理を戻す。
例えば、ステップS102で第1画像が表示領域41にマッピングされ、第2画像が第1バッファー領域421にマッピングされる状況は、第1画像は画面30に表示され、第2画像は画面30に表示されないことを意味する。このとき、画面30に表示されるプレビュー画像の優先度は、表示されないプレビュー画像より高いため、制御回路23は、第1伝送データが第2伝送データより大きな通信量を有するように、第1端末10-1及び第2端末10-2の少なくとも何れかを制御する。例えば、表示装置20は、第2端末10-2のみに第2情報を送信してもよい。この場合、第2情報に含まれるパラメーターは、第2伝送データの通信量が、第1端末10-1において定められた初期パラメーターにより生成された第1伝送データの通信量より小さくなるように決定される。このように、制御回路23は、伝送データの通信量が予め設定された優先度と相関するように各端末を制御することにより、帯域の使用効率を向上することができる。
また、画面30に表示された第1画像及び第3画像のうち、第1画像のみが入力機器27により選択される場合、第1画像の優先度は、第3画像より高い。このため、制御回路23は、第1伝送データが第3伝送データより大きな通信量を有するように、第1端末10-1及び第3端末10-3の少なくとも何れかを制御する。
また、第2画像が第1バッファー領域421又は第2バッファー領域422にマッピングされ、第4画像が統合画像データにマッピングされない場合、第2画像の優先度は第4画像より高い。このため、制御回路23は、第2伝送データが第4伝送データより大きな通信量を有するように、第2端末10-2及び第4端末10-4の少なくとも何れかを制御する。具体的には、制御回路23は、第4伝送データの通信量を0に変更し得る。このように、第k画像が統合画像データにマッピングされない場合、制御回路23は、第k伝送データの送信を停止する命令を第k端末10-kに送信する。
以上のように、本実施形態に係る表示システムは、統合画像データにマッピングされない端末の伝送データを停止させることにより、ネットワークにおける帯域の使用効率を向上することができる。また、プレビュー画像の表示状態に応じて、伝送データの通信量を変更することにより、帯域の使用効率を更に向上するとともに、プレビュー画像の画質を向上することができる。更に、表示システムは、画像31をスクロールする場面において、画面30におけるプレビュー画像の変更による遅延時間を低減することができ、画像31のスクロールをスムーズに行うことができる。
[変形例]
図7に示すように、本実施形態の変形例に係る表示システムにおいて、統合画像40aは、表示領域41、第1バッファー領域421及び第2バッファー領域422に加えて、第3バッファー領域431及び第4バッファー領域432を有する。統合画像40aは、画像生成回路24により逐次生成され、メモリー25に循環的に記憶される統合画像データにより表される。図7に示す例において、第3バッファー領域431、第1バッファー領域421、表示領域41、第2バッファー領域422及び第4バッファー領域432は、上方から順に垂直に配列される。第3バッファー領域431は、水平方向に1列に配列された4つの候補領域I31~I34を有する。第4バッファー領域432は、水平方向に1列に配列された4つの候補領域I41~I44を有する。
第k画像が第3バッファー領域431又は第4バッファー領域432にマッピングされる場合、第k端末10-kは、第1バッファー領域421及び第2バッファー領域422にマッピングされる場合と比べて小さな通信量を有する第k伝送データを表示装置20に送信する。即ち、例えば第3バッファー領域431にマッピングされたプレビュー画像は、第1バッファー領域421にマッピングされたプレビュー画像よりも低い画質を有する。このように、統合画像40aにおいて表示領域41に隣接する領域を、表示領域41からの距離で区分することにより、多段のバッファー領域を構成することができる。これにより、画像31をスクロールする速度を向上し、画面30におけるプレビュー画像の変更による遅延時間を更に低減することができる。
[他の実施形態]
以上のように実施形態を説明したが、本発明はこれらの開示に限定されるものではない。各部の構成は、同様の機能を有する任意の構成に置換されてよく、また、本発明の技術的範囲内において、各実施形態における任意の構成が省略されたり追加されたりしてもよい。このように、これらの開示から当業者には様々な代替の実施形態が明らかになる。
例えば、既に述べた実施形態において、入力機器27によるスクロール方向は、垂直方向に限るものでなく、水平方向であってもよく、斜め方向であってもよい。即ち、表示領域41に隣接する領域は、統合画像40の何れの辺において隣接してもよい。
その他、上述の各構成を相互に応用した構成等、本発明は以上に記載しない様々な実施形態を含むことは勿論である。本発明の技術的範囲は、上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。
以下に、上述した実施形態から導き出される内容を、各態様として記載する。
第1態様は、第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムの制御方法であって、前記第1端末から、第1画像を表す第1伝送データを前記表示装置に送信し、前記第2端末から、第2画像を表す第2伝送データを前記表示装置に送信し、前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する表示システムの制御方法である。
第1態様によれば、端末の数に対して、ネットワークの帯域の使用効率を向上することができるため、画面に表示する画像の画質を向上することができる。
第2態様は、第1態様において、前記表示装置が、前記第1画像の画質を定義する第1情報を前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第2態様によれば、第1情報及び第2情報を送信することにより各端末に対して第1画像及び第2画像の画質を定義することができる。このため、表示装置は、予め第2画像を取得して第2画像を表示する際にスムーズに表示することができる。
第3態様は、第2態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第3態様によれば、第1情報及び第2情報のそれぞれが、画質を定義するパラメーターを含むことにより、第1伝送データ及び第2伝送データの通信量を変更することが実現可能となる。
第4態様は、第1乃至第3態様の何れかにおいて、前記表示装置が、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成し、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第4態様によれば、表示装置が統合画像データを予め生成することにより、第1画像及び第2画像を表示領域に相対的に移動する際に、スムーズに画面の表示を変更することができる。
第5態様は、第4態様において、前記表示装置が、ユーザーの操作に応じて前記表示領域と相対的に前記第1画像及び前記第2画像を移動させることである。
第5態様によれば、表示装置がユーザーの操作を受け付けることにより、ユーザーの操作に応じてスムーズに画面の表示を変更することが実現可能となる。
第6態様は、第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムであって、前記第1端末は、第1画像を表す第1伝送データを前記表示装置に送信し、前記第2端末は、第2画像を表す第2伝送データを前記表示装置に送信し、前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する表示システムである。
第6態様によれば、端末の数に対して、ネットワークの帯域の使用効率を向上することにより、画面に表示する画像の画質を向上することができる。
第7態様は、第6態様において、前記表示装置が、前記第1画像の画質を定義する第1情報を前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第7態様によれば、第1情報及び第2情報を送信することにより各端末に対して第1画像及び第2画像の画質を定義することができる。このため、表示装置は、予め第2画像を取得して第2画像を表示する際にスムーズに表示することができる。
第8態様は、第7態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第8態様によれば、第1情報及び第2情報のそれぞれが、画質を定義するパラメーターを含むことにより、第1伝送データ及び第2伝送データの通信量を変更することが実現可能となる。
第9態様は、第6乃至第8態様の何れかにおいて、前記表示装置が、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成し、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第9態様によれば、表示装置が統合画像データを予め生成することにより、第1画像及び第2画像を表示領域に相対的に移動する際に、スムーズに画面の表示を変更することができる。
第10態様は、第9態様において、前記表示装置が、ユーザーの操作に応じて前記表示領域と相対的に前記第1画像及び前記第2画像を移動させることである。
第10態様によれば、表示装置がユーザーの操作を受け付けることにより、ユーザーの操作に応じてスムーズに画面の表示を変更することが実現可能となる。
第11態様は、画面に画像を表示する表示機器と、第1端末から送信され、第1画像を表す第1伝送データと、第2端末から送信され、第2画像を表す第2伝送データとを受信する通信インターフェイスと、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する制御回路とを備える表示装置である。
第11態様によれば、端末の数に対して、ネットワークの帯域の使用効率を向上することができるため、画面に表示する画像の画質を向上することができる。
第12態様は、第11態様において、前記制御回路が、前記第1画像の画質を定義する第1情報を前記通信インターフェイスを介して前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記通信インターフェイスを介して前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することである。
第12態様によれば、第1情報及び第2情報を送信することにより各端末に対して第1画像及び第2画像の画質を定義することができる。このため、表示機器は、予め第2画像を取得して第2画像を表示する際にスムーズに表示することができる。
第13態様は、第12態様において、前記第1情報及び前記第2情報のそれぞれが、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことである。
第13態様によれば、第1情報及び第2情報のそれぞれが、画質を定義するパラメーターを含むことにより、第1伝送データ及び第2伝送データの通信量を変更することが実現可能となる。
第14態様は、第11乃至第13態様において、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成する画像生成回路を更に備え、前記表示機器が、前記統合画像データに基づいて、前記第1画像を前記画面に表示することである。
第14態様によれば、統合画像データを予め生成することにより、第1画像及び第2画像を表示領域に相対的に移動する際に、スムーズに画面の表示を変更することができる。
第15態様は、第14態様において、ユーザーによる操作を受け付ける入力機器を更に備え、前記制御回路が、前記操作に応じて前記表示領域と相対的に前記第1画像及び第2画像を移動させることである。
第15態様によれば、表示装置がユーザーの操作を受け付けることにより、ユーザーの操作に応じてスムーズに画面の表示を変更することが実現可能となる。
10-1…第1端末、10-2…第2端末、10-k…第k端末、10-n…第n端末、11…画像生成部、12…表示器、13…符号化回路、14…処理回路、15…ネットワークI/F、20…表示装置、21…通信I/F、22…復号化回路、23…制御回路、24…画像生成回路、25…メモリー、26…表示機器、27…入力機器、30…画面、31…画像、40,40a…統合画像、41…表示領域、231…処理部、232…記憶部、421…第1バッファー領域、422…第2バッファー領域、431…第3バッファー領域、432…第4バッファー領域、I11~I14,I21~I24,I31~I34,I41~I44…候補領域、V11~V14,V21~V24…プレビュー領域。

Claims (8)

  1. 第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムの制御方法であって、
    前記第1端末から、第1画像を表す第1伝送データを前記表示装置に送信し、
    前記第2端末から、第2画像を表す第2伝送データを前記表示装置に送信し、
    前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御することを特徴とする表示システムの制御方法。
  2. 前記表示装置は、前記第1画像の画質を定義する第1情報を前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御する請求項1に記載の表示システムの制御方法。
  3. 前記第1情報及び前記第2情報のそれぞれは、フレームレート、解像度及び圧縮率の3種類のパラメーターのうち少なくとも何れか1種類のパラメーターを含むことを特徴とする請求項2に記載の表示システムの制御方法。
  4. 前記表示装置は、前記画面に対応して表示される表示領域を一部に定義され、互いにずれた位置にマッピングされた前記第1画像及び前記第2画像を表す統合画像データを、前記第1伝送データ及び前記第2伝送データに基づいて生成し、前記統合画像データに基づいて、前記第1画像を前記画面に表示することを特徴とする請求項1乃至3の何れか1項に記載の表示システムの制御方法。
  5. 前記表示装置は、ユーザーの操作に応じて前記表示領域と相対的に前記第1画像及び前記第2画像を移動させることを特徴とする請求項4に記載の表示システムの制御方法。
  6. 第1端末、第2端末、及び、画面に画像を表示する表示装置を備える表示システムであって、
    前記第1端末は、第1画像を表す第1伝送データを前記表示装置に送信し、
    前記第2端末は、第2画像を表す第2伝送データを前記表示装置に送信し、
    前記表示装置は、前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御することを特徴とする表示システム。
  7. 画面に画像を表示する表示機器と、
    第1端末から送信され、第1画像を表す第1伝送データと、第2端末から送信され、第2画像を表す第2伝送データとを受信する通信インターフェイスと、
    前記第1伝送データに基づいて前記第1画像を前記画面に表示し、且つ前記第2伝送データに基づいて前記第2画像を前記画面に表示しない場合において、前記第1伝送データが前記第2伝送データより大きな通信量を有するように、前記第1端末及び前記第2端末の少なくとも何れかを制御する制御回路と、
    を備えることを特徴とする表示装置。
  8. 前記制御回路は、前記第1画像の画質を定義する第1情報を前記通信インターフェイスを介して前記第1端末に送信し、前記第2画像の画質を定義する第2情報を前記通信インターフェイスを介して前記第2端末に送信することにより、前記第1端末及び前記第2端末を制御することを特徴とする請求項に記載の表示装置。
JP2019031326A 2019-02-25 2019-02-25 表示システムの制御方法、表示システム及び表示装置 Active JP7188175B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019031326A JP7188175B2 (ja) 2019-02-25 2019-02-25 表示システムの制御方法、表示システム及び表示装置
US16/798,815 US11048463B2 (en) 2019-02-25 2020-02-24 Method for controlling display system, display system, and display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019031326A JP7188175B2 (ja) 2019-02-25 2019-02-25 表示システムの制御方法、表示システム及び表示装置

Publications (2)

Publication Number Publication Date
JP2020134850A JP2020134850A (ja) 2020-08-31
JP7188175B2 true JP7188175B2 (ja) 2022-12-13

Family

ID=72142929

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019031326A Active JP7188175B2 (ja) 2019-02-25 2019-02-25 表示システムの制御方法、表示システム及び表示装置

Country Status (2)

Country Link
US (1) US11048463B2 (ja)
JP (1) JP7188175B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7552413B2 (ja) * 2021-02-16 2024-09-18 セイコーエプソン株式会社 画面生成方法、画面生成装置及び表示装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004350227A (ja) 2003-05-26 2004-12-09 Ntt Communications Kk ビデオ会議システムにおける会議クライアント装置及びそのプログラム
JP2008151860A (ja) 2006-12-14 2008-07-03 Hitachi Ltd 映像表示システム
JP2015194982A (ja) 2014-03-28 2015-11-05 セイコーエプソン株式会社 情報処理装置、情報処理方法およびプログラム
US20160188274A1 (en) 2014-12-31 2016-06-30 Coretronic Corporation Interactive display system, operation method thereof, and image intermediary apparatus
JP2018036470A (ja) 2016-08-31 2018-03-08 セイコーエプソン株式会社 表示システム、表示装置、表示装置の制御方法、及びプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0918846A (ja) 1995-06-27 1997-01-17 Canon Inc 多地点間通信装置
JP2002358065A (ja) * 2001-06-01 2002-12-13 Seiko Epson Corp 表示サービス提供システム及び映像表示装置
JP2011112762A (ja) * 2009-11-25 2011-06-09 Sanyo Electric Co Ltd 映像表示装置
AU2014379859B2 (en) * 2014-01-23 2017-10-12 Sony Corporation Decoding device, decoding method, encoding device, and encoding method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004350227A (ja) 2003-05-26 2004-12-09 Ntt Communications Kk ビデオ会議システムにおける会議クライアント装置及びそのプログラム
JP2008151860A (ja) 2006-12-14 2008-07-03 Hitachi Ltd 映像表示システム
JP2015194982A (ja) 2014-03-28 2015-11-05 セイコーエプソン株式会社 情報処理装置、情報処理方法およびプログラム
US20160188274A1 (en) 2014-12-31 2016-06-30 Coretronic Corporation Interactive display system, operation method thereof, and image intermediary apparatus
JP2018036470A (ja) 2016-08-31 2018-03-08 セイコーエプソン株式会社 表示システム、表示装置、表示装置の制御方法、及びプログラム

Also Published As

Publication number Publication date
US20200272405A1 (en) 2020-08-27
US11048463B2 (en) 2021-06-29
JP2020134850A (ja) 2020-08-31

Similar Documents

Publication Publication Date Title
US9715718B2 (en) Image processing device, image processing system, image processing method, and computer program for effecting changes in a selected display region
US7702171B2 (en) Screen data transmitting device
CN103281575B (zh) 一种智能电视新型控制方法
JP5548671B2 (ja) 画像処理システム、画像提供サーバ、情報処理装置、および画像処理方法
US20150029075A1 (en) Method and Apparatus for Controlling Display of Shared Screen
EP2996346A1 (en) Multi-screen control method and device supporting multiple window applications
EP2421254A2 (en) Display apparatus and control method thereof.
EP2743814A2 (en) Display apparatus and method of providing user interface thereof
CN105578247B (zh) 镜射显示系统与镜射显示方法
KR20130054901A (ko) 동영상 재생 처리 방법 및 그 방법을 채용한 휴대 정보 단말
CN111432257A (zh) 一种显示设备开启屏幕保护的方法及显示设备
US20150189357A1 (en) Multimedia device and remote control device for synchronizing screen, and method for same
CN111107428A (zh) 一种双路媒体流数据的播放方法及显示设备
CN105491428A (zh) 智能电视的控制方法及系统
WO2015096588A1 (zh) 一种显示页面的切换方法及装置
CN102377972B (zh) 图像处理设备和图像处理方法
JP7188175B2 (ja) 表示システムの制御方法、表示システム及び表示装置
CN108235138A (zh) 预览视频的方法、处理装置及其计算机系统
CN111083523A (zh) 一种全景视频播放的方法及终端
CN111930233B (zh) 一种全景视频图像显示方法及显示设备
CN111212293A (zh) 一种图像处理方法及显示设备
CN111277911B (zh) 一种全景视频的图像处理方法、显示设备及服务器
CN112908273A (zh) 一种显示设备及背光调整方法
KR20210001868A (ko) 디스플레이 장치 및 그 제어 방법
CN111078926A (zh) 一种人像缩略图像的确定方法及显示设备

Legal Events

Date Code Title Description
RD07 Notification of extinguishment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7427

Effective date: 20200810

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210917

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20211108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211227

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221018

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221114

R150 Certificate of patent or registration of utility model

Ref document number: 7188175

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150