JP2008118271A - Remote control system of imaging apparatus - Google Patents
Remote control system of imaging apparatus Download PDFInfo
- Publication number
- JP2008118271A JP2008118271A JP2006297736A JP2006297736A JP2008118271A JP 2008118271 A JP2008118271 A JP 2008118271A JP 2006297736 A JP2006297736 A JP 2006297736A JP 2006297736 A JP2006297736 A JP 2006297736A JP 2008118271 A JP2008118271 A JP 2008118271A
- Authority
- JP
- Japan
- Prior art keywords
- video signal
- compression method
- original video
- imaging apparatus
- original
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 135
- 230000005540 biological transmission Effects 0.000 claims abstract description 111
- 238000004891 communication Methods 0.000 claims abstract description 78
- 238000007906 compression Methods 0.000 claims description 111
- 230000006835 compression Effects 0.000 claims description 111
- 238000000034 method Methods 0.000 claims description 110
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 30
- 238000012545 processing Methods 0.000 abstract description 26
- 230000006837 decompression Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 12
- 238000006243 chemical reaction Methods 0.000 description 7
- 230000008054 signal transmission Effects 0.000 description 5
- 238000013144 data compression Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 238000004091 panning Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 239000004606 Fillers/Extenders Substances 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000007788 roughening Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Selective Calling Equipment (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、撮像装置の遠隔制御システムに関する。 The present invention relates to a remote control system for an imaging apparatus.
近年、テレビジョンカメラ及び雲台などからなる撮像装置と、この撮像装置の動作を制御するための操作装置(リモートコントローラ)とを遠隔地に離隔配置し、双方をインターネット等の通信回線(IP網)で接続した遠隔制御システムが普及している。この遠隔制御システムでは、テレビジョンカメラによって撮像された映像を、通信回線を介して遠隔地に伝送してモニタ表示でき、操作者は、この映像を視認しながら操作装置の操作具(ジョイスティック、ダイヤル、ボタン等)を操作して、撮像装置の動作(例えば、ズーム、フォーカス、パン・チルト駆動など)を遠隔操作することができる。 In recent years, an imaging device including a television camera and a pan head, and an operation device (remote controller) for controlling the operation of the imaging device are arranged remotely from each other, and both are connected to a communication line (IP network such as the Internet). The remote control system connected with) is widespread. In this remote control system, an image captured by a television camera can be transmitted to a remote place via a communication line and displayed on a monitor, and an operator can visually check this image while operating the operation tool (joystick, dial) of the operating device. , Buttons, etc.) can be operated to remotely control the operation of the imaging device (for example, zoom, focus, pan / tilt drive, etc.).
このような撮像装置の遠隔制御システムは、例えば、天気予報やニュース番組のバックシーンといったテレビジョン放送用途として有用である。かかる放送用途の場合には、高画質の映像信号、例えば、高精細度テレビジョン放送(HDTV:High Definition Television)用の映像信号(以下、「HD映像信号」という。)を、通信回線を介して高速で伝送することが要求される。現状では、例えば、HD MPEG2(Moving Picture Expert Group Phase2)によりHD映像信号を圧縮して伝送する場合に、16〜64Mbpsの伝送スピードが必要となっている。高画質の映像信号を、通信速度の制約がある通信回線を介して高速伝送するためには、映像信号の圧縮率を高くする必要があり、このため、近年では、より高圧縮率での圧縮が可能な「H.264」等の圧縮方式が開発されている。 Such a remote control system for an imaging apparatus is useful for television broadcast applications such as weather forecasts and news program back scenes. In the case of such broadcast use, a high-quality video signal, for example, a video signal for high definition television broadcasting (HDTV: High Definition Television) (hereinafter referred to as “HD video signal”) is transmitted via a communication line. And high-speed transmission is required. At present, for example, when HD video signals are compressed and transmitted by HD MPEG2 (Moving Picture Expert Group Phase 2), a transmission speed of 16 to 64 Mbps is required. In order to transmit high-quality video signals at high speed via communication lines with limited communication speeds, it is necessary to increase the compression rate of the video signals. Therefore, in recent years, compression at a higher compression rate is required. A compression method such as “H.264” has been developed.
しかしながら、映像信号の圧縮率が高くなるほど、圧縮・伸張処理(エンコード・デコード)に時間がかかるので、この圧縮・伸張処理に起因した伝送遅延が増大してしまう。このため、操作時に操作者が視認するモニタに表示される映像と、撮像装置が現時点で撮像している映像との間に、大きな時間的ずれ(例えば数秒程度)が生じてしまう。この結果、操作者は、遅延した映像をモニタで見ながら、操作装置を操作することになるため、どうしても操作量が過剰になってしまう。従って、ズーム、フォーカス、パン・チルト駆動などの撮像装置の動作を遠隔制御することが非常に困難であるという問題があった。特に、フォーカス調整に関しては、操作者が伝送遅延を見込んで操作量を調整したとしても、被写体にフォーカスを正確に合わせることがほとんどできなかった。 However, the higher the video signal compression rate, the longer the compression / decompression processing (encoding / decoding) takes, and the transmission delay due to this compression / decompression processing increases. For this reason, a large time lag (for example, about several seconds) occurs between the video displayed on the monitor visually recognized by the operator during the operation and the video currently captured by the imaging device. As a result, the operator operates the operating device while viewing the delayed video on the monitor, and the operation amount is inevitably excessive. Therefore, there has been a problem that it is very difficult to remotely control the operation of the imaging apparatus such as zoom, focus, pan / tilt drive and the like. In particular, with regard to focus adjustment, even if the operator adjusts the operation amount in anticipation of transmission delay, it has hardly been possible to accurately focus on the subject.
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、撮像装置から出力される映像信号に大きな伝送遅延が生じる場合であっても、撮像装置の動作を容易に遠隔制御することが可能な、新規かつ改良された撮像装置の遠隔制御システムを提供することにある。 Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to operate the imaging apparatus even when a large transmission delay occurs in the video signal output from the imaging apparatus. It is an object of the present invention to provide a new and improved remote control system for an image pickup apparatus that can be remotely controlled easily.
上記課題を解決するために、本発明のある観点によれば、撮像装置と操作装置とが通信回線を介して接続され、操作装置から通信回線を介して撮像装置に制御信号を送信して撮像装置を遠隔制御する、撮像装置の遠隔制御システムが提供される。この撮像装置の遠隔制御システムは、撮像装置から出力されるオリジナル映像信号、よりもデータ量が少ない操作用映像信号を生成する操作用映像信号生成手段と;撮像装置から出力されるオリジナル映像信号、及び操作用映像信号生成手段から出力される操作用映像信号をそれぞれ圧縮して、オリジナル映像信号の圧縮データ及び操作用映像信号の圧縮データを、通信回線を介して送信する第1の伝送手段と;第1の伝送手段から通信回線を介してオリジナル映像信号の圧縮データ及び操作用映像信号の圧縮データを受信し、オリジナル映像信号の圧縮データ及び操作用映像信号の圧縮データをそれぞれ伸張する第2の伝送手段と;操作装置の操作者が視認可能な位置に配置され、第2の伝送手段によって伸張された操作用映像信号を表示する表示装置と;を備えることを特徴とする。なお、操作用映像信号生成手段は、オリジナル映像信号を処理することで、操作用映像信号を生成してもよいし、或いは、オリジナル映像信号とは別個独立して操作用映像信号を生成してもよい。 In order to solve the above problems, according to an aspect of the present invention, an imaging device and an operation device are connected via a communication line, and a control signal is transmitted from the operation device to the imaging device via the communication line. An imaging device remote control system is provided for remotely controlling the apparatus. The remote control system for the imaging apparatus includes an original video signal output from the imaging apparatus, an operation video signal generating means for generating an operation video signal with a smaller amount of data, an original video signal output from the imaging apparatus, And a first transmission unit that compresses the operation video signal output from the operation video signal generation unit and transmits the compressed data of the original video signal and the compression data of the operation video signal via the communication line, respectively. Receiving the compressed data of the original video signal and the compressed data of the operation video signal from the first transmission means via the communication line, and expanding the compressed data of the original video signal and the compressed data of the operation video signal, respectively. A transmission means for displaying an operation video signal which is disposed at a position where the operator of the operating device can visually recognize and expanded by the second transmission means. Characterized in that it comprises a; display device and that. The operation video signal generation means may generate the operation video signal by processing the original video signal, or generate the operation video signal independently of the original video signal. Also good.
かかる構成により、操作用映像信号生成手段によって、オリジナル映像信号よりも小さいデータ量の操作用映像信号、例えば、撮像装置の動作(ズーム、フォーカス、パン・チルト駆動など)を操作するために必要な最小限のデータ量の操作用映像信号を生成し、この操作用映像信号を第1の伝送手段によって圧縮した後、通信回線を介して第2の伝送手段に伝送し、さらに、操作用映像信号の圧縮データを第2の伝送手段によって伸張して、表示装置に表示出力できる。この操作用映像信号は、低データ量であるため、圧縮・伸張処理を高速で実行でき伝送遅延が少ない。よって、上記のように、オリジナル映像信号とともに操作用映像信号を伝送して、表示装置に操作用映像を表示することで、当該伝送遅延の少ない操作用映像を視認した操作者は、撮像装置の動作を容易に操作することが可能となる。 With this configuration, it is necessary for the operation video signal generation means to operate the operation video signal having a data amount smaller than that of the original video signal, for example, the operation of the imaging device (zoom, focus, pan / tilt drive, etc.) An operation video signal having a minimum amount of data is generated, the operation video signal is compressed by the first transmission unit, and then transmitted to the second transmission unit via the communication line. Can be decompressed by the second transmission means and displayed on the display device. Since this video signal for operation has a low data amount, compression / decompression processing can be executed at high speed and transmission delay is small. Therefore, as described above, by transmitting the operation video signal together with the original video signal and displaying the operation video on the display device, the operator who has viewed the operation video with a small transmission delay can The operation can be easily operated.
また、上記第1の伝送手段は、オリジナル映像信号を第1の圧縮方式で圧縮する第1のエンコーダと、操作用映像信号を第1の圧縮方式と異なる第2の圧縮方式で圧縮する第2のエンコーダとを備え、第2の伝送手段は、オリジナル映像信号を第1の圧縮方式で伸張する第1のデコーダと、操作用映像信号を第2の圧縮方式で伸張する第2のデコーダとを備えるようにしてもよい。これにより、オリジナル映像信号と操作用映像信号とを互いに異なる圧縮方式で伝送することができるので、操作用映像信号の伝送遅延をさらに少なくすることができる。 The first transmission means includes a first encoder that compresses the original video signal using the first compression method, and a second encoder that compresses the operation video signal using a second compression method different from the first compression method. The second transmission means includes: a first decoder that decompresses the original video signal by the first compression method; and a second decoder that decompresses the operation video signal by the second compression method. You may make it prepare. As a result, the original video signal and the operation video signal can be transmitted by different compression methods, so that the transmission delay of the operation video signal can be further reduced.
また、上記第1の圧縮方式は、フレーム間圧縮方式であり、上記第2の圧縮方式は、フレーム内圧縮方式であってもよい。これにより、データ量が多いオリジナル映像信号は、高圧縮率のフレーム間圧縮方式で圧縮して伝送でき、一方、データ量が少ない操作用映像信号は、低圧縮率であるが圧縮・伸張処理が高速であるフレーム内圧縮方式で圧縮して伝送できる。 The first compression method may be an inter-frame compression method, and the second compression method may be an intra-frame compression method. As a result, an original video signal with a large amount of data can be compressed and transmitted using an inter-frame compression method with a high compression rate, while an operation video signal with a small amount of data has a low compression rate but is not compressed or expanded. It can be compressed and transmitted using a high-speed intra-frame compression method.
また、上記操作用映像信号生成手段は、高画質のオリジナル映像信号(例えばHD映像信号)を低画質の映像信号(例えばNTSC準拠のSD映像信号)に変換することにより、操作用映像信号を生成するようにしてもよい。これにより、操作用映像を視認した操作者が撮像装置を好適に操作可能な範囲内で、操作用映像信号のデータ量を大幅に低減できる。 The operation video signal generating means generates an operation video signal by converting a high-quality original video signal (for example, an HD video signal) into a low-quality video signal (for example, an NTSC-compliant SD video signal). You may make it do. As a result, the data amount of the operation video signal can be greatly reduced within a range in which the operator who has visually recognized the operation video can suitably operate the imaging apparatus.
また、上記操作用映像信号生成手段は、オリジナル映像信号の色、階調及び/又はフレーム数を低減することにより、操作用映像信号を生成するようにしてもよい。これにより、操作用映像を視認した操作者が撮像装置を好適に操作可能な範囲内で、操作用映像信号のデータ量を好適に低減できる。 Further, the operation video signal generation means may generate the operation video signal by reducing the color, gradation and / or number of frames of the original video signal. As a result, the data amount of the operation video signal can be suitably reduced within a range in which the operator who has visually recognized the operation video can suitably operate the imaging apparatus.
また、上記操作用映像信号生成手段は、オリジナル映像信号が表す画面領域の一部の映像信号を抽出することにより、操作用映像信号を生成するようにしてもよい。これにより、操作用映像を視認した操作者が撮像装置を好適に操作可能な範囲内で、操作用映像信号のデータ量を好適に低減できる。 Further, the operation video signal generation means may generate the operation video signal by extracting a part of the video signal of the screen area represented by the original video signal. As a result, the data amount of the operation video signal can be suitably reduced within a range in which the operator who has visually recognized the operation video can suitably operate the imaging apparatus.
以上説明したように本発明によれば、撮像装置から出力される映像信号に大きな伝送遅延が生じる場合であっても、撮像装置の動作を容易に遠隔制御することができる。 As described above, according to the present invention, it is possible to easily remotely control the operation of the imaging apparatus even when a large transmission delay occurs in the video signal output from the imaging apparatus.
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。 Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In addition, in this specification and drawing, about the component which has the substantially same function structure, duplication description is abbreviate | omitted by attaching | subjecting the same code | symbol.
(第1の実施形態)
まず、図1を参照して、本発明の第1の実施形態にかかる撮像装置の遠隔制御システムについて説明する。図1は、本実施形態にかかる撮像装置の遠隔制御システム1の概略構成を示すブロック図である。
(First embodiment)
First, with reference to FIG. 1, a remote control system for an imaging apparatus according to a first embodiment of the present invention will be described. FIG. 1 is a block diagram illustrating a schematic configuration of a
本実施形態にかかる撮像装置の遠隔制御システム1は、例えば、天気予報やニュース番組のバックシーンといった放送用途(テレビジョンカメラシステム)や、防災、防犯のための監視用途(監視カメラシステム)などとして用いられる遠隔制御可能な撮像システムである。
The
この撮像装置の遠隔制御システム1は、図1に示すように、被写体を撮像して映像信号を出力する撮像装置3と、撮像装置3を遠隔操作するための操作装置4と、操作装置4に隣接して配置されて、入力される映像信号に応じた映像を表示する表示装置5とを備える。このうち、撮像装置3は、撮影対象の被写体が存在する撮像箇所(例えば、テレビジョン放送用途の場合には撮影現場、監視カメラ用途の場合には監視箇所など)に配置される。一方、操作装置4及び表示装置5は、システムの管理者(撮像装置3の操作者)が所在する操作箇所(例えば、テレビジョン放送の放送局、監視カメラの監視室など)に配置されている。このように、撮像装置3と、操作装置4及び表示装置5とは、相互に離隔した箇所に配置されている。
As shown in FIG. 1, the
さらに、撮像箇所には、上記撮像装置3に対応して、撮像装置3から出力される映像信号を処理して操作用映像信号を生成する操作用映像信号生成手段6と、撮像装置3から出力される映像信号を圧縮して通信回線2を介して伝送する第1の伝送手段10(エンコーダ)とが設けられている。一方、撮像箇所には、操作装置4及び表示装置5に対応して、通信回線2を介して伝送された映像信号を受信して伸張する第2の伝送手段20(デコーダ)が設けられている。なお、操作用映像信号生成手段6及び第1の伝送手段10の一部又は全部は、撮像装置3に内蔵されてもよく、また、第2の伝送手段20の一部又は全部は、操作装置4又は表示装置5に内蔵されてもよい。
Further, at the imaging location, corresponding to the
このように、本実施形態にかかる撮像装置の遠隔制御システム1は、撮像箇所に配置される撮像装置3、操作用映像信号生成手段6及び第1の伝送手段10からなる装置群(撮像システム)と、操作箇所に配置される操作装置4、表示装置5及び第2の伝送手段20からなる装置群(操作システム)とが、通信回線2を介して接続された構成となっている。これにより、撮像装置3により撮像された映像を伝送して表示装置5に表示するとともに、撮像装置3の動作を操作装置4により遠隔制御できるようになっている。以下に、この撮像装置の遠隔制御システム1を構成する各部について詳細に説明する。
As described above, the
撮像装置3は、例えば、お天気カメラ等のテレビジョンカメラや、監視カメラ等として機能する撮像手段である。この撮像装置3は、被写体を撮像するカメラ31と、カメラ31が搭載される雲台32と、カメラ31及び雲台32の動作を制御する撮像装置制御部33とを備える。
The
カメラ31は、例えば、レンズ装置31a及びCCD等の撮像素子(図示せず。)などを有しており、フォーカス、ズーム、アイリスなどをマニュアル調整可能な構造となっている。このカメラ31は、被写体を撮像して動画像(テレビジョン映像等)の映像信号を生成して出力する。詳細には、カメラ31は、レンズ装置31aを介して撮像した被写体光学像を映像信号に光電変換し、この映像信号に対して増幅処理及び所定の信号処理などを施して外部に出力する。この撮像装置3が出力する映像信号は、デジタル方式又はアナログ方式のいずれの映像信号であってもよいが、以下の説明では、デジタル方式の映像信号の例について説明する。
The
雲台32は、図示しないパン駆動機構及びチルト駆動機構を具備しており、カメラ31をパン方向及びチルト方向に回動(パンニング・チルティング)させて、カメラ31の撮像方向を変更する。撮像装置制御部33は、各種の制御回路等で構成され、操作装置4から伝送された制御信号に基づいて、上記カメラ31および雲台32の動作(例えば、フォーカス調整、ズーム調整、アイリス調整、パン駆動、チルト駆動など)を制御する。
The pan /
操作装置4は、操作者が撮像装置3の上記各種の動作を操作するための操作盤であり、操作者の入力操作に応じて、撮像装置の各種動作を制御する制御信号(例えば、フォーカス制御信号、ズーム制御信号、アイリス制御信号、パン駆動制御信号、チルト駆動制御信号など)を生成して第2の伝送手段20に出力する。
The operation device 4 is an operation panel for an operator to operate the various operations of the
上記各種の入力操作を受け付けるために、操作装置4は、上記撮像装置3の各動作に対応する複数の操作具を具備している。具体的には、図1の例の操作装置4には、フォーカスダイヤル41と、ズームダイヤル42と、ジョイスティック43とが設けられている。例えば、操作者は、フォーカスダイヤル41またはズームダイヤル42を回転させることにより、カメラ31のフォーカスまたはズームを調整することができ、また、ジョイスティック43を上下及び左右に傾倒することにより、雲台32をパン及びチルト駆動させて、カメラ31をパンニング及びチルティングすることができる。なお、操作装置4には、これらの操作具の他に、カメラ31及び雲台32の各種機能(例えば、ショット機能、アイリス調整、ゲイン調整、エクステンダー倍率設定等)を操作するためのスイッチ等の操作具が設けられていてもよい。
In order to accept the various input operations, the operation device 4 includes a plurality of operation tools corresponding to the operations of the
表示装置5は、入力される映像信号に応じた映像を表示するモニタである。この表示装置5は、撮像装置3から出力され、通信回線2を介して伝送された映像信号に応じた映像を表示する。かかる表示装置5は、操作装置4の操作者が視認可能な位置に、操作装置4に隣接して配置される。これにより、操作者は表示装置5に表示された映像を見ながら、操作装置4を操作できる。なお、表示装置5は、後述するオリジナル映像を表示するモニタと、操作用映像を表示するモニタとを含む2以上のモニタで構成されてもよいし、或いは、同一画面上に上記オリジナル映像及び操作用映像の双方を表示する1つのモニタで構成されてもよい。
The
次に、上記撮像装置3と、操作装置4および表示装置5との間で、通信回線2を介して映像信号および制御信号を伝送するための構成、即ち、操作用映像信号生成手段6、第1の伝送手段10、第2の伝送手段20について詳細に説明する。
Next, a configuration for transmitting a video signal and a control signal between the
なお、通信回線2は、例えば、インターネット、電話回線網、衛星通信網等の公衆回線網や、イーサネット(登録商標)等のLAN、WAN、IP−VPNなどの専用回線網、及び/又は有線ケーブルなどで構成されたデータ通信用のネットワークであり、その通信方式は有線・無線を問わない。
The
上記撮像処理により撮像装置3から出力される映像信号(以下では、撮像装置3から出力される映像信号を「オリジナル映像信号」と称して説明する。)は、操作用映像信号生成手段6及び第1の伝送手段10に入力される。
The video signal output from the
まず、操作用映像信号生成手段6について説明する。操作用映像信号生成手段6は、例えば、映像信号をフォーマット変換するコンバータや、映像信号の色データ、階調、フレーム数などを処理する画像処理装置などで構成される。この操作用映像信号生成手段6は、撮像装置3から入力されたオリジナル映像信号を処理して、当該オリジナル映像信号よりもデータ量が少ない操作用映像信号を生成する。具体的には、操作用映像信号生成手段6は、例えば、高画質でデータ量が多いオリジナル映像信号から、低画質でデータ量が少ない操作用映像信号を生成する。
First, the operation video signal generation means 6 will be described. The operation video signal generation means 6 includes, for example, a converter that converts the format of the video signal, an image processing device that processes color data, gradation, the number of frames, and the like of the video signal. The operation video signal generation means 6 processes the original video signal input from the
この操作用映像信号は、操作者が操作装置4を操作する際に視認する映像(以下、「操作用映像」)を表示装置5に表示するための映像信号である。この操作用映像は、オリジナル映像のように必ずしも高画質、大画面範囲の映像である必要はなく、その映像を視認した操作者が所望の操作を実行できる範囲内の最低限の画質、画面範囲の映像であればよい。例えば、操作用映像をフォーカス調整用映像として用いる場合には、操作用映像は、操作者が当該操作用映像を視認してフォーカスを合わせることが可能な最低限の画質を有すれば十分である。
This video signal for operation is a video signal for displaying on the
このため、操作用映像信号のデータ量は、操作者が所望の操作を実行可能な最低限の画質、画面範囲の映像を表示するために必要な最小限のデータ量に設定することが可能である。そこで、操作用映像信号生成手段6は、上記のように、高画質、大データ量のオリジナル映像信号から、上記必要最小限のデータ量の操作用映像信号を生成する。これにより、撮像装置3から通信回線2を介して表示装置5に映像信号を伝送する際に、オリジナル映像信号と比べて操作用映像信号の伝送遅延を大幅に低減できる。
For this reason, the data amount of the operation video signal can be set to the minimum data amount necessary for the operator to perform the desired operation and display the image with the minimum image quality and screen range. is there. Therefore, as described above, the operation video signal generation means 6 generates the operation video signal having the minimum necessary data amount from the original video signal having a high image quality and a large data amount. Thereby, when the video signal is transmitted from the
操作用映像信号生成手段6により操作用映像信号を生成する手法としては、例えば、以下のような手法(1)〜(5)が挙げられる。
Examples of the method for generating the operation video signal by the operation video
(1)高画質のオリジナル映像信号を低画質の映像信号に変換する手法
撮像装置3の出力するオリジナル映像信号が、高画質の映像信号(例えば、高精細度テレビジョン放送(HDTV)用のHD映像信号)である場合には、操作用映像信号生成手段6は、当該HD映像信号を、低画質の映像信号(例えば、NTSC(National TV Standards Committee)に準拠するSD(Standard Definition)映像信号)に変換して低画質化することによって、操作用映像信号を生成することができる。これにより、オリジナル映像信号のデータ量を、例えば4分の1程度に低減した操作用映像信号を生成できる。
(1) Method of converting high-quality original video signal to low-quality video signal The original video signal output from the
(2)オリジナル映像信号の色データを低減/削除する手法
また、操作用映像信号生成手段6は、オリジナル映像信号に含まれる映像の色データを低減又は削除する(例えば、色信号(C)を削除し、輝度信号(Y)のみとする。)ことにより、操作用映像信号を生成することができる。これにより、オリジナル映像信号のデータ量を、例えば2分の1程度に低減した操作用映像信号を生成できる。
(2) Method of reducing / deleting color data of original video signal The operation video signal generating means 6 reduces or deletes the color data of the video included in the original video signal (for example, the color signal (C) The video signal for operation can be generated by deleting and setting only the luminance signal (Y). Thereby, it is possible to generate an operation video signal in which the data amount of the original video signal is reduced to, for example, about one half.
(3)オリジナル映像信号の階調を低減する手法
また、操作用映像信号生成手段6は、オリジナル映像信号の階調を粗くする(例えば、ビット低減処理する)ことにより、操作用映像信号を生成することができる。これにより、オリジナル映像信号のデータ量を、例えば3分の2程度に低減した操作用映像信号を生成できる。
(3) Method of reducing the gradation of the original video signal The operation video signal generation means 6 generates the operation video signal by roughening the gradation of the original video signal (for example, performing bit reduction processing). can do. Thereby, it is possible to generate an operation video signal in which the data amount of the original video signal is reduced to, for example, about two thirds.
(4)オリジナル映像信号のフレーム数を低減する手法
また、操作用映像信号生成手段6は、オリジナル映像信号のフレーム数を低減する(例えば、フレーム数を30フレーム/秒から、10フレーム/秒に低減する)ことにより、操作用映像信号を生成することができる。これにより、オリジナル映像信号のデータ量を、例えば3分の1程度に低減した操作用映像信号を生成できる。
(4) Method of reducing the number of frames of the original video signal The operation video signal generating means 6 reduces the number of frames of the original video signal (for example, the number of frames is changed from 30 frames / second to 10 frames / second). The video signal for operation can be generated. Thereby, it is possible to generate an operation video signal in which the data amount of the original video signal is reduced to, for example, about one third.
(5)オリジナル映像信号が表す画面領域の一部を抽出する手法
また、操作用映像信号生成手段6は、オリジナル映像信号が表す全体の画面領域の一部の画像領域の映像信号を抽出することにより、操作用映像信号を生成することができる。例えば、オリジナル映像信号が表す画面を複数の領域に分割して、そのうちの一部の分割領域(例えば中央部分)の映像信号のみを抽出して、操作用映像信号とすることができる。これにより、オリジナル映像信号のデータ量を、例えば3分の1程度に低減した操作用映像信号を生成できる。
(5) Method for Extracting Part of Screen Area Represented by Original Video Signal Further, the operation video signal generating means 6 extracts a video signal of a part of the image area of the entire screen area represented by the original video signal. Thus, an operation video signal can be generated. For example, the screen represented by the original video signal can be divided into a plurality of areas, and only the video signals of a part of the divided areas (for example, the central part) can be extracted and used as the operation video signal. Thereby, it is possible to generate an operation video signal in which the data amount of the original video signal is reduced to, for example, about one third.
以上、操作用映像信号生成手段6によって、オリジナル映像信号から操作用映像信号を生成する各種手法の例について説明したが、上記各手法を単独で使用してもよいし、或いは、2以上を組み合わせて使用してもよい。例えば、上記(1)の手法により、HD映像信号をSD映像信号に低画質化してデータ量を低減させた上で、さらに、上記(2)〜(4)の手法により、当該SD映像信号の色データ、階調又はフレーム数を低減させて、データ量をさらに低減させることもできる。
In the above, examples of various methods for generating an operation video signal from an original video signal by the operation video
次に、第1の伝送手段10について説明する。第1の伝送手段10は、映像信号の圧縮処理を行うとともに、操作装置4側に設けられた第2の伝送手段20との間で、通信回線2を介して映像信号の圧縮データおよび制御信号を送受信する機能を有する。具体的には、この第1の伝送手段10は、上記撮像装置3から出力されるオリジナル映像信号を圧縮すると同時に、上記操作用映像信号生成手段6から出力される操作用映像信号を圧縮し、オリジナル映像信号の圧縮データと操作用映像信号の圧縮データを、通信回線2を介して第2の伝送手段20に送信する。また、第1の伝送手段10は、第2の伝送手段20から、撮像装置3を制御するための制御信号を受信して、当該制御信号を撮像装置3に出力する。
Next, the first transmission means 10 will be described. The first transmission means 10 performs compression processing of the video signal, and between the second transmission means 20 provided on the operation device 4 side, the compressed data of the video signal and the control signal via the
詳細には、かかる第1の伝送手段10は、撮像装置3から直接入力されるオリジナル映像信号を第1の圧縮方式で圧縮する第1のエンコーダ11と、操作用映像信号生成手段6から入力される操作用映像信号を第2の圧縮方式で圧縮する第2のエンコーダ12と、オリジナル映像信号の圧縮データと操作用映像信号の圧縮データとを混合する混合器13と、通信回線2を介した通信を行うための通信インターフェース14と、制御信号受信部15とを備える。
Specifically, the first transmission means 10 is input from the
第1のエンコーダ11は、撮像装置3から入力されるオリジナル映像信号を、第1の圧縮方式で圧縮(エンコード)する。オリジナル映像信号は、上記のように、例えばHD映像信号などといった高画質かつ大データ量の映像信号であるので、通信回線2を介した伝送速度を維持するためには、高い圧縮率で圧縮して伝送する必要がある。そこで、本実施形態にかかる第1のエンコーダ11では、オリジナル映像信号を圧縮するための第1の圧縮方式として、フレーム間圧縮方式(時間圧縮方式)を採用している。
The
このフレーム間圧縮方式は、例えば「1/2秒〜数十秒」の間で、映像信号における前後のフレーム間の差分だけを抽出して圧縮する方式であり、例えば、「MPEG2」、「MPEG4」、「H.264」、ストリームボックス社の「ACT−L3」、マイクロソフト社の「WINDOWS(登録商標) MEDIA VIDEO」などが挙げられる。このフレーム間圧縮方式は、動画圧縮として高い圧縮率を得られるという利点がある。このため、データ量の多いオリジナル映像信号を高圧縮率で圧縮して、伝送データ量を低減できるので、オリジナル映像信号の高画質を維持する観点からは好ましい。 This inter-frame compression method is a method for extracting and compressing only the difference between frames before and after the video signal, for example, between “1/2 second to several tens of seconds”. For example, “MPEG2”, “MPEG4” ”,“ H.264 ”,“ ACT-L3 ”from Streambox,“ WINDOWS (registered trademark) MEDIA VIDEO ”from Microsoft, and the like. This inter-frame compression method has an advantage that a high compression rate can be obtained as moving image compression. For this reason, an original video signal with a large amount of data can be compressed at a high compression rate to reduce the amount of transmission data, which is preferable from the viewpoint of maintaining high image quality of the original video signal.
反面、このフレーム間圧縮方式は、圧縮・伸張処理に時間がかかるため、映像信号の伝送に遅延が生じるという欠点がある。即ち、上記差分を抽出する時間だけ、バッファに映像信号を蓄積して解析する必要があるため、エンコーダ出力が遅延してしまう。さらに、デコーダにおける伸張処理においても、受信した圧縮データをバッファに展開する際に前後のフレームの映像信号を参照するために、伸張した映像信号をバッファに蓄積して補正を行う必要があるので、出力に遅延が生じてしまう。 On the other hand, this inter-frame compression method has a drawback in that a delay occurs in transmission of a video signal because it takes time for compression / decompression processing. That is, since it is necessary to accumulate and analyze the video signal in the buffer for the time for extracting the difference, the encoder output is delayed. Further, in the decompression process in the decoder, it is necessary to store and decompress the decompressed video signal in order to refer to the video signals of the preceding and succeeding frames when the received compressed data is expanded in the buffer. There will be a delay in the output.
従って、従来のようにオリジナル映像信号のみをフレーム間圧縮方式で圧縮して伝送した場合には、圧縮・伸張処理に伴う大きな遅延(例えば数秒程度)が生じるため、操作者は、遅延したオリジナル映像を視認しながらでは、フォーカス調整などの撮像装置3の動作を好適に操作することができなかった。そこで、本実施形態では、上記操作用映像信号生成手段6により、オリジナル映像信号よりもデータ量及び遅延が少ない操作用映像信号を生成し、この操作用映像信号を第2のエンコーダ12で圧縮して伝送する手法を採用している。
Therefore, when only the original video signal is compressed and transmitted by the inter-frame compression method as in the past, a large delay (for example, about several seconds) is caused by the compression / decompression process, so that the operator can While viewing the image, the operation of the
第2のエンコーダ12は、操作用映像信号生成手段6から入力される操作用映像信号を、第2の圧縮方式で圧縮(エンコード)する。この第2の圧縮方式は、上記第1圧縮方式(フレーム間圧縮方式)とは異なり、フレーム内圧縮方式(空間圧縮方式)を採用することが好ましい。このフレーム内圧縮方式は、映像信号を1フレームごとに圧縮する方式であり、例えば、「MotionJPEG」、「Huffyuv」、「無圧縮AVI」、ストリームボックス社の「RMS」、「DV形式」などが挙げられる。かかるフレーム内圧縮方式は、上記フレーム間圧縮方式と比較して、圧縮率は低いものの、圧縮・伸張処理が高速であり、圧縮・伸張処理に伴う遅延が小さいという利点がある。このため、上記データ量が少ない操作用映像信号をフレーム内圧縮方式で圧縮して伝送すれば、ほとんど遅延なく(例えば2/30秒程度以内)、操作用映像を表示できるので、操作者は、この操作用映像信号を視認して撮像装置3の動作を的確に操作することができる。
The
なお、本実施形態にかかる撮像装置3が出力するオリジナル映像信号はデジタル信号であったが、当該オリジナル映像信号がアナログ信号である場合には、第1のエンコーダ11及び第2のエンコーダ12が、アナログ信号であるオリジナル映像信号と操作用映像信号をそれぞれ、デジタル信号に変換するAD変換部を具備して、このAD変換部によりAD変換後のデジタル信号をそれぞれ圧縮するようにしてもよい。
Note that the original video signal output from the
混合器13は、上記第1のエンコーダ11から入力されるオリジナル映像信号の圧縮データと、上記第2のエンコーダ12から入力される操作用映像信号の圧縮データとを混合して、通信インターフェース14に出力する。
The
通信インターフェース14は、第1の伝送手段10と第2の伝送手段20との間で通信回線2を介したIP通信を行うためのインターフェースであり、例えば、上記映像信号の圧縮データに所定のデータ処理(例えばIPパケット化処理など)を行う。なお、この通信インターフェース14は、第1のエンコーダ11と混合器13との間、並びに、第2のエンコーダ12と混合器13との間にそれぞれ設けられてもよい。
The
制御信号受信部15は、撮像装置3の動作を制御するために操作装置4により生成された制御信号を、第2の伝送手段20から通信回線2を介して受信し、この制御信号を撮像装置3の撮像装置制御部33に出力する。
The control
次に、第2の伝送手段20について説明する。第2の伝送手段20は、上記第1の伝送手段10との間で、通信回線2を介して映像信号の圧縮データ及び制御信号を送受信するとともに、受信した映像信号の圧縮データを伸張して出力する機能を有する。具体的には、この第2の伝送手段20は、上記第1の伝送手段10から通信回線2を介して、オリジナル映像信号の圧縮データを受信して伸張すると同時に、操作用映像信号の圧縮データを受信して伸張する。また、第2の伝送手段20は、操作装置4から入力された撮像装置3を制御するための制御信号を、通信回線2を介して第1の伝送手段10に送信する。
Next, the second transmission means 20 will be described. The second transmission means 20 transmits / receives compressed data of the video signal and the control signal to / from the first transmission means 10 via the
詳細には、かかる第2の伝送手段20は、オリジナル映像信号の圧縮データを上記第1の圧縮方式で伸張する第1のデコーダ21と、操作用映像信号の圧縮データを上記第2の圧縮方式で伸張する第2のデコーダ22と、オリジナル映像信号の圧縮データと操作用映像信号の圧縮データとを分離する分離器23と、通信回線2を介した通信を行うための通信インターフェース24と、制御信号送信部25とを備える。
Specifically, the second transmission means 20 includes a
通信インターフェース24は、第1の伝送手段10と第2の伝送手段20との間で通信回線2を介したIP通信を行うためのインターフェースであり、例えば、上記映像信号の圧縮データに所定のデータ処理(例えばIPパケット整列化処理など)を行う。なお、この通信インターフェース24は、第1のデコーダ21と分離器23との間、並びに、第2のデコーダ22と分離器23との間にそれぞれ設けられてもよい。
The
分離器23は、通信インターフェース24から入力された伝送データから、上記オリジナル映像信号の圧縮データと上記操作用映像信号の圧縮データとを分離し、オリジナル映像信号の圧縮データを第1のデコーダ21に出力し、操作用映像信号の圧縮データを第2のデコーダ22に出力する。
The
第1のデコーダ21は、上記第1のエンコーダ11に対応する構成要素であり、第1のエンコーダ11と同一の第1の圧縮方式(フレーム間圧縮方式)で、圧縮データを伸張する。即ち、第1のデコーダ21は、上記第1の伝送手段10から受信したオリジナル映像信号の圧縮データを、上記第1の圧縮方式で伸張して、元のオリジナル映像信号に戻す。この伸張処理では、フレーム間圧縮方式を使用するため、上述した理由で比較的大きな遅延が生じる。第1のデコーダ21は、伸張したオリジナル映像信号を表示装置5に出力し、表示装置5はこのオリジナル映像信号に対応するオリジナル映像を表示する。
The
第2のデコーダ22は、上記第2のエンコーダ12に対応する構成要素であり、第2のエンコーダ12と同一の第2の圧縮方式(フレーム内圧縮方式)で、圧縮データを伸張する。即ち、第2のデコーダ22は、上記第1の伝送手段10から受信した操作用映像信号の圧縮データを、上記第2の圧縮方式で伸張して、元の操作用映像信号に戻す。この伸張処理では、フレーム内圧縮方式を使用するため、高速処理が可能であり、オリジナル映像信号の伸張処理と比べて遅延が大幅に少ない。第2のデコーダ22は、伸張した操作用映像信号を表示装置5に出力し、表示装置5はこの操作用映像信号に対応する操作用映像を表示する。
The
制御信号送信部25は、操作装置4から、撮像装置3の動作を制御するための制御信号が入力され、この制御信号を通信回線2を介して第1の伝送手段10に送信する。
The control
以上、図1を参照しながら、本実施形態にかかる撮像装置の遠隔制御システム1における各部の構成について説明した。次に、上記撮像装置の遠隔制御システム1の動作を説明する。
The configuration of each unit in the
撮像装置3は、被写体を撮像処理して、この撮像処理により得られたオリジナル映像信号を、第1の伝送手段10と操作用映像信号生成手段6にそれぞれ出力する。第1の伝送手段10は、撮像装置3から連続的に出力されるオリジナル映像信号を、第1のエンコーダ11によりフレーム間圧縮方式(第1の圧縮方式)で圧縮して、伝送用の圧縮データに変換した後に、通信回線2を介して第2の伝送手段20に送信する。さらに、第2の伝送手段20は、第1の伝送手段10から送信されたオリジナル映像信号の圧縮データを受信し、当該圧縮データを第1のデコーダ21によりフレーム間圧縮方式で伸張して、元のオリジナル映像信号に戻して表示装置5に出力する。この結果、表示装置5は、入力されたオリジナル映像信号に対応するオリジナル映像を表示画面に表示する。
The
さらに、このようなオリジナル映像信号の伝送、表示処理と同時並行して、操作用映像信号の伝送、表示処理も実行される。具体的には、操作用映像信号生成手段6は、撮像装置3から出力されるオリジナル映像信号を処理して上記操作用映像信号を生成し、第1の伝送手段10に出力する。この操作用映像信号は、上記のように、操作者が所望の操作を実行可能な最低限の画質、画面範囲の映像を表示するために必要な最小限のデータ量の映像信号であるので、圧縮率が低くても高速伝送が可能である。第1の伝送手段10は、操作用映像信号生成手段6から連続的に出力される操作用映像信号を、第2のエンコーダ12によりフレーム内圧縮方式(第2の圧縮方式)で圧縮して、伝送用の圧縮データに変換した後に、通信回線2を介して第2の伝送手段20に送信する。さらに、第2の伝送手段20は、第1の伝送手段10から送信された操作用映像信号の圧縮データを受信し、当該圧縮データを第2のデコーダ22によりフレーム内圧縮方式で伸張して、元の操作用映像信号に戻して表示装置5に出力する。表示装置5は、入力された操作用映像信号に対応する操作用映像を表示画面に表示する。
Further, in parallel with such transmission and display processing of the original video signal, transmission and display processing of the operation video signal are also executed. Specifically, the operation video
そして、操作者が、表示装置5に表示された操作用映像を視認しながら、撮像装置3の動作を制御するために操作装置4を操作すると、これに応じて、操作装置4は、操作者の入力操作に応じた制御信号を生成して第2の伝送手段20に出力する。第2の伝送手段20は、入力された制御信号を通信回線2を介して第1の伝送手段10に送信し、第1の伝送手段10は、当該制御信号を撮像装置3の撮像装置制御部33に出力する。これによって、操作装置4により生成された制御信号に基づいて、撮像装置3の動作(例えば、フォーカス調整)が遠隔制御される。
Then, when the operator operates the operation device 4 to control the operation of the
次に、図2を参照して、上記第1の実施形態にかかる撮像装置の遠隔制御システム1のより具体的な構成について詳細に説明する。図2は、本実施形態にかかる撮像装置の遠隔制御システム1の詳細構成を示すブロック図である。
Next, a more specific configuration of the
図2に示すように、遠隔制御システム1は、上記撮像装置3と、上記操作用映像信号生成手段6の一例である「HD−SDI to NTSCダウンコンバータ61」と、上記第1の伝送手段10と、上記第2の伝送手段20と、操作装置4と、表示装置5の一例であるHDモニタ5a及びRGBモニタ5bと、を備える。
As shown in FIG. 2, the
撮像装置3は、HDTV用のカメラ31と、上記雲台32と、上記撮像装置制御部33とを備える。HDTV用のカメラ31は、被写体を撮像して、高画質のHD映像信号であるオリジナル映像信号(HD)を出力する。雲台32及び撮像装置制御部33の機能構成は上述した通りである。
The
HD−SDI to NTSCダウンコンバータ61(以下、「ダウンコンバータ61」と称する。)は、上記操作用映像信号生成手段6として機能する。このダウンコンバータ61は、撮像装置3から出力されるHD−SDI信号であるオリジナル映像信号(HD)をNTSCアナログ信号に変換することによって、操作用映像信号(SD)を生成する。これにより、オリジナル映像信号(HD)よりもデータ量が大幅に少ない操作用映像信号(SD)を生成できる。
The HD-SDI to NTSC down converter 61 (hereinafter referred to as “down
次に、第1の伝送手段10について説明する。第1の伝送手段10は、撮像装置3から入力されるオリジナル映像信号(HD)をフレーム間圧縮方式で圧縮する第1のエンコーダ11と、ダウンコンバータ61から入力される操作用映像信号(SD)をフレーム内圧縮方式で圧縮する第2のエンコーダ12と、相異なる回線間の接続(例えば、デジタル専用回線とイーサネット(登録商標)との接続)を仲介するルータ131と、制御信号受信部15とを備える。
Next, the first transmission means 10 will be described. The first transmission means 10 includes a
第1のエンコーダ11は、例えば、HD−SDIの通信フォーマットに従うオリジナル映像信号(HD)から映像としてのデータを取り込む(即ち、キャプチャする)HD−SDIキャプチャ部111と、上記キャプチャされたオリジナル映像信号(HD)を「MPEG2」等のフレーム間圧縮方式(第1の圧縮方式)で圧縮・コード化するフレーム間データ圧縮部112と、フレーム間データ圧縮部112から出力される圧縮データを通信回線2で伝送できるようにパケット化するIPパケット化部113と、通信回線2に接続するためのハードウエア(例えばイーサネット(登録商標)回路)であるネットワーク回路114とを備える。
The
かかる構成の第1のエンコーダ11は、撮像装置3から入力されるオリジナル映像信号(HD)をキャプチャした後にフレーム間圧縮方式で圧縮して、パケット化された圧縮データを生成し、このオリジナル映像信号(HD)の圧縮データを、ルータ131及び通信回線2を介して第2の伝送手段20に送信する。
The
第2のエンコーダ12は、例えば、NTSCアナログ信号である操作用映像信号(SD)から映像としてのデータを取り込む(即ち、キャプチャする)NTSCキャプチャ部121と、上記キャプチャされた操作用映像信号(SD)を「MotionJPEG」等のフレーム内圧縮方式(第2の圧縮方式)で圧縮・コード化するフレーム内データ圧縮部122と、フレーム内データ圧縮部122から出力される圧縮データを通信回線2で伝送できるようにパケット化するIPパケット化部123と、通信回線2に接続するためのハードウエアであるネットワーク回路124とを備える。
For example, the
かかる構成の第2のエンコーダ12は、ダウンコンバータ61から入力される操作用映像信号(SD)をキャプチャした後にフレーム内圧縮方式で圧縮して、パケット化された圧縮データを生成し、この操作用映像信号(SD)の圧縮データを、ルータ131及び通信回線2を介して第2の伝送手段20に送信する。
The
制御信号受信部15は、例えば、IPとRS−232Cとに間でのプロトコル変換を行うIP/RS−232Cプロトコル変換部151と、撮像装置3との間でRS−232Cケーブルを介してデータ通信するためのRS−232C回路152と、上記ルータ131と、上記ネットワーク回路124とから構成される。この制御信号受信部15は、撮像装置3の動作を制御するために操作装置4により生成された制御信号を、第2の伝送手段20から通信回線2を介して受信し、この制御信号を例えばRS−232Cケーブルを介して撮像装置3の撮像装置制御部33に出力する。
For example, the control
なお、図2におけるネットワーク回路114、ネットワーク回路124、及びルータ131は、上記図1の混合器13に対応する構成要素であり、また、図2におけるIPパケット化部113及びIPパケット化部123は、上記図1の通信インターフェース14に対応する構成要素である。
The
次に、第2の伝送手段20について説明する。第2の伝送手段20は、第1の伝送手段10から受信したオリジナル映像信号(HD)の圧縮データをフレーム間圧縮方式で伸張する第1のデコーダ21と、第1の伝送手段10から受信した操作用映像信号(SD)をフレーム内圧縮方式で伸張する第2のデコーダ22と、相異なる回線間の接続を仲介するルータ231と、制御信号送信部25とを備える。
Next, the second transmission means 20 will be described. The second transmission means 20 receives from the first transmission means 10 the
第1のデコーダ21は、例えば、通信回線2に接続するためのハードウエアであるネットワーク回路211と、通信回線2を介した伝送時にオリジナル映像信号(HD)の圧縮データのパケット順序が乱れている場合に、当該パケットの順序を整えるIPパケット整列化部212と、オリジナル映像信号(HD)の圧縮データを「MPEG2」等のフレーム間圧縮方式(第1の圧縮方式)で伸張するフレーム間データ伸張部213と、オリジナル映像信号(HD)をHDモニタ5aに表示するための処理を行うHD−SDI回路214と、を備える。
The
かかる構成の第1のデコーダ21は、通信回線2及びルータ231を介して伝送されてきたオリジナル映像信号(HD)の圧縮データを、フレーム間圧縮方式で伸張して、元のオリジナル映像信号(HD)に戻し、当該オリジナル映像信号(HD)をHDモニタ5aに出力して表示させる。
The
第2のデコーダ22は、例えば、通信回線2に接続するためのハードウエアであるネットワーク回路221と、通信回線2を介した伝送時に操作用映像信号(SD)の圧縮データのパケット順序が乱れている場合に、当該パケットの順序を整えるIPパケット整列化部222と、操作用映像信号(SD)の圧縮データを「MotionJPEG」等のフレーム内圧縮方式(第2の圧縮方式)で伸張するフレーム内データ伸張部223と、操作用映像信号(SD)をRGBモニタ5bに表示するための処理を行うRGB回路224と、を備える。
The
かかる構成の第2のデコーダ22は、通信回線2及びルータ231を介して伝送されてきた操作用映像信号(SD)の圧縮データを、フレーム内圧縮方式で伸張して、元の操作用映像信号(SD)に戻し、当該操作用映像信号(SD)をRGBモニタ5bに出力して表示させる。
The
制御信号送信部25は、例えば、操作装置4との間でRS−232Cケーブルを介してデータ通信するためのRS−232C回路251と、RS−232CとIPとの間でのプロトコル変換を行うRS−232C/IPプロトコル変換部252と、上記ルータ231と、上記ネットワーク回路221とから構成される。この制御信号送信部25は、撮像装置3の動作を制御するための制御信号が、操作装置4から例えばRS−232Cケーブルを介して入力され、当該制御信号を通信回線2を介して第1の伝送手段10に送信する。
The control
なお、図2におけるネットワーク回路211、ネットワーク回路221、及びルータ231は、上記図1の分離器23に対応する構成要素であり、また、図2におけるIPパケット整列化部212及びIPパケット整列化部222は、上記図1の通信インターフェース24に対応する構成要素である。
The
HDモニタ5aは、HD映像信号を表示出力可能な表示装置であり、第1のデコーダ21から入力されたオリジナル映像信号(HD)に対応するオリジナル映像を表示する。RGBモニタ5bは、SD映像信号を表示出力可能な表示装置であり、第2のデコーダ22から入力された操作用映像信号(SD)に対応する操作用映像を表示する。このように2つの表示装置を設置することにより、操作者は、操作装置4を用いて撮像装置3を遠隔操作するときは、RGBモニタ5bの操作用映像を視認すればよく、一方、撮像装置3により撮像された映像(例えば、テレビジョン放送される高画質の映像)の状態及び品質を確認するときなどには、HDモニタ5aのオリジナル映像を視認すればよいので、便利である。
The HD monitor 5 a is a display device that can display and output an HD video signal, and displays an original video corresponding to the original video signal (HD) input from the
このような、図2に示す撮像装置の遠隔制御システム1では、HD映像信号であるオリジナル映像信号(HD)をNTSC準拠のSD映像信号に変換することによって、データ量が少ない操作用映像信号(SD)を生成して、この操作用映像信号(SD)を上記オリジナル映像信号(HD)とともに、通信回線2を介して操作装置4側に伝送して、RGBモニタ5bに操作用映像を表示することができる。
In such a
以上、図1及び図2を参照して、本実施形態にかかる撮像装置の遠隔制御システム1について詳細に説明した。本実施形態にかかる撮像装置の遠隔制御システム1によれば、従来のエンコーダ・デコーダと同様に、高画質でデータ量が大きいオリジナル映像信号を、第1のエンコーダ11で圧縮・コード化し、通信回線2を介して第2の伝送手段20に送信し、このオリジナル映像信号の圧縮データを第1のデコーダ21で伸張して、元のオリジナル映像信号に戻し、表示装置5にオリジナル映像を表示することができる。
The
さらに、このような従来のエンコーダ・デコーダの機能に加えて、本実施形態では、オリジナル映像信号から、低画質でデータ量が少ない上に遅延時間も小さい操作用映像信号(例えば、撮像装置3のフォーカスを合わせるために必要な最小限のデータ量の映像信号)を生成して、第2のエンコーダ12で圧縮・コード化し、この操作用映像信号の圧縮データを上記オリジナル映像信号の圧縮データとともに、通信回線2を介して操作装置4側の第2の伝送手段20に送信し、当該操作用映像信号の圧縮データを第2のデコーダ22で伸張して、元の操作用映像信号に戻し、表示装置5に操作用映像を表示することができる。
Further, in addition to the functions of the conventional encoder / decoder, in the present embodiment, an operation video signal (for example, of the imaging device 3) having a low image quality, a small amount of data, and a small delay time from the original video signal. A video signal having a minimum amount of data necessary for focusing), and compressed and encoded by the
このように、本実施形態では、オリジナル映像信号と操作用映像信号の2系統の映像信号を、第1の伝送手段10(エンコーダ機能)と第2の伝送手段20(デコーダ機能)との間で伝送できるようになっている。 As described above, in this embodiment, the two video signals of the original video signal and the operation video signal are transmitted between the first transmission unit 10 (encoder function) and the second transmission unit 20 (decoder function). It can be transmitted.
そして、上記操作用映像信号は、データ量が少ないため、低圧縮率で圧縮して伝送しても伝送帯域を比較的少なく使用して伝送できる上に、圧縮・伸張処理のための遅延時間も少ない。このため、高圧縮率での圧縮・伸張処理が必要なオリジナル映像信号の伝送に大きな遅延(例えば数秒程度)が発生する場合であっても、操作用映像信号が僅かの遅延(例えば2/30秒程度)で同時に、操作装置4側に伝送されてくる。従って、当該操作用映像信号を表示装置5に表示することで、撮像装置3によって現在撮像されている映像をほぼリアルタイムで表示できることになる。
Since the operation video signal has a small amount of data, it can be transmitted using a relatively small transmission band even if it is compressed and transmitted at a low compression rate, and also has a delay time for compression / decompression processing. Few. Therefore, even when a large delay (for example, about several seconds) occurs in transmission of an original video signal that requires compression / expansion processing at a high compression rate, the operation video signal has a slight delay (for example, 2/30). At the same time, it is transmitted to the controller 4 side. Therefore, by displaying the operation video signal on the
よって、操作者は、表示装置5に表示された操作用映像を視認して、撮像装置3の動作を容易に操作することが可能である。例えば、撮像装置3のフォーカスを調整する際には、操作者が、フォーカスダイヤル41を回す操作を行うと、その操作が表示中の操作用映像に迅速に反映されるので、フォーカスダイヤル41を過剰に回してしまうことがなく、所望の被写体に容易かつ正確で速くフォーカスを合わせることが可能になる。また、これと同様にして、ズーム調整、パン・チルト駆動についても容易かつ正確で速く操作できる。
Therefore, the operator can easily operate the operation of the
このように、撮像装置3の動作を容易に操作することができれば、例えば、テレビジョン放送の生放送中に、パンニンング・チルティングにより目標とする被写体を画面内に的確に捉えて撮像したり、パンニンング・チルティングにより変化する被写体に対してフォーカスを正確に合わせて撮像したりできるので、遠隔制御システム1の利便性を向上させることができる。
In this way, if the operation of the
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。 As mentioned above, although preferred embodiment of this invention was described referring an accompanying drawing, it cannot be overemphasized that this invention is not limited to the example which concerns. It will be apparent to those skilled in the art that various changes and modifications can be made within the scope of the claims, and these are naturally within the technical scope of the present invention. Understood.
例えば、上記実施形態では、オリジナル映像信号の圧縮方式をフレーム間圧縮方式とし、操作用映像信号の圧縮方式をフレーム内圧縮方式とする例について説明したが、本発明はかかる例に限定されない。例えば、オリジナル映像信号の圧縮方式と操作用映像信号の圧縮方式とを同一の圧縮方式(例えば、ともにフレーム間圧縮方式)にしてもよい。これによっても、オリジナル映像信号よりも操作用映像信号のデータ量が十分に小さければ、フレーム間圧縮の間隔を短くすることで、圧縮・伸張処理に要する時間が短くなるため、操作用映像信号の圧縮・伸張処理に伴う遅延を、撮像装置3の操作を好適に実行可能な程度に低減することができる。
For example, in the above-described embodiment, an example in which the compression method of the original video signal is the inter-frame compression method and the compression method of the operation video signal is the intra-frame compression method is described, but the present invention is not limited to such an example. For example, the compression method of the original video signal and the compression method of the operation video signal may be the same compression method (for example, both are inter-frame compression methods). Even in this case, if the data amount of the operation video signal is sufficiently smaller than that of the original video signal, the time required for the compression / decompression process can be shortened by shortening the inter-frame compression interval. The delay associated with the compression / decompression process can be reduced to such an extent that the operation of the
また、上記操作用映像信号生成手段6を撮像装置3に内蔵することにより、カメラ31またはレンズ装置31aから操作用映像信号を出力することも可能である。この場合、HD映像信号からSD映像信号を切り出したり、HD映像信号をビット低減したりするのではなく、操作用映像信号専用のCCD撮像素子を用いて操作用映像信号を取り出すようにしてもよい。
Further, by incorporating the operation video signal generating means 6 in the
また、通信回線2として複数本の回線を使用することで、オリジナル映像信号を伝送する回線と、操作用映像信号を伝送する回線とを分離することも可能である。
Further, by using a plurality of lines as the
また、パケット消失時の補正パケットをオリジナル映像信号の送出時に付加する方式にして、操作用映像信号の送出時には補正パケットを付加しない方式にすることにより、操作用映像信号の送出に伴う伝送帯域の増加を数パーセントでも低減するようにすることも可能である。 In addition, a method of adding a correction packet at the time of packet loss at the time of sending the original video signal and a method of adding no correction packet at the time of sending the operation video signal makes it possible to reduce the transmission band accompanying the transmission of the video signal for operation. It is also possible to reduce the increase by a few percent.
本発明は、撮像装置の遠隔制御システムに適用可能であり、例えば、テレビジョン放送用途や監視カメラ用途で用いられる撮像装置の遠隔制御システムに適用可能である。 The present invention can be applied to a remote control system of an image pickup apparatus, and can be applied to, for example, a remote control system of an image pickup apparatus used for television broadcast use or surveillance camera use.
1 撮像装置の遠隔制御システム
2 通信回線
3 撮像装置
4 操作装置
5 表示装置
6 操作用映像信号生成手段
10 第1の伝送手段
11 第1のエンコーダ
12 第2のエンコーダ
13 混合器
14 通信インターフェース
15 制御信号受信部
20 第2の伝送手段
21 第1のデコーダ
22 第2のデコーダ
23 分離器
24 通信インターフェース
25 制御信号送信部
31 カメラ
32 雲台
33 撮像装置制御部
41 フォーカスダイヤル
42 ズームダイヤル
43 ジョイスティック
112 フレーム間データ圧縮部
122 フレーム内データ圧縮部
213 フレーム間データ伸張部
223 フレーム内データ伸張部
DESCRIPTION OF
Claims (6)
前記撮像装置から出力されるオリジナル映像信号、よりもデータ量が少ない操作用映像信号を生成する操作用映像信号生成手段と;
前記撮像装置から出力される前記オリジナル映像信号、及び前記操作用映像信号生成手段から出力される前記操作用映像信号をそれぞれ圧縮して、前記オリジナル映像信号の圧縮データ及び前記操作用映像信号の圧縮データを、前記通信回線を介して送信する第1の伝送手段と;
前記第1の伝送手段から前記通信回線を介して前記オリジナル映像信号の圧縮データ及び前記操作用映像信号の圧縮データを受信し、前記オリジナル映像信号の圧縮データ及び前記操作用映像信号の圧縮データをそれぞれ伸張する第2の伝送手段と;
前記操作装置の操作者が視認可能な位置に配置され、前記第2の伝送手段によって伸張された前記操作用映像信号を表示する表示装置と;
を備えることを特徴とする、撮像装置の遠隔制御システム。 An imaging apparatus remote control system in which an imaging apparatus and an operation apparatus are connected via a communication line, and a control signal is transmitted from the operation apparatus to the imaging apparatus via the communication line to remotely control the imaging apparatus. :
An operation video signal generating means for generating an operation video signal having a smaller amount of data than the original video signal output from the imaging device;
The original video signal output from the imaging device and the operation video signal output from the operation video signal generation unit are respectively compressed to compress the compressed data of the original video signal and the operation video signal. First transmission means for transmitting data via the communication line;
The compressed data of the original video signal and the compressed data of the operation video signal are received from the first transmission means via the communication line, and the compressed data of the original video signal and the compressed data of the operation video signal are received. A second transmission means each extending;
A display device arranged to be visible to an operator of the operation device and displaying the operation video signal expanded by the second transmission means;
A remote control system for an imaging apparatus, comprising:
前記オリジナル映像信号を第1の圧縮方式で圧縮する第1のエンコーダと、
前記操作用映像信号を前記第1の圧縮方式と異なる第2の圧縮方式で圧縮する第2のエンコーダと、
を備え、
前記第2の伝送手段は、
前記オリジナル映像信号を前記第1の圧縮方式で伸張する第1のデコーダと、
前記操作用映像信号を前記第2の圧縮方式で伸張する第2のデコーダと、
を備えることを特徴とする、請求項1に記載の撮像装置の遠隔制御システム。 The first transmission means includes
A first encoder for compressing the original video signal by a first compression method;
A second encoder for compressing the operation video signal by a second compression method different from the first compression method;
With
The second transmission means includes
A first decoder for decompressing the original video signal by the first compression method;
A second decoder for decompressing the operation video signal by the second compression method;
The remote control system for an imaging apparatus according to claim 1, comprising:
前記第2の圧縮方式は、フレーム内圧縮方式であることを特徴とする、請求項2に記載の撮像装置の遠隔制御システム。 The first compression method is an inter-frame compression method,
The remote control system for an imaging apparatus according to claim 2, wherein the second compression method is an intra-frame compression method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006297736A JP2008118271A (en) | 2006-11-01 | 2006-11-01 | Remote control system of imaging apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006297736A JP2008118271A (en) | 2006-11-01 | 2006-11-01 | Remote control system of imaging apparatus |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008118271A true JP2008118271A (en) | 2008-05-22 |
Family
ID=39503873
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006297736A Withdrawn JP2008118271A (en) | 2006-11-01 | 2006-11-01 | Remote control system of imaging apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2008118271A (en) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011511382A (en) * | 2008-02-06 | 2011-04-07 | ローズマウント インコーポレイテッド | Digitally compensated process transmitter with minimal dead time |
| JP2013504936A (en) * | 2009-09-10 | 2013-02-07 | アップル インコーポレイテッド | Video format for digital video recorder |
| CN103312961A (en) * | 2012-03-06 | 2013-09-18 | 索尼公司 | Imaging apparatus and image transmitting method |
| US8731374B2 (en) | 2009-09-10 | 2014-05-20 | Apple Inc. | Video format for digital video recorder |
| JP2014512716A (en) * | 2011-02-18 | 2014-05-22 | ビデオリンク・エルエルシー | Remote control studio, camera system |
| US9661373B2 (en) | 2012-11-19 | 2017-05-23 | Videolink Llc | Internet-based video delivery system |
| JP2017123548A (en) * | 2016-01-06 | 2017-07-13 | キヤノン株式会社 | Electronic device, control method therefor, program, and storage medium |
| JP2019523618A (en) * | 2016-08-03 | 2019-08-22 | デジェロ ラブス インコーポレイテッド | System and method for controlling data stream changes |
| WO2019239697A1 (en) * | 2018-06-13 | 2019-12-19 | 日本電気株式会社 | Controlled device, control method, non-transitory computer-readable medium, and remote control system |
| JP2022182529A (en) * | 2021-05-28 | 2022-12-08 | 住友重機械工業株式会社 | Remote operation support system, remote operation support device |
-
2006
- 2006-11-01 JP JP2006297736A patent/JP2008118271A/en not_active Withdrawn
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011511382A (en) * | 2008-02-06 | 2011-04-07 | ローズマウント インコーポレイテッド | Digitally compensated process transmitter with minimal dead time |
| JP2013504936A (en) * | 2009-09-10 | 2013-02-07 | アップル インコーポレイテッド | Video format for digital video recorder |
| US8731374B2 (en) | 2009-09-10 | 2014-05-20 | Apple Inc. | Video format for digital video recorder |
| US8737825B2 (en) | 2009-09-10 | 2014-05-27 | Apple Inc. | Video format for digital video recorder |
| US9215402B2 (en) | 2009-09-10 | 2015-12-15 | Apple Inc. | Video format for digital video recorder |
| JP2014512716A (en) * | 2011-02-18 | 2014-05-22 | ビデオリンク・エルエルシー | Remote control studio, camera system |
| US9497373B2 (en) | 2011-02-18 | 2016-11-15 | Videolink Llc | Remote controlled studio camera system |
| US9661209B2 (en) | 2011-02-18 | 2017-05-23 | Videolink Llc | Remote controlled studio camera system |
| CN103312961B (en) * | 2012-03-06 | 2017-10-17 | 索尼半导体解决方案公司 | Camera device and image transfer method |
| CN103312961A (en) * | 2012-03-06 | 2013-09-18 | 索尼公司 | Imaging apparatus and image transmitting method |
| JP2013187606A (en) * | 2012-03-06 | 2013-09-19 | Sony Corp | Imaging apparatus and image transmission method |
| US9661373B2 (en) | 2012-11-19 | 2017-05-23 | Videolink Llc | Internet-based video delivery system |
| JP2017123548A (en) * | 2016-01-06 | 2017-07-13 | キヤノン株式会社 | Electronic device, control method therefor, program, and storage medium |
| JP2019523618A (en) * | 2016-08-03 | 2019-08-22 | デジェロ ラブス インコーポレイテッド | System and method for controlling data stream changes |
| US11375249B2 (en) | 2016-08-03 | 2022-06-28 | Dejero Labs Inc. | System and method for controlling data stream modifications |
| JP7251791B2 (en) | 2016-08-03 | 2023-04-04 | デジェロ ラブス インコーポレイテッド | Systems and methods for controlling data stream changes |
| US11792449B2 (en) | 2016-08-03 | 2023-10-17 | Dejero Labs Inc. | System and method for controlling data stream modifications |
| WO2019239697A1 (en) * | 2018-06-13 | 2019-12-19 | 日本電気株式会社 | Controlled device, control method, non-transitory computer-readable medium, and remote control system |
| JPWO2019239697A1 (en) * | 2018-06-13 | 2021-07-01 | 日本電気株式会社 | Control target device, control method, control program, and remote control system |
| US11477748B2 (en) | 2018-06-13 | 2022-10-18 | Nec Corporation | Apparatus to be controlled, control method, non- transitory computer readable medium, and remote control system |
| JP2022182529A (en) * | 2021-05-28 | 2022-12-08 | 住友重機械工業株式会社 | Remote operation support system, remote operation support device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CA2283266C (en) | Method and apparatus for still picture transmission and display | |
| JP3684525B2 (en) | Multi-screen composition method and multi-screen composition device | |
| JP4421898B2 (en) | Method and system for remote wireless video surveillance | |
| JP2008507898A (en) | High-speed channel switching in digital media systems | |
| US10200633B2 (en) | Camera system, video selection apparatus and video selection method | |
| US20110285863A1 (en) | Live television broadcasting system for the internet | |
| US9749542B2 (en) | Decoder and monitor system | |
| US9948903B2 (en) | Method for configuration of video stream output from a digital video camera | |
| JP2008118271A (en) | Remote control system of imaging apparatus | |
| US20130088561A1 (en) | Television system and control method thereof | |
| JP4100146B2 (en) | Bi-directional communication system, video communication device | |
| US20150109436A1 (en) | Smart Dual-View High-Definition Video Surveillance System | |
| JP2008109364A (en) | Camera server system, processing method for data, and camera server | |
| KR101352860B1 (en) | Multi stream system and multi stream display method thereof | |
| JP4104577B2 (en) | Image transmission apparatus, image transmission method, transmission system, and video surveillance system | |
| JP2004282762A (en) | Control method and its system for remote video processing circuit | |
| JP6045051B1 (en) | Moving picture transmission apparatus and moving picture transmission method | |
| JP2008515273A (en) | Method for encoding partial video images | |
| EP1374579A4 (en) | LATERAL CHANNEL WITH HIGH RESOLUTION GRAPHICS IN VIDEOCONFERENCE | |
| KR100669997B1 (en) | Web camera | |
| JP2006339733A (en) | Image transmission method and image transmission system | |
| JP2006165664A (en) | Image transmission / reception system | |
| JP4787811B2 (en) | Video signal multiplex transmission device and imaging apparatus using video signal multiplex transmission device | |
| JP5289376B2 (en) | Video signal transmission device | |
| JP2010219668A (en) | Video transmission system and monitoring system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20100105 |