JPH11203299A - 情報処理装置及び方法及びシステム - Google Patents

Abstract

(57)【要約】 【課題】ユーザが手軽に一定期間内の画像をプレイバッ
クすることを可能とする。 【解決手段】ネットワーク管理部２１０を介して受信し
た映像データは映像表示部２２０によって映像ビュー２
０１として表示される。また、映像表示部２２０は、再
生管理部２５０に対して、受信した映像データを送る。
再生管理部２５０は、送られてきた映像データについ
て、過去の一定期間分の画像を動画メモリに保持すると
ともに、送られてきた映像データのうち所定の時間間隔
で受信したものを映像履歴ビュー２０３に、時系列順に
表示する。この映像履歴ビュー２０３のいずれかの画像
がマウスクリックされると、再生管理部２５０は、指示
された画像が過去のいずれの時点のものであるかを判定
し、動画メモリに保持されている画像データをその時点
より再生し、映像表示部２２０はこれを映像ビュー２０
１に表示する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、インターネットな
どの通信回線を介して映像を送信する情報処理システ
ム、及び該情報処理システムを構成するための情報処理
装置及びその方法に関する。

【０００２】

【従来の技術】近年、インターネットなどの通信回線を
通じ、動画や音声などの実時間データを放送するシステ
ムが現れている。これらのシステムの多くは計算機上で
実現されており、それらの実時間データはユーザ側で容
易に保存、加工することができる。

【０００３】

【発明が解決しようとする課題】しかしながら、これら
のシステムで保存した各種データを扱う手段は、単に蓄
積されたデータを再生するというＶＴＲに類似した方式
などに限られている。このため、手軽に素早く映像を見
ることができないという問題がある。

【０００４】例えば、蓄積されたデータのちょっと手前
の映像をみたいというような場合でも、別の画像再生用
のアプリケーションを起動して、蓄積されたデータを再
生させねばならず、操作が繁雑である。

【０００５】本発明は上記の問題に鑑みてなされたもの
であり、ユーザが手軽に一定期間内の画像をプレイバッ
クすることを可能とする情報処理装置及び方法及びシス
テムを提供することを目的とする。

【０００６】また、本発明の他の目的は、ユーザが手軽
に一定期間内のカメラアングル等の撮影状態を再現する
ことを可能とする情報処理装置及び方法及びシステムを
提供することを目的とする。

【０００７】

【課題を解決するための手段】上記の目的を達成するた
めの本発明の情報処理装置は以下の構成を備える。すな
わち、画像データを受信する受信手段と、前記受信手段
で受信した画像データを表示する第１表示手段と、前記
受信手段によって受信した過去の一定期間分の画像から
選択的に複数の画像を時系列順に表示する第２表示手段
と、前記第２表示手段で表示された複数の画像のいずれ
かを指示する指示手段と、前記指示手段で指示された画
像が、過去のいずれの時点のものであるかに基づいて所
定の処理を実行する制御手段とを備える。

【０００８】

【発明の実施の形態】以下、添付の図面を参照して本発
明の好適な実施形態を説明する。

【０００９】＜第１の実施形態＞図１は第１の実施形態
による映像送信システムの概要を示す図である。本シス
テムはネットワークにより接続されたカメラサーバ１０
０と複数台のビューア２００，３００，４００，…から
なる。カメラサーバ１００で撮影された映像はネットワ
ークを通じ、リクエストのあったコンピュータ２００，
３００，４００，…（以下、クライアント装置２００、
３００、４００…という）に対して配送される。各コン
ピュータ２００，３００，４００，…上で動作する映像
ビューアは、配送されてきた映像を表示する。更に、各
ビューアは、現在参照しているカメラサーバ１００のカ
メラをリモートコントロールすることができる。

【００１０】図２は第１の実施形態によるカメラサーバ
１００とカメラクライアント２００の各々の構成を示す
ブロック図である。

【００１１】カメラサーバ１００において、１１はＣＰ
Ｕであり、ＲＯＭ１２に格納された制御プログラムある
いはＲＡＭ１３にロードされた制御プログラムを実行す
る。１２はＲＯＭであり、ＣＰＵ１１によって実行され
る各種制御プログラムや各種データを格納する。１３は
ＲＡＭであり、必要に応じて外部記憶装置１４よりロー
ドされた、ＣＰＵ１１によって実行される各種制御プロ
グラムを格納するとともに、ＣＰＵ１１が各種制御を実
行するに際しての作業領域を提供する。１４は外部記憶
装置であり、制御プログラムとしてのアプリケーション
プログラム等を格納する。

【００１２】１５はネットワークインターフェースであ
り、ネットワークと接続し、他の装置のとの通信を可能
とする。１６はカメラインターフェースであり、カメラ
１２０で撮影された映像を取り込むと共に、カメラ１２
０の雲台を制御し、カメラ１２０の姿勢を制御する。１
７はカメラサーバ１００内のシステムバスである。

【００１３】一方、クライアント装置２００において、
２１はＣＰＵであり、ＲＯＭ２２に格納された制御プロ
グラムあるいはＲＡＭ２３にロードされた制御プログラ
ムを実行する。２２はＲＯＭであり、ＣＰＵ２１によっ
て実行される各種制御プログラムや各種データを格納す
る。２３はＲＡＭであり、必要に応じて外部記憶装置２
４よりロードされた、ＣＰＵ２１によって実行される各
種制御プログラムを格納するとともに、ＣＰＵ２１が各
種制御を実行するに際しての作業領域を提供する。後述
のビューアプログラムもＲＡＭ２３にロードされてＣＰ
Ｕ２１によって実行される。２４は外部記憶装置であ
り、制御プログラムとしてのアプリケーションプログラ
ム等を格納する。

【００１４】２５はディスプレイであり、ＣＲＴ、液晶
等によって構成される。２６は入力部であり、キーボー
ドやポインティングデバイス（本例ではマウス）を備え
ている。２７はネットワークインターフェースであり、
ネットワークと接続し、他の装置のとの通信を可能とす
る。２８はカメラサーバ１００内のシステムバスであ
る。

【００１５】ビューアは各クライアント装置上で動作す
るソフトウェアである。図３は第１の実施形態によるビ
ューアによる表示画面例を示す図である。カメラサーバ
１００の撮影した映像は映像ビュー２０１に表示され
る。ユーザは画面上のカメラ指定ボックス２０２に映像
を見たいカメラサーバの識別子を入力部２６のキーボー
ド操作によって書き込み、その後接続ボタン２０４をマ
ウスでクリックする。すると当該ビューアはネットワー
クを通じてカメラサーバ１００と接続し、カメラサーバ
１００からの映像を映像ビュー２０１に表示する。

【００１６】またカメラコントロール要求ボタン２０７
をマウスでクリックすると、ユーザは一定時間だけ、カ
メラサーバのカメラをコントロールすることができる。
カメラのコントロールはカメラコントロールボタン２０
６を操作することにより行う。カメラコントロールボタ
ン２０６のうち、２０６ａ〜２０６ｄはカメラのチルト
角、パン角を制御するためのボタンであり、２０６ｅは
ズームイン操作、２０６ｆはズームアウト操作のための
ボタンである。

【００１７】また過去一定期間内の映像が映像履歴ビュ
ー２０３に表示される。本実施形態では、左から右へ１
０，２０，３０，４０秒前の画像をフィルムロール状に
表示している。これらは時間と共に横スクロールする形
で更新されてゆく。ユーザが映像履歴ビュー２０３のい
ずれかのコマをクリックすると、映像ビュー２０１上に
その時点からの過去の映像が表示される。例えば一番右
のコマをクリックすると４０秒前からの映像が表示され
る。

【００１８】図４はビューアプログラムの機能構成を示
すブロック図である。ビューアはネットワーク管理部２
１０、再生管理部２５０、映像表示部２２０、接続管理
部２３０、ビューアカメラ制御部２４０からなってい
る。これら各機能は、ＲＯＭ２２に格納された制御プロ
グラム、あるいは外部記憶装置２４からＲＡＭ２３にロ
ードされた制御プログラムをＣＰＵ２１が実行すること
によって実現される。以下、これらの動作を、ライブ映
像表示時、再生映像表示時に分けて説明する。

【００１９】まず、ライブ映像表示時の動作について説
明する。図５はライブ映像表示時におけるビューアの動
作概要を説明する図である。図５に示すように、接続管
理部２３０は接続ボタン２０４がクリックされると（Ａ
１）、カメラ指定ボックス２０２に入力されたカメラサ
イト識別子に対応するカメラサーバ１００に対して、ネ
ットワーク管理部２１０を通じて接続要求を送る（Ａ
２）。カメラサーバ１００は、この接続要求をうけて映
像データの送信を始める。映像データはネットワーク管
理部２１０を通じて映像表示部２２０に受け取られる
（Ａ３）。映像表示部２２０はウィンドウ（映像ビュー
２０１）上にライブ映像を表示すると共に（Ａ４）、ラ
イブ映像の記録のために再生管理部２５０にも映像デー
タを送る（Ａ５）。映像データを受け取った再生管理部
２５０は、その映像データを内部に記録する（Ａ６）と
同時に、所定のタイミングで映像履歴ビュー２０３を更
新する（Ａ７）。

【００２０】次に、再生映像表示時の動作について説明
する。図６は再生映像表示時におけるビューアの動作概
要を説明する図である。ライブ映像の受信中に映像履歴
ビュー２０３がマウスによってクリックされると、その
イベントを再生管理部２５０が受け取る（Ｂ１）。映像
履歴ビューのクリックイベントを検知した再生管理部２
５０は、ネットワーク管理部２１０を通じてカメラサー
バ１００に対して映像データのポーズ要求を出し、カメ
ラサーバ１００からの映像データの出力を止める（Ｂ
２）。再生管理部２５０は映像履歴ビュー２０３のクリ
ックされた位置に対応する時刻より以降に再生管理部２
５０で記録した映像を映像表示部２２０に送る（Ｂ
３）。映像表示部２２０はウィンドウ上（映像ビュー２
０１）に再生画像を表示する（Ｂ４）。再生管理部２５
０は内部に記録した映像を再生し終わると、カメラサー
バ１００に対してネットワーク管理部２２０を通じて映
像データのポーズ解除要求を出し、通常のライブ映像の
受信状態に戻る（Ｂ５）。

【００２１】図７は本実施形態の中核となる再生管理部
２５０の内部構成を示すブロック図である。再生管理部
２５０は、イベント管理部２５１、表示管理部２５２、
動画記録部２５３、動画メモリ２５４からなる。イベン
ト管理部２５１は、ウィンドウ内の映像履歴ビュー２０
３に対するマウスクリックを検知し、再生映像表示の動
作を管理する。動画記録部２５３はイベント管理部２５
１からの指示にしたがって、映像表示部２２０からの映
像を動画メモリ２５４に記録したり、動画メモリ２５４
から映像データを読み出して映像表示部２２０に送る。
表示管理部２５２はイベント管理部からの指示にしたが
って映像管理部２２０からの動画を表示する。

【００２２】次に、図８、図９を用いて第１の実施形態
における映像表示部２２０及び再生管理部２５０の動作
を更に説明する。図８は映像表示部２２０による動作を
説明するフローチャートである。

【００２３】映像表示部２２０は、まず、初期状態にお
いて、カメラサーバからの映像データをディスプレイ２
５に表示する。ステップＳ１１では、この状態で、再生
画像表示切り換え要求あるいは映像パケット到着のいず
れかのイベントが発生するのを待つ。イベントが発生す
ると、当該イベントが再生画像表示切り換え要求である
か（ステップＳ１２）、ネットワークからの映像パケッ
トの到着であるか（ステップＳ１３）を判定する。いず
れのイベントでもない場合はステップＳ１１へ戻り、再
びイベント待ちの状態に入る。

【００２４】発生したイベントが、ネットワークからの
映像パケット到着であれば、映像データの蓄積のために
再生管理部２５０へ当該映像パケットを送信し（ステッ
プＳ１４）、当該映像パケットを映像ビュー２０１に表
示する（ステップＳ１５）。

【００２５】また、発生したイベントが、再生画像表示
切り換え要求であった場合は、ステップＳ１２からステ
ップＳ１６へ進む。ステップＳ１６では再びイベント待
ちに入るが、ここで処理されるイベントは、ライブ画像
表示要求と再生画像の到着の２つである。ライブ画像表
示要求は、再生管理部２５０による再生画像表示が終了
したときに発生するイベントであり、このイベントの発
生を検知すると、通常のライブ表示処理を行うべくステ
ップＳ１１へ戻る。また、再生画像の到着は、再生管理
部２５０からの再生画像データの到着時に発生するイベ
ントであり、このイベントを検出した場合は、この再生
画像を表示ビュー２０１に表示する（ステップＳ１
９）。

【００２６】また、図９は再生管理部２５０による動作
を説明するフローチャートである。再生管理部２５０で
は、まず、ステップＳ２１において、イベントの発生を
監視する。再生管理部２５０で処理するイベントは、映
像履歴ビュー２０３へのマウスクリックと映像表示部２
２０からの画像データ（映像パケット）の受信である。

【００２７】映像表示部２２０から画像データを受信す
ると、処理はステップＳ２３からステップＳ２４へ進
み、当該画像データの保存と、必要に応じて映像履歴ビ
ューの更新が行われる。ステップＳ２４では、前回映像
履歴ビューに表示してから一定時間が経過したかどうか
を判断し、映像履歴ビューの更新タイミングか否かを判
定する。本実施形態では、映像履歴ビュー２０３は、１
０秒間隔で更新されることになる。ステップＳ２４で映
像履歴ビューの更新タイミングであると判断されると、
ステップＳ２５へ進み、映像履歴ビューを横スクロール
する。本例では、右から左へひとこまずつスクロールす
る。この結果、一番左側に表示されていた画像は画面か
ら消去され、一番右側の矩形部分に新たに１０秒前の画
像が表示される。ステップＳ２７では映像履歴の関連情
報が格納される。映像履歴の関連情報は、例えばカメラ
制御情報（チルト角、パン角、ズーム等）があげられる
が、この情報は後述の第２の実施形態で用いられる。従
って、本第１の実施形態では省略が可能である。そして
ステップＳ２８において、今回受信した映像パケットを
動画メモリ２５４に格納する。

【００２８】一方、発生したイベントが映像履歴ビュー
２０３へのマウスクリックであった場合は、ステップＳ
２９へ進み、再生画像表示のための処理を開始する。

【００２９】まず、ステップＳ２９において、カメラサ
ーバ１００に対して、ネットワーク管理部２１０を介し
て映像ポーズ要求を出力し、当該クライアントへのカメ
ラサーバ１００よりの映像信号の送信を停止させる。次
に、ステップＳ３０において、映像表示部２２０に対し
て再生画像表示への切り換えを要求する。この要求信号
により、映像表示部２２０では、上述のステップＳ１２
からステップＳ１６へ処理を分岐することになる。

【００３０】次に、映像履歴ビュー２０３におけるクリ
ック位置から、再生開始時刻を計算する。本例では、映
像履歴ビュー２０３における４つのコマが左から順に１
０秒前、２０秒前、３０秒前、４０秒前を表すので、例
えば左から２番目のコマがクリックされれば、２０秒前
の映像から再生を開始する（ステップＳ３４）。なお、
ステップＳ３３は、再生画像は早まわしにならいないよ
うに適切な時間間隔を与えるものである。

【００３１】以上のようにして、映像の再生を終了する
と、ステップＳ３２からステップＳ３５へ進み、カメラ
サーバ１００へ映像ポーズ解除を要求するとともに、映
像表示部２２０へライブ表示切り換え要求を出力する。
なお、映像表示部２２０では、この要求信号により、処
理をステップＳ１７からステップＳ１１へ分岐させるこ
とになる。

【００３２】次にビューア２００からカメラサーバ１０
０のカメラをコントロールする機構について説明する。
ビューアカメラ制御部２４０はカメラコントロール要求
ボタン２０７がクリックされると、カメラ制御要求をカ
メラ指定ボックス２０２で指定されたカメラサーバ（本
例ではカメラサーバ１００）に送る。カメラサーバ１０
０からの要求が受理されコントロール用の回線が確立さ
れると、回線が確立されている間、カメラコントロール
ボタン２０６の操作に応じてカメラ制御データ（パケッ
ト）をカメラサーバ１００に送る。

【００３３】以上のような構成によりクライアント装置
２００におけるビューアはカメラサーバ１００から映像
を取得し、カメラサーバ１００のビデオカメラ１２０の
姿勢（チルト角、パン角、ズーム）をコントロールす
る。

【００３４】次にカメラサーバ装置１００について説明
する。カメラサーバ１００は、ビデオキャプチャー機構
を備えたパソコンと、パソコンによりコントロール可能
なビデオカメラ１２０よりなる。ビデオカメラ１２０で
は、カメラサーバ装置１００からの指示により、ズーム
イン／アウト、上下左右への雲台の移動が行われる。ビ
デオカメラ１２０から入力されたビデオ信号は、周知の
キャプチャーボードによりパソコン１１０内に取り込ま
れる。

【００３５】図１０はカメラサーバ装置１００の機能構
成を示すブロック図である。カメラサーバ装置１００に
おけるカメラサーバプログラムは、サーバ制御部１１
１、ビデオキャプチャ部１１２、映像配送部１１３、サ
ーバカメラ制御部１１４からなる。なお、これらの各機
能を実現する制御プログラムは必要に応じて外部記憶装
置１４からＲＡＭ１３にロードされ、ＣＰＵ１１によっ
て実行される。

【００３６】カメラサーバ（カメラサーバ装置１００）
はビューア（クライアント装置２００）がネットワーク
を通じて「接続要求」を出すと、ビューアに映像データ
を送り始める。映像データの送信はビューアが「接続終
了要求」を送ってくるまで続けられる。またビューアは
カメラサーバに「映像ポーズ要求」「映像ポーズ解除要
求」を送ることで映像の送信を一時停止、再開すること
ができる。

【００３７】ビューアから出力された各種要求（接続要
求等）は、カメラサーバ内のサーバ制御部１１１により
受け取られる。サーバ制御部１１１はビューアからの要
求を受け取ると、要求元のビューアを内部のメンバー表
１１５に登録する。そしてキャプチャ部１１２から１画
面分のデータをキャプチャしたことがサーバ制御部１１
１に通知されると、サーバ制御部１１１はメンバー表１
１５に登録されたビューア（クライアント装置２００，
３００，４００，…）に対して映像データを送信するよ
うに映像配送部１１３に依頼する。依頼をうけた映像配
送部１１３はキャプチャ部１１２から映像データを受け
取り、指定されたビューアに映像データを送信する。ま
た、サーバカメラ制御部１１４はビューアからのカメラ
制御データ（パケット）を受信し、受信したカメラ制御
データに応じてビデオカメラ１２０を制御する。

【００３８】以上のような構成により、カメラサーバ１
００は映像の配信、カメラのコントロールを行う。

【００３９】図１１はカメラサーバにおける映像配送系
（サーバ制御部１１１、キャプチャ部１１２、映像配送
部１１３）の動作を示すフローチャートである。サーバ
制御部は、「キャプチャ部１１２からキャプチャの完
了」、「ビューアからのビューア接続要求」、「ビュー
アからの接続終了要求」、「ビューアからの映像ポーズ
要求」、「ビューアからの映像ポーズ解除要求」の各イ
ベントについて処理をおこなう。

【００４０】キャプチャ部１１２からキャプチャの完了
イベントを検出すると、ステップＳ４２からステップＳ
４７へ進み、映像配送部１１３に対して映像パケットの
配送を指示する。この指示を受けた映像配送部１１３で
は、キャプチャ部１１２からキャプチャされた１画面分
の映像データを取得し、これを映像パケットとしてメン
バー表１１５に登録されているビューア（クライアン
ト）に配送する。

【００４１】サーバ制御部１１１がビューアからビュー
ア接続要求のイベントを検出すると、ステップＳ４３か
らステップＳ４８へ進み、当該接続要求のあったビュー
アをメンバー表１１５に登録する。また、サーバ制御部
１１１がビューアからの接続終了要求のイベントを検出
すると、ステップＳ４４からステップＳ４９へ進み、当
該接続終了要求を発行したビューアをメンバー表１１５
から削除する。

【００４２】また、サーバ制御部１１１がビューアから
の映像ポーズ要求のイベントを検出した場合は、ステッ
プＳ４５からステップＳ５０へ進む。ステップＳ５０に
おいて、サーバ制御部１１１は、メンバー表１１５にお
ける当該映像ポーズ要求を発行したビューアにポーズ中
を示すマークを付与する。映像配送部１１３は、メンバ
ー表１１５に登録されたビューアのうち、ポーズ中を示
すマークの付されたビューアに対しては、映像の配送を
行わない。また、サーバ制御部１１１がビューアからの
映像ポーズ解除要求のイベントを検出した場合は、ステ
ップＳ４６からステップＳ５１へ進む。ステップＳ５１
において、サーバ制御部１１１は、メンバー表１１５に
おいて当該映像ポーズ解除要求を発行したビューアに付
与されていたポーズ中を示すマークを削除し、ポーズ状
態を解除する。この結果、映像配送部１１３は当該ビュ
ーアに対して映像の配送を再開することになる。

【００４３】以上説明したように、第１の実施形態によ
れば、画面上に過去の一定期間毎の映像を表示してお
き、それらを選択することにより、直観的に過去の所望
の時点での画像を再現することが可能となり、映像用ビ
ューアにおける操作性が向上する。

【００４４】＜第２の実施形態＞第１の実施形態では、
映像履歴ビュー２０３をマウスクリックすることによ
り、過去の映像を再生している。第２の実施形態では、
ビューア２００の映像履歴ビュー２０３をマウスクリッ
クしたときに、過去の映像が再生される代りに、過去の
その時点でのカメラアングルを再現する。なお、第２の
実施形態のハードウエア構成は第１の実施形態（図１、
図２）と同様である。

【００４５】図１２は、第２の実施形態によるビューア
の機能構成を説明するブロック図である。ビューアはネ
ットワーク管理部３１０、再生管理部３５０、映像表示
部３２０、接続管理部３３０、ビューアカメラ制御部３
４０からなっている。これら各機能は、ＲＯＭ２２に格
納された制御プログラム、あるいは外部記憶装置２４か
らＲＡＭ２３にロードされた制御プログラムをＣＰＵ２
１が実行することによって実現される。以下、これらの
動作を、ライブ映像表示時、コントロール再生時に分け
て説明する。

【００４６】第２の実施形態でのライブ画像表示時の動
作を図１３に、記録したカメラアングルの再生時の動作
を図１４に示す。第２の実施形態では、ビューアカメラ
制御部２３０に過去一定時間のカメラ操作についての情
報を蓄えておき、映像履歴ビュー２０３へのマウスクリ
ックによりそれらに基づいてカメラ制御を行う点が異な
っている。

【００４７】図１３はライブ映像表示時の信号の流れを
説明する図である。接続ボタン２０４がマウスクリック
されると（Ｃ１）、接続管理部３３０はネットワーク管
理部３１０を介して、カメラ指定ボックス２０２で指定
されたカメラサーバに対して接続要求を発行する（Ｃ
２）。ビューアカメラ制御部２４０は、カメラコントロ
ール要求ボタン２０７のマウスクリックを検知すると、
ネットワーク管理部３１０を介して接続中のカメラサー
バに対してカメラ制御要求を発行する（Ｃ４）。このカ
メラ制御要求が受け付けられると、カメラコントロール
ボタン２０６をマウスクリックすることによって生成さ
れるカメラ制御データがカメラサーバ１００に送られる
ことになる。

【００４８】さて、接続管理部３３０によって接続要求
が発行され、これがカメラサーバによって受け付けられ
ると、映像パケットが送信される（Ｃ５）。映像表示部
３２０はネットワーク管理部３１０を介して受信した映
像パケットから映像データを抽出し、映像ビュー２０１
に表示するとともに、再生管理部３５０に送る（Ｃ
６）。ここで、映像パケットには、カメラ１２０のカメ
ラ制御データ（チルト角、パン角、ズーム値）等が含ま
れている。映像表示部３２０は、このカメラ制御データ
をビューアカメラ制御部３４０に送る（Ｃ８）。

【００４９】再生管理部３５０は、映像表示部３２０か
ら入力した映像データを用いて所定のタイミングで映像
履歴ビュー２０３を更新する（Ｃ７）。映像履歴ビュー
２０３は第１の実施形態で説明したように１０秒前、２
０秒前、３０秒前、４０秒前の各時点の映像データを縮
小して表示する。

【００５０】ビューアカメラ制御部３４０は、カメラサ
ーバに対する制御権を獲得している間は、カメラコント
ロールボタン２０６のボタン操作に応じたカメラ制御デ
ータを生成し、これをネットワーク管理部３１０を介し
てカメラサーバ装置１００に送り、カメラ１２０を遠隔
操作する。また、ビューアカメラ制御部３４０は、映像
表示部３２０から映像データと共に送られてくるカメラ
制御データを過去の所定期間にわたって保持する。カメ
ラ制御データの保持の仕方としては、映像データの各コ
マ毎にカメラ制御データを保持するようにしてもよい
し、カメラ制御データの変化した時刻とその時のカメラ
制御データとを対にして記憶するようにしてもよい。

【００５１】図１４は、過去のカメラコントロール状態
を再現する際の信号の流れを示す図である。映像履歴ビ
ュー２０３がマウスクリックされると（Ｄ１）、再生管
理部３５０はそのクリック位置に基づいて過去のどの時
点からの制御状態を再生するべきか決定し、ビューアカ
メラ制御部３４０に対してカメラコントロール記録の再
生を指示すると共に、その再生時点を通知する（Ｄ
２）。カメラコントロール記録の再生と再生時点を通知
されたビューアカメラ制御部３４０は、カメラ制御権を
取得していなければカメラ制御要求を発行しカメラ制御
権を取得する（Ｄ３）。カメラ制御権を取得したなら
ば、ビューアカメラ制御部３４０は、保持されている過
去のカメラコントロール記録に基づいて、カメラ制御デ
ータをカメラサーバに対して送信する（Ｄ３）。

【００５２】次に、映像表示部３２０、再生管理部３５
０、ビューアカメラ制御部３４０について図１５〜図１
７のフローチャートを参照して更に説明する。

【００５３】図１５は第２の実施形態による映像表示部
３２０の動作を説明するフローチャートである。映像表
示部３２０は、ステップＳ１０１、Ｓ１０２において映
像パケット受信のイベントを検出すると、ステップＳ１
０３へ進み、受信した映像パケットから映像データとカ
メラ制御データを抽出する。そして、ステップＳ１０４
において、抽出した映像データを映像ビュー２０１に表
示すると共に再生管理部３５０へ送信する。また、ステ
ップＳ１０５では、抽出したカメラ制御鵜情報をビュー
アカメラ制御部３４０へ送信する。

【００５４】図１６は第２の実施形態による再生管理部
３５０の動作を説明するフローチャートである。映像表
示部３２０より映像データを受信した際の動作（ステッ
プＳ２４〜Ｓ２８）は第１の実施形態と同様である。た
だし、第２の実施形態では、過去の映像を保持する処理
（ステップＳ２８）は省略してもよい。

【００５５】映像履歴ビュー２０３へのマウスクリック
イベントが検出されると、ステップＳ１１１へ進み、そ
のクリック位置から、カメラコントロール記録の再生開
始時点を計算する。そして、ステップＳ１１２におい
て、ステップＳ１１１で得られた再生開始時点をビュー
アカメラ制御部３４０に通知する。

【００５６】図１７はビューアカメラ制御部３４０の動
作を説明するフローチャートである。ビューアカメラ制
御部３４０では、カメラ制御要求、カメラコントロー
ル、コントロール記録の再生の各イベントに対する処理
が行われる。カメラコントロール要求ボタン２０７がマ
ウスクリックされると、カメラ制御要求イベントが発行
され、処理はステップＳ１２２からステップＳ１２５へ
進む。ステップＳ１２５では、ネットワーク管理部３１
０を介して接続中のサーバに対してカメラ制御要求パケ
ットを送信する。なお、カメラ制御要求が受け付けられ
て、カメラ制御権が付与された旨の通知をサーバより受
信した場合は、カメラコントロール要求ボタン２０７の
表示状態を切り換える等によってユーザにその旨を報知
する。

【００５７】また、カメラコントロールボタン２０６が
マウスによって操作されると、カメラサーバに接続され
たカメラの遠隔操作を行うべく、処理をステップＳ１２
３からステップＳ１２６へ進める。ステップＳ１２６で
は当該ビューアが制御権を有しているかどうかが判断さ
れ、制御権を有しておればステップＳ１２７へ処理が進
む。ステップＳ１２７では、カメラ制御データをネット
ワーク管理部３１０を介してカメラサーバへ発行し、カ
メラの遠隔制御を実現する。

【００５８】また、発生したイベントが、再生管理部３
５０からのコントロール記録の再生指示であった場合
は、ステップＳ１２４からステップＳ１２８へ進む。ス
テップＳ１２８では、当該ビューアが制御権を有してい
るかどうかが判断され、制御権を有しておればステップ
Ｓ１２９へ進む。ステップＳ１２９では、通知された再
生時点よりカメラコントロールを再生する。また、ステ
ップＳ１２８で当該ビューアが制御権を有していない場
合は、ステップＳ１３０へ進み、ステップＳ１２５と同
様に制御要求を発行する。なお、図１７では、発行した
制御要求がサーバによって受理されて、制御権を獲得す
るまでステップＳ１２８とＳ１３０の処理が繰り返され
ることになるが、適当なタイマーを設けて、制御要求を
発行してから所定時間を経過しても制御権を獲得できな
かった場合には、当該イベントを無視するようにしても
よい。もちろん制御権を獲得できなかった旨を報知する
ようにしてもよい。

【００５９】以上の説明から明らかなように第２の実施
形態によれば、画面上に過去の所定期間毎の映像を表示
しておき、それらを選択することにより過去の所望の時
点のカメラアングルなどを再現して表示することができ
る。このため、過去のカメラアングル等を容易に再現す
ることができる。

【００６０】なお、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体を、システムあるいは装置に供給し、そ
のシステムあるいは装置のコンピュータ（またはＣＰＵ
やＭＰＵ）が記憶媒体に格納されたプログラムコードを
読出し実行することによっても、達成されることは言う
までもない。

【００６１】この場合、記憶媒体から読出されたプログ
ラムコード自体が前述した実施形態の機能を実現するこ
とになり、そのプログラムコードを記憶した記憶媒体は
本発明を構成することになる。

【００６２】プログラムコードを供給するための記憶媒
体としては、例えば、フロッピディスク，ハードディス
ク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ
−Ｒ，磁気テープ，不揮発性のメモリカード，ＲＯＭな
どを用いることができる。

【００６３】また、コンピュータが読出したプログラム
コードを実行することにより、前述した実施形態の機能
が実現されるだけでなく、そのプログラムコードの指示
に基づき、コンピュータ上で稼働しているＯＳ（オペレ
ーティングシステム）などが実際の処理の一部または全
部を行い、その処理によって前述した実施形態の機能が
実現される場合も含まれることは言うまでもない。

【００６４】さらに、記憶媒体から読出されたプログラ
ムコードが、コンピュータに挿入された機能拡張ボード
やコンピュータに接続された機能拡張ユニットに備わる
メモリに書込まれた後、そのプログラムコードの指示に
基づき、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【００６５】

【発明の効果】以上説明したように本発明によれば、ユ
ーザが手軽に一定期間内の画像をプレイバックすること
が可能となる。

【００６６】また、本発明によれば、ユーザが手軽に一
定期間内のカメラアングル等の撮影状態を再現すること
が可能となる。

【００６７】これらの機構によりユーザは手軽に一定期
間内の画像をプレイバックしたり、過去の撮影状態を再
現したりすることができる。

【００６８】

【図面の簡単な説明】

【図１】第１の実施形態による映像送信システムの概要
を示す図である。

【図２】第１の実施形態によるカメラサーバ１００とカ
メラクライアント２００の各々の構成を示すブロック図
である。

【図３】第１の実施形態によるビューアによる表示画面
例を示す図である。

【図４】ビューアプログラムの機能構成を示すブロック
図である。

【図５】ライブ映像表示時におけるビューアの動作概要
を説明する図である。

【図６】再生映像表示時におけるビューアの動作概要を
説明する図である。

【図７】本実施形態の中核となる再生管理部２５０の内
部構成を示すブロック図である。

【図８】映像表示部２２０による動作を説明するフロー
チャートである。

【図９】再生管理部２５０による動作を説明するフロー
チャートである。

【図１０】カメラサーバ装置１００の機能構成を示すブ
ロック図である。

【図１１】カメラサーバにおける映像配送系（サーバ制
御部１１１、キャプチャ部１１２、映像配送部１１３）
の動作を示すフローチャートである。

【図１２】第２の実施形態によるビューアの機能構成を
説明するブロック図である。

【図１３】ライブ映像表示時の信号の流れを説明する図
である。

【図１４】過去のカメラコントロール状態を再現する際
の信号の流れを示す図である。

【図１５】第２の実施形態による映像表示部３２０の動
作を説明するフローチャートである。

【図１６】第２の実施形態による再生管理部３５０の動
作を説明するフローチャートである。

【図１７】ビューアカメラ制御部３４０の動作を説明す
るフローチャートである。

【符号の説明】

１００ カメラサーバ装置 １１１ サーバ制御部 １１２ キャプチャ部 １１３ 映像配送部 １１４ サーバカメラ制御部 １２０ ビデオカメラ ２００ クライアント装置 ２０１ 映像ビュー ２０２ カメラ指定ボックス ２０３ 映像履歴ビュー ２０４ 接続ボタン ２０５ 切断ボタン ２０６ カメラコントロールボタン ２０７ カメラコントロール要求ボタン ２１０ ネットワーク管理部 ２２０ 映像表示部 ２３０ 接続管理部 ２４０ ビューアカメラ制御部 ２５０ 再生管理部

フロントページの続き (51)Int.Cl.⁶ 識別記号 ＦＩ Ｇ０６Ｆ 15/403 ３８０Ｆ

Claims (17)

【特許請求の範囲】
1. 【請求項１】 画像データを受信する受信手段と、 前記受信手段で受信した画像データを表示する第１表示
   手段と、 前記受信手段によって受信した過去の一定期間分の画像
   から選択的に複数の画像を時系列順に表示する第２表示
   手段と、 前記第２表示手段で表示された複数の画像のいずれかを
   指示する指示手段と、 前記指示手段で指示された画像が、過去のいずれの時点
   のものであるかに基づいて所定の処理を実行する制御手
   段とを備えることを特徴とする情報処理装置。
2. 【請求項２】 前記受信手段で受信した画像データを過
   去の一定期間分にわたって保持する保持手段を更に備
   え、 前記制御手段は、前記保持手段で保持された画像データ
   を、前記指示手段で指示された画像に対応する過去の時
   点から再生することを特徴とする請求項１に記載の情報
   処理装置。
3. 【請求項３】 前記制御手段は、前記第１表示手段によ
   る画像データの表示を、前記保持手段に保持された画像
   データの再生画像で置き換えることを特徴とする請求項
   ２に記載の情報処理装置。
4. 【請求項４】 前記制御手段において前記保持手段に保
   持された画像データの再生する間、画像データの送信元
   に対して画像データの転送を停止させる旨の要求を行う
   要求手段を更に備えることを特徴とする請求項２に記載
   の情報処理装置。
5. 【請求項５】 前記画像データは画像を表す画像情報と
   当該画像を撮影したカメラの制御状態を表す制御情報と
   を含み、 前記受信手段で受信した画像データから制御情報を抽出
   して保持する保持手段を更に備え、 前記制御手段は、前記保持手段で保持された制御情報に
   基づいて、前記指示手段で指示された画像に対応する過
   去の時点から前記カメラの制御を再現することを特徴と
   する請求項１に記載の情報処理装置。
6. 【請求項６】 前記カメラの制御の再現は、カメラのチ
   ルト角、パン角、ズーム状態を含むことを特徴とする請
   求項５に記載の情報処理装置。
7. 【請求項７】 画像データを受信する受信工程と、 前記受信工程で受信した画像データを表示する第１表示
   工程と、 前記受信工程によって受信した過去の一定期間分の画像
   から選択的に複数の画像を時系列順に表示する第２表示
   工程と、 前記第２表示工程で表示された複数の画像のいずれかを
   指示する指示工程と、 前記指示工程で指示された画像が、過去のいずれの時点
   のものであるかに基づいて所定の処理を実行する制御工
   程とを備えることを特徴とする情報処理方法。
8. 【請求項８】 前記受信工程で受信した画像データを過
   去の一定期間分にわたって保持する保持工程を更に備
   え、 前記制御工程は、前記保持工程で保持された画像データ
   を、前記指示工程で指示された画像に対応する過去の時
   点から再生することを特徴とする請求項７に記載の情報
   処理方法。
9. 【請求項９】 前記制御工程は、前記第１表示工程によ
   る画像データの表示を、前記保持工程に保持された画像
   データの再生画像で置き換えることを特徴とする請求項
   ８に記載の情報処理方法。
10. 【請求項１０】 前記制御工程において前記保持工程に
    保持された画像データの再生する間、画像データの送信
    元に対して画像データの転送を停止させる旨の要求を行
    う要求工程を更に備えることを特徴とする請求項８に記
    載の情報処理方法。
11. 【請求項１１】 前記画像データは画像を表す画像情報
    と当該画像を撮影したカメラの制御状態を表す制御情報
    とを含み、 前記受信工程で受信した画像データから制御情報を抽出
    して保持する保持工程を更に備え、 前記制御工程は、前記保持工程で保持された制御情報に
    基づいて、前記指示工程で指示された画像に対応する過
    去の時点から前記カメラの制御を再現することを特徴と
    する請求項７に記載の情報処理方法。
12. 【請求項１２】 前記カメラの制御の再現は、カメラの
    チルト角、パン角、ズーム状態を含むことを特徴とする
    請求項１１に記載の情報処理方法。
13. 【請求項１３】 カメラによって撮影して得られる画像
    データを配送するサーバ装置と、配送された画像データ
    を受信して表示するクライアント装置とを備えた情報処
    理システムであって、 前記クライアント装置は、 前記サーバ装置から配送される画像データを受信する受
    信手段と、 前記受信手段で受信した画像データを表示する第１表示
    手段と、 前記受信手段によって受信した過去の一定期間分の画像
    から選択的に複数の画像を時系列順に表示する第２表示
    手段と、 前記受信手段で受信した画像データを過去の一定期間分
    にわたって保持する保持手段と、 前記第２表示手段で表示された複数の画像のいずれかを
    指示する指示手段と、 前記保持手段で保持された画像データを、前記指示手段
    で指示された画像に対応する過去の時点から再生する再
    生手段と、 前記再生手段で画像の再生を行っている間、前記サーバ
    装置に対して画像データの配送を中断させる中断要求を
    発行する発行手段とを備え、 前記サーバ装置は前記中断要求を検出した場合、当該中
    断要求を発行したクライアント装置への画像データの配
    送を中断する中断手段を備えることを特徴とする情報処
    理システム。
14. 【請求項１４】 カメラによって撮影して得られる画像
    データを配送するサーバ装置と、配送された画像データ
    を受信して表示するクライアント装置とを備えた情報処
    理システムであって、 前記サーバ装置から配送される画像データは、画像の内
    容を示す画像情報と、当該画像情報を撮影した時点のカ
    メラの制御状態を示す制御情報を含み、 前記クライアント装置は、 前記画像データを受信する受信手段と、 前記受信手段で受信した画像データより画像情報を抽出
    して表示する第１表示手段と、 過去の一定期間分の画像情報から選択的に複数の画像を
    時系列順に表示する第２表示手段と、 前記受信手段で受信した画像データから制御情報を抽出
    し、過去の一定期間分の制御情報を保持する保持手段
    と、 前記第２表示手段で表示された複数の画像のいずれかを
    指示する指示手段と、 前記保持手段で保持された制御情報に基づいて、前記指
    示手段で指示された画像に対応する過去の時点から前記
    カメラの制御を再現するべく制御要求を発行する発行手
    段とを備え、 前記サーバ装置は前記発行手段で発行された制御要求に
    応じて前記カメラを制御するカメラ制御手段を備えるこ
    とを特徴とする情報処理システム。
15. 【請求項１５】 外部より配送される画像データを処理
    するための制御プログラムを格納するコンピュータ可読
    メモリであって、該制御プログラムが画像データを受信
    する受信工程のコードと、 前記受信工程で受信した画像データを表示する第１表示
    工程のコードと、 前記受信工程によって受信した過去の一定期間分の画像
    から選択的に複数の画像を時系列順に表示する第２表示
    工程のコードと、 前記第２表示工程で表示された複数の画像のいずれかを
    指示する指示工程のコードと、 前記指示工程で指示された画像が、過去のいずれの時点
    のものであるかに基づいて所定の処理を実行する制御工
    程のコードとを備えることを特徴とするコンピュータ可
    読メモリ。
16. 【請求項１６】 前記制御プログラムは、 前記受信工程で受信した画像データを過去の一定期間分
    にわたって保持する保持工程のコードを更に備え、 前記制御工程が、前記保持工程で保持された画像データ
    を、前記指示工程で指示された画像に対応する過去の時
    点から再生するものであることを特徴とする請求項１５
    に記載のコンピュータ可読メモリ。
17. 【請求項１７】 前記制御プログラムは、 前記受信工程で受信した、画像を表す画像情報と当該画
    像を撮影したカメラの制御状態を表す制御情報とを含む
    画像データから、制御情報を抽出して保持する保持工程
    のコード更に備え、 前記制御工程が、前記保持工程で保持された制御情報に
    基づいて、前記指示工程で指示された画像に対応する過
    去の時点から前記カメラの制御を再現するものであるこ
    とを特徴とする請求項１５に記載のコンピュータ可読メ
    モリ。