WO2010035787A1

WO2010035787A1 - ゲートウェイ装置と方法とシステム並びにプログラム

Info

Publication number: WO2010035787A1
Application number: PCT/JP2009/066658
Authority: WO
Inventors: 一範小澤
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2008-09-26
Filing date: 2009-09-25
Publication date: 2010-04-01
Anticipated expiration: 2011-03-26
Also published as: JP5516408B2; CN102160393A; JPWO2010035787A1; US20110170556A1; US8891539B2

Abstract

　第１のネットワークに接続される第１の端末から受信した画像信号に対して転換を施した上で第２のネットワークに接続される第２の端末に送出し第２の端末に十分な解像度や画質を与えることができるゲートウェイ装置、方法、システム、プログラムを提供する。ゲートウェイ装置１５０は、第１のネットワーク１３０に接続された第１の端末１２０から、動画又は静止画信号を含む画像信号を受信し、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施し、第２のネットワーク１７０に接続された第２の端末１９０に対して、前記変換後の画像信号を送出する(図１)。

Description

ゲートウェイ装置と方法とシステム並びにプログラム

　（関連出願についての記載）
　本発明は、日本国特許出願：特願２００８－２４８１５１号（２００８年　９月２６日出願）の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
　本発明は、第１のネットワークに接続された第１の端末から画像信号を受信し、第２のネットワークに接続された第２の端末に送出するゲートウェイ装置に関する。

　第１のネットワークが例えばモバイルネットワークで、第２のネットワークが例えばパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）というように、異なるネットワーク間をつなげて、それぞれのネットワークに接続される端末同士で相互に動画や静止画をやりとりするサーヒスが始まっており、これらのサービスにはゲートウェイ装置が使用されている。

　端末間で動画または静止画を用いた通信を行う場合、動画信号に対しては、低ビットレートで効率良く伝送するために端末側で圧縮符号化を行う。これらの方式としては、
　ＩＴＵ－Ｔ（Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ　Ｕｎｉｏｎ　ｆｏｒ　Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ　Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ　ｓｅｃｔｏｒ）勧告Ｈ．２６３や、ＩＳＯ／ＩＥＣ（Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｏｒｇａｎｉｚａｔｉｏｎ　ｆｏｒ　Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ　／Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｅｌｅｃｔｒｏ　ｔｅｃｈｎｉｃａｌ　Ｃｏｍｍｉｓｓｉｏｎ）で国際標準化されているＭＰＥＧ－４（Ｍｏｖｉｎｇ　Ｐｉｃｔｕｒｅ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ　Ｐｈａｓｅ　４）が知られている。また、ＩＴＵ－ＴとＩＳＯ／ＩＥＣで国際標準化されたＨ．２６４／ＭＰＥＧ－４　ＡＶＣ（Ａｄｖａｎｃｅｄ　Ｖｉｄｅｏ　Ｃｏｄｉｎｇ）によれば、前記動画像圧縮符号化方式よりもより効率良く圧縮することができる。

　動画像の変換を行うゲートウェイとして、例えば特許文献１には、サーバからの動画像データを送信すべき端末の特性から導出された符号化パラメータ（符号化方式、フレームサイズ等）を用いて変換するゲートウェイが開示されている。また、時間解像度の拡大については、特許文献２に、低解像度の動画像を時間軸方向のサンプル数（フレームレート）をアップサンプリングし、不要な高域成分を除去し、非線形予測により時間軸方向に高域予測を行ない、高域予測が正しい場合、時間解像度の拡大を行う構成が開示されている。なお、以下の説明からも明らかとされるように、本発明は、これら特許文献に記載の発明とは全く相違している。

特開２００１－３１３９３７号公報特開２００７－７４３０７号公報

　上記特許文献１及び２の全開示内容はその引用をもって本書に繰込み記載する。
　以下に本発明による分析を与える。

　従来のサービス及び装置によれば、第２のネットワークの特に下り方向が、第１のネットワークの特に上り方向に比べ、帯域幅が数倍以上に広く、第２の端末がより高精細な画像を扱える能力がある場合が多い。そのような場合であっても、第１のネットワークに接続される端末から送出された、解像度および画質が十分でない動画または静止画信号を、ゲートウェイ装置でそのまま第２のネットワークに送出しているため、第２のネットワークに接続される第２の端末でそのような動画や静止画を表示させると、解像度や画質が十分でない。このために、このようなサ－ビス自体の加入者は増えていき難い。

　本発明の目的は、第１のネットワークに接続される第１の端末から受信した画像信号に対して変換を施した上で第２のネットワークに接続される第２の端末に送出し第２の端末に十分な解像度や画質を与えることができるゲートウェイ装置、方法、システム、プログラムを提供することにある。

　本書で開示される発明は、課題を解決するため概略以下の構成とされる。

　本発明の１つの側面において、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信部と、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す変換部と、第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出部と、を備えるゲートウェイ装置が提供される。

　本発明の他の側面において、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信し、
　前記受信した画像信号に対して、解像度及び画質を拡張する変換を施し、
　第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する、ゲートウェイ方法が提供される。

　本発明の他の側面において、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信処理と、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す変換処理と、
　第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出処理と、
　をゲートウェイ装置を構成するコンピュータに実行させるプログラムが提供される。

　本発明の他の側面において、第１のネットワークに接続された第１の端末と、第２のネットワークに接続された第２の端末と、ゲートウェイ装置と、を備え、前記ゲートウェイ装置は、前記第１の端末に動画又は静止画を含む画像信号を受信し、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施し、
　前記第２の端末に対して、前記変換後の画像信号を送出する、ネットワークシステムが提供される。

　本発明によれば、第１のネットワークに接続される第１の端末（例えば携帯電話）から受信した画像信号に対して適宜転換を施した上で、第２のネットワークに接続される第２の端末に送出し、第２の端末に十分な解像度や画質を与えることができる。

本発明の一実施例のシステム構成を示す図である。本発明に係るゲートウェイ装置の第１の実施例の構成を示す図である。本発明に係るゲートウェイ装置の第２の実施例の構成を示す図である。本発明に係るゲートウェイ装置の処理手順の一例を示す図である。本発明に係るゲートウェイ装置の実施例の変形例を示す図である。

１２０　第１の端末
１３０　モバイルネットワーク
１５０　ゲートウェイ装置
１５１、２５１　呼制御部
１５５　多重分離部
１５９　パケット送出部
１６０　変換部
１６１　復号部
１６２　フレームメモリ
１６３　超解像度変換部
１６４　符号化部
１７０　パケットネットワーク
１９０　第２の端末
２５５　パケット受信部

　本発明の実施の形態について説明する。本発明の１つの形態によれば、第１のネットワークに接続された第１の端末から、動画または静止画信号を含むストリームまたはパケットを受信し、前記受信した動画または静止画信号に対し解像度および画質を拡張する変換を施す変換部と、前記変換後の信号を第１のネットワークと異なる第２のネットワークに接続された第２の端末に送出する送出部とを備えるゲートウェイ装置が提供される。

　本発明によれば、第１のネットワークがモバイル回線交換ネットワークであり、第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ）であるゲートウェイ装置が提供される。

　本発明によれば、第１のネットワークがモバイルパケットネットワークであり、第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ）であるゲートウェイ装置が提供される。以下実施例に即して説明する。

　以下の実施例では、ビデオ（動画）信号を使う場合の構成例を説明する。図１は、本発明によるゲートウェイ装置と第１のネットワーク、第２のネットワーク、第１の端末、第２の端末との接続形態の例を示している。

　図１において、１２０は第１の端末の例を示し、ここでは携帯端末としている。１３０は第１のネットワークの例を示しており、ここではモバイルネットワークとしている。ゲートウェイ装置１５０は、第１のネットワークから受信したビデオストリームまたはビデオパケットに対し、解像度及び画質を拡張する変換を施した上で、変換後の動画ストリームまたはパケットを、第２のネットワーク１７０を通して第２の端末１９０に送出する。ここで、第２のネットワークには、例えば、固定網のパケットネットワークや次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）などを適用することができる。

　本実施例において、モバイルネットワーク１３０が、モバイル回線交換ネットワークの場合と、モバイルパケットネットワークの場合の両者に適用することができるが、どちらであるかにより、ゲートウェイ装置１５０の構成が異なってくる。以下では、これらの各々の場合について、ゲートウェイ装置１５０の構成を、図２および図３にそれぞれ示す。

　図２は、モバイルネットワーク１３０がモバイル回線交換ネットワークの場合の、ゲートウェイ装置１５０の要部構成の一例を示す図である。図２に示すように、ゲートウェイ装置１５０は、多重分離部１５５、呼制御部１５１、変換部１６０、パケット送出部１５９を備えている。

　図１及び図２を参照して、携帯端末１２０からモバイル回線交換ネットワーク１３０を通してゲートウェイ装置１５０に接続されている例について説明する。

　携帯端末１２０は、３Ｇ３２４Ｍプロトコル（3Ｇ携帯電話網とＩＰ網の呼接続制御ププロトコル）を実装しているとものする。なお、３Ｇ３２４Ｍプロトコルの詳細は、例えば、３ＧＰＰ　ＴＳ２６．１１０規格やＴＲ２６．９１１規格を参照することができる。

　図２において、ゲートウェイ装置１５０の多重分離部１５５は、Ｈ．２２３多重化信号を受信し、Ｈ．２４５呼制御信号、ビデオ信号、音声信号を分離する。

　多重分離部１５５は、分離後のＨ．２４５呼制御信号を呼制御部１５１に出力し、分離後のビデオ信号を、変換部１６０のなかの復号部１６１に出力する。ここで、Ｈ．２２３およびＨ．２４５の詳細は、それぞれ、ＩＴＵ－Ｔ　Ｈ．２２３規格およびＩＴＵ－Ｔ　Ｈ．２４５規格を参照することができる。

　呼制御部１５１は、Ｈ．２４５呼制御信号を解析し、ビデオ信号の復号に必要な第１の端末（１２０）に関する能力情報を、変換部１６０の復号部１６１に出力する。

　特に制限されないが、この例では、第１の端末の能力情報は例えば、ビデオコーデックは、ＭＰＥＧ－４　ＳＰ＠Ｌ　０　（Ｓｉｍｐｌｅ　Ｐｒｏｆｉｌｅ　Ｌｅｖｅｌ　０）、ビットレートは６４ｋｂｐｓ（キロビット／秒）、画面解像度はＱＣＩＦ（Ｑｕａｄｒａｔｕｒｅ　Ｃｏｍｍｏｎ　Ｉｎｔｅｍｅｄｉａｔｅ　Ｆｏｒｍａｔ）、フレームレートは１５ｆｐｓ（フレーム／秒）とする。

　呼制御部１５１は、さらに、パケットネットワーク１７０を通して接続される第２の端末１９０との間で、例えば、ＳＩＰ（Ｓｅｓｓｉｏｎ　Ｉｎｉｔｉａｔｉｏｎ　Ｐｒｏｔｏｃｏｌ）及びＳＤＰ（Ｓｅｓｓｉｏｎ　Ｄｅｓｃｒｉｐｔｉｏｎ　Ｐｒｏｔｏｃｏｌ）を用いて、呼制御情報（例えば第２の端末１９０の受信ＩＰアドレスなど）及び能力情報（図２において呼制御部１５１からの破線で示す信号）をやりとりする。特に制限されないが、この例では、第２の端末の能力情報としては、例えば、ビデオコーデックとしてＨ．２６４　ＢＰ（Ｂａｓｅｌｉｎｅ　Ｐｒｏｆｉｌｅ）を搭載しており、ＢＰプロファイルで、レベルは１．２まで収容可能であるものとする。これは、最大ビットレートが３８４ｋｂｐｓ、画面解像度がＣＩＦ（Ｃｏｍｍｏｎ　Ｉｎｔｅｒｍｅｄｉａｔｅ　Ｆｏｒｍａｔ）、フレームレートが１５ｆｐｓであることを意味する。呼制御部１５１は、第２の端末に関するこれらの情報を変換部１６０に伝える。

　変換部１６０は、復号部１６１、フレームメモリ１６２、超解像度変換部１６３、符号化部１６４を備えている。

　復号部１６１は、呼制御部１５１から第１の端末に関する能力情報を受信し、例えば、ＭＰＥＧ－４　ＳＰレベル０、ビットレート６４ｋｂｐｓ、画面解像度ＱＣＩＦ、フレームレート１５ｆｐｓで復号する。復号部１６１は、復号したビデオ信号をフレーム毎に、一旦フレームメモリ１６２に格納する。

　超解像度変換部１６３は、呼制御部１５１から第２の端末に関する能力情報を受信し、フレームメモリ１６２に格納されたビデオ信号を読み出し、解像度を拡大しながら画質を改善する処理を行う。

　解像度に拡大として、
　・変換対象の画像フレームに対し、参照画像として、複数枚の画像フレームを使用して画素数を増やしながら解像度を拡大する手法や、
　・変換対象の画像フレーム内で異なる箇所の画素を用いて画素数を増やす手法、
　が用いられる。超解像度変換部１６３では、これらの手法のうち、超解像度変換部１６３の処理に割り当てることのできる演算量とメモリ量の制約の中で最適な手法を選択する構成としてもよい。

　超解像度変換部１６３において、変換対象フレームに対して、過去（時間的に前）の参照フレームを用いる場合、復号部１６１で復号されたマクロブロック毎の動きベクトルを入力し、該マクロブロックに含まれる画素に対して、前記動きベクトルを基に、動きベクトル探索処理（参照フレームの探索範囲内のマクロブロックのうち、変換対象フレームの当該マクロブロックとの差分が最も小さくなる位置を求める）を再実行することで、詳細な動きベクトルを求める（例えば半画素単位）。そして、再探索で求めた詳細な動きベクトルを過去の参照フレームの画素に適用し、前記詳細な動きベクトル分だけ移動させたフレームを用いて、変換対象フレームの画素を増やす構成をとることもできる。あるいは、復号部１６１からのマクロブロックの動きベクトルを使わずに、変換対象フレーム（現フレーム）と参照フレームから動きベクトルを探索する構成としてもよい。

　また、超解像度変換部１６３においては、解像度拡大対象のフレームのみを使用する場合には、エッジ部分を検出し、エッジ近傍の画素を適用して画素を増やしたり、エッジ近傍の画素に補正を加えたり、エッジを検出して強調する、という処理を行うことで、解像度を高め、画質を改善する処理を行う。この処理は、動画及び／又は静止画に対して行われる。

　超解像度変換部１６３においては、動き方向を推定することにより、時間方向のフレーム画像を補間し（前後フレームの間に１つフレームを挿入）、フレームレートを補間することで、例えばフレームレートを１５ｆｐｓから３０ｆｐｓに拡張する処理を行う。

　符号化部１６４は、呼制御部１５１から第２の端末に関する能力情報を受信し、さらに超解像度変換部１６３からの出力信号を入力し、例えばＨ．２６４　ＢＰ　Ｌｅｖｅｌ　１．２符号化方式を用いて、ビットレート３８４ｋｂｐｓ、画面解像度ＣＩＦ、フレームレート１５ｆｐｓで符号化する。

　また、符号化部１６４において、動きベクトル探索の演算量を削減するために、復号部１６１から動きベクトル情報を入力し、入力した動きベクトル情報を基に（動きベクトルに対して解像度の拡大に対応した変換を施し）、超解像度変換部１６３で変換された画像信号に対して、該動きベクトルの近傍を探索して、新たに動きベクトルを求める構成としてもよい。

　パケット送出部１５９は、呼制御部１５１から第２の端末１９０の受信ＩＰアドレスを入力し、符号化部１６４からＨ．２６４による圧縮符号化ストリームを入力しＲＴＰペイロードに含めてＲＴＰパケットとして、前記受信ＩＰアドレスあてに送出する。

　なお、パケット送出部１５９から送出されたＲＴＰパケットは、パケットネットワーク１７０を伝送され、第２の端末１９０で受信される。

　本実施例のゲートウェイ装置における処理手順を図４を参照して以下に説明する。

　ステップＳ１：多重分離部１５５は、第１の端末からＨ．２２３多重化信号を受信する。多重分離部１５５は、受信信号をＨ．２４５呼制御信号、ビデオ信号に分離し、分離後のＨ．２４５呼制御信号を呼制御部１５１に出力し、分離後のビデオ信号を、変換部１６０のなかの復号部１６１に出力する。

　ステップＳ２：復号部１６１は、呼制御部１５１から第１の端末に関する能力情報にしたがって、ビデオ信号を復号する。

　ステップＳ３：超解像度変換部１６３は、復号されたビデオ信号の解像度を拡大しながら、画質を改善する。

　ステップＳ４：符号化部１６４は、呼制御部１５１から第２の端末に関する能力情報に基づき、超解像度変換部１６３からのビデオ信号を符号化する。

　ステップＳ５：パケット送出部１５９は、符号化部１６４で符号化された信号をＲＴＰペイロードに含めてＲＴＰパケットとして送出する。

　なお、上記したゲートウェイ装置におけるステップＳ１乃至Ｓ５は、ゲートウェイ装置を構成するコンピュータ上で実行されるプログラムによってその機能・処理を実現してもよいことは勿論である。以下の他の実施例も同様とされる。この場合、図５に示すように、ゲートウェイ装置を構成するコンピュータ（ＣＰＵ）は、記憶装置からプログラムをメモリ（Ｍｅｍｏｒｙ）にロードして実行することで上記変換部の処理、パケット受信部、パケット送信部、呼制御部の処理を実現する。なお、プログラムを記憶する記憶装置はゲートウェイ装置とネットワーク接続する構成としてもよいことは勿論である。

　以上の実施例において、ビデオの圧縮符号化方式は問わず、Ｈ．２６３、ＭＰＥＧ－４、Ｈ．２６４など、どのような圧縮符号化方式でも対応することができる。

　本実施例の作用効果を説明する。

　本実施例によれば、第１のネットワーク（例えばモバイルネットワーク）に接続される第１の端末（例えば携帯電話）から受信した動画または静止画信号に対し、ゲートウェイ装置で解像度および画像品質を拡張する変換を施した上で、前記変換後の動画または静止画信号をパケットネットワークに接続される第２の端末に送出することができるので、第２のネットワーク（例えばパケットネットワークまたはＮＧＮ）の下り方向の広帯域や第２の端末の高性能を生かしたサービスを提供することができ、高画質の画像を享受することができる。

　図３は、本発明によるゲートウェイ装置１５０の第２の実施例の要部構成を示す図である。ここでは、モバイルネットワーク１３０が、モバイルパケットネットワークである場合の構成を示している。図３において、図２と同じ構成要素には、同一の参照番号が付しされている。図３において、図２と同一の参照符号の構成要素は図２と同一の動作を行なうので、重複を回避するため、適宜説明を省略する。

　呼制御部２５１は、第１の端末１２０から、ＳＩＰ信号によるセッション制御信号を受信する（呼制御部２５１に入力される破線で示す）。また、呼制御部２５１は、ＳＤＰ（Ｓｅｓｓｉｏｎ　Ｄｅｓｃｒｉｐｔｉｏｎ　Ｐｒｏｔｏｃｏｌ）による第１の端末１２０の能力情報を受信し（呼制御部２５１に入力される破線で示す）、変換部１６０に出力する。

　特に制限されないが、第１の端末の能力情報は、例えば、ビデオコーデックはＭＰＥＧ－４　ＳＰ（Ｓｉｍｐｌｅ　Ｐｒｏｆｉｌｅ）　Ｌｅｖｅｌ　０、ビットレートは６４ｋｂｐｓ、画面解像度はＱＣＩＦ、フレームレートは１５ｆｐｓとする。

　呼制御部２５１は、第２の端末１９０との間で、例えばＳＩＰ及びＳＤＰを用いて、呼制御情報（例えば第２の端末１９０の受信ＩＰアドレスなど）及び能力情報をやりとりする。ここでは、第２の端末の能力情報は、例えば、ビデオコーデックとしてＨ．２６４　ＢＰを搭載しており、ＢＰプロファイルで、レベルは１．２まで収容可能であるとする。これは最大ビットレートが３８４ｋｂｐｓ、画面解像度がＣＩＦ、フレームレートが１５ｆｐｓであることを意味する。これらの情報を変換部１６０に伝える。

　パケット受信部２５５は、呼制御部２５１から第１の端末の能力情報を受信する。パケット受信部２５５は、さらに、第１の端末１２０から、モバイルパケットネットワーク１３０を通して、ビデオパケットを受信し、ペイロード部分に格納されているビデオストリームを読み出して、変換部１６０の復号部１６１に出力する。

　変換部１６０は、呼制御部２５１から、第１の端末に関する能力情報と第２の端末に関する能力情報の両者を受信し、前者を復号部１６１に、後者を超解像度変換部１６３および符号化部１６４に出力する。なお、変換部１６０の動作自体は、図２の変換部１６０と同じであるため、その説明を省略する。

　パケット送出部１５９は、呼制御部２５１から、送出先の第２の端末に関するＩＰアドレスなどを受信し、さらに変換部１６０から変換後のビデオストリームを入力する。パケット送出部１５９の動作自体は、図２のパケット送出部１５９と同じであるため、説明を省略する。

　本実施例における処理手順は、図４に示した処理手順において、ステップＳ１でパケット受信をする以外、前記第１の実施例と同一であるため説明を省略する。

　以上説明したすべての実施例では、Ｃ－Ｐｌａｎｅ（Ｃｏｎｔｒｏｌ－Ｐｌａｎｅ）処理である呼制御部と、Ｕ－Ｐｌａｎｅ（Ｕｓｅｒ－Ｐｌａｎｅ）処理である、Ｈ．２２３多重分離部、パケット受信部、変換部、パケット送出部などを全てゲートウェイ装置に配置したが、Ｃ－Ｐｌａｎｅ処理とＵ－Ｐｌａｎｅ処理とを各々別々の装置に分離する構成をとることもできる。この構成によれば、Ｃ－ＰｌａｎｅとＵ－Ｐｌａｎｅを独立に、スケーラビリティをもたすことができる。

　また、上記実施例では、ビデオ（動画）信号を対象にしたが、静止画信号に対しても上記と同様の構成をとることができる。

　上記した本実施例をまとめると以下の構成とされる。

［１］　本実施例のゲートウェイ装置は、
　第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信部と、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す変換部と、第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出部と、を備える。

［２］　本実施例のゲートウェイ装置は、上記［１］において、前記変換部は、前記受信部で受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号する復号部と、前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換部と、前記解像度変換部で変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する符号化部と、を備えている。

［３］　本実施例のゲートウェイ装置は、上記［２］において、前記解像度変換部は、前記復号部で復号された動きベクトルを基に、過去の参照画像に対して動きベクトルの再探索を行い、再探索された動きベクトルを前記参照画像に適用した画像を用いて、前記画像信号の解像度の変換を行う。

［４］　本実施例のゲートウェイ装置は、上記［１］乃至［３］において、前記第１のネットワークがモバイル回線交換ネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［５］　本実施例のゲートウェイ装置は、上記［１］乃至［３］において、前記第１のネットワークがモバイルパケットネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［６］　本実施例のゲートウェイ装置は、上記［２］又は［３］において、前記受信部は、前記第１の端末からの多重化信号を受信し、呼制御信号、ビデオ信号に分離し、分離した呼制御信号を呼制御部に与え、分離したビデオ信号を前記変換部に与える多重分離部、又は、動画又は静止画を含む画像信号を含むパケット又はストリームを前記第１の端末から受信するパケット受信部を備えている。

［７］　本実施例のゲートウェイ方法は、ゲートウェイが、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信し、前記ゲートウェイが、前記受信した画像信号に対して、解像度及び画質を拡張する解像度変換を施し、前記ゲートウェイが、第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する。

［８］　本実施例の方法は、上記［７］において、前記ゲートウェイが、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、前記変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する。

［９］　本実施例の方法は、上記［７］又は［８］において、前記第１のネットワークがモバイル回線交換ネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１０］　本実施例の方法は、上記［７］又は［８］において、前記第１のネットワークがモバイルパケットネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１１］　本実施例のプログラムは、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信処理と、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す解像度変換処理と、第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出処理と、をゲートウェイ装置を構成するコンピュータに実行させるプログラムを含む。

［１２］　本実施例のプログラムは、上記［１１］において、前記解像度変換処理は、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、前記変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する。

［１３］　本実施例のプログラムは、上記［１１］又は［１２］において、前記第１のネットワークがモバイル回線交換ネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１４］　本実施例のプログラムは、上記［１１］又は［１２］において、前記第１のネットワークがモバイルパケットネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１５］　本実施例のシステムは、第１のネットワークに接続された第１の端末と、第２のネットワークに接続された第２の端末と、前記第１のネットワークと前記第２のネットワークとに接続されたゲートウェイ装置と、を備え、前記ゲートウェイ装置は、前記第１の端末から、動画又は静止画を含む画像信号を受信し、前記受信した画像信号に対して、解像度及び画質を拡張する変換を施し、前記第２の端末に対して、前記変換後の画像信号を送出する。

［１６］　本実施例のシステムは、上記［１５］において、前記ゲートウェイ装置は、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、前記変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する。

［１７］　本実施例のシステムは、上記［１５］又は［１６］において、前記第１のネットワークがモバイル回線交換ネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１８］　本実施例のシステムは、上記［１５］又は［１６］において、前記第１のネットワークがモバイルパケットネットワークであり、前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である。

［１９］　本実施例のシステムは、上記［１５］又は［１６］において、前記ゲートウェイ装置は、前記第１の端末からの多重化信号を受信し、呼制御信号、ビデオ信号に分離する多重分離部、又は、動画又は静止画を含む画像信号を含むパケット又はストリームを、前記第１の端末から受信するパケット受信部を備えている。

　なお、上記の特許文献の各開示を、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素の多様な組み合わせないし選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。

Claims

　第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信部と、
　前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す変換部と、
　第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出部と、
　を備えている、ことを特徴とするゲートウェイ装置。
　前記変換部は、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号する復号部と、
　前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換部と、
　前記解像度変換部で変換された画像信号を入力し、前記第２の端末に関する能力情報に対応した方式で符号化する符号化部と、
　を備えている、ことを特徴とする請求項１に記載のゲートウェイ装置。
　前記解像度変換部は、前記復号部で復号された動きベクトルを基に、過去の参照画像に対して動きベクトルの再探索を行い、再探索された動きベクトルを前記参照画像に適用した画像を用いて、前記画像信号の解像度の変換を行う、ことを特徴とする請求項２に記載のゲートウェイ装置。
　前記第１のネットワークがモバイル回線交換ネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１乃至３のいずれか１項に記載のゲートウェイ装置。
　前記第１のネットワークがモバイルパケットネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１乃至３のいずれか１項に記載のゲートウェイ装置。
　前記受信部は、前記第１の端末からの多重化信号を受信し、呼制御信号、ビデオ信号に分離し、分離した呼制御信号を呼制御部に与え、分離したビデオ信号を前記変換部に与える多重分離部、又は、
　動画又は静止画を含む画像信号を含むパケット又はストリームを前記第１の端末から受信するパケット受信部を備えている、ことを特徴とする請求項２又は３に記載のゲートウェイ装置。
　ゲートウェイが、第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信し、
　前記ゲートウェイが、前記受信した画像信号に対して、解像度及び画質を拡張する解像度変換を施し、
　前記ゲートウェイが、第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する、
　ことを特徴とするゲートウェイ方法。
　前記ゲートウェイが、
　前記第１の端末から受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、
　前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、
　前記変換された画像信号を入力し、前記第２の端末に関する能力情報に対応した方式で符号化する、ことを特徴とする請求項７に記載のゲートウェイ方法。
　前記第１のネットワークがモバイル回線交換ネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項７又は８に記載のゲートウェイ方法。
　前記第１のネットワークがモバイルパケットネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項７又は８に記載のゲートウェイ方法。
　第１のネットワークに接続された第１の端末から、動画又は静止画を含む画像信号を受信する受信処理と、
　前記受信した画像信号に対して、解像度及び画質を拡張する変換を施す解像度変換処理と、
　第２のネットワークに接続された第２の端末に対して、前記変換後の画像信号を送出する送出処理と、
　をゲートウェイ装置を構成するコンピュータに実行させるプログラム。
　前記解像度変換処理は、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、
　前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、
　前記変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する請求項１１に記載のプログラム。
　前記第１のネットワークがモバイル回線交換ネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１１又は１２に記載のプログラム。
　前記第１のネットワークがモバイルパケットネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１１又は１２に記載のプログラム。
　第１のネットワークに接続された第１の端末と、
　第２のネットワークに接続された第２の端末と、
　前記第１のネットワークと前記第２のネットワークとに接続されたゲートウェイ装置と、
　を備え、
　前記ゲートウェイ装置は、前記第１の端末から、動画又は静止画を含む画像信号を受信し、
　前記受信した画像信号に対して、解像度及び画質を拡張する変換を施し、
　前記第２の端末に対して、前記変換後の画像信号を送出する、ことを特徴とするネットワークシステム。
　前記ゲートウェイ装置は、前記受信した画像信号に対し、前記第１の端末に関する能力情報に対応した方式で復号し、
　前記第２の端末に関する能力情報に基づき、前記復号された画像信号の解像度を変換し画質を改善する解像度変換を施し、
　前記変換された画像信号を入力し前記第２の端末に関する能力情報に対応した方式で符号化する、ことを特徴とする請求項１５に記載のネットワークシステム。
　前記第１のネットワークがモバイル回線交換ネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１５又は１６に記載のネットワークシステム。
　前記第１のネットワークがモバイルパケットネットワークであり、
　前記第２のネットワークがパケットネットワークまたは次世代ネットワーク（ＮＧＮ：Ｎｅｘｔ　Ｇｅｎｅｒａｔｉｏｎ　Ｎｅｔｗｏｒｋ）である、
　ことを特徴とする請求項１５又は１６に記載のネットワークシステム。
　前記ゲートウェイ装置は、前記第１の端末からの多重化信号を受信し、呼制御信号、ビデオ信号に分離する多重分離部、又は、
　動画又は静止画を含む画像信号を含むパケット又はストリームを、前記第１の端末から受信するパケット受信部を備えている、ことを特徴とする請求項１５又は１６に記載のネットワークシステム。