JP2011095964A - 携帯端末及び方法並びプログラム - Google Patents

Abstract

【課題】印刷物、ウェブサーバ、携帯端末の全てで連動し相互作用してコンテンツを提供できる。
【解決手段】三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末であって、
カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う手段と、
ウェブサーバからストリーミング配信される三次元コンテンツを受信する手段と、
カメラで撮影された画像中の二次元コードを三次元画像として認識する手段と、
三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する手段とを有することを特徴とする携帯端末。
【選択図】図４

Description

本発明は、三次元コンテンツの提供に関する。

一般に、拡張現実感と呼ばれ、カメラで撮影された画像から特殊なマーカを認識し、そのマーカに合わせて、三次元コンテンツを、カメラで撮影された画像とリアルタイム合成する技術が知られている。

また一般に、商品の販売に係る管理を目的として、個々の商品のパッケージに個々の商品にユニークなＱＲコード（登録商標）等の二次元コードを印刷することが行われている（例えば特許文献１参照）。

ところで、近年の携帯電話やＰＤＡの技術進歩は凄まじく、またカメラなどの多機能を装備することにより、様々なコンテンツが提供されるようになっている。ＱＲコード（登録商標）を利用したウェブキャンペーンは、携帯電話の持つ機能と印刷物が持つ情報とを融合させてコンテンツを提供する典型例となっている。

しかしながら、ＱＲコード（登録商標）はウェブサーバへの誘導措置にしか過ぎず、印刷された情報をウェブブラウザに伝える仲介的な役割しか担わない。また、ウェブサーバは情報を一方的に伝えるのみであり、そのコンテンツはブラウザ上でのみ終始する。

携帯ゲームなどは三次元コンテンツなども充実して来てはいるが、これらはスタンドアローンなアプリケーションであり、コンテンツ自体を携帯端末に貯めておく必要がある。そして、これは携帯端末に負荷をかけると共に、コンテンツ自体は携帯端末のみで終始する。

これらのコンテンツ提供を考慮すると、未だに、印刷物、ウェブサーバ、携帯端末の全てで連動し相互作用するものが提供されてない。

特開２００８−２９３２８４号公報

本発明は斯かる背景技術に鑑みてなされたもので、印刷物、ウェブサーバ、携帯端末の全てで連動し相互作用してコンテンツを提供できることを課題とする。

本発明において上記課題を解決するために、まず請求項１の発明では、
三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末であって、
カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う手段と、
ウェブサーバからストリーミング配信される三次元コンテンツを受信する手段と、
カメラで撮影された画像中の二次元コードを三次元画像として認識する手段と、
三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する手段とを有することを特徴とする携帯端末としたものである。

また請求項２の発明では、
三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末が実行する方法であって、
カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う工程と、
ウェブサーバからストリーミング配信される三次元コンテンツを受信する工程と、
カメラで撮影された画像中の二次元コードを三次元画像として認識する工程と、
三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する工程とを含むことを特徴とする方法としたものである。

また請求項３の発明では、
三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末に、
カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う工程と、
ウェブサーバからストリーミング配信される三次元コンテンツを受信する工程と、
カメラで撮影された画像中の二次元コードを三次元画像として認識する工程と、
三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する工程とを実行させることを特徴とするプログラムとしたものである。

本発明は、印刷された二次元コードをカメラで撮影することにより、この二次元コードで指定される三次元コンテンツをウェブサーバからストリーミング配信させ、この二次元コードに合わせて、この三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示するので、印刷物、ウェブサーバ、携帯端末の全てで連動し相互作用してコンテンツを提供できるという効果がある。

また、本発明は、異なる二次元コードを同時にカメラで撮影すれば、それぞれの二次元コードに合わせて、異なる三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示することができるという効果がある。

また、本発明は、三次元コンテンツがストリーミング配信されるので、リアルタイム性を確保するとともに、時間軸で三次元コンテンツを可変にできるという効果がある。

本発明を構成要素とするシステムの構成を示す図。 画像合成を示す図。 ３軸判定に用いるモデル座標系を示す図。 三次元コンテンツデコーダより携帯端末が実行する処理の流れを示すフローチャート。

以下に、本発明の一実施形態を説明する。

本実施形態は、図１に示すように、インターネット等のネットワークに接続される携帯端末であって、このネットワークにウェブサーバが接続されている。

ウェブサーバは、三次元コンテンツを保存し管理するデータベースであるコンテンツＤＢを有する。三次元コンテンツは、ＵＲＬで指定される。

携帯端末は、カメラと、三次元コンテンツデコーダとを有する。

三次元コンテンツデコーダは、カメラで撮影された画像からＱＲコード（登録商標）を認識して、このＱＲコード（登録商標）に記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのコンテンツＤＢにアクセスして、ウェブサーバにコンテンツＤＢから三次元コンテンツをストリーミングで配信して貰って受信し、またカメラで撮影された画像中のＱＲコード（登録商標）の３軸判定を常時行って、このＱＲコード（登録商標）を三次元画像として認識し、図２に示すように、このＱＲコード（登録商標）１に合わせて、この三次元コンテンツ３を、カメラで撮影された画像２とリアルタイムに合成して合成画像４を表示することを携帯端末に行わせるプログラムである。

ここで、３軸判定に用いるモデル座標系の例を、図３に示す。この例では、ＱＲコード（登録商標）１の中心を原点に取り、ＱＲコード（登録商標）１に水平な面内にＸＹ軸を取り、ＱＲコード（登録商標）１に垂直にＺ軸を取っている。

携帯端末は、携帯電話、或いは、ＰＤＡであっても良い。

以下に、三次元コンテンツデコーダより携帯端末が実行する処理の流れを、図４のフローチャートに従って説明する。

ＳＴＥＰ１；
携帯端末は、カメラでＱＲコード（登録商標）を撮影して、このＱＲコード（登録商標）が写っている画像をカメラから読み込む。

ＳＴＥＰ２；
携帯端末は、カメラで撮影された画像からＱＲコード（登録商標）を認識して、このＱＲコード（登録商標）に記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのコンテンツＤＢにアクセスして、ウェブサーバにコンテンツＤＢから三次元コンテンツをストリーミングで配信して貰う。

ＳＴＥＰ３；
携帯端末は、ウェブサーバからストリーミング配信される三次元コンテンツを受信する。

ＳＴＥＰ（２〜３）’；
また携帯端末は、上記のＳＴＥＰ２〜４の処理と並行して、カメラで撮影された画像中のＱＲコード（登録商標）の３軸判定を常時行って、このＱＲコード（登録商標）を三次元画像として認識する。

ＳＴＥＰ４；
携帯端末は、三次元画像として認識したＱＲコード（登録商標）に合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して合成画像を表示する。

１…ＱＲコード（登録商標）
２…カメラで撮影された画像
３…三次元コンテンツ
４…合成画像

Claims (3)

1. 三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末であって、
   カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う手段と、
   ウェブサーバからストリーミング配信される三次元コンテンツを受信する手段と、
   カメラで撮影された画像中の二次元コードを三次元画像として認識する手段と、
   三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する手段とを有することを特徴とする携帯端末。
2. 三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末が実行する方法であって、
   カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う工程と、
   ウェブサーバからストリーミング配信される三次元コンテンツを受信する工程と、
   カメラで撮影された画像中の二次元コードを三次元画像として認識する工程と、
   三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する工程とを含むことを特徴とする方法。
3. 三次元コンテンツを保存し管理するデータベースを有するウェブサーバが接続されているネットワークに接続される携帯端末に、
   カメラで撮影された画像から二次元コードを認識して、この二次元コードに記載されているＵＲＬを読み取り、このＵＲＬにより、ウェブサーバのデータベースにアクセスして、ウェブサーバにデータベースから三次元コンテンツをストリーミングで配信して貰う工程と、
   ウェブサーバからストリーミング配信される三次元コンテンツを受信する工程と、
   カメラで撮影された画像中の二次元コードを三次元画像として認識する工程と、
   三次元画像として認識した二次元コードに合わせて、受信した三次元コンテンツを、カメラで撮影された画像とリアルタイムに合成して表示する工程とを実行させることを特徴とするプログラム。

Images