JP2018005071A - 端末装置 - Google Patents

Abstract

【課題】時系列に発生する事象に関する情報を適切な時点で再生する。
【解決手段】端末装置２０は、複数の事象の発生に並行して順次に送信される事象毎の識別情報Ｄnを受信可能な情報受信部５０と、複数の事象の各々に対応する報知時点Ｐnを順次に設定する時点設定部４４と、報知時点Ｐnの到来を契機として、当該報知時点Ｐnに対応する事象の関連情報Ｒnを再生装置に再生させる再生制御部４６とを具備し、時点設定部４４は、相前後する事象間の時間差を指定する情報テーブルＴを参照して、複数の事象のうちの第１事象と当該第１事象の直後の第２事象との時間差を特定し、第１事象の報知時点から当該時間差が経過した時点を第２事象の報知時点として設定する一方、第２事象の報知時点の到来前に情報受信部５０が当該第２事象の識別情報を受信した場合には、第２事象の報知時点を当該識別情報の受信時点に更新する。
【選択図】図５

Description

本発明は、端末装置に情報を提供する技術に関する。

演劇や演奏等の各種の興行の実演に関する情報を、興行の進行に並行して利用者の端末装置に提供する技術が従来から提案されている。例えば特許文献１には、興行の進行に並行して利用者の携帯デバイスに順次に時間コードを送信し、時間コードから特定される時点で字幕等の解説用の情報を携帯デバイスに表示させる構成が開示されている。

特開２００９−２１３１８０号公報

しかし、特許文献１の技術では、例えば携帯デバイスが何らかの理由で時間コードを適正に受信できない場合に、携帯デバイスに表示される情報を適切な時点で更新できない可能性がある。以上の事情を考慮して、本発明は、時系列に発生する事象に関する情報を適切な時点で再生することを目的とする。

以上の課題を解決するために、本発明の好適な態様に係る端末装置は、複数の事象の発生に並行して順次に送信される事象毎の識別情報を受信可能な情報受信部と、複数の事象の各々に対応する報知時点を順次に設定する時点設定部と、報知時点の到来を契機として、当該報知時点に対応する事象の関連情報を再生装置に再生させる再生制御部とを具備し、時点設定部は、相前後する事象間の時間差を指定する情報テーブルを参照して、複数の事象のうちの第１事象と当該第１事象の直後の第２事象との時間差を特定し、第１事象の報知時点から当該時間差が経過した時点を第２事象の報知時点として設定する一方、第２事象の報知時点の到来前に情報受信部が当該第２事象の識別情報を受信した場合には、第２事象の報知時点を当該識別情報の受信時点に更新する。以上の態様では、情報テーブルで指定された時間差が第１事象の報知時点から経過した時点が第２事象の報知時点として設定され、報知時点の到来を契機として関連情報が再生される。したがって、例えば各事象の識別情報の受信を契機として当該事象の関連情報を再生する構成と比較して、端末装置が識別情報を適切に受信できない場合でも、各事象の発生に連動した適切な時点で事象毎の関連情報を再生することが可能である。しかも、第２事象の報知時点の到来前に第２事象の識別情報を受信した場合に、第２事象の報知時点が受信時点に更新されるから、複数の事象の発生に対する関連情報の再生の遅延を抑制できるという利点がある。

本発明の第１実施形態に係る情報提供システムの構成図である。 配信装置の構成図である。 音響信号の説明図である。 ショーの進行と端末装置の動作との関係の説明図である。 端末装置の構成図である。 情報テーブルの模式図である。 報知時点の設定および関連情報の表示の説明図である。 情報再生処理のフローチャートである。 第２実施形態における情報テーブルの模式図である。 第２実施形態における報知時点の設定および関連情報の表示の説明図である。 第２実施形態における情報再生処理のフローチャートである。 第３実施形態における情報再生処理のフローチャートである。

＜第１実施形態＞
図１は、本発明の第１実施形態における情報提供システム１００の構成図である。第１実施形態の情報提供システム１００は、各種の興行（例えば演劇，演奏，映画等）に関する情報をその進行に並行して利用者に提供するためのコンピュータシステムであり、図１に例示される通り、配信装置１０と端末装置２０とを具備する。配信装置１０は、各種の興行が開催される劇場やホール等の施設Ｈに設置される。施設Ｈに来場した利用者は、端末装置２０を携帯する。端末装置２０は、例えば携帯電話機やスマートフォン等の可搬型の情報処理端末である。なお、実際には施設Ｈ内に複数の端末装置２０が存在するが、以下の説明では便宜的に任意の１個の端末装置２０に着目する。

第１実施形態では、事前に用意された複数の台詞が所定の順番で時系列に発音されるショー（例えばキャラクターショー）が施設Ｈ内で開催される場合を想定する。利用者は、端末装置２０を携帯しながらショーを鑑賞する。端末装置２０は、時系列に発音される複数の台詞の各々に関連する情報（以下「関連情報」という）をショーの進行に並行して順次に表示する。具体的には、例えば各台詞を表す文字列（すなわち字幕）が関連情報として端末装置２０に表示される。以上の構成によれば、端末装置２０の利用者は、端末装置２０が順次に表示する関連情報をショーの鑑賞とともに随時に確認することで、ショーの台詞を視覚的に把握することが可能である。したがって、例えば聴覚障碍者でもショーの内容を把握できるという利点がある。

図２は、配信装置１０の構成図である。図２に例示される通り、第１実施形態の配信装置１０は、制御装置１２と記憶装置１４と入力装置１６と放音装置１８とを具備する。制御装置１２は、例えばＣＰＵ（Central Processing Unit）を含む処理回路であり、配信装置１０の各要素を統括的に制御する。記憶装置１４は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体、あるいは複数種の記録媒体の組合せで構成され、制御装置１２が実行するプログラムと制御装置１２が使用する各種のデータとを記憶する。第１実施形態の記憶装置１４は音響信号Ｘを記憶する。音響信号Ｘは、ショーで発音される複数の台詞の音声を表す時間信号である。音響信号Ｘは、声優等の発声者が発音した音声の収録または公知の音声合成処理で事前に生成される。

放音装置１８は、例えば施設Ｈ内に設置されたスピーカ装置であり、音響信号Ｘが表す音を再生する。なお、音響信号Ｘをデジタルからアナログに変換するＤ/Ａ変換器、および、音響信号Ｘを増幅する増幅器の図示は便宜的に省略されている。入力装置１６は、ショーを運営する管理者からの指示を受付ける操作機器である。例えば入力装置１６を適宜に操作することで、管理者は、音響信号Ｘの再生を随時に指示することが可能である。制御装置１２は、入力装置１６に対する管理者からの指示に応じて音響信号Ｘを放音装置１８に供給することで、複数の台詞の各々の音声を放音装置１８から順次に再生させる。施設Ｈ内の舞台における各出演者の演技に並行して音響信号Ｘを再生することでショーが構成される。

図３は、音響信号Ｘの説明図である。図３に例示される通り、第１実施形態の音響信号Ｘは、相異なる複数の台詞Ｌn（Ｌ1，Ｌ2，Ｌ3，……）の各々について発音期間Ａn（Ａ1，Ａ2，Ａ3，……）を包含する（ｎは自然数）。任意の１個の台詞Ｌnに対応する発音期間Ａnは、台詞Ｌnを発音した音響成分が存在する区間である。したがって、放音装置１８に対する音響信号Ｘの供給により発音期間Ａn毎に各台詞Ｌnが順次に発音される。各発音期間Ａnの時間長は、台詞Ｌnの長短に応じた可変長である。

第１実施形態では、複数の台詞Ｌnの再生に並行して各台詞Ｌnの識別情報Ｄnが配信装置１０から端末装置２０に配信される。具体的には、任意の１個の台詞Ｌnが発音される発音期間Ａnにおいて当該台詞Ｌnの識別情報Ｄnが端末装置２０に配信される。図３に例示される通り、識別情報Ｄnは複数回にわたり反復的に配信装置１０から端末装置２０に配信される。例えば、識別情報Ｄnの配信は、発音期間Ａnの始点から終点にかけて間欠的または連続的に反復される。なお、発音期間Ａnの開始前から識別情報Ｄnの配信が開始される構成、または、発音期間Ａnの終了前に識別情報Ｄnの配信が終了される構成も採用され得る。すなわち、発音期間Ａnに重複する期間内で識別情報Ｄnを複数回にわたり配信する構成が好適であるが、発音期間Ａnと識別情報Ｄnを配信する期間とにおける始点または終点の異同は任意である。

第１実施形態では、端末装置２０に対する識別情報Ｄnの配信に、空気振動としての音波を伝送媒体とする音響通信が利用される。具体的には、音響信号Ｘの発音期間Ａnのうち時間軸上の相異なる複数の位置に識別情報Ｄnの音響成分が含有される。識別情報Ｄnの音響成分は、当該識別情報Ｄnを適用した変調処理で生成された変調成分である。例えば、所定の周波数の正弦波等の搬送波を識別情報Ｄnにより変調する周波数変調、または、拡散符号を利用した識別情報Ｄnの拡散変調が、識別情報Ｄnの変調処理として好適である。

以上の例示の通り、台詞Ｌnの音響成分と識別情報Ｄnの音響成分とを各発音期間Ａnに含有する音響信号Ｘが図２の放音装置１８に供給される。したがって、台詞Ｌnの音響成分と識別情報Ｄnの音響成分とが放音装置１８から順次に放音される。識別情報Ｄnの音響成分の周波数帯域は、利用者が通常の環境で聴取する音の周波数帯域を上回る範囲（例えば１８ｋＨｚ以上かつ２０ｋＨｚ以下）に設定される。したがって、台詞Ｌnの音響成分は利用者に聴取および知覚される一方、識別情報Ｄnの音響成分は利用者に殆ど知覚されない。以上の説明から理解される通り、第１実施形態の放音装置１８は、台詞Ｌnの音響成分を放音する音響機器として機能するほか、空気振動としての音波を伝送媒体とする音響通信で当該台詞Ｌnの識別情報Ｄnを周囲に送信する送信機としても機能する。

図４は、ショーの進行と端末装置２０の動作との関係の説明図である。図４に例示される通り、配信装置１０は、複数の台詞Ｌnの発音（すなわちショーの進行）に並行して各台詞Ｌnの識別情報Ｄnを音響通信により順次に送信する。具体的には、前述の通り、発音期間Ａnにおける台詞Ｌnの再生に並行して、発音期間Ａn内で当該台詞Ｌnの識別情報Ｄnの配信が反復される。以上の通り、第１実施形態では、発音期間Ａn内で複数回にわたり識別情報Ｄnが配信されるから、端末装置２０が識別情報Ｄnを受信できない可能性が低減される。

図５は、端末装置２０の構成図である。図５に例示される通り、端末装置２０は、制御装置２１と記憶装置２３と収音装置２５と入力装置２７と表示装置２９とを具備する。制御装置２１は、例えばＣＰＵを含む処理回路であり、端末装置２０の各要素を統括的に制御する。記憶装置２３は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体、あるいは複数種の記録媒体の組合せで構成され、制御装置２１が実行するプログラムと制御装置２１が使用する各種のデータとを記憶する。第１実施形態の記憶装置２３は、図６に例示される情報テーブルＴを記憶する。例えば、移動体通信網やインターネット等の通信網を介して端末装置２０が管理サーバ（図示略）から受信した情報テーブルＴが記憶装置２３に記憶される。

図６に例示される通り、情報テーブルＴは、ショーで発音され得る複数の台詞Ｌnの各々について識別情報Ｄn（Ｄ1，Ｄ2，Ｄ3，……）と関連情報Ｒn（Ｒ1，Ｒ2，Ｒ3，……）とが登録されたデータテーブルである。第１実施形態における各台詞Ｌnの関連情報Ｒnは、当該台詞Ｌnの文字列を表すテキストデータである。識別情報Ｄnは、前述の通り台詞Ｌnを識別するための符号であるが、関連情報Ｒnを識別するための符号とも換言され得る。

図６に例示される通り、第１実施形態の情報テーブルＴには、相前後する２個の台詞（Ｌn，Ｌn+1）の対毎に時間差Ｑ[n,n+1]（Ｑ[1,2]，Ｑ[2,3]，Ｑ[3,4]，……）が登録される。時間差Ｑ[n,n+1]は、台詞Ｌnと台詞Ｌn+1との間の時間である。具体的には、図３に例示される通り、任意の１個の時間差Ｑ[n,n+1]は、第ｎ番目の台詞Ｌnが発音される発音期間Ａnの始点と直後の台詞Ｌn+1が発音される発音期間Ａn+1の始点との間隔である。したがって、放音装置１８による台詞Ｌnの発音の開始から時間差Ｑ[n,n+1]だけ経過した時点で台詞Ｌn+1の発音が開始される。例えば、最初の台詞Ｌ1の発音の開始から時間差Ｑ[1,2]だけ経過した時点で第２番目の台詞Ｌ2の発音が開始され、台詞Ｌ2の発音の開始から時間差Ｑ[2,3]だけ経過した時点で第３番目の台詞Ｌ3の発音が開始される。なお、識別情報Ｄnと関連情報Ｒnと時間差Ｑ[n,n+1]との対応さえ特定できれば、相互に別個の複数のテーブルで情報テーブルＴを構成することも可能である。

図５の収音装置２５（マイクロホン）は、周囲の音を収音して音響信号Ｙを生成する音響機器である。具体的には、収音装置２５は、配信装置１０の放音装置１８が再生した音（すなわち台詞Ｌnの音響成分と識別情報Ｄnの音響成分との混合音）を表す音響信号Ｙを生成する。なお、収音装置２５が生成した音響信号Ｙをアナログからデジタルに変換するＡ/Ｄ変換器の図示は便宜的に省略した。

入力装置２７は、端末装置２０に対する各種の指示のために利用者が操作する操作機器である。例えば利用者が操作する複数の操作子や利用者による接触を検知するタッチパネルが入力装置２７として好適に利用される。表示装置２９（例えば液晶表示パネル）は、制御装置２１による制御のもとで関連情報Ｒnを表示する。なお、収音装置２５および表示装置２９の一方または双方を、端末装置２０とは別体で構成して端末装置２０に接続することも可能である。

図５に例示される通り、記憶装置２３に記憶されたプログラムを制御装置２１が実行することで、関連情報Ｒnを利用者に提供するための複数の機能（情報抽出部４２，時点設定部４４，再生制御部４６）が実現される。なお、以上に例示した制御装置２１の機能を複数の装置に分散した構成、または、制御装置２１の機能の一部を専用の電子回路が実現する構成も採用され得る。

情報抽出部４２は、収音装置２５が生成した音響信号Ｙから各台詞Ｌnの識別情報Ｄnを抽出する。具体的には、情報抽出部４２は、音響信号Ｙのうち識別情報Ｄnを含む周波数帯域の音響成分を例えば帯域通過フィルタで強調し、音響信号Ｘの生成時の変調処理に対応する復調処理を強調後の音響成分に対して実行することで識別情報Ｄnを抽出する。放音装置１８による台詞Ｌnの発音毎に、当該台詞Ｌnの識別情報Ｄnが順次に抽出される。以上の説明から理解される通り、第１実施形態の収音装置２５は、端末装置２０の相互間の音声通話や動画撮影時の音声収録に利用されるほか、音響通信による識別情報Ｄnの受信に利用される。すなわち、収音装置２５および情報抽出部４２は、複数の台詞Ｌnの再生に並行して配信装置１０から順次に送信される各台詞Ｌnの識別情報Ｄnを受信可能な情報受信部５０として機能する。

時点設定部４４は、図４に例示される通り、複数の台詞Ｌnの各々に対応する関連情報Ｒnを利用者に報知すべき時点（以下「報知時点」という）Ｐnを台詞Ｌn毎に順次に設定する。任意の１個の台詞Ｌnに対応する関連情報Ｒnの報知時点Ｐnは、当該台詞Ｌnの発音期間Ａnに対応した時点（典型的には発音期間Ａn内の時点）に設定される。

第１実施形態の時点設定部４４は、情報テーブルＴで指定された時間差Ｑ[n,n+1]が既定の報知時点Ｐnから経過した時点を、第(n+1)番目の台詞Ｌn+1の関連情報Ｒn+1が再生されるべき報知時点Ｐn+1として特定する。例えば、図４に例示される通り、第３番目の台詞Ｌ3の報知時点Ｐ3は、直前の台詞Ｌ2の報知時点Ｐ2から時間差Ｑ[2,3]が経過した時点である。具体的には、時点設定部４４は、任意の報知時点Ｐnにてゼロに初期化される計時値（例えば内部タイマによるカウント値）を経時的に増加させ、情報テーブルＴで指定された時間差Ｑ[n,n+1]に計時値が到達した時点を関連情報Ｒn+1の報知時点Ｐn+1として特定する。ただし、最初の台詞Ｌ1について、時点設定部４４は、情報受信部５０が配信装置１０から最初の識別情報Ｄ1を受信した時点を報知時点Ｐ1として特定する。

図５の再生制御部４６は、複数の台詞Ｌnの各々の関連情報Ｒnを表示装置２９に順次に表示させる。具体的には、再生制御部４６は、時点設定部４４が任意の１個の台詞Ｌnについて設定する報知時点Ｐnの到来を契機として、当該台詞Ｌnの関連情報Ｒnを表示装置２９に表示させる。すなわち、時点設定部４４が設定する報知時点Ｐnの到来毎に、表示装置２９に表示される関連情報Ｒnが更新される。したがって、複数の台詞Ｌnの再生に並行して各台詞Ｌnの関連情報Ｒnが順次に表示される。

例えば、図４に例示される通り、発音期間Ａ1のうち端末装置２０が識別情報Ｄ1を受信した報知時点Ｐ1にて台詞Ｌ1の関連情報Ｒ1の表示が開始される。そして、報知時点Ｐ1から時間差Ｑ[1,2]だけ後方の報知時点Ｐ2にて台詞Ｌ2の関連情報Ｒ2の表示が開始され、報知時点Ｐ2から時間差Ｑ[2,3]だけ後方の報知時点Ｐ3にて台詞Ｌ3の関連情報Ｒ3の表示が開始される。以上の通り、第１実施形態では、１個の台詞Ｌnに対応する関連情報Ｒnの報知時点Ｐnから時間差Ｑ[n,n+1]が経過した時点が、直後の台詞Ｌn+1に対応する関連情報Ｒn+1の報知時点Ｐn+1として設定される。すなわち、台詞Ｌ2以降の各台詞Ｌnについては、識別情報Ｄnの受信を必要とせずに関連情報Ｒnが順次に再生される。したがって、端末装置２０が識別情報Ｄnを適正に受信できない場合でも、各台詞Ｌnの再生に連動した適切な時点で台詞Ｌn毎の関連情報Ｒnを順次に表示できるという利点がある。

ところで、関連情報Ｒnの報知時点Ｐnから時間差Ｑ[n,n+1]だけ経過した時点を例外なく関連情報Ｒn+1の報知時点Ｐn+1とする構成（図７に例示された「対比例」）では、複数の台詞Ｌnの進行（以下「台詞進行」という）に対して関連情報Ｒnの表示が遅延する可能性がある。例えば、図７に例示される通り、発音期間Ａ1の始点から時間δだけ遅延した時点で端末装置２０が最初の台詞Ｌ1の識別情報Ｄ1を受信した場合を想定する。前述の説明の通り、第２番目以降の各関連情報Ｒnの報知時点Ｐnは、識別情報Ｄ1の受信の時点である報知時点Ｐ1を起点として設定される。したがって、第２番目以降の各台詞Ｌnの関連情報Ｒnは、当該台詞Ｌnが発音される発音期間Ａnの始点（すなわち台詞Ｌnの発音の開始）から時間δだけ遅延した報知時点Ｐnで表示装置２９に表示される。すなわち、実際のショーにおける台詞進行に対して関連情報Ｒnの表示が時間δだけ遅延する結果となる。以上の事情を考慮して、第１実施形態では、関連情報Ｒnの表示が台詞進行に対して遅延した場合に、報知時点Ｐnを時間的に前方の時点に補正する。すなわち、関連情報Ｒnの表示の遅延が低減される。

図７に例示される通り、台詞Ｌnの識別情報Ｄnは、発音期間Ａnの始点から反復的に配信される。したがって、関連情報Ｒnの報知時点Ｐnが台詞Ｌnの発音期間Ａnの始点から遅延した状況では、当該発音期間Ａnの始点から報知時点Ｐnまでの時間δの期間内に、情報受信部５０が識別情報Ｄnを受信することが可能である。すなわち、台詞Ｌnに対応する既定の報知時点Ｐnの到来前に情報受信部５０が当該台詞Ｌnの識別情報Ｄnを受信した場合には、発音期間Ａnの始点に対して報知時点Ｐnが遅延した状況であると推定できる。以上の事情を考慮して、第１実施形態では、台詞Ｌnの報知時点Ｐnの到来前に情報受信部５０が台詞Ｌnの識別情報Ｄnを受信した場合（すなわち、台詞進行に対して報知時点Ｐnが遅延していると推定される場合）に、報知時点Ｐnを、識別情報Ｄnの受信の時点に更新する。

例えば、図７の例示の通り、台詞Ｌ1の報知時点Ｐ1から時間差Ｑ[1,2]が経過した時点を直後の台詞Ｌ2の報知時点Ｐ2として時点設定部４４が設定した状態を想定する。以上の状態のもとで、台詞Ｌ2の報知時点Ｐ2の到来前の時点ｔ2にて情報受信部５０が当該台詞Ｌ2の識別情報Ｄ2を受信した場合、時点設定部４４は、台詞Ｌ2の報知時点Ｐ2を当該識別情報Ｄ2の受信の時点ｔ2に更新する。すなわち、台詞進行に対して報知時点Ｐnが遅延した状態では、報知時点Ｐnが前方の時点（識別情報Ｄ2の受信の時点ｔ2）に補正される。そして、時点設定部４４は、更新後の報知時点Ｐ2から時間差Ｑ[2,3]だけ経過した時点を直後の台詞Ｌ3の報知時点Ｐ3として設定する。以上の説明から理解される通り、台詞進行に対する関連情報Ｒnの表示の遅延が低減される。

図８は、時点設定部４４が報知時点Ｐnを設定するとともに再生制御部４６が関連情報Ｒnを更新する処理（以下「情報再生処理」という）のフローチャートである。入力装置２７に対する利用者からの指示を契機として情報再生処理が開始される。情報受信部５０による識別情報Ｄnの受信は情報再生処理に並行して所定の周期で反復される。

情報再生処理を開始すると、時点設定部４４は、情報受信部５０が最初の台詞Ｌ1（ｎ＝１）の識別情報Ｄ1を受信した時点を初期的な報知時点Ｐ1として設定する（ＳA1）。再生制御部４６は、台詞Ｌ1の関連情報Ｒ1を表示装置２９に表示させる（ＳA2）。

時点設定部４４は、１個の台詞Ｌnを指示する変数ｎに１を加算する（ＳA3）。そして、時点設定部４４は、既定の報知時点Ｐn-1に対応する台詞Ｌn-1と直後の台詞Ｌnとの時間差Ｑ[n-1,n]を情報テーブルＴから検索し、報知時点Ｐn-1から時間差Ｑ[n-1,n]が経過した時点を台詞Ｌnの報知時点Ｐnとして設定する（ＳA4）。例えば、報知時点Ｐ1の設定の直後（第１回目）のステップＳA4では、報知時点Ｐ1から時間差Ｑ[1,2]が経過した時点が台詞Ｌ2の報知時点Ｐ2として設定される。

再生制御部４６は、報知時点Ｐnが到来したか否かを判定する（ＳA5）。報知時点Ｐnが到来した場合（ＳA5：YES）、再生制御部４６は、関連情報Ｒnを情報テーブルＴから検索して表示装置２９に表示させる（ＳA6）。すなわち、報知時点Ｐnの到来を契機として、現時点で表示中の関連情報Ｒn-1が直後の台詞Ｌnの関連情報Ｒnに更新される。関連情報Ｒnの表示後に処理はステップＳA3に移行し、変数ｎに１が加算されることで処理対象が直後の台詞Ｌnに更新される。したがって、放音装置１８による各台詞Ｌnの発音に並行して各台詞Ｌnの関連情報Ｒnが順次に表示装置２９に表示される。

他方、報知時点Ｐnが到来していない場合（ＳA5：NO）、再生制御部４６は、情報受信部５０が台詞Ｌnの識別情報Ｄnを受信したか否かを判定する（ＳA7）。識別情報Ｄnを受信した場合（ＳA7：YES）、時点設定部４４は、現段階の報知時点Ｐn（すなわち直前のステップＳA4で設定した暫定的な報知時点Ｐn）を識別情報Ｄnの受信の時点に更新する（ＳA8）。すなわち、報知時点Ｐnの到来前に識別情報Ｄnを受信した場合（ＳA5：NO，ＳA7：YES）に、時点設定部４４は、台詞進行に対する報知時点Ｐnの遅延が低減されるように報知時点Ｐnを時間的に前方の時点に補正する。報知時点Ｐnの更新後に処理はステップＳA5に移行する。ステップＳA5では、更新後の報知時点Ｐnの到来（ＳA5：YES）により関連情報Ｒnが表示装置２９に表示される（ＳA6）。

他方、情報受信部５０が識別情報Ｄnを受信しない場合、報知時点Ｐnの更新（ＳA8）は実行されることなく処理はステップＳA5に移行する。したがって、台詞進行に対して報知時点Ｐnが遅延していなければ、図４の例示のように、最初の報知時点Ｐ1を起点として各時間差Ｑ[n-1,n]が経過した報知時点Ｐn毎に関連情報Ｒnの表示が順次に更新される。

以上に説明した通り、第１実施形態では、報知時点Ｐn-1から時間差Ｑ[n-1,n]が経過した時点が報知時点Ｐnとして順次に設定され、報知時点Ｐnの到来を契機として関連情報Ｒnが利用者に報知される。したがって、例えば各台詞Ｌnの識別情報Ｄnの受信を契機として関連情報Ｒnを再生する構成と比較すると、端末装置２０が識別情報Ｄnを適切に受信できない場合でも、各台詞Ｌnの発音に連動した適切な時点で台詞Ｌn毎の関連情報Ｒnを順次に再生できるという利点がある。しかも、第１実施形態では、台詞Ｌnの報知時点Ｐnの到来前に情報受信部５０が台詞Ｌnの識別情報Ｄnを受信した場合に、報知時点Ｐnが識別情報Ｄnの受信時点に更新されるから、台詞進行に対する関連情報Ｒnの再生の遅延を抑制できるという利点がある。

＜第２実施形態＞
本発明の第２実施形態を説明する。なお、以下に例示する各形態において機能が第１実施形態と同様である要素については、第１実施形態の説明で使用した符号を流用して各々の詳細な説明を適宜に省略する。

実際のショーでは、相前後する台詞Ｌnの間に、事前に想定されていない突発的な事象（以下「突発的事象」という）が発生し得る。突発的事象は、可変長にわたる事柄であり、例えばショーの出演者による即興的な演技（アドリブ）が典型例である。突発的事象が発生した場合、管理者は、配信装置１０の入力装置１６に対する操作で音響信号Ｘの再生の停止を指示し、突発的事象が終了した段階で音響信号Ｘの再生の再開を指示する。配信装置１０の制御装置１２は、管理者からの指示に応じて音響信号Ｘの再生を停止および再開する。以上の説明から理解される通り、突発的事象が発生した場合には台詞進行が停止する。したがって、台詞進行に並行した適切な時点で関連情報Ｒnを表示するためには、突発的事象の発生時に報知時点Ｐnを補正する必要がある。

図９は、第２実施形態における情報テーブルＴの模式図である。図９に例示される通り、複数の台詞Ｌnは、突発的事象が発生する可能性がある時点を境界として時間軸上で複数の集合（以下「台詞群」という）Ｇmに区分される（ｍは自然数）。各台詞群Ｇm（Ｇ1，Ｇ2，……）は、時間軸上で相前後する１個以上の台詞Ｌnの集合である。図９では、第１番目から第３番目までの３個の台詞Ｌn（Ｌ1，Ｌ2，Ｌ3）を第１番目の台詞群Ｇ1に区分し、第４番目および第５番目の２個の台詞Ｌn（Ｌ4，Ｌ5）を第２番目の台詞群Ｇ2に区分した場合が例示されている。情報テーブルＴは、台詞群Ｇmの区分（相前後する台詞群Ｇmの境界）を指定する。例えば、相前後する台詞群（Ｇm，Ｇm+1）の境界を指定するデータ、あるいは、各台詞群Ｇmの先頭または末尾の台詞を指定するデータ（例えばフラグ）が情報テーブルＴに包含される。なお、各台詞群Ｇmに属する台詞Ｌnの総数は台詞群Ｇm毎に相違し得る。

前述の通り、突発的事象の時間長は可変長である。したがって、突発的事象の直後の台詞Ｌnが放音装置１８から発音される時点は、突発的事象の時間長に応じて変動し得る。具体的には、突発的事象の時間長が短いほど、直後の台詞Ｌnは早目の時点で発音される。したがって、台詞群Ｇmの先頭の台詞Ｌnの報知時点Ｐnを、直前の台詞Ｌn-1の報知時点Ｐn-1から時間差Ｑ[n-1,n]が経過した時点に固定的に設定する構成では、突発的事象の直後の台詞Ｌnの発音に対して報知時点Ｐnが適切な時点とならない可能性がある。例えば、突発的事象の時間長が短い場合（台詞群Ｇmの先頭の台詞Ｌnが早目に発音される場合）には、報知時点Ｐnが台詞Ｌnの発音に対して遅延し得る。また、突発的事象の時間長が長い場合（台詞Ｌnが遅目に発音される場合）には、報知時点Ｐnが台詞Ｌnの発音に対して過度に先行し得る。以上の事情を考慮して、本実施形態の時点設定部４４は、各台詞群Ｇmの先頭の台詞Ｌnについては、直前の台詞Ｌn-1の報知時点Ｐn-1から時間長Ｑ[n-1,n]が経過した時点ではなく、情報受信部５０が台詞Ｌnの識別情報Ｄnを受信した時点を報知時点Ｐnとして設定する。なお、各台詞群Ｇmの先頭以外の台詞Ｌnについて報知時点Ｐnを設定する方法は第１実施形態と同様である。

図１０は、台詞群Ｇmの先頭の台詞Ｌnについて報知時点Ｐnを設定する処理の説明図である。図１０に例示される通り、直前の台詞群Ｇm-1の最後の台詞Ｌn-1から時間長Ｑ[n-1,n]が経過した時点が、台詞群Ｇmの先頭の台詞Ｌnの暫定的な報知時点Ｐnとして設定された状況を想定する。

突発的事象Ｅの時間長が短い場合、音響信号Ｘの再生（台詞Ｌnの発音および識別情報Ｄnの配信）が早目に再開されるから、暫定的な報知時点Ｐnの到来前に情報受信部５０が識別情報Ｄnを受信し得る。報知時点Ｐnの到来前に識別情報Ｄnを受信した場合、時点設定部４４は、第１実施形態と同様に、識別情報Ｄnの受信の時点に報知時点Ｐnを更新する。

他方、突発的事象Ｅの時間長が長い場合、音響信号Ｘの再生の再開が遅延するから、情報受信部５０が識別情報Ｄnを受信するのは暫定的な報知時点Ｐnの到来後となる。台詞群Ｇmの先頭の台詞Ｌnについては、識別情報Ｄnの受信前に報知時点Ｐnが到来しても当該報知時点Ｐnでは関連情報Ｒnを再生せず、時点設定部４４は、報知時点Ｐnの到来後における識別情報Ｄnの受信の時点に報知時点Ｐnを更新する。すなわち、報知時点Ｐnが時間的に後方の時点に補正される。

図１１は、第２実施形態における情報再生処理のフローチャートである。図１１に例示される通り、第２実施形態の情報再生処理は、第１実施形態の情報再生処理にステップＳB1からステップＳB4を追加した内容である。報知時点Ｐnの到来前に情報受信部５０が識別情報Ｄnを受信した場合（ＳA5：NO，ＳA7：YES）に識別情報Ｄnの受信の時点に報知時点Ｐnを更新する動作（ＳA8）は、第１実施形態と同様である。

報知時点Ｐnが到来した場合（ＳA5：YES）、時点設定部４４は、現在の変数ｎに対応する台詞Ｌnが台詞群Ｇmの先頭であるか否かを判定する（ＳB1）。台詞Ｌnが台詞群Ｇmの先頭である場合（ＳB1：YES）、時点設定部４４は、台詞Ｌnの識別情報Ｄnを受信済であるか否かを判定する（ＳB2）。報知時点Ｐnの到来前に識別情報Ｄnを既に受信している場合（ＳA5：NO，ＳA7：YES）には、ステップＳB2の判定の結果は肯定となる。台詞Ｌnが台詞群Ｇmの先頭以外である場合（ＳB1：NO）、または、先頭の台詞Ｌnの識別情報Ｄnを受信済である場合（ＳB2：YES）、再生制御部４６は、台詞Ｌnの関連情報Ｒnを表示装置２９に表示させる（ＳA6）。

他方、報知時点Ｐnは到来したが台詞群Ｇmの先頭の台詞Ｌnの識別情報Ｄnを情報受信部５０が受信していない場合（ＳB2：NO）、時点設定部４４は、情報受信部５０が識別情報Ｄnを受信するまで待機する（ＳB3：NO）。情報受信部５０が識別情報Ｄnを受信すると（ＳB3：YES）、時点設定部４４は、識別情報Ｄnの受信の時点に報知時点Ｐnを更新する（ＳB4）。以上の手順で報知時点Ｐnを後方に補正すると、再生制御部４６は、台詞Ｌnの関連情報Ｒnを表示装置２９に表示させる（ＳA6）。関連情報Ｒnの表示（ＳA6）後に処理はステップＳA3に移行して変数ｎが更新され、以降の各台詞Ｌnの発音に並行して関連情報Ｒnが順次に表示される。

第２実施形態においても第１実施形態と同様の効果が実現される。また、第２実施形態では、各台詞群Ｇmの先頭の台詞Ｌnの報知時点Ｐnは、情報受信部５０が識別情報Ｄnを受信した時点に設定される。したがって、相前後する２個の台詞群Ｇmの間で発生した突発的事象Ｅが長引いた場合でも、突発的事象Ｅの終了後には、各台詞Ｌnの発音に連動した適切な時点で台詞Ｌn毎の関連情報Ｒnを順次に再生することが可能である。

＜第３実施形態＞
第２実施形態では、台詞群Ｇmの先頭の台詞Ｌnについて設定された報知時点Ｐnを識別情報Ｄnの受信の時点に補正した。第３実施形態は、台詞群Ｇmの先頭の台詞Ｌnについては、時間差Ｑ[n-1,n]を利用した報知時点Ｐnの設定を省略し、識別情報Ｄnの受信の時点を報知時点Ｐnとして設定する。

図１２は、第３実施形態における情報再生処理のフローチャートである。図１２に例示される通り、第３実施形態の情報再生処理は、第１実施形態の情報再生処理にステップＳC1からステップＳC4を追加した内容である。

変数ｎに１を加算すると（ＳA3）、時点設定部４４は、更新後の変数ｎに対応する台詞Ｌnが台詞群Ｇmの先頭であるか否かを判定する（ＳC1）。台詞Ｌnが台詞群Ｇmの先頭でない場合（ＳC1：NO）、第１実施形態と同様に、時点設定部４４は、直前の台詞Ｌn-1から時間差Ｑ[n-1,n]が経過した時点を報知時点Ｐnとして設定する（ＳA4）。報知時点Ｐnの到来を契機として関連情報Ｒnを表示する動作（ＳA6）、および、報知時点Ｐnの到来前に識別情報Ｄnを受信した場合に当該受信の時点に報知時点Ｐnを更新する動作（ＳA8）は第１実施形態と同様である。

他方、台詞Ｌnが台詞群Ｇmの先頭である場合（ＳC1：YES）、時点設定部４４は、情報受信部５０が台詞Ｌnの識別情報Ｄnを受信するまで待機する（ＳC2：NO）。情報受信部５０が識別情報Ｄnを受信すると（ＳC2：YES）、時点設定部４４は、識別情報Ｄnの受信の時点を報知時点Ｐnとして設定し（ＳC3）、再生制御部４６は、台詞Ｌnの関連情報Ｒnを表示装置２９に表示させる（ＳC4）。報知時点Ｐnの設定（ＳC3）と関連情報Ｒnの表示（ＳC4）とが完了すると、処理はステップＳA3に移行する。

以上の説明から理解される通り、第３実施形態の時点設定部４４は、第２実施形態と同様に、台詞群Ｇmの先頭の台詞Ｌnについて、直前の報知時点Ｐn-1から時間長Ｑ[n-1,n]が経過した時点ではなく、情報受信部５０が台詞Ｌnの識別情報Ｄnを受信した時点を報知時点Ｐnとして設定する。したがって、第３実施形態においても第２実施形態と同様の効果が実現される。なお、第３実施形態では、台詞群Ｇmの先頭の台詞Ｌnについては、直前の台詞Ｌn-1からの時間差Ｑ[n-1,n]を報知時点Ｐnの設定に使用しない。したがって、台詞群Ｇmの先頭の台詞Ｌnに対応する時間差Ｑ[n-1,n]は情報テーブルＴから省略され得る。

＜変形例＞
以上に例示した各態様は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２個以上の態様は、相互に矛盾しない範囲で適宜に併合され得る。

（１）前述の各形態では、関連情報Ｒnを表示装置２９に表示したが、関連情報Ｒnの再生方法は以上の例示に限定されない。例えば、台詞Ｌnを発音した音声を表す音声信号を関連情報Ｒnとして台詞Ｌn毎に記憶装置２３に記憶し、情報受信部５０が受信した識別情報Ｄnに対応する関連情報Ｒnが表す音声を、スピーカやヘッドホン等の放音装置から放音することも可能である。なお、関連情報Ｒnを利用した音声合成で当該台詞Ｌnの音声を合成することも可能である。以上の説明から理解される通り、再生制御部４６は、関連情報Ｒnを再生装置に再生させる要素として包括される。再生装置は、関連情報Ｒnを画像として表示する表示装置２９のほか、関連情報Ｒnが示す音声を放音する放音装置も包含する。

（２）台詞進行に並行して動画像を再生する場合には、動画像のうち利用者が再生を指示し得る時点として報知時点Ｐnを利用することも可能である。具体的には、再生制御部４６は、例えば記憶装置２３に記憶された動画像を表示装置２９に表示させ、端末装置２０の入力装置２７に対する利用者からの指示を契機として、動画像の再生時点を直後の報知時点Ｐnに変更（すなわち早送り）する。

（３）第２実施形態または第３実施形態では、突発的事象Ｅが発生し得る時点の直前の台詞Ｌn-1と当該突発的事象Ｅの直後の台詞Ｌnとの時間差Ｑ[n-1,n]を、突発的事象Ｅに想定される時間長の最大値または平均値に設定することも可能である。

（４）前述の各形態では、各台詞Ｌnを表す文字列を関連情報Ｒnとして再生したが、関連情報Ｒnの内容は以上の例示に限定されない。例えば、各台詞Ｌnを他言語に翻訳した翻訳文の文字列または音声を関連情報Ｒnとして再生する構成や、ショーを解説する文字列または音声を関連情報Ｒnとして再生する構成も採用され得る。

また、前述の各形態では、時系列に再生される台詞Ｌnの関連情報Ｒnを再生する場合を例示したが、情報提供システム１００が利用される場面は、前述の各形態で例示したショーには限定されない。例えば、交通機関（例えば電車，バス），展示施設（例えば博物館，美術館），または観光施設等の各種の施設を案内する音声を時系列で発音する場面でも、前述の各形態で例示した情報提供システム１００が利用され得る。以上の例示から理解される通り、情報提供システム１００は、時系列に発生する複数の事象（例えば台詞Ｌnや案内の発音）に並行して送信される各事象の関連情報Ｒnを提供するためのコンピュータシステムとして包括的に表現される。また、台詞Ｌnの再生や各種の施設の案内は、時系列的に発生する事象として包括され、前述の各形態で例示した台詞群Ｇmは、複数の事象を区分した事象群の例示である。例えば同内容を別言語（例えば日本語と外国語）で表現した複数の台詞Ｌnを表示する場合のように、複数の情報を同時または順次（時系列的）に表示することを、１個の事象に含ませることも可能である。

（５）前述の各形態では、台詞Ｌnの音響成分と識別情報Ｄnの音響成分とを含有する音響信号Ｘを再生したが、音響信号Ｘに各台詞Ｌnの音響成分を含ませない構成も採用され得る。例えば、ショーの出演者の音声を収音した音声信号と、各識別情報Ｄnの音響成分を表す音響信号とを、ショーの進行に並行して実時間的に混合することで音響信号Ｘを生成して放音装置１８に供給することも可能である。また、前述の各形態では、台詞Ｌnを再生する放音装置１８を識別情報Ｄnの送信に利用したが、台詞Ｌnの再生用の放音装置とは別個の放音装置から端末装置２０に識別情報Ｄnを送信することも可能である。

（６）前述の各形態では、音波を伝送媒体とする音響通信で識別情報Ｄnを端末装置２０に送信したが、端末装置２０に識別情報Ｄnを送信するための通信方式は音響通信に限定されない。例えば、放音装置１８による台詞Ｌnの放音に同期して、電波や赤外線等の電磁波を伝送媒体とした無線通信で端末装置２０に識別情報Ｄnを送信することも可能である。以上の例示から理解される通り、識別情報Ｄnの送信には、移動体通信網等の通信網が介在しない近距離無線通信が好適であり、音波を伝送媒体とする音響通信や電磁波を伝送媒体とする無線通信は近距離無線通信の例示である。

なお、音響通信には、既存の放音装置１８を流用できること、または、通信範囲の制御が容易であること等の種々の利点がある反面、電磁波を伝送媒体とする無線通信と比較して雑音源が多く通信ミスが発生し易いという傾向がある。しかし、前述の各形態の例示のように識別情報Ｄnを反復的に送信することで、通信ミスの可能性は充分に低減される。他方、識別情報Ｄnを反復的に送信する構成では、台詞進行に対する関連情報Ｒnの再生の遅延が発生し得る。以上の事情を考慮すると、台詞進行に対する関連情報Ｒnの再生の遅延を低減し得る前述の各形態は、識別情報Ｄnの送信に音響通信を利用した構成にとって特に有効であると言える。

（７）前述の各形態では、端末装置２０の記憶装置２３に事前に記憶された関連情報Ｒnを再生制御部４６が選択的に表示装置２９に表示させたが、関連情報Ｒnの取得先は記憶装置２３に限定されない。例えば、複数の関連情報Ｒnを保持する管理サーバとの間で端末装置２０が通信網を介して通信する構成を想定する。以上の構成では、情報抽出部４２が抽出した識別情報Ｄnを指定した情報要求を再生制御部４６が管理サーバに送信し、管理サーバは、情報要求で指定された識別情報Ｄnに対応する関連情報Ｒnを検索して要求元の端末装置２０に送信する。端末装置２０の再生制御部４６は、管理サーバから受信した関連情報Ｒnを表示装置２９に表示させる。

（８）前述の各形態で例示した端末装置２０は、前述の通り、制御装置２１とプログラムとの協働で実現される。好適な態様に係るプログラムは、複数の台詞Ｌnの発生に並行して順次に送信される台詞Ｌn毎の識別情報Ｄnを受信可能な情報受信部５０、複数の台詞Ｌnの各々に対応する報知時点Ｐnを順次に設定する時点設定部４４、および、報知時点Ｐnの到来を契機として、当該報知時点Ｐnに対応する台詞Ｌnの関連情報Ｒnを再生装置に再生させる再生制御部４６として機能させるプログラムであって、時点設定部４４は、相前後する台詞（Ｌn-1，Ｌn）間の時間差Ｑ[n-1,n]を指定する情報テーブルＴを参照して、台詞Ｌn-1と直後の台詞Ｌnとの時間差Ｑ[n-1,n]を特定し、台詞Ｌn-1の報知時点Ｐn-1から当該時間差Ｑ[n-1,n]が経過した時点を台詞Ｌnの報知時点Ｐnとして設定する一方、台詞Ｌnの報知時点Ｐnの到来前に情報受信部５０が台詞Ｌnの識別情報Ｄnを受信した場合には、台詞Ｌnの報知時点Ｐnを当該識別情報Ｄnの受信時点に更新する。

なお、第１実施形態および第２実施形態のプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされ得る。記録媒体は、例えば非一過性（non-transitory）の記録媒体であり、ＣＤ-ＲＯＭ等の光学式記録媒体（光ディスク）が好例であるが、半導体記録媒体や磁気記録媒体等の公知の任意の形式の記録媒体を包含し得る。

１００…情報提供システム、１０…配信装置、１２，２１…制御装置、１４，２３…記憶装置、１６，２７…入力装置、１８…放音装置、２０…端末装置、２５…収音装置、２９…表示装置、４２…情報抽出部、４４…時点設定部、４６…再生制御部、５０…情報受信部。

Claims (3)

1. 複数の事象の発生に並行して順次に送信される事象毎の識別情報を受信可能な情報受信部と、
   前記複数の事象の各々に対応する報知時点を順次に設定する時点設定部と、
   前記報知時点の到来を契機として、当該報知時点に対応する事象の関連情報を再生装置に再生させる再生制御部とを具備し、
   前記時点設定部は、相前後する事象間の時間差を指定する情報テーブルを参照して、前記複数の事象のうちの第１事象と当該第１事象の直後の第２事象との時間差を特定し、前記第１事象の報知時点から当該時間差が経過した時点を前記第２事象の報知時点として設定する一方、前記第２事象の報知時点の到来前に前記情報受信部が当該第２事象の識別情報を受信した場合には、前記第２事象の報知時点を当該識別情報の受信時点に更新する
   端末装置。
2. 前記複数の事象は時間的に複数の事象群に区分され、
   前記時点設定部は、前記複数の事象群の各々における先頭の事象については、前記情報受信部が当該事象の識別情報を受信した時点を前記報知時点として特定する
   請求項１の端末装置。
3. 前記情報受信部は、前記識別情報の音響成分を含む音響の収音で生成された音響信号から前記識別情報を取得する
   請求項１または請求項２の端末装置。
   

Images