JP2018032911A - Information processing apparatus, conference system, and program - Google Patents
Information processing apparatus, conference system, and program Download PDFInfo
- Publication number
- JP2018032911A JP2018032911A JP2016162227A JP2016162227A JP2018032911A JP 2018032911 A JP2018032911 A JP 2018032911A JP 2016162227 A JP2016162227 A JP 2016162227A JP 2016162227 A JP2016162227 A JP 2016162227A JP 2018032911 A JP2018032911 A JP 2018032911A
- Authority
- JP
- Japan
- Prior art keywords
- conference
- terminal device
- unit
- voice
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
- Information Transfer Between Computers (AREA)
Abstract
【課題】会議において、端末装置を使用するユーザに適切な音声を提供する。
【解決手段】会議に参加する複数のユーザのそれぞれが使用する複数の端末装置と、複数の端末装置とネットワークを介して接続して、会議での複数のユーザによる討議を支援する情報処理装置とを備える会議システムであって、情報処理装置は、会議において集音された音声を表す複数のチャネルの音声データを収集する音声収集部と、複数のチャネルの音声データのうち、指定されたチャネルの音声データを端末装置に送信する音声提供部と、を有する。
【選択図】図１The present invention provides an appropriate voice to a user who uses a terminal device in a conference.
A plurality of terminal devices used by each of a plurality of users participating in a conference, an information processing device connected to the plurality of terminal devices via a network, and supporting discussion by the plurality of users at the conference, The information processing apparatus includes: a sound collection unit that collects sound data of a plurality of channels representing sound collected in a meeting; and a specified channel among the sound data of the plurality of channels. And an audio providing unit that transmits audio data to the terminal device.
[Selection] Figure 1
Description
本発明は、情報処理装置、会議システム、方法およびプログラムに関する。 The present invention relates to an information processing apparatus, a conference system, a method, and a program.
それぞれがユーザにより使用される複数の端末装置とネットワークを介して接続して、複数のユーザにより行われる会議を支援する会議支援装置が知られている。また、会議室に設置されたインタラクティブホワイトボードに表示された画像を、ネットワークを介して遠隔地のユーザの端末装置に送信する会議支援装置も知られている。このような会議支援装置によれば、遠隔地のユーザにも会議室のインタラクティブホワイトボードに表示された内容を提供することができるので、討議をスムーズに進行させることができる。 2. Description of the Related Art A conference support device that supports a conference held by a plurality of users by connecting to a plurality of terminal devices used by the user via a network is known. There is also known a conference support device that transmits an image displayed on an interactive whiteboard installed in a conference room to a terminal device of a remote user via a network. According to such a conference support apparatus, it is possible to provide the content displayed on the interactive whiteboard in the conference room to users at remote locations, so that the discussion can proceed smoothly.
特許文献１には、会議に使用されるホワイトボード装置と、ホワイトボード装置に描画された描画データを記憶する情報処理装置とを備えるシステムが記載されている。このシステムでは、ホワイトボード装置と情報処理装置との間で描画データを連係して管理することができる。 Patent Document 1 describes a system including a whiteboard device used for a conference and an information processing device that stores drawing data drawn on the whiteboard device. In this system, drawing data can be managed in cooperation between the whiteboard device and the information processing device.
ところで、会議では、多数のユーザが発言をする。このため、遠隔地のユーザは、１つのマイクロホンにより集音された音声を聞いていただけでは、討議の内容が理解できない場合がある。従って、会議システムは、多数のユーザが発言をした場合であっても、遠隔地のユーザに確実に音声を聞き取らせる必要がある。 By the way, many users speak in the conference. For this reason, a user at a remote location may not understand the contents of the discussion only by listening to the sound collected by one microphone. Therefore, it is necessary for the conference system to make it possible for a user at a remote location to hear a voice even when a large number of users speak.
本発明は、上記に鑑みてなされたものであって、会議において、端末装置を使用するユーザに適切な音声を提供することができる情報処理装置、会議システム、方法およびプログラムを提供することを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to provide an information processing apparatus, a conference system, a method, and a program that can provide appropriate audio to a user who uses a terminal device in a conference. And
上述した課題を解決し、目的を達成するために、本発明は、ユーザが使用する端末装置とネットワークを介して接続して、会議での複数のユーザによる討議を支援する情報処理装置であって、前記会議において集音された音声を表す複数のチャネルの音声データを収集する音声収集部と、前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する音声提供部と、を備える。 In order to solve the above-described problems and achieve the object, the present invention is an information processing apparatus that supports a discussion by a plurality of users in a conference by connecting to a terminal device used by a user via a network. An audio collection unit that collects audio data of a plurality of channels representing audio collected in the conference, and audio that transmits audio data of a specified channel among the audio data of the plurality of channels to the terminal device A providing unit.
本発明によれば、会議において、端末装置を使用するユーザに適切な音声を提供することができる、という効果を奏する。 According to the present invention, it is possible to provide an appropriate voice to a user who uses a terminal device in a conference.
以下、図面を参照しながら実施形態に係る会議システム１０について詳細に説明する。会議システム１０は、会議での複数のユーザによる討議を支援するためのシステムである。例えば、会議システム１０は、所定の場所（例えば会社内の会議室）において会議に参加するユーザと、遠隔地（例えば、在宅勤務者の家庭）において会議に参加するユーザとの間のコミュニケーションを支援する。
Hereinafter, the
（第１実施形態）
図１は、第１実施形態に係る会議システム１０を示す図である。会議システム１０は、複数のユーザのそれぞれが用いる複数の端末装置２０と、インタラクティブホワイトボード（ＩＷＢ）２２と、会議支援装置３０とを備える。
(First embodiment)
FIG. 1 is a diagram illustrating a
複数の端末装置２０のそれぞれは、ネットワークを介して会議支援装置３０と接続可能である。ネットワークは、例えば、ＬＡＮ（Local Area Network）、ＶＰＮ（Virtual Private Network）またはＬＡＮがルータを介して接続されたＷＡＮ（Wide Area Network）である。また、ネットワークは、インターネットまたは電話通信回線等を含んでいてもよい。また、ネットワークは、有線で構成されていてもよいし、一部または全部が無線により構成されていてもよい。
Each of the plurality of
端末装置２０は、情報の処理機能、情報の入力機能、情報の出力機能および通信機能等を有する装置である。端末装置２０は、ノート型またはデスクトップ型等の一般的なコンピュータ、タブレット端末またはスマートフォン等であってもよい。また、端末装置２０は、電子会議を行うための専用装置であってもよい。
The
端末装置２０は、所定のアプリケーションプログラムを実行して、会議支援装置３０にアクセスする。端末装置２０は、所定のアプリケーションプログラムを用いて、会議支援装置３０から提供された情報を出力する。
The
端末装置２０は、マイクロホンを有し、会議中においてユーザ等が発した音声を集音して、音声データを生成する。また、端末装置２０は、カメラを有し、会議中においてユーザ等を撮像して、動画像データを生成する。端末装置２０は、生成した音声データおよび動画像データを会議支援装置３０に送信する。
The
ＩＷＢ２２は、電子ペンまたは手等によるディスプレイに対するユーザの操作に応じて描画データを生成し、生成した描画データを記憶する。そして、ＩＷＢ２２は、生成した描画データをディスプレイに表示する。これにより、ユーザは、壁にペンを用いて文字または図形を描くように、ＩＷＢ２２に文字または図形を描くことができる。 The IWB 22 generates drawing data in response to a user operation on the display using an electronic pen or a hand, and stores the generated drawing data. Then, the IWB 22 displays the generated drawing data on the display. Thereby, the user can draw a character or a figure on IWB22 like drawing a character or a figure using a pen on a wall.
さらに、ＩＷＢ２２は、通信機能を有し、ネットワークを介して会議支援装置３０と接続可能である。ＩＷＢ２２は、例えば専用のアプリケーションプログラムを実行して、会議支援装置３０にアクセスする。ＩＷＢ２２は、会議支援装置３０から提供された情報に応じた画面を出力する。また、ＩＷＢ２２は、例えば専用のアプリケーションプログラムおよび会議支援装置３０から提供された情報に基づき動作する。
Furthermore, the IWB 22 has a communication function and can be connected to the
また、ＩＷＢ２２は、ディスプレイに表示された画像をキャプチャリングし、キャプチャリングした画像を表す機器画像データを生成する。例えば、ＩＷＢ２２は、ディスプレイに表示した画像が変化する毎に、機器画像データを生成する。ＩＷＢ２２は、生成した機器画像データを会議支援装置３０に送信する。
Further, the IWB 22 captures an image displayed on the display and generates device image data representing the captured image. For example, the IWB 22 generates device image data each time an image displayed on the display changes. The IWB 22 transmits the generated device image data to the
なお、会議システム１０は、文字または図形等の入力操作を受け付けて、入力された文字または図形等を表示できる機器であれば、ＩＷＢ２２以外の機器を備えてもよい。例えば、会議システム１０は、大型のディスプレイを有する情報処理装置を備えてもよい。
Note that the
会議支援装置３０は、情報の処理機能および通信機能を有する一般的なサーバ等のコンピュータである。また、会議支援装置３０は、１個のサーバ等により構成されていてもよいし、複数のサーバ等により構成されていてもよい。
The
会議支援装置３０は、複数の端末装置２０およびＩＷＢ２２からネットワークを介してアクセスを受け付ける。そして、会議支援装置３０は、複数の端末装置２０のそれぞれおよびＩＷＢ２２に対して、要求した情報をネットワークを介して提供する。
The
また、会議支援装置３０は、複数の端末装置２０のそれぞれから、音声データおよび動画像データをネットワークを介して収集する。そして、会議支援装置３０は、収集した音声データおよび動画像データを記憶する。これにより、会議支援装置３０は、会議中におけるユーザの音声および動画像を記録し、後で再生させることができる。
In addition, the
また、会議支援装置３０は、収集した音声データおよび動画像データを、取得を要求した端末装置２０に送信することが可能である。例えば、会議支援装置３０は、収集した複数のチャネルの音声データのうち、指定されたチャネルの音声データを、取得を要求した端末装置２０に送信することができる。また、例えば、会議支援装置３０は、収集した複数のチャネルの動画像データのうち、指定されたチャネルの動画像データを、取得を要求した端末装置２０に送信することができる。端末装置２０は、所定のアプリケーションプログラムを介して音声データの出力または動画像データの表示をする。これにより、会議支援装置３０は、例えば遠隔地のユーザに、所定の場所（会議室等）の音声または動画像を提供することができる。
In addition, the
また、会議支援装置３０は、ＩＷＢ２２から機器画像データをネットワークを介して収集する。そして、会議支援装置３０は、収集した機器画像データを記憶する。これにより、会議支援装置３０は、会議中におけるＩＷＢ２２に表示された画像を記録し、後で表示させることができる。
Further, the
また、会議支援装置３０は、収集した機器画像データを、それぞれの端末装置２０に送信する。端末装置２０は、所定のアプリケーションプログラムを介して、ＩＷＢ２２に表示された画像を表す機器画像データを表示する。これにより、会議支援装置３０は、例えば、ユーザに、ＩＷＢ２２に表示されている画像を提供することができる。
In addition, the
ここで、会議システム１０では、会議に参加する複数のユーザのそれぞれが、何れかの端末装置２０を使用する。会議支援装置３０は、端末装置２０からネットワークを介してログイン要求を受けた場合に、端末装置２０を使用しているユーザを認証する。これにより、会議支援装置３０は、端末装置２０を使用しているユーザを特定することができる。
Here, in the
また、ＩＷＢ２２は、所定の場所（例えば会議室）に設置されている。会議支援装置３０は、ＩＷＢ２２からネットワークを介してログイン要求を受けた場合、ＩＷＢ２２を認証する。これにより、会議支援装置３０は、ＩＷＢ２２を特定することができるとともに、会議の開催場所（ＩＷＢ２２の設置場所）を特定することができる。
The
また、会議システム１０では、会議に先立って、会議に参加するそれぞれのユーザに対して、直接参加、遠隔参加および準参加の何れかを参加形態として登録する。直接参加は、ＩＷＢ２２が設置されている所定の場所（例えば会議室）において会議に参加するユーザに対して登録される参加形態である。
Also, in the
遠隔参加は、所定の場所とは異なる場所において、端末装置２０を利用して会議に参加するユーザに対して登録される参加形態である。例えば、遠隔参加は、在宅勤務をし、自宅等において会議に参加するユーザに対して登録される。
Remote participation is a participation form registered for a user who participates in a conference using the
準参加は、会議における一部の議題について、所定の場所とは異なる場所において、端末装置２０を利用して会議に参加するユーザに対して登録される参加形態である。例えば、準参加は、子育てをしつつ在宅勤務し、自身に関連する議題について討議の内容等を確認するユーザに対して登録される。
The semi-participation is a participation form that is registered for a user who participates in a conference using the
なお、会議システム１０では、不参加を、参加形態に含めてもよい。不参加は、病欠または出張等により会議にはリアルタイムでは参加しないが、後で関連する情報を参照するユーザに対して登録される参加形態である。
In the
図２は、会議システム１０の機能構成を示す図である。
FIG. 2 is a diagram illustrating a functional configuration of the
ＩＷＢ２２は、第１通信部４２と、操作入力部４４と、画面表示部４６と、画像生成部４８とを有する。ＩＷＢ２２は、プロセッサが例えば所定のアプリケーションプログラムを実行することにより、第１通信部４２、操作入力部４４、画面表示部４６および画像生成部４８として機能する。
The
第１通信部４２は、会議支援装置３０とネットワークを介して通信をする。操作入力部４４は、ディスプレイに対する、電子ペンまたは手等による入力操作を受け付ける。画面表示部４６は、会議支援装置３０から取得したデータに基づき、ディスプレイに情報を表示する。例えば、画面表示部４６は、会議支援装置３０から第１通信部４２を介して受信した画面データに基づき、ディスプレイに所定の画面を表示する。また、画面表示部４６は、操作入力部４４が受け付けた入力操作に応じて、ディスプレイに文字または図形等を表示する。また、画面表示部４６は、操作入力部４４が受け付けた入力操作に応じて、ディスプレイに表示された画面を変化させる。
The first communication unit 42 communicates with the
画像生成部４８は、ディスプレイに表示された画像をキャプチャリングして、ディスプレイに表示された画像を表す機器画像データを生成する。例えば、画像生成部４８は、ディスプレイに表示した画像が変化する毎に、機器画像データを生成する。第１通信部４２は、画像生成部４８が生成した機器画像データを会議支援装置３０に送信する。
The
端末装置２０は、第２通信部５０と、集音部５２と、撮像部５４と、入力部５６と、表示部５８と、音声出力部６０とを有する。端末装置２０は、プロセッサが例えば所定のアプリケーションプログラムを実行することにより、第２通信部５０、集音部５２、撮像部５４、入力部５６、表示部５８および音声出力部６０として機能する。
The
第２通信部５０は、会議支援装置３０とネットワークを介して通信をする。集音部５２は、周囲の音声を集音した音声信号に基づき、周囲の音声を表す音声データを生成する。撮像部５４は、周囲の被写体を撮像した撮像信号に基づき、周囲の被写体の画像を表す動画像データを生成する。入力部５６は、ユーザの入力操作を受け付ける。第２通信部５０は、生成した音声データ、生成した動画像データおよびユーザによる操作情報を会議支援装置３０に送信する。
The
表示部５８は、会議支援装置３０から取得したデータに基づき、ディスプレイに情報を表示する。例えば、表示部５８は、会議支援装置３０から第２通信部５０を介して受信した画面データに基づき、ディスプレイに所定の画面を表示する。また、例えば、表示部５８は、会議支援装置３０から取得した動画像データをディスプレイに表示する。また、例えば、表示部５８は、会議支援装置３０から取得した、ＩＷＢ２２に表示された画像を表す機器画像データをディスプレイに表示する。また、表示部５８は、入力部５６が受け付けた入力操作に応じて、ディスプレイに表示された画面を変化させる。音声出力部６０は、会議支援装置３０から第２通信部５０を介して受信した音声データに応じた音声を、スピーカから出力させる。
The display unit 58 displays information on the display based on the data acquired from the
会議支援装置３０は、第３通信部６２と、情報記憶部６４と、機器画面提供部７０と、端末画面提供部７２と、機器操作受付部７４と、端末操作受付部７６と、機器画像収集部７８と、機器画像提供部８０と、音声収集部８２と、音声提供部８４と、動画像収集部８６と、動画像提供部８８と、会議処理部９０とを有する。会議支援装置３０は、プロセッサが例えば所定のアプリケーションプログラムを実行することにより、第３通信部６２、機器画面提供部７０、端末画面提供部７２、機器操作受付部７４、端末操作受付部７６、機器画像収集部７８、機器画像提供部８０、音声収集部８２、音声提供部８４、動画像収集部８６、動画像提供部８８および会議処理部９０として機能する。
The
第３通信部６２は、ＩＷＢ２２およびそれぞれの端末装置２０とネットワークを介して通信する。情報記憶部６４は、会議支援装置３０で用いる各種の画面データおよび会議において使用する管理データを記憶する。
The
機器画面提供部７０は、ＩＷＢ２２に画面データを送信して、ＩＷＢ２２に各種の操作用の画面等を表示させる。端末画面提供部７２は、それぞれの端末装置２０に画面データを送信して、端末装置２０に各種の操作用の画面等を表示させる。
The device
機器操作受付部７４は、ＩＷＢ２２から操作情報を受信して、ＩＷＢ２２に対して提供した画面に対するユーザの操作を受け付ける。端末操作受付部７６は、端末装置２０から操作情報を受信して、端末装置２０に対して提供した画面に対するユーザの操作を受け付ける。
The device operation reception unit 74 receives operation information from the
機器画像収集部７８は、ＩＷＢ２２から、ＩＷＢ２２のディスプレイに表示された画像を表す機器画像データを収集する。機器画像収集部７８は、収集した機器画像データをタイムスタンプ等を付加して情報記憶部６４に記憶させる。
The device image collection unit 78 collects device image data representing an image displayed on the display of the
機器画像提供部８０は、機器画像収集部７８が収集した機器画像データをそれぞれの端末装置２０に送信する。これにより、機器画像提供部８０は、会議中において、ＩＷＢ２２に表示された画像をそれぞれの端末装置２０に表示させることができる。また、機器画像提供部８０は、過去の機器画像データの取得要求を端末装置２０から受けた場合には、情報記憶部６４から指定された時刻の機器画像データを読み出して、要求元の端末装置２０に送信する。これにより、機器画像提供部８０は、会議後または会議中において、ＩＷＢ２２に表示された過去の画像を端末装置２０に表示させることができる。
The device image providing unit 80 transmits the device image data collected by the device image collecting unit 78 to each
音声収集部８２は、それぞれの端末装置２０の集音部５２が生成した、周囲の音声を表す音声データを収集する。音声収集部８２は、収集した音声データをタイムスタンプ等を付加して情報記憶部６４に記憶させる。
The
音声提供部８４は、音声データの取得要求を端末装置２０から受けた場合、音声収集部８２が収集した音声データのうち、指定された音声データを要求元の端末装置２０に送信する。これにより、音声提供部８４は、会議中において、何れかの端末装置２０により集音された音声を、他の端末装置２０から出力させることができる。
When the
また、音声提供部８４は、過去の音声データの取得要求を端末装置２０から受けた場合には、情報記憶部６４から指定された時刻の音声データを読み出して、要求元の端末装置２０に送信する。これにより、音声提供部８４は、会議後または会議中において、過去に何れかの端末装置２０により集音された音声を端末装置２０から出力させることができる。
When the
動画像収集部８６は、それぞれの端末装置２０の集音部５２により集音された動画像を表す動画像データを収集する。動画像収集部８６は、収集した動画像データをタイムスタンプ等を付加して情報記憶部６４に記憶させる。
The moving
動画像提供部８８は、動画像データの取得要求を端末装置２０から受けた場合、動画像収集部８６が収集した動画像データのうち、指定された動画像データを端末装置２０に送信する。これにより、動画像提供部８８は、会議中において、何れかの端末装置２０により撮像された動画像を、他の端末装置２０から出力させることができる。
When receiving the moving image data acquisition request from the
また、動画像提供部８８は、過去の動画像データの取得要求を端末装置２０から受けた場合には、情報記憶部６４から指定された時刻の動画像データを読み出して、要求元の端末装置２０に送信する。これにより、動画像提供部８８は、会議後または会議中において、過去の動画像を端末装置２０から出力させることができる。
Further, when the moving
会議処理部９０は、ＩＷＢ２２または端末装置２０からの要求等に応じて、会議に関する処理を実行する。例えば、会議処理部９０は、会議に先立って、会議に参加するそれぞれのユーザに対して、直接参加、遠隔参加および準参加の何れかを参加形態として登録する。
The conference processing unit 90 executes a process related to the conference in response to a request from the
図３は、第１実施形態に係る音声収集部８２および音声提供部８４の機能構成を示す図である。
FIG. 3 is a diagram illustrating a functional configuration of the
音声収集部８２は、会議において集音された音声を表す複数のチャネルの音声データを収集する。例えば、それぞれの端末装置２０は、ユーザから発せられた音声を集音して音声データを生成する。音声収集部８２は、複数の端末装置２０のそれぞれから、１つのチャネルの音声データを収集する。
The
また、端末装置２０から、会議支援装置３０に対して、音声データの送信要求を送信することができる。この場合、端末装置２０は、会議支援装置３０が収集した複数のチャネルの音声データのうちの、何れか１つのチャネルの音声データに対する送信要求を送信することができる。
In addition, a transmission request for audio data can be transmitted from the
音声提供部８４は、何れかの端末装置２０から、音声データの送信要求、および、チャネルの指定を受け付ける。音声提供部８４は、複数のチャネルの音声データのうち、指定されたチャネルの音声データを、音声データの送信を要求した端末装置２０に送信する。音声データの送信要求を送信した端末装置２０は、会議支援装置３０から音声データを受信し、受信した音声データを出力する。
The
なお、遠隔参加および準参加により会議に参加するユーザが使用する端末装置２０が、会議支援装置３０に対して、音声データの送信要求を送信してもよい。この場合、音声提供部８４は、遠隔参加および準参加により会議に参加するユーザが使用する端末装置２０に対して、指定されたチャネルの音声データを送信する。これにより、音声提供部８４は、遠隔地において会議に参加しているユーザに対して、聞き取りやすい音声データを提供することができる。
Note that the
具体的には、音声収集部８２は、受信部１４２と、書込部１４４とを含む。音声提供部８４は、選択部１５２と、送信部１５４と、読出部１５６とを含む。
Specifically, the
受信部１４２は、複数のチャネルの音声データを受信する。具体的には、受信部１４２は、複数の端末装置２０のそれぞれから、音声を集音して生成した音声データをネットワークを介して受信する。
The receiving
書込部１４４は、受信した複数のチャネルの音声データを、チャネル毎に情報記憶部６４に書き込む。これにより、情報記憶部６４は、会議において集音された音声を表す複数のチャネルの音声データを記憶することができる。
The writing unit 144 writes the received audio data of a plurality of channels to the
選択部１５２は、何れかの端末装置２０から音声データの送信要求を取得する。これとともに、選択部１５２は、端末装置２０から、送信すべき音声データのチャネルの指定も受け付ける。なお、選択部１５２は、端末操作受付部７６を介して、端末装置２０から音声データの送信要求およびチャネルの指定情報を取得する。
The
選択部１５２は、受信部１４２が受信した複数のチャネルの音声データを受け取る。選択部１５２は、受け取った複数のチャネルの音声データのうち、端末装置２０に指定されたチャネルの音声データを選択する。そして、選択部１５２は、選択した音声データを送信部１５４に与える。
The
送信部１５４は、選択部１５２により選択された音声データを、送信を要求した端末装置２０にネットワークを介して送信する。これにより、端末装置２０は、会議において集音された音声を表す複数のチャネルの音声データのうち、指定したチャネルの音声データを受信して出力することができる。
The
また、読出部１５６は、何れかの端末装置２０から、過去の会議において集音された音声の送信要求を受け取る。さらに、読出部１５６は、端末装置２０から、送信すべき音声データのチャネルの指定も受け付ける。この場合、読出部１５６は、端末操作受付部７６を介して、端末装置２０から音声データの送信要求、および、チャネルの指定情報を取得する。そして、読出部１５６は、指定されたチャネルの音声データを情報記憶部６４から読み出して、送信部１５４に送信する。
Further, the
送信部１５４は、読出部１５６により読み出された音声データを、送信を要求した端末装置２０にネットワークを介して送信する。これにより、端末装置２０は、過去の会議において集音された音声を表す音声データを受信して出力することができる。
The
図４は、会議の開始時の会議システム１０の処理の流れを示すシーケンス図である。会議システム１０は、会議の開始時において、図４に示す流れで処理を実行する。
FIG. 4 is a sequence diagram showing the flow of processing of the
まず、会議に参加している何れかのユーザが、ＩＷＢ２２を用いて会議支援装置３０へのログイン操作をする。ログイン操作がされると、ＩＷＢ２２は、ログイン情報を会議支援装置３０に送信する（Ｓ４０１）。会議支援装置３０は、ＩＷＢ２２の認証が成功すると、ＩＷＢ２２に機器用会議画面データを送信する（Ｓ４０２）。
First, any user participating in the conference performs a login operation to the
ＩＷＢ２２は、機器用会議画面データを受信すると、機器用会議画面５５０（詳細は図５を参照して後述）を表示する（Ｓ４０３）。また、会議支援装置３０は、機器用会議画面データを送信すると、以後、ＩＷＢ２２から、ＩＷＢ２２に表示された画像を表す機器画像データを受信して、記録を開始する（Ｓ４０４）。
Upon receiving the device conference screen data, the
また、会議に参加しているそれぞれのユーザは、自身が使用している端末装置２０を用いて会議支援装置３０へのログイン操作をする。ログイン操作がされると、それぞれの端末装置２０は、ログイン情報を会議支援装置３０に送信する（Ｓ４０５−１、Ｓ４０５−２）。会議支援装置３０は、端末装置２０の認証が成功すると、端末装置２０に端末用会議画面データを送信する（Ｓ４０６−１、Ｓ４０６−２）。
In addition, each user participating in the conference performs a login operation to the
それぞれの端末装置２０は、端末用会議画面データを受信すると、端末用会議画面６５０（詳細は図６を参照して後述）を表示する（Ｓ４０７−１、Ｓ４０７−２）。また、会議支援装置３０は、端末用会議画面データを送信すると、以後、それぞれの端末装置２０から送信された音声データおよび動画像データの記録を受信して、記録を開始する（Ｓ４０８−１、Ｓ４０８−２）。
Upon receiving the terminal conference screen data, each
図５は、機器用会議画面５５０の一例を示す図である。機器画面提供部７０は、会議が開始された場合、ＩＷＢ２２に画面データを送信して、例えば、図５に示すような機器用会議画面５５０を表示させる。
FIG. 5 is a diagram illustrating an example of the
例えば、機器用会議画面５５０には、各種の操作用のボタンが設けられている。これらのボタンが操作されることにより、ＩＷＢ２２は、所定の処理を実行する。
For example, the
また、機器用会議画面５５０は、文字または図形等を描画できる作業領域を有する。ユーザが例えば電子ペンを用いて作業領域に描画することにより、ＩＷＢ２２は、作業領域に、ユーザの描画内容を表す描画データを表示する。ＩＷＢ２２は、ディスプレイに表示した画像が変化する毎に、画像をキャプチャリングして機器画像データを生成する。そして、ＩＷＢ２２は、生成した機器画像データを会議支援装置３０に送信する。会議支援装置３０は、ＩＷＢ２２から機器画像データを受信して、記憶する。
The
図６は、端末用会議画面６５０の一例を示す図である。端末画面提供部７２は、会議が開始された場合、画面データを送信して、例えば、図６に示すような端末用会議画面６５０を表示させる。例えば、端末画面提供部７２は、遠隔参加または準参加により参加するユーザが使用する端末装置２０に、図６に示すような端末用会議画面６５０を表示させる。
FIG. 6 is a diagram illustrating an example of the
操作インターフェイス領域６６０は、会議支援装置３０が収集した複数のチャネルの音声データのうちから、１つのチャネルの音声データを指定させるための操作インターフェイスを含む。例えば、操作インターフェイス領域６６０は、会議支援装置３０が受信している複数のチャネルの音声データうちから、１つのチャネルの音声データを指定するための複数のチャネルボタン６７０を含む。
The
複数のチャネルボタン６７０のそれぞれは、会議支援装置３０が受信している、何れかの音声データのチャネルに対応している。例えば、それぞれのチャネルボタン６７０には、対応するチャネル番号が表示されている。ユーザは、複数のチャネルボタン６７０のうちの何れか１つを押下することにより、１つの音声データのチャネルを指定することができる。
Each of the plurality of
ユーザにより何れか１つのチャネルが指定された場合、端末装置２０は、音声データの送信要求およびチャネルを指定する情報を、ネットワークを介して会議支援装置３０に送信する。会議支援装置３０の音声提供部８４は、端末装置２０から音声データの送信要求およびチャネルを指定する情報を受信した場合、指定されたチャネルの音声データを、端末装置２０に送信する。そして、端末装置２０は、会議支援装置３０から音声データを受信し、受信した音声データに応じた音声を出力する。これにより、端末装置２０は、指定したチャネルの音声データを出力することができる。
When any one channel is designated by the user, the
また、操作インターフェイス領域６６０は、会議中において、任意のタイミングでユーザからチャネルの指定を受け付けることができる。これにより、端末装置２０は、会議中において、音声データの音声が小さくなった場合、出力させる音声データのチャネルを切り替えることができる。
The
機器画像６６２は、ＩＷＢ２２に表示されている画像である。端末装置２０は、会議支援装置３０から、ＩＷＢ２２に表示されている画像を表す機器画像データを受信する。そして、端末装置２０は、受信した機器画像データを、機器画像６６２として表示する。これにより、端末装置２０は、ユーザに、ＩＷＢ２２に表示されている画像を認識させることができる。
The
トークボタン６６４は、端末装置２０を使用しているユーザの音声を、他のユーザに伝えるためのボタンである。端末装置２０は、トークボタン６６４が押下されている間において、音声を集音し、集音した音声を表す音声データを生成する。そして、端末装置２０は、生成した音声データを会議支援装置３０にネットワークを介して送信する。会議支援装置３０は、端末装置２０から受信した音声データを記録するとともに、他の端末装置２０へとネットワークを介して送信する。これにより、会議支援装置３０は、端末装置２０を使用しているユーザの音声を、他のユーザに伝えることができる。
The
ボタン群６６６は、端末装置２０を使用しているユーザにより操作されるボタンを含む。例えば、ボタン群６６６は、会議中における任意の位置にマーキングをするためのマークボタン、音声のテキストデータを取得するためのテキストボタン、および、他のユーザに任意のアイコンを送信するためのアイコンボタン等を含む。
The
図７は、チャネル時における会議支援装置３０の処理の流れを示すフローチャートである。何れかの端末装置２０に対して音声データを出力する場合、会議支援装置３０は、図７に示す流れで処理を実行する。
FIG. 7 is a flowchart showing the flow of processing of the
まず、対象の端末装置２０に対して音声データを出力している状態において、会議支援装置３０は、対象の端末装置２０においてチャネルの変更操作がされたか否かを判断する（Ｓ４１１）。チャネルの変更操作がされていない場合（Ｓ４１１のＮｏ）、会議支援装置３０は、処理をＳ４１１で待機する。チャネルの変更操作がされた場合（Ｓ４１１のＹｅｓ）、会議支援装置３０は、処理をＳ４１２に進める。
First, in a state where audio data is being output to the
Ｓ４１２において、会議支援装置３０は、受信している複数のチャネルのうち、チャネルの変更操作により指定されたチャネルの音声データを選択する。続いて、Ｓ４１３において、会議支援装置３０は、選択した音声データを、対象の端末装置２０にネットワークを介して送信する。
In S412, the
以上のように、本実施形態に係る会議支援装置３０は、端末装置２０を使用するユーザが指定したチャネルの音声データを、その端末装置２０に送信して出力させる。これにより、会議支援装置３０は、会議において、端末装置２０を使用するユーザに適切な音声を提供することができる。例えば、会議支援装置３０は、会議において、端末装置２０を使用するユーザに、聞き取りやすい音声を提供することができる。
As described above, the
図８は、端末用会議画面６５０の第１変形例を示す図である。端末画面提供部７２は、会議に参加している他のユーザを指定するための操作インターフェイスを含む端末用会議画面６５０を、端末装置２０に表示させてもよい。
FIG. 8 is a diagram showing a first modification of the
例えば、図８に示すように、端末画面提供部７２は、それぞれのチャネルボタン６７０に、対応するユーザを識別する情報を表示させてもよい。ユーザを識別する情報は、例えば、ユーザの顔の画像であってよい。また、ユーザを識別する情報は、ユーザ名またはユーザを識別するアイコン等であってもよい。
For example, as illustrated in FIG. 8, the terminal screen providing unit 72 may display information for identifying the corresponding user on each
操作インターフェイス領域６６０を操作することにより何れか１つのユーザが指定された場合、端末装置２０は、音声データの送信要求および指定されたユーザを識別する情報を、ネットワークを介して会議支援装置３０に送信する。会議支援装置３０の音声提供部８４は、端末装置２０から音声データの送信要求およびユーザを識別する情報を受信した場合、ユーザを識別する情報から、対応する音声データのチャネルを特定する。そして、会議支援装置３０の音声提供部８４は、特定したチャネルの音声データを、端末装置２０に送信する。
When any one user is designated by operating the
端末装置２０は、会議支援装置３０から音声データを受信し、受信した音声データに応じた音声を出力する。これにより、端末装置２０は、ユーザを指定することにより、そのユーザが発声している音声を出力することができる。
The
図９は、端末用会議画面６５０の第２変形例を示す図である。端末画面提供部７２は、複数のチャネルの音声データのそれぞれの音量を表す操作インターフェイスを含む端末用会議画面６５０を、端末装置２０に表示させてもよい。
FIG. 9 is a diagram showing a second modification of the
例えば、図９に示すように、端末画面提供部７２は、それぞれのチャネルボタン６７０に、音声データのリアルタイムの音量を表すゲージを表示させてもよい。これにより、端末画面提供部７２は、現在発話しているユーザの音声が含まれる音声データのチャネルを、ユーザに指定させることができる。
For example, as illustrated in FIG. 9, the terminal screen providing unit 72 may cause each
また、端末装置２０は、ユーザによりチャネルの選択がされなかった場合には、音量が最も大きいチャネルの音声データを自動的に指定してもよい。また、音量が最も大きいチャネルの音声データを自動的に指定する処理を、端末装置２０に代わり、会議支援装置３０の音声提供部８４が実行してもよい。これにより、端末装置２０は、ユーザによりチャネルの指定がされなくても、最も音量が大きいチャネルの音声データを自動的に出力することができる。
Further, when the channel is not selected by the user, the
図１０は、端末用会議画面６５０の第３変形例を示す図である。また、例えば、図１０に示すように、端末画面提供部７２は、それぞれのチャネルボタン６７０に、音声データの音量波形を表示させてもよい。このようにしても、端末画面提供部７２は、現在発話しているユーザの音声が含まれる音声データのチャネルを、ユーザに指定させることができる。
FIG. 10 is a diagram illustrating a third modification of the
（第２実施形態）
図１１は、第２実施形態に係る会議システム１０を示す図である。第２実施形態に係る会議システム１０は、図１から図１０を参照して説明した第１実施形態に係る会議システム１０と略同一の構成および機能を有する。従って、第２実施形態に係る会議システム１０は、略同一の機能を有するブロックについては同一の符号を付けて、相違点を除き説明を省略する。第３実施形態に係る会議システム１０についても同様である。
(Second Embodiment)
FIG. 11 is a diagram showing a
第２実施形態に係る会議システム１０は、マイクロホンアレイ１６０をさらに備える。マイクロホンアレイ１６０は、ネットワークを介して会議支援装置３０に接続される。また、マイクロホンアレイ１６０は、ＩＷＢ２２に接続され、ＩＷＢ２２を介して会議支援装置３０に音声データを送信してもよい。
The
マイクロホンアレイ１６０は、互いに異なる方向の音声を集音する複数のマイクロホンを含む。マイクロホンアレイ１６０は、複数のマイクロホンにより集音された、異なる方向の音声を表す複数のチャネルの音声データを出力する。そして、会議支援装置３０は、マイクロホンアレイ１６０から出力された複数のチャネルの音声データを取得する。
The microphone array 160 includes a plurality of microphones that collect sounds in different directions. The microphone array 160 outputs sound data of a plurality of channels representing sounds in different directions collected by a plurality of microphones. Then, the
マイクロホンアレイ１６０は、ＩＷＢ２２が設置されている場所（例えば、会議室）に設置される。マイクロホンアレイ１６０に含まれるそれぞれのマイクロホンは、高い指向性を有する。従って、マイクロホンアレイ１６０は、音量が大きい音声を検出したマイクロホンを特定することにより、音声が発せられた方向を特定することができる。
The microphone array 160 is installed in a place (for example, a conference room) where the
図１２は、第２実施形態に係る音声収集部８２および音声提供部８４の機能構成を示す図である。
FIG. 12 is a diagram illustrating a functional configuration of the
第２実施形態に係る音声収集部８２は、音声生成部１６２をさらに有する。音声生成部１６２は、マイクロホンアレイ１６０から出力された複数のチャネルの音声データを取得する。音声生成部１６２は、マイクロホンアレイ１６０から取得した複数のチャネルの音声データに基づき、所定方向からの音声を表す１以上のチャネルの音声データを生成する。ここで、例えば、所定方向からの音声は、会議に参加しているユーザの方向である。
The
例えば、マイクロホンアレイ１６０は、会議に参加しているそれぞれのユーザが発声している音声を、そのユーザの方向へ向いている一部のマイクロホンが高い感度で集音する。従って、音声生成部１６２は、マイクロホンアレイ１６０から出力された複数のチャネルの音声データのうち、例えば、音量の大きいチャネルの音声データを抽出することにより、個別のユーザが発声した音声を表す音声データを生成することができる。また、音声生成部１６２は、音量の大きいチャネルの音声データと、指向性の方向が隣接するチャネルの音声データとを合成して、１つのチャネルの音声データを生成してもよい。
For example, the microphone array 160 collects sound uttered by each user participating in the conference, with some microphones facing toward the user having high sensitivity. Therefore, the
書込部１４４は、音声生成部１６２が生成した１以上のチャネルの音声データ、および、受信部１４２が受信した複数のチャネルの音声データを、チャネル毎に情報記憶部６４に書き込む。
The writing unit 144 writes the audio data of one or more channels generated by the
選択部１５２は、端末装置２０から、送信すべき音声データのチャネルの指定を受け付ける。この場合、音声生成部１６２により生成された音声データのチャネル、および、受信部１４２により受信された音声データのチャネルのうちの、何れか１つのチャネルの指定を受け付ける。
The
選択部１５２は、音声生成部１６２が生成した１以上のチャネルの音声データ、および、受信部１４２が受信した複数のチャネルの音声データを受け取る。選択部１５２は、受け取った複数のチャネルの音声データのうち、端末装置２０に指定されたチャネルの音声データを選択する。そして、選択部１５２は、選択した音声データを送信部１５４に与える。これにより、本実施形態に係る端末装置２０によれば、マイクロホンアレイ１６０により集音された音声データを受信して出力することができる。
The
このように、本実施形態に係る会議支援装置３０は、マイクロホンアレイ１６０により集音された音声データを端末装置２０に送信して出力させることができる。これにより、会議支援装置３０は、端末装置２０を使用するユーザにさらに適切な音声を提供することができる。
As described above, the
（第３実施形態）
図１３は、第３実施形態に係る音声収集部８２および音声提供部８４の機能構成を示す図である。第３実施形態に係る音声提供部８４は、合成部１７０をさらに有する。
(Third embodiment)
FIG. 13 is a diagram illustrating a functional configuration of the
第３実施形態において、選択部１５２は、端末装置２０から、送信すべき音声データのチャネルとして、２以上のチャネルの指定も受け付けることが可能である。選択部１５２は、２以上のチャネルの音声データの指定を受け付けた場合、指定された２以上のチャネルの音声データを出力する。
In the third embodiment, the
合成部１７０は、選択部１５２が２以上のチャネルの音声データの指定を受け付けた場合、選択部１５２から出力された２以上のチャネルの音声データを合成して、１つのチャネルの音声データを出力する。なお、合成部１７０は、選択部１５２が１つのチャネルの音声データの指定を受け付けた場合には、選択部１５２から出力された１つのチャネルの音声データをそのまま出力する。送信部１５４は、合成部１７０から出力された１つのチャネルの音声データを、送信を要求した端末装置２０にネットワークを介して送信する。
When the
このように、第３実施形態に係る端末装置２０は、２以上のチャネルの音声データを合成した音声データを、端末装置２０に送信して出力させることができる。これにより、会議支援装置３０は、端末装置２０を使用するユーザにさらに適切な音声を提供することができる。
As described above, the
（ハードウェア構成）
図１４は、ＩＷＢ２２のハードウェア構成の一例を示す図である。ＩＷＢ２２は、ＣＰＵ（Central Processing Unit）７２１と、ＲＯＭ（Read Only Memory）７２２と、ＲＡＭ（Random Access Memory）７２３と、フラッシュメモリ７２４と、ＳＳＤ（Solid State Drive）７２５と、ＨＤ（Hard Disk）７２６と、ＨＤＤ（Hard Disk Drive）７２７と、ネットワークＩ／Ｆ７２８と、メディアドライブ７２９と、音声入出力Ｉ／Ｆ７３１と、画像入力Ｉ／Ｆ７３２と、キャプチャデバイス７３３と、ＧＰＵ（Graphics Processing Unit）７３４と、ディスプレイ７２０と、ディスプレイコントローラ７３５と、接触センサ７３６と、センサコントローラ７３７と、電子ペンコントローラ７３８と、バスライン７４０とを備える。
(Hardware configuration)
FIG. 14 is a diagram illustrating an example of a hardware configuration of the
ＣＰＵ７２１は、ＩＷＢ２２の全体の動作を制御する。ＲＯＭ７２２は、ＣＰＵ７２１により実行されるプログラムを記憶する。ＲＡＭ７２３は、ＣＰＵ７２１のワークエリアとして使用される。フラッシュメモリ７２４は、ＩＷＢ２２用の制御プログラム等の各種データを記憶する。ＩＷＢ２２は、フラッシュメモリ７２４に代えて、ＥＥＰＲＯＭ等を備えてもよい。ＳＳＤ７２５は、ＣＰＵ７２１の制御に従ってフラッシュメモリ７２４に対する各種データの読み出しまたは書き込みを制御する。
The CPU 721 controls the overall operation of the
ＨＤ７２６は、ＣＰＵ７２１により実行されるデータおよびプログラム等を記憶する。ＨＤＤ７２７は、ＣＰＵ７２１の制御に従ってＨＤ７２６に対する各種データの読み出しまたは書き込みを制御する。
The
ネットワークＩ／Ｆ７２８は、ネットワークを介した通信を制御する。メディアドライブ７２９は、ＩＷＢ２２に対して着脱可能なフラッシュメモリ等の記録メディアに対するデータの読み出しまたは書き込み（記憶）を制御する。音声入出力Ｉ／Ｆ７３１は、ＣＰＵ７２１の制御に従ってマイクロフォンスピーカ等との間で音信号の入出力を処理する。
The network I /
画像入力Ｉ／Ｆ７３２は、カメラにより撮像された画像を入力する。キャプチャデバイス７３３は、ディスプレイ７２０に表示された静止画または動画を取り込む。ＧＰＵ７３４は、グラフィクス処理を実行する。ＧＰＵ７３４は、ユーザにより入力された情報に応じた画像の描画処理を実行する。また、ＧＰＵ７３４は、描画した画像と、ＣＰＵ７２１がプログラムを実行することにより表示される画像およびカメラから入力した画像とを合成する処理等を実行する。ディスプレイ７２０は、情報を表示する。例えば、ディスプレイ７２０は、フラットパネルディスプレイである。ディスプレイコントローラ７３５は、ＧＰＵ７３４からの出力画像をディスプレイ７２０へ出力するために画面表示の制御および管理を行う。
The image input I /
接触センサ７３６は、電子ペンまたはユーザの手によるディスプレイ７２０に対する接触の操作および情報の入力を検知する。センサコントローラ７３７は、ＣＰＵ７２１の制御に従って接触センサ７３６の処理を制御する。
The
電子ペンコントローラ７３８は、電子ペンと通信することで、ディスプレイ７２０へのペン先のタッチやペン尻のタッチの有無を判断する。なお、電子ペンコントローラ７３８が、電子ペンのペン先およびペン尻だけでなく、電子ペンのユーザが握る部分またはその他の電子ペンの部分のタッチの有無を判断するようにしてもよい。
The
バスライン７４０は、各構成要素の間を接続するためのアドレスバスおよびデータバス等である。
The
図１５は、端末装置２０のハードウェア構成の一例を示す図である。端末装置２０は、ＣＰＵ８２１と、ＲＯＭ８２２と、ＲＡＭ８２３と、フラッシュメモリ８２４と、ＳＳＤ８２５と、電源スイッチ８２６と、ネットワークＩ／Ｆ８３１と、カメラ８３２と、撮像素子Ｉ／Ｆ８３３と、マイクロホン８３４と、スピーカ８３５と、音声入出力Ｉ／Ｆ８３６と、タッチパネルディスプレイ８２０と、ディスプレイＩ／Ｆ８３８と、入力Ｉ／Ｆ８３９と、バスライン８４０とを備える。
FIG. 15 is a diagram illustrating an example of a hardware configuration of the
ＣＰＵ８２１は、端末装置２０の全体の動作を制御する。ＲＯＭ８２２は、ＣＰＵ８２１により実行されるプログラムを記憶する。ＲＡＭ８２３は、ＣＰＵ８２１のワークエリアとして使用される。フラッシュメモリ８２４は、端末装置２０用の制御プログラムおよび画像データ等の各種データを記憶する。端末装置２０は、フラッシュメモリ８２４に代えて、ＥＥＰＲＯＭ等を備えてもよい。ＳＳＤ８２５は、ＣＰＵ８２１の制御に従ってフラッシュメモリ８２４に対する各種データの読み出しまたは書き込みを制御する。電源スイッチ８２６は、端末装置２０の電源のオン／オフを切り換えるためのボタンである。
The
ネットワークＩ／Ｆ８３１は、ネットワークを介した通信を制御する。カメラ８３２は、ＣＰＵ８２１の制御に従って被写体を撮像して画像データを得る。撮像素子Ｉ／Ｆ８３３は、カメラ８３２の駆動を制御する。マイクロホン８３４は、音を入力する。スピーカ８３５は、音を出力する。音声入出力Ｉ／Ｆ８３６は、ＣＰＵ８２１の制御に従ってマイクロホン８３４およびスピーカ８３５との間で音信号の入出力を処理する。
The network I /
タッチパネルディスプレイ８２０は、画像データに応じた画像および操作用アイコン等を表示する。さらに、タッチパネルディスプレイ８２０は、画面上にされた操作入力を受け付ける。ディスプレイＩ／Ｆ８３８は、ＣＰＵ８２１の制御に従ってタッチパネルディスプレイ８２０に画像データを伝送する。入力Ｉ／Ｆ８３９は、タッチパネルディスプレイ８２０に対してされた操作入力を検出する。バスライン８４０は、各構成要素の間を接続するためのアドレスバスおよびデータバス等である。
The
なお、端末装置２０がノート型コンピュータ等である場合には、端末装置２０は、タッチパネルディスプレイ８２０に代えて、入力機能を有さないディスプレイを備えてもよい。この場合、端末装置２０は、キーボードおよびマウス等の入力デバイスを有する。
When the
図１６は、会議支援装置３０のハードウェア構成の一例を示す図である。会議支援装置３０は、コンピュータまたはサーバ装置等の情報処理装置である。
FIG. 16 is a diagram illustrating an example of a hardware configuration of the
会議支援装置３０は、ＣＰＵ９２１と、ＲＯＭ９２２と、ＲＡＭ９２３と、ネットワークＩ／Ｆ９２４と、記憶装置９２５とを備える。ＣＰＵ９２１は、会議支援装置３０の全体の動作を制御する。ＲＯＭ９２２は、ＣＰＵ９２１により実行されるプログラムを記憶する。ＲＡＭ９２３は、ＣＰＵ９２１のワークエリアとして使用される。
The
ネットワークＩ／Ｆ９２４は、ネットワークを介した通信を制御する。記憶装置９２５は、例えばハードディスクドライブ等である。記憶装置９２５は、会議支援装置３０用の制御プログラムおよび会議支援装置３０が参照する各種のデータを記憶する。また、記憶装置９２５は、会議を支援するために必要な各種の管理データ、および、会議において記録される音声データ、動画像データおよび機器画像データを記憶する。
The network I /
本実施形態の会議支援装置３０で実行されるプログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
The program executed by the
また、本実施形態の会議支援装置３０で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、本実施形態の会議支援装置３０で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。また、本実施形態のプログラムを、ＲＯＭ９２２等に予め組み込んで提供するように構成してもよい。
In addition, the program executed by the
コンピュータを会議支援装置３０として機能させるためのプログラムは、機器画面提供モジュールと、端末画面提供モジュールと、機器操作受付モジュールと、端末操作受付モジュールと、機器画像収集モジュールと、機器画像提供モジュールと、音声収集モジュールと、音声提供モジュールと、動画像収集モジュールと、動画像提供モジュールと、会議処理モジュールとを有する。
A program for causing a computer to function as the
会議支援装置３０は、実際のハードウェアとしてはプロセッサ（ＣＰＵ９２１）が記憶媒体（記憶装置９２５等）からプログラムを読み出して実行することにより上記各部が主記憶装置（ＲＡＭ９２３）上にロードされる。そして、プロセッサ（ＣＰＵ９２１）が、機器画面提供部７０、端末画面提供部７２、機器操作受付部７４、端末操作受付部７６、機器画像収集部７８、機器画像提供部８０、音声収集部８２、音声提供部８４、動画像収集部８６、動画像提供部８８、会議処理部９０として機能する。
In the
以上、本発明の実施形態を説明したが、実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能である。 As mentioned above, although embodiment of this invention was described, embodiment is shown as an example and is not intending limiting the range of invention. These novel embodiments can be implemented in various other forms.
１０ 会議システム
２０ 端末装置
２２ ＩＷＢ
３０ 会議支援装置
４２ 第１通信部
４４ 操作入力部
４６ 画面表示部
４８ 画像生成部
５０ 第２通信部
５２ 集音部
５４ 撮像部
５６ 入力部
５８ 表示部
６０ 音声出力部
６２ 第３通信部
６４ 情報記憶部
７０ 機器画面提供部
７２ 端末画面提供部
７４ 機器操作受付部
７６ 端末操作受付部
７８ 機器画像収集部
８０ 機器画像提供部
８２ 音声収集部
８４ 音声提供部
８６ 動画像収集部
８８ 動画像提供部
９０ 会議処理部
１４２ 受信部
１４４ 書込部
１５２ 選択部
１５４ 送信部
１５６ 読出部
１６０ マイクロホンアレイ
１６２ 音声生成部
１７０ 合成部
５５０ 機器用会議画面
６５０ 端末用会議画面
６６０ 操作インターフェイス領域
６６２ 機器画像
６６４ トークボタン
６６６ ボタン群
６７０ チャネルボタン
10
30 Conference support device 42 First communication unit 44
Claims (11)
前記会議において集音された音声を表す複数のチャネルの音声データを収集する音声収集部と、
前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する音声提供部と、
を備える情報処理装置。 An information processing apparatus connected to a terminal device used by a user via a network and supporting discussion by a plurality of users in a conference,
An audio collection unit that collects audio data of a plurality of channels representing audio collected in the conference;
An audio providing unit that transmits audio data of a designated channel among the audio data of the plurality of channels to the terminal device;
An information processing apparatus comprising:
前記音声収集部は、前記端末装置により生成された音声データを収集する
請求項１に記載の情報処理装置。 The terminal device collects voice to generate voice data,
The information processing apparatus according to claim 1, wherein the voice collection unit collects voice data generated by the terminal device.
前記音声提供部は、前記遠隔参加または前記準参加により前記会議に参加するユーザが使用する前記端末装置に対して、指定されたチャネルの音声データを送信する
請求項２に記載の情報処理装置。 Prior to the conference, for each user who participates in the conference, direct participation to participate in the conference at a predetermined location, or remote participation in the conference using the terminal device at a location different from the predetermined location Register whether to participate in the conference according to the participation mode of participation or semi-participation that participates in the conference using the terminal device at a location different from the predetermined location for some agenda items in the conference A conference processing unit for
The information processing apparatus according to claim 2, wherein the voice providing unit transmits voice data of a designated channel to the terminal device used by a user who participates in the conference by the remote participation or the semi-participation.
前記音声提供部は、前記画面により指定されたチャネルの音声データを、対応する前記端末装置に送信する
請求項１から３の何れか１項に記載の情報処理装置。 The terminal device further comprises a terminal screen providing unit for displaying a screen including an operation interface for designating a channel.
The information processing apparatus according to any one of claims 1 to 3, wherein the voice providing unit transmits voice data of a channel specified by the screen to the corresponding terminal device.
前記音声提供部は、前記画面により指定されたユーザが使用する前記端末装置により生成されたチャネルの音声データを、対応する前記端末装置に送信する
請求項４に記載の情報処理装置。 The terminal screen providing unit displays the screen including an operation interface for designating another user participating in the conference on the terminal device,
The information processing apparatus according to claim 4, wherein the voice providing unit transmits the voice data of the channel generated by the terminal device used by the user specified by the screen to the corresponding terminal device.
請求項４に記載の情報処理装置。 The information according to claim 4, wherein the terminal screen providing unit displays the screen including an operation interface representing the volume of each of the audio data of the plurality of channels on the terminal device used by a user participating in the conference. Processing equipment.
前記音声提供部は、前記音声収集部が生成した所定方向からの音声を表す１以上のチャネルの音声データ、および、前記音声収集部が受信した前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する
請求項１から６の何れか１項に記載の情報処理装置。 The sound collection unit further includes sound data of one or more channels representing sound from a predetermined direction based on sound data of a plurality of channels acquired from a microphone array including a plurality of microphones collecting sound in different directions. Generate and
The voice providing unit is designated out of voice data of one or more channels representing voice from a predetermined direction generated by the voice collecting unit, and voice data of the plurality of channels received by the voice collecting unit. The information processing device according to claim 1, wherein channel audio data is transmitted to the terminal device.
請求項１から７の何れか１項に記載の情報処理装置。 The voice providing unit is configured to synthesize voice data of two or more designated channels when voice data of two or more channels is designated among the voice data of the plurality of channels collected by the voice collecting unit. The information processing apparatus according to any one of claims 1 to 7, wherein audio data of one channel is transmitted to the terminal apparatus.
前記複数の端末装置とネットワークを介して接続して、前記会議での複数のユーザによる討議を支援する情報処理装置と
を備える会議システムであって、
前記情報処理装置は、
前記会議において集音された音声を表す複数のチャネルの音声データを収集する音声収集部と、
前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する音声提供部と、
を有する会議システム。 A plurality of terminal devices used by each of a plurality of users participating in the conference;
An information processing apparatus that is connected to the plurality of terminal devices via a network and supports discussion by a plurality of users in the meeting,
The information processing apparatus includes:
An audio collection unit that collects audio data of a plurality of channels representing audio collected in the conference;
An audio providing unit that transmits audio data of a designated channel among the audio data of the plurality of channels to the terminal device;
Conference system.
前記情報処理装置が、
前記会議において集音された音声を表す複数のチャネルの音声データを収集し、
収集した前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する
処理を実行する方法。 A method that is executed in an information processing device that supports a discussion by a plurality of users in a conference by connecting to a plurality of terminal devices used by each of a plurality of users participating in the conference via a network,
The information processing apparatus is
Collecting audio data of a plurality of channels representing audio collected in the conference;
A method of executing processing of transmitting audio data of a designated channel among the collected audio data of the plurality of channels to the terminal device.
前記情報処理装置を、
前記会議において集音された音声を表す複数のチャネルの音声データを収集する音声収集部と、
前記複数のチャネルの音声データのうち、指定されたチャネルの音声データを前記端末装置に送信する音声提供部と、
して機能させるプログラム。 A program for connecting an information processing device to a terminal device used by a user via a network and functioning as a device that supports discussion by a plurality of users at a conference,
The information processing apparatus;
An audio collection unit that collects audio data of a plurality of channels representing audio collected in the conference;
An audio providing unit that transmits audio data of a designated channel among the audio data of the plurality of channels to the terminal device;
Program to make it work.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016162227A JP2018032911A (en) | 2016-08-22 | 2016-08-22 | Information processing apparatus, conference system, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016162227A JP2018032911A (en) | 2016-08-22 | 2016-08-22 | Information processing apparatus, conference system, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2018032911A true JP2018032911A (en) | 2018-03-01 |
Family
ID=61303841
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016162227A Pending JP2018032911A (en) | 2016-08-22 | 2016-08-22 | Information processing apparatus, conference system, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2018032911A (en) |
-
2016
- 2016-08-22 JP JP2016162227A patent/JP2018032911A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110958537A (en) | Intelligent sound box and use method thereof | |
| WO2014192552A1 (en) | Display controller, display control method, and computer program | |
| CN110162255B (en) | Single-machine program running method, device, equipment and storage medium | |
| CN108124114A (en) | A kind of audio/video conference sound collection method and device | |
| JP5729844B1 (en) | Content evaluation apparatus, system, server apparatus, and terminal apparatus | |
| JP2018032097A (en) | Information processing apparatus, conference system, method, and program | |
| JP4572615B2 (en) | Information processing apparatus and method, recording medium, and program | |
| JP2019140517A (en) | Information processing device and program | |
| JP2012118751A (en) | External input apparatus, display data creation method and program | |
| US11368611B2 (en) | Control method for camera device, camera device, camera system, and storage medium | |
| JP2016010039A (en) | Remote conference system, video processing method, video controller, conference terminal, and program thereof | |
| JP2023131635A (en) | Display system, display method, imaging device, program | |
| JP2016063477A (en) | Conference system, information processing method and program | |
| JP2018032911A (en) | Information processing apparatus, conference system, and program | |
| US20230280961A1 (en) | Device management system, information processing system, information processing device, device management method, and non-transitory recording medium | |
| US11184184B2 (en) | Computer system, method for assisting in web conference speech, and program | |
| US20240015462A1 (en) | Voice processing system, voice processing method, and recording medium having voice processing program recorded thereon | |
| JP2018036688A (en) | Information processing device, server device, information processing system, control method thereof, and program | |
| JP5529617B2 (en) | Remote conference apparatus, remote conference method, and remote conference program | |
| JP6610076B2 (en) | Information processing apparatus, information processing system, program, and recording medium | |
| JP2012165170A (en) | Conference device, conference method and conference program | |
| JP2008032787A (en) | Language learning system and program for language learning system | |
| JP2023130822A (en) | Equipment system, imaging device, display method | |
| JP4632132B2 (en) | Language learning system | |
| JP2023106865A (en) | Information processing device, information processing system, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20161004 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20161004 |