JP2018159900A - パフォーマンスの評価装置 - Google Patents

Abstract

【課題】高い評価が与えられるパフォーマンスを模擬して出力する評価装置を提供する。
【解決手段】システム１は、歌唱または演奏の少なくとも一方を含むパフォーマンスに対し、当該パフォーマンスの時間または区間に対応付けて評価する評価部４１、４２と、評価を蓄積する蓄積部６０と、パフォーマンスに含まれる音響信号が新たに入力された端末装置２０に、当該パフォーマンスの評価に対応付けられた効果データを蓄積部６０から取得する取得部２０４と、を具備する。端末装置２０は、新たにパフォーマンスに含まれる音響信号が入力された場合、当該音響信号に、当該効果データに対応付けられた効果を当該評価に対応付けられた時間または区間で施す。
【選択図】図１

Description

本発明は、パフォーマンスの評価装置に関する。

歌唱などパフォーマンスの評価する技術としては、例えばカラオケの採点技術としては、歌唱の音高や音量などを、採点の基準（模範）となるリファレンスデータと比較し、その差が小さいほど高い評価を与える内容が知られている（例えば、特許文献１参照）。

特開２０１６−２９４２９号公報

ところで、上記技術では、歌唱が客観的に評価されるが、実際における歌唱の巧拙は、リファレンスデータで規定される模範に沿っている否かだけで決まるわけではない。例えば、模範から外れた歌唱でも、人を感動させることができたり、唸らせたりすることできる場合がある。このような場合、人によっては高い評価とされるべきであるが、このような歌唱は、模範から外れるので、上記技術によれば低い評価となってしまう。

一方で、高い評価が与えられると考えられる歌唱方法を模擬して出力することができれば、高い満足度が得られる。ここでは、歌唱について説明したが、楽器の演奏など、表現としてのパフォーマンスを評価する場合についても同様なことが言える。
本発明は、このような事情に鑑みてなされたものであり、その目的の一つは、高い評価が与えられたパフォーマンスを模擬して出力する技術を提供することにある。

上記目的を達成するために、本発明の一態様に係るパフォーマンス評価装置は、歌唱または演奏の少なくとも一方を含むパフォーマンスに対し、当該パフォーマンスの時間または区間に対応付けて評価する評価部と、前記評価部による評価を前記パフォーマンス別に蓄積する蓄積部と、パフォーマンスに含まれる音響信号が新たに入力された端末装置に、当該パフォーマンスの評価を前記蓄積部から読み出して提供する提供部と、を具備し、前記端末装置は、新たにパフォーマンスに含まれる音響信号が入力された場合、当該音響信号に、当該パフォーマンスに対する評価に対応付けられた演出効果を当該評価に対応付けられた時間または区間で施す。

実施形態に係るシステムの構成を示すブロック図である。 評価データを説明するための図である。 効果データを説明するための図である。 パフォーマンスの評価装置として機能する場合の構成を示す図である。 パフォーマンスの評価動作を示すフローチャートである。 パフォーマンスの演出装置として機能する場合の構成を示す図である。

以下、本発明の実施形態について図面を参照して説明する。
図１は、実施形態に係るシステム１の構成を示すブロック図である。この図においてシステム１は、２つの機能を有する。詳細には、システム１は、歌唱などのパフォーマンスを評価する評価装置としての機能と、パフォーマンスに効果を付与する演出装置としての機能を有する。
システム１において、端末装置２０は、例えばコンピューターであり、所定のアプリケーションプログラムを実行することによって、入力部２０２、取得部２０４および効果付与部２０６の機能が実現される。
なお、説明の便宜上、パフォーマンスとして、歌唱者１０による歌唱を例にとって説明する。

入力部２０２は、歌唱者１０が歌唱したときの音響信号を入力してネットワーク３０に出力する。一方、取得部２０４は、ネットワーク３０を介して評価データを取得し、効果付与部２０６は、歌唱者１０による音響信号に、取得された評価データにしたがった効果を付与する。
なお、効果付与部２０６によって効果が付与された信号は、スピーカー２０８によって放音される。また、ネットワーク３０は、典型的にはインターネットである。

当該ネットワーク３０には、端末装置２０のほか、評価部４１、４２および蓄積部６０が接続される。
このうち、評価部４１は、図の例では、オペレーター５１によって操作されるコンピューターである。オペレーター５１は、例えば音楽教室などの先生のような音楽に関する専門家であり、ネットワーク３０を介して供給された音響信号に基づく歌唱を実際に聴いて、当該歌唱を主観的に評価し、その評価結果を評価部４１に入力する。評価部４２も同様なオペレーター５２によって操作されるコンピューターである。オペレーター５２も、ネットワーク３０を介して供給された音響信号に基づく歌唱を実際に聴いて、当該歌唱を主観的に判断し、その評価結果を評価部４２に入力する
なお、オペレーター５１、５２を例えばＳＮＳ（Social Networking Service）の会員としても良い。

図２の上欄は、オペレーター５１が評価結果を入力したことにより作成された評価データの一例である。
この図に示される評価データＡは、ある歌唱についての評価内容が、評価（１）、評価（２）、評価（３）というように、開始点から終了点までにわたって時系列で記録される。なお、ここでいう評価内容には、例えば「いいね」など、オペレーター５１（または５２）の主観的な判断に基づくものであり、歌唱における経過時間（または区間）に対応付けられて指定される。
一方、図２の中欄は、別のオペレーター５２が入力した評価結果を入力したことにより作成された評価データの一例である。この図に示される評価データＢは、同じ曲の歌唱についての評価内容ではあるが、違う地点において評価（５）、評価（６）が対応付けられている。

システム１は、評価部４１および４２の２つを有するが、実際には、評価部は、３機以上で多数設けられる。このように評価部を多数設けることによって、同じ１つの歌唱に対して多数の評価結果が得られることになる。なお、評価部が少数であっても、異なる複数のオペレーターが１つの歌唱に対して評価結果を入力する構成でも、同様に多数の評価結果が得られる。

蓄積部６０は、同じ１つの歌唱に対する評価データを蓄積する。
この蓄積の態様としては、例えばオペレーター５１の評価結果による評価データＡと、オペレーター５２の評価結果による評価データＢとを、図２の下欄に示されるように、各評価内容を時系列の順で配列させた評価データＣとすることなどが考えられる。なお、このような場合に、同じ時間において複数の評価内容が重なることもあり得る。

蓄積部６０は、同じ歌唱に対して評価データを蓄積した場合に、当該蓄積結果に対応して効果データを作成する。この効果データは、図３に示されるように、例えば、評価内容に対応する効果内容を自時系列で配列させたものである。
評価内容がオペレーターによる主観的判断を伴うデータであるのに対し、効果内容は、評価内容が与えられた部分の歌唱がどのようなものであるのかを客観的に規定したデータである。
例えば、蓄積部６０は、評価内容が与えられた時間（区間）の音響信号を、模範となるリファレンスレータと比較して、その差がどのように変動したのかを規定するデータの集合体を作成する。このため、同じ曲を別人が後日歌唱した場合に、当該歌唱信号に、当該効果データで規定される変動を効果として、同じ時間（区間）にて付与して、放音させると、先に評価内容が与えられた歌唱法に類似させることができる。

一方、蓄積部６０は、評価データを蓄積した後、同じ曲の音響信号が端末装置２０に入力される場合に、当該音響信号（曲）に対応した効果データを読み出し、ネットワーク３０を介して当該端末装置２０に供給する。

次に、システム１について、まず、評価装置として機能する場合の動作について説明する。

図４は、システム１において評価装置として機能する場合の構成を示す図であり、図１における取得部２０４および効果付与部２０６の機能が失効した（当該ブロックを用いない）状態となっている。
歌唱者１０は、図示せぬパネルを用いて、曲名（曲番）を入力して、歌唱を行う。この際、アカペラでも良いし、カラオケ演奏を伴っても良い。入力部２０２は、歌唱者１０による歌唱の音響信号を、曲名に対応付けてネットワーク３０に出力し、オペレーター５１、５２は、当該音響信号を聴いて、次のようにして当該歌唱を評価する。

図５は、評価部４１（４２）での評価動作を示すフローチャートである。
なお、この評価動作は、コンピューターである評価部４１（４２）において、例えば所定のプログラムによって実行される。
まず、オペレーター５１（５２）は、音響信号を聴いて歌唱の地点（区間）を指定しつつ評価内容を入力する（ステップＳａ１）。例えば、評価部４１（４２）は、歌唱の開始点から終了点までをバーグラフで表示させておき、オペレーター５１（５２）が、当該バーグラフのうち、「いいね」と評価すべき歌唱の地点（区間）をタッチ操作することで指定する。評価部４１は、曲名に対応付けて当該地点の評価を記録する。これにより、当該地点の１箇所に評価内容が対応付けられる。

次に、評価部４１（４２）は、評価終了が指示されたか否かを判別する（ステップＳａ２）。具体的には、評価部４１（４２）は、評価継続のボタン、および、評価終了のボタンをそれぞれ表示させておき、評価終了のボタンがオペレーター５１（５２）によってタッチされたか否か等を判断する。

評価終了が指示されなければ（ステップＳａの判別結果が「Ｎｏ」であれば）、評価部４１（４２）は、ステップＳａ１に戻して次の評価内容の入力に備える。評価終了が指示されていれば（ステップＳａの判別結果が「Ｙｅｓ」であれば）、評価部４１（４２）は、入力された評価内容のすべてを各演奏地点に対応付け、さらに曲名に対応付けて蓄積部６０に供給して（ステップＳａ３）、評価動作を終了させる。
なお、蓄積部６０では、曲名に対応付けられた評価データが評価部４１（４２）から供給されたときに、当該評価データがすでに記録されていれば、図２の下欄に示されるように蓄積し、曲名に対応付けられた評価データが存在しなければ、当該評価データをそのまま記録する。
このように、当該歌唱に対する評価データが曲毎に、蓄積部６０に順次蓄積される。

評価データが蓄積された状態において所定の条件を充足したとき、例えば所定数分の評価データを蓄積したとき、蓄積部６０は、当該評価データに対応する効果データを作成して。

図６は、システム１において演出装置として機能する場合の構成を示す図であり、図１における入力部２０２、評価部４１および４２の機能が失効した状態となっている。歌唱者１０は、図示せぬパネルを用いて、曲名（曲番）を入力すると、当該曲名がネットワーク３０を介して蓄積部６０に供給される。なお、ここでの歌唱者１０は、評価装置として機能させる場合の歌唱者１０と同一人物であっても良いし、別人であっても良い。
蓄積部６０は、当該曲名に対応する効果データを検索し、あれば当該効果データを、ネットワーク３０を介して取得部２０４に供給する。取得部２０４は、当該効果データを効果付与部２０６にセットする。効果付与部２０６は、歌唱者１０による歌唱の音響信号を入力すると、当該音響信号に対し、上記効果データで規定される効果を、当該効果データで規定される時間（区間）に付与する。なお、スピーカー２０８は、効果が付与された信号に基づいて放音する。

この演出装置の機能によれば、新たに歌唱する場合に、当該歌唱に対し、すでに作成された効果データで規定される効果が付与されてスピーカー２０８から放音される。ここで、新たに歌唱する歌唱者は、評価データを作成した歌唱者であるか、別人であるかを問わない。
評価データを作成した歌唱者が新たに歌唱する場合とは、例えば評価データを作成しているときは練習であったが、新たに歌唱するときは本番である場合を想定している。
本番では、緊張のために、練習のようにうまく歌えない場合がある。そのような場合でも、練習のときに評価された内容の効果が、本番時での歌唱に付与されるので、スピーカー２０８から放音される歌唱を、練習時の歌唱に類似させることができる。
一方、評価データを作成した歌唱者とは別人が新たに歌唱する場合、すでに評価を得ている内容の効果が、当該別人による歌唱に付与されるので、スピーカー２０８から放音される歌唱を、評価を得ている歌唱に類似させることができる。

なお、上記システム１において、評価部４１（４２）は、歌唱を、オペレーター５１（５２）により主観的に判断するとしたが、例えば、音響信号に含まれる拍手や歓声などのレベルがしきい値以上であるか否かによって客観的に判断する構成としても良い。

また、入力部２０２に歌唱に伴う音響信号を入力する構成としたが、歌唱以外の、例えばギター、バイオリン、ピアノなどの演奏に伴う音を音響信号として入力する構成としても良い。この構成によれば、新たに演奏する場合、当該演奏に伴う演奏音に、すでに評価を得ている内容の効果が付与されるので、スピーカー２０８から放音される演奏音を、評価を得ている演奏に類似させることができる。演奏音と歌唱音との双方を含んでも良い。すなわち、パフォーマンスとは、歌唱または演奏との少なくとも一方を含む表現である。

１…システム、２０…端末装置、４１、４２…評価部、６０…蓄積部、２０２…入力部、２０４…取得部、２０６…効果付与部。

Claims (1)

1. 歌唱または演奏の少なくとも一方を含むパフォーマンスに対し、当該パフォーマンスの時間または区間に対応付けて評価する評価部と、
   前記評価部による評価を蓄積する蓄積部と、
   パフォーマンスに含まれる音響信号が新たに入力された端末装置に、当該パフォーマンスの評価に対応付けられた効果データを蓄積部から取得する取得部２０４と、
   を具備し、
   前記端末装置は、新たにパフォーマンスに含まれる音響信号が入力された場合、当該音響信号に、当該効果データに対応付けられた効果を当該評価に対応付けられた時間または区間で施す
   パフォーマンスの評価装置。
   

Images