[go: up one dir, main page]

JP2001266148A - Performance evaluation system - Google Patents

Performance evaluation system

Info

Publication number
JP2001266148A
JP2001266148A JP2000076228A JP2000076228A JP2001266148A JP 2001266148 A JP2001266148 A JP 2001266148A JP 2000076228 A JP2000076228 A JP 2000076228A JP 2000076228 A JP2000076228 A JP 2000076228A JP 2001266148 A JP2001266148 A JP 2001266148A
Authority
JP
Japan
Prior art keywords
evaluation system
audience
performance
pattern
performance evaluation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000076228A
Other languages
Japanese (ja)
Inventor
Masato Takagi
真人 高木
Hideto Ide
英人 井出
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokogawa Electric Corp
Original Assignee
Yokogawa Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokogawa Electric Corp filed Critical Yokogawa Electric Corp
Priority to JP2000076228A priority Critical patent/JP2001266148A/en
Publication of JP2001266148A publication Critical patent/JP2001266148A/en
Pending legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)

Abstract

(57)【要約】 【課題】 公演、演奏等のできばえ、その結果を客観的
に判定することができるようにすること。 【解決手段】 多数の聴衆の前で行われる公演の内容を
評価する公演評価システムにおいて、前記聴衆の画像を
撮影するカメラと、前記聴衆の音声を取得する集音マイ
クと、前記カメラからの映像情報及び前記集音マイクか
らの音声情報とを取り入れて予め設定しておいた映像パ
ターン及び音声パターンと比較しその比較結果を前記公
演の評価とする中央処理装置とを設けたことを特徴とす
る公演評価システム。
(57) [Summary] [Problem] To enable performances, performances, etc., to be judged objectively. SOLUTION: In a performance evaluation system for evaluating the content of a performance performed in front of a large audience, a camera for capturing an image of the audience, a sound collecting microphone for acquiring a voice of the audience, and a video from the camera. And a central processing unit that takes in information and audio information from the sound collecting microphone and compares them with a preset video pattern and audio pattern, and uses the comparison result as an evaluation of the performance. Performance evaluation system.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、大学、予備校等の
教育機関における講義、授業、または有名人による講演
会、芸能人、音楽家による公演会等、大人数を対象とす
る公演を評価する公演評価システムに関するものであ
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a performance evaluation system for evaluating performances for a large number of people, such as lectures, classes, lectures by celebrities, and performances by celebrities and musicians at educational institutions such as universities and preparatory schools. It is about.

【0002】[0002]

【従来の技術】上記したような、大学、予備校等の教育
機関における講義・授業、または有名人による講演会、
芸能人・音楽家による公演会等、大人数を対象とする公
演、パフォーマンス等にあっては、テレビまたはラジオ
による中継、ビデオ録画等が頻繁に行われている。更に
は、有名大学教授、有名予備校教師等による講義パッケ
ージがテレビまたはビデオによって遠隔地へも中継、配
信されることもある。
2. Description of the Related Art As described above, lectures and classes at educational institutions such as universities and preparatory schools, or lectures by celebrities,
2. Description of the Related Art In performances and performances for a large number of people, such as performances by entertainers and musicians, broadcasting via television or radio, video recording, and the like are frequently performed. Furthermore, a lecture package by a famous university professor, a famous preparatory school teacher, or the like may be relayed and distributed to a remote place by television or video.

【0003】[0003]

【発明が解決しようとする課題】いずれにしても、講
演、演奏する側を主体としてシステムが構築され、聴衆
側の映像または拍手、歓声等の音声はどちらかといえば
雑音として処理され、講演、演奏を盛り上げるための一
手段でしかなかった。しかしながら、最近になっては、
講演者、演奏者の講演、演奏等のできばえを何らかの手
段で測定できないかという要求が発生してくるようにな
り、これに対しては、聴衆者からの意見、またはアンケ
ート等による手法が一般的であるが、意見聴取の方法が
煩雑、サンプル数が限られる、聴衆側の主観が入り込む
等の問題があり、第三者的に講演、演奏のできばえを判
断することはできなかった。
In any case, a system is constructed mainly by a person who gives a lecture or a performance, and a video of the audience or a sound such as applause or cheer is processed as noise rather than the audience. It was just one way to excite the performance. However, recently,
Demands have arisen to be able to measure the performance of lecturers, performers' lectures, performances, etc. by some means. To this end, methods based on opinions from audiences or questionnaires are used. It is common, but there is a problem that the method of hearing opinions is complicated, the number of samples is limited, the subjectivity of the audience is involved, and it is not possible to judge the quality of lectures and performances by a third party Was.

【0004】本発明は、上記のような問題を解決するこ
とを課題とし、講演、演奏の結果を聴衆側の反応を加味
して、客観的に判定することができるシステムを提供す
ることを目的とする。
[0004] It is an object of the present invention to solve the above problems and to provide a system which can objectively judge the result of a lecture or performance by taking into account the reaction of the audience. And

【0005】[0005]

【課題を解決するための手段】このような課題を達成す
る本発明は、次の通りである。 (1)多数の聴衆の前で行われる公演の内容を評価する
公演評価システムにおいて、前記聴衆の画像を撮影する
カメラと、前記カメラからの映像情報を取り入れて予め
設定しておいた映像パターンと比較しその比較結果を前
記公演の評価とする中央処理装置とを設けたことを特徴
とする公演評価システム。 (2)多数の聴衆の前で行われる公演の内容を評価する
公演評価システムにおいて、前記聴衆の音声を取得する
集音マイクと、前記集音マイクからの音声情報を取り入
れて予め設定しておいた音声パターンと比較しその比較
結果を前記公演の評価とする中央処理装置とを設けたこ
とを特徴とする公演評価システム。 (3)多数の聴衆の前で行われる公演の内容を評価する
公演評価システムにおいて、前記聴衆の画像を撮影する
カメラと、前記聴衆の音声を取得する集音マイクと、前
記カメラからの映像情報及び前記集音マイクからの音声
情報とを取り入れて予め設定しておいた映像パターン及
び音声パターンと比較しその比較結果を前記公演の評価
とする中央処理装置とを設けたことを特徴とする公演評
価システム。 (4)前記カメラは、パンチルト式カメラであることを
特徴とする(1)または(3)記載の公演評価システ
ム。 (5)前記カメラと前記集音マイクは、一体型であるこ
とを特徴とする(3)または(4)記載の公演評価シス
テム。
The present invention for achieving the above object is as follows. (1) In a performance evaluation system for evaluating the content of a performance performed in front of a large audience, a camera for capturing an image of the audience, and a video pattern preset by incorporating video information from the camera. A performance evaluation system, comprising: a central processing unit for comparing and comparing the comparison result with the performance; (2) In a performance evaluation system for evaluating the contents of a performance performed in front of a large number of audiences, a sound collection microphone for acquiring the sound of the audience, and sound information from the sound collection microphone are taken in and set in advance. A performance evaluation system comprising: a central processing unit that compares the sound pattern with the sound pattern and evaluates the result of the comparison. (3) In a performance evaluation system for evaluating the contents of a performance performed in front of a large number of audiences, a camera that captures images of the audience, a sound collection microphone that acquires the audio of the audience, and video information from the cameras. And a central processing unit which incorporates the audio information from the sound collecting microphone and compares it with a preset video pattern and audio pattern and evaluates the result of the comparison with the central processing unit. Evaluation system. (4) The performance evaluation system according to (1) or (3), wherein the camera is a pan-tilt camera. (5) The performance evaluation system according to (3) or (4), wherein the camera and the sound collection microphone are integrated.

【0006】[0006]

【発明の実施の形態】以下、本発明を図面により詳細に
説明する。図1にあって、講演者、演奏者、大学教授、
芸能人等の公演者1は、普段のように講義、演奏を行う
一方、学生、観客等の聴衆2に対しては、聴衆2の顔の
表情、態度を撮影するカメラ3、聴衆2からの音声を取
得する集音マイク4を設置する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, the present invention will be described in detail with reference to the drawings. In Figure 1, speakers, performers, university professors,
A performer 1 such as an entertainer gives a lecture and a performance as usual, while a camera 3 for photographing the facial expression and attitude of the audience 2 and a voice from the audience 2 to an audience 2 such as students and spectators. Is installed.

【0007】聴衆2を撮影しているカメラ3の映像は、
ネットワークNを介して画像処理装置5に送信され、こ
こで画像処理が施される。即ち、聴衆2を構成する人物
の顔の表情より、居眠り、うつむき状態、私語中、熱心
に聞き入っているか等の状態をオペレータによって認識
する。または、複数種類の画像パターン、即ち、個人ま
たは複数人に対する居眠りパターン、うつむきパター
ン、私語パターン、聴講中パターン等を予め登録してお
き、得られた画像情報と比較して、当該人物または複数
人の現在の聴講状態を認識する。カメラ3は、一定箇所
のみを撮影するのではなく、パンチルト式にして、聴衆
全体を撮影するようにすると全体把握が容易である。
[0007] The image of the camera 3 shooting the audience 2 is
The image data is transmitted to the image processing apparatus 5 via the network N, where the image processing is performed. That is, from the facial expression of the person constituting the audience 2, the operator recognizes, for example, a state of falling asleep, a state of depression, a private word, whether he / she listens eagerly, and the like. Alternatively, a plurality of types of image patterns, i.e., a dozing pattern, a depression pattern, a private language pattern, a listening pattern, and the like for an individual or a plurality of persons are registered in advance, and the person or the plurality of persons are compared with the obtained image information. Recognize the current listening status of. The camera 3 is not panned and photographed only at a certain point, but is pan-tilt type to photograph the entire audience, so that it is easy to grasp the whole audience.

【0008】更に、集音マイク4からの音声をネットワ
ークNを介して音声処理装置6へ送信し、拍手の大き
さ、歓声、私語のレベルを捉え、その音声レベル、スペ
クトル等によって聴衆の集中度合をオペレータによって
認識する。または、複数種類の音声パターンを予め登録
しておき、得られた音声情報と比較して、聴衆2の聴講
状態を認識する。
Further, the sound from the sound collecting microphone 4 is transmitted to the sound processing device 6 via the network N, and the size of applause, cheers, and the level of private language are captured, and the degree of concentration of the audience is determined based on the sound level and spectrum. Is recognized by the operator. Alternatively, a plurality of types of voice patterns are registered in advance, and the listening state of the audience 2 is recognized by comparing the obtained voice information with the obtained voice information.

【0009】実際には、カメラ3とマイク4とを一体構
成とすれば、映像と音声とを同時に取得することがで
き、きめ細かく情報を得ることができる。
In practice, if the camera 3 and the microphone 4 are integrated, it is possible to simultaneously obtain video and audio, and to obtain detailed information.

【0010】更には、上述した画像処理装置5、音声処
理装置6からの情報を中央処理装置CPUへ送信し、中
央処理装置CPUにおいて、例えば、予め定めておいた
比較評価パターン、即ち、画像処理装置8から得られる
居眠り人数、うつむき人数、横向き人数、雑談人数等を
カウントし、更には、メモ記入等の動作、居眠り動作、
うつむき動作、横向き動作、雑談動作、音声スベクトル
等、映像情報と音声情報とを、予め定めておいた挙動パ
ターンとを比較して一定の数、または挙動パターンのマ
ッチングにより、当該公演者の公演のできばえを評価す
る指標とする。ひいては公演者の評価をも算出すること
ができる。
Further, information from the image processing device 5 and the audio processing device 6 is transmitted to the central processing unit CPU, and the central processing unit CPU, for example, transmits a predetermined comparative evaluation pattern, that is, an image processing unit. It counts the number of people falling asleep, the number of people looking down, the number of people lying sideways, the number of people chatting, etc., obtained from the device 8, and furthermore, actions such as writing notes, dozing actions
The performance of the performer is performed by comparing the video information and the audio information, such as the downward motion, the horizontal motion, the chat operation, and the audio vector, with a predetermined number of behavior patterns or by matching the behavior patterns with a predetermined behavior pattern. It is an index to evaluate the performance of Eventually, the performance of the performer can be calculated.

【0011】この評価の結果は、表示器7に表示させ
る、またはディスク等の記憶装置8、プリンタ等の出力
装置9へ出力させるようにしても良い。
The result of the evaluation may be displayed on the display 7 or output to the storage device 8 such as a disk or the output device 9 such as a printer.

【0012】[0012]

【発明の効果】請求項1から請求項5の本発明によれ
ば、講演、演奏等の状況をカメラからの映像または集音
マイクからの音声によって、聴衆側の反応を機械的に取
り込むことができるので、公演、演奏等のできばえ、そ
の結果を第三者的に客観的に判定することができるとい
う効果を得られる。
According to the first to fifth aspects of the present invention, the situation of a lecture or a performance can be mechanically captured by a video from a camera or a voice from a sound collecting microphone. Therefore, it is possible to obtain an effect that performances, performances, and the like can be performed, and the results can be objectively determined by a third party.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明にかかる設備管理システムの概要図であ
る。
FIG. 1 is a schematic diagram of an equipment management system according to the present invention.

【符号の説明】[Explanation of symbols]

1 公演者 2 聴衆 3 カメラ 4 集音マイク 5 画像処理装置 6 音声処理装置 7 表示器 8 記憶装置 9 出力装置 CPU 中央処理装置 DESCRIPTION OF SYMBOLS 1 Performer 2 Audience 3 Camera 4 Sound collecting microphone 5 Image processing device 6 Audio processing device 7 Display 8 Storage device 9 Output device CPU Central processing unit

フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G10L 15/24 G10L 3/00 571Q Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme coat II (reference) G10L 15/24 G10L 3/00 571Q

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 多数の聴衆の前で行われる公演の内容を
評価する公演評価システムにおいて、前記聴衆の画像を
撮影するカメラと、前記カメラからの映像情報を取り入
れて予め設定しておいた映像パターンと比較しその比較
結果を前記公演の評価とする中央処理装置とを設けたこ
とを特徴とする公演評価システム。
1. A performance evaluation system for evaluating the contents of a performance performed in front of a large number of audiences, wherein a camera that captures images of the audience and a video that has been set in advance by incorporating video information from the cameras. A performance evaluation system, comprising: a central processing unit that compares the pattern with a pattern and uses the result of the comparison as an evaluation of the performance.
【請求項2】 多数の聴衆の前で行われる公演の内容を
評価する公演評価システムにおいて、前記聴衆の音声を
取得する集音マイクと、前記集音マイクからの音声情報
を取り入れて予め設定しておいた音声パターンと比較し
その比較結果を前記公演の評価とする中央処理装置とを
設けたことを特徴とする公演評価システム。
2. A performance evaluation system for evaluating the content of a performance performed in front of a large number of audiences, wherein a sound collection microphone for acquiring the sound of the audience, and audio information from the sound collection microphone are set in advance. A performance evaluation system comprising: a central processing unit for comparing the sound pattern with the set voice pattern and evaluating the result of the comparison with the voice pattern.
【請求項3】 多数の聴衆の前で行われる公演の内容を
評価する公演評価システムにおいて、前記聴衆の画像を
撮影するカメラと、前記聴衆の音声を取得する集音マイ
クと、前記カメラからの映像情報及び前記集音マイクか
らの音声情報とを取り入れて予め設定しておいた映像パ
ターン及び音声パターンと比較しその比較結果を前記公
演の評価とする中央処理装置とを設けたことを特徴とす
る公演評価システム。
3. A performance evaluation system for evaluating the contents of a performance performed in front of a large audience, comprising: a camera for photographing an image of the audience; a sound collecting microphone for acquiring voice of the audience; A central processing unit that incorporates the video information and the audio information from the sound-collecting microphone and compares them with a preset video pattern and audio pattern, and evaluates the result of the comparison with the central processing unit. Performance evaluation system.
【請求項4】 前記カメラは、パンチルト式カメラであ
ることを特徴とする請求項1または請求項3記載の公演
評価システム。
4. The performance evaluation system according to claim 1, wherein the camera is a pan-tilt camera.
【請求項5】 前記カメラと前記集音マイクは、一体型
であることを特徴とする請求項3または請求項4記載の
公演評価システム。
5. The performance evaluation system according to claim 3, wherein the camera and the sound collecting microphone are integrated.
JP2000076228A 2000-03-17 2000-03-17 Performance evaluation system Pending JP2001266148A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000076228A JP2001266148A (en) 2000-03-17 2000-03-17 Performance evaluation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000076228A JP2001266148A (en) 2000-03-17 2000-03-17 Performance evaluation system

Publications (1)

Publication Number Publication Date
JP2001266148A true JP2001266148A (en) 2001-09-28

Family

ID=18594001

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000076228A Pending JP2001266148A (en) 2000-03-17 2000-03-17 Performance evaluation system

Country Status (1)

Country Link
JP (1) JP2001266148A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2380262A (en) * 2001-07-27 2003-04-02 Hewlett Packard Co Monitoring the reaction of people to a performance
US6888457B2 (en) 2001-07-27 2005-05-03 Hewlett-Packard Development Company, L.P. Monitoring of user response to performances
US8392939B2 (en) 2002-06-26 2013-03-05 Sony Corporation Audience state estimation system, audience state estimation method, and audience state estimation program
JP2014011489A (en) * 2012-06-27 2014-01-20 Nikon Corp Electronic apparatus
WO2020049770A1 (en) * 2018-09-06 2020-03-12 オムロン株式会社 Information processing device, information processing system, information processing method, and information processing program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2380262A (en) * 2001-07-27 2003-04-02 Hewlett Packard Co Monitoring the reaction of people to a performance
GB2380262B (en) * 2001-07-27 2004-12-01 Hewlett Packard Co Monitoring of crowd response to performances
US6888457B2 (en) 2001-07-27 2005-05-03 Hewlett-Packard Development Company, L.P. Monitoring of user response to performances
US8392939B2 (en) 2002-06-26 2013-03-05 Sony Corporation Audience state estimation system, audience state estimation method, and audience state estimation program
JP2014011489A (en) * 2012-06-27 2014-01-20 Nikon Corp Electronic apparatus
WO2020049770A1 (en) * 2018-09-06 2020-03-12 オムロン株式会社 Information processing device, information processing system, information processing method, and information processing program

Similar Documents

Publication Publication Date Title
US8411130B2 (en) Apparatus and method of video conference to distinguish speaker from participants
CN102244788B (en) Information processing method, information processor and loss recovery information generation device
CN110139062B (en) Video conference record creating method and device and terminal equipment
MXPA05010595A (en) AUTOMATIC EXTRACTION OF FACES FOR USE ON RECORDED CONFERENCE TIME LINES.
US11611600B1 (en) Streaming data processing for hybrid online meetings
CN111479124A (en) Real-time playing method and device
JP2009267621A (en) Communication apparatus
CN100409239C (en) Communication device and system for processing viewer images
CN114981889A (en) Spatial Audio Extension for Video Notifications
CN112601048A (en) Online examination monitoring method, electronic device and storage medium
CN106875968B (en) Information acquisition method, client and system
JP2001266148A (en) Performance evaluation system
CN112041852A (en) Neural network identification of objects in 360-degree images
CN114531564B (en) Processing method and electronic equipment
CN109862375B (en) Cloud recording and broadcasting system
CN111770300A (en) Conference information processing method and virtual reality head-mounted equipment
CN110418148A (en) Video generation method, video generation device and readable storage medium
CN113542604A (en) Video focusing method and device
WO2018173139A1 (en) Imaging/sound acquisition device, sound acquisition control system, method for controlling imaging/sound acquisition device, and method for controlling sound acquisition control system
Luo et al. Multi-modality speech recognition driven by background visual scenes
CN108495163B (en) Video barrage reading device, system, method and computer readable storage medium
JP7647863B2 (en) Image storage device, method and program
CN102934426A (en) Data distribution device, data distribution method and program
CN114760523A (en) Audio and video processing method, device, equipment and storage medium
CN111327943B (en) Information management method, device, system, computer equipment and storage medium

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20040521