[go: up one dir, main page]

JP2002140076A - Presence transmission system for sound signal - Google Patents

Presence transmission system for sound signal

Info

Publication number
JP2002140076A
JP2002140076A JP2000375293A JP2000375293A JP2002140076A JP 2002140076 A JP2002140076 A JP 2002140076A JP 2000375293 A JP2000375293 A JP 2000375293A JP 2000375293 A JP2000375293 A JP 2000375293A JP 2002140076 A JP2002140076 A JP 2002140076A
Authority
JP
Japan
Prior art keywords
signal
sound
function
component
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000375293A
Other languages
Japanese (ja)
Inventor
Junichi Kakumoto
純一 角元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to JP2000375293A priority Critical patent/JP2002140076A/en
Publication of JP2002140076A publication Critical patent/JP2002140076A/en
Pending legal-status Critical Current

Links

Landscapes

  • Stereophonic System (AREA)
  • Stereo-Broadcasting Methods (AREA)

Abstract

PROBLEM TO BE SOLVED: To easily and effectively control signal processing for reproducing the presence of a sound and to control the presence of the sound linked with control over an image screen in real time. SOLUTION: A component of presence extracted from an original sound signal is sent separately from the original signal and a reception side reproduces the signal generated by synthesizing the component of presence of size corresponding to necessary presence with the original signal to obtain the presence of the sound.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の所属する技術分野】この発明は、音響信号の臨
場感を再生する手法であって、情報伝達の送り手側の信
号伝送方法と、受信側の信号合成方法とに関する。イン
ターネットを代表とするところの通信回線をメディアと
する場合のAV作品の臨場感を表現して伝え受けるため
の信号処理や制御ソフトウェア、コンピュータのバス回
線をメディアとしてAV作品の臨場感を表現して伝え受
けるための信号処理や制御ソフトウェア、TVゲームシ
ステムを代表とする記憶メディアを経由して情報を伝え
受けるための信号処理や制御ソフトウェア等がある。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technique for reproducing a sense of presence of an audio signal, and more particularly to a signal transmission method on a sender side of information transmission and a signal synthesis method on a reception side. Signal processing and control software for expressing and transmitting the realism of an AV work when a communication line represented by the Internet is used as a media, and expressing the realism of an AV work using a computer bus line as a medium There are signal processing and control software for transmitting and receiving information, and signal processing and control software for transmitting and receiving information via a storage medium represented by a TV game system.

【0002】[0002]

【従来の技術】通信回線を利用した情報伝達はハードウ
ェア、ソフトウェア共に、画像データ通信の大量化高速
化高圧縮化が進み、視覚に訴える情報の臨場感や受け手
側の場面選択の自由度はかなり高くなってきている。そ
の一方で、聴覚に訴える臨場感や受け手側の場面選択の
自由度に対応した臨場感の演出については、画像信号の
内容ほどには吟味されていないのが現状である。音響の
臨場感を再生する場合、受信側では送信側から送られた
いくつかの信号サンプルを選択するか、又は、受信側に
臨場感を再生するためのフィルタのアルゴリズムを組み
入れる手法が一般的である。前者は受信側の意志でフレ
キシブルに臨場感を変えることができない。後者は臨場
感を変えるためのアルゴリズムをダウンロードするか、
又は、あらかじめ決められたアルゴリズムを受信側が持
っていなければならない。いずれにしても画像と連動さ
せ自由自在に臨場感を演出することは容易でなく、一般
的でもない。
2. Description of the Related Art For information transmission using a communication line, in both hardware and software, image data communication has been mass-produced, speeded up, and compressed. It is getting pretty high. On the other hand, at present, the effect of the presence that appeals to the auditory sense and the effect of the presence corresponding to the degree of freedom of scene selection on the receiver side has not been examined as much as the content of the image signal. When reproducing the presence of sound, the receiving side generally selects some signal samples sent from the transmitting side, or incorporates a filter algorithm for reproducing the presence on the receiving side. is there. The former cannot change the sense of presence flexibly by the will of the receiving side. The latter either downloads an algorithm to change the presence,
Alternatively, the receiving side must have a predetermined algorithm. In any case, it is not easy or unusual to produce a sense of realism freely in conjunction with an image.

【0003】[0003]

【用語の定義】特許請求範囲を含む全文を通じ、以下の
用語を定義する。
[Definition of terms] The following terms are defined throughout the entire text including the claims.

【0004】音響の臨場感とは、音量だけではなく音源
の近くでなければ聴こえないような音質の成分を聴感で
感じ取った時の感覚のこととする。音響の臨場感の度合
とは、音源の近くであればあるほど聴こえる音質成分の
度合であるものとする。
[0004] The sense of presence of sound refers to not only the volume but also the sensation when a sound quality component that cannot be heard unless the sound source is close to the sound source is sensed. The degree of sound presence is the degree of a sound quality component that can be heard closer to the sound source.

【0005】中音とは周波数300Hzから3000H
z程度の範囲を目安とする。低音とは周波数300Hz
から80Hz程度の範囲を目安とする。高音とは周波数
3000Hzから8000Hz程度の範囲を目安とす
る。超低音とは周波数80Hzから20Hz程度の範囲
を目安とする。超高音とは周波数8000Hzから20
000Hz程度の範囲を目安とする。
[0005] The medium tone is a frequency of 300 Hz to 3000 H.
A range of about z is used as a guide. Low frequency is 300Hz
To a range of about 80 Hz. The treble refers to a frequency range of about 3000 Hz to 8000 Hz. The ultra-low sound is a frequency range from about 80 Hz to about 20 Hz. Ultra high frequency is from 8000 Hz to 20
A range of about 000 Hz is a standard.

【0006】加算とは数学的に厳密なものではなく、実
用的な装置を作るに充分な機能のことであるものとす
る。加算などの演算が、ディジタル演算かアナログ演算
かは本案の本質とするところではない。
[0006] It is assumed that addition is not mathematically exact, but is a function sufficient to make a practical device. Whether the operation such as addition is a digital operation or an analog operation is not the essence of the present invention.

【0007】場面の選択とは、例えば、モニタ上にある
画像があって、その画像の拡大や移動の操作が、受け手
側によって操作されることを意味する。AV作品とは音
響と画像によるテレビゲームや放送番組の作品を意味す
る。
The selection of a scene means that, for example, there is an image on a monitor, and the operation of enlarging or moving the image is operated by the receiver. An AV work means a work of a video game or a broadcast program using sound and images.

【0008】[0008]

【発明が解決しようとしている課題】情報伝達におけ
る、簡単で有効な音響の臨場感を再生するための信号処
理と制御。画像画面の制御とリアルタイムでリンクした
音響の臨場感の制御。画像の臨場感は、広角、望遠、接
写、左右の移動などの手法を使って臨場感を演出するこ
とは通常行なわれている。又、音響の場合、画像ほどに
は臨場感に対する吟味が行われていないことから、せい
ぜいステレオの効果や音量操作などで臨場感の演出が行
われている程度である。音響の臨場感の演出は画像ほど
には誰にでも認識できるというものではないことから、
一般的には重要視されていないのが現状である。
SUMMARY OF THE INVENTION In information transmission, signal processing and control for reproducing a simple and effective acoustic realism. Control of image screen and real-time sound control linked in real time. As for the realism of an image, it is common practice to produce a sense of realism by using techniques such as wide-angle, telephoto, close-up photography, and left / right movement. Further, in the case of sound, since the scrutiny of the sense of realism is not performed as much as the image, the effect of the sense of realism is performed at most by the effect of the stereo or the volume operation. Because the production of sound presence is not something that anyone can recognize as much as images,
At present, it is not generally regarded as important.

【0009】[0009]

【課題を解決するための手段】図1は本発明を簡単に説
明するためのブロック図であり、元信号が1個で、それ
に対応する臨場感成分が1個の場合の一実施例である。
S(A)はAという音響信号の符号データである。Fは
臨場感の成分を抽出するフィルタである。このフィルタ
の特性そのものについては本発明の本質とするところで
はない。
FIG. 1 is a block diagram for simply explaining the present invention, and shows an embodiment in which one original signal and one corresponding realism component are provided. .
S (A) is the code data of the acoustic signal A. F is a filter for extracting the presence component. The characteristics of the filter itself are not the essence of the present invention.

【0010】S(A)なる入力信号のFの出力はS(A
A)である。S(AA)はS(A)の臨場感成分であ
る。SCは符号データを送信制御又は記録制御するため
の送信制御機能で、受信側でS(A)とS(AA)を識
別して受け取れるよう送信制御する。実用機において、
SCは音響信号だけではなく、他の信号を送受信制御す
るための機能も含む。Mediaは、通信回線、記録メ
ディアである。RCは通信回線、記録メディアからの信
号を受信し、送信側からの音響データS(A)とS(A
A)を得るための受信制御機能である。実用機におい
て、RCは音響信号だけではなく他の信号を送受信する
機能をも含む。
The output of F of the input signal S (A) is S (A)
A). S (AA) is the presence component of S (A). SC is a transmission control function for controlling transmission or recording of code data, and controls transmission so that the receiving side can identify and receive S (A) and S (AA). In practical machines,
The SC includes not only an audio signal but also a function for controlling transmission and reception of other signals. Media is a communication line and a recording medium. The RC receives signals from a communication line and a recording medium, and receives audio data S (A) and S (A) from the transmission side.
This is a reception control function for obtaining A). In a practical device, RC includes a function of transmitting and receiving not only an acoustic signal but also other signals.

【0011】Pは臨場感の度合を調整するための係数機
能であり、その係数をkとし、Pの出力k*S(AA)
は臨場感の度合の成分である。MIXは元信号S(A)
と臨場感の度合い成分k*S(AA)を加算する加算機
能である。MIXの出力S(A)+kS(AA)は元
信号に元信号の臨場感成分を加算した信号である。この
信号を再生すると、臨場感の度合が係数kの値に依存す
るところの再生音響信号が得られる。
P is a coefficient function for adjusting the degree of presence. The coefficient is k, and the output of P is k * S (AA).
Is a component of the degree of presence. MIX is the original signal S (A)
And an addition function of adding the presence component k * S (AA). The MIX output S (A) + k * S (AA) is a signal obtained by adding the presence component of the original signal to the original signal. When this signal is reproduced, a reproduced sound signal whose degree of presence depends on the value of the coefficient k is obtained.

【0012】情報の送り手側も受けて側もコンピュータ
を介するのが一般的である。コンピュータの場合は音響
信号をデータファイルとして持ち、特定のアルゴリズム
によってそのデータファイルの音響信号を変換したもの
を別のファイルとして持つことができ、通信回線やバス
ラインを通じて他の装置に伝送することもでき、受信し
た信号から決められた手順によりファイルを分類しそれ
らを合成し、音響信号として再生することもできる。本
発明を構成するそれぞれの機能は公知のものである。本
発明の本質は元々の音響信号から抽出した臨場感の成分
を元々の音響信号とは区別して送り、受けて側で元々の
信号に臨場感の成分を合成して再生するところにある。
In general, both the sender and the receiver of the information pass through a computer. In the case of a computer, the sound signal is stored as a data file, and the sound signal of the data file converted by a specific algorithm can be stored as another file, which can be transmitted to other devices via a communication line or bus line. It is also possible to classify the files according to a procedure determined from the received signal, combine them, and reproduce the resultant as an audio signal. Each function constituting the present invention is known. The essence of the present invention resides in that the presence component extracted from the original sound signal is sent separately from the original sound signal, and the reception side synthesizes and reproduces the presence component with the original signal.

【0013】元信号と臨場感成分を分離して送受信する
ための信号処理や制御の機能については本発明の本質と
するところではない。
The function of signal processing and control for transmitting and receiving the original signal and the presence component in a separated manner is not the essence of the present invention.

【0014】元信号と臨場感成分を受信側で合成する手
段そのもの、また、臨場感成分を含む信号を音波に変換
する手段についても、本発明の本質とするところではな
い。
The means for synthesizing the original signal and the presence component on the receiving side and the means for converting a signal containing the presence component into a sound wave are not essential to the present invention.

【0015】図2は臨場感の成分を得るための一実施例
を示す。臨場感の成分を抽出する手段については本発明
の本質とするところではないが、本発明により臨場感を
再生できることの実現性を説明する上で重要であること
から、以下、例を引用して簡単に説明する。
FIG. 2 shows an embodiment for obtaining a realistic component. The means for extracting the presence component is not the essence of the present invention, but is important in explaining the feasibility of reproducing the presence according to the present invention. A brief description will be given.

【0016】一般的に微細な音響特性は極めて複雑であ
ることから、精密な定義は難しい。しかし、どのような
音響特性をもそれを巨視的に見れば、中音から外れて低
音から超低音に向かうほど、また、中音から外れて高音
から超高音に向かうほど、音波の伝播と、音波から電気
信号への変換と、電気信号から音波への変換、の過程で
臨場感成分が多く減衰する。低音の減衰は主に回折効果
の影響、高音の減衰は主に指向性とエネルギー損失の影
響を受ける。フィルタを使って、このような減衰成分を
復元すると臨場感は回復する。この減衰成分の抽出手法
は数多くある。図2を用いた説明は国際特許出願PCT
/JP97/03815から一部を引用したものであ
る。
In general, since fine acoustic characteristics are extremely complicated, precise definition is difficult. However, if we look at any acoustic characteristics macroscopically, the more the sound deviates from the middle sound and goes from the bass to the ultra-low sound, and from the middle sound and goes from the high sound to the ultra-high sound, the sound wave propagation, In the process of converting a sound wave into an electric signal and converting an electric signal into a sound wave, a large amount of the presence component is attenuated. Attenuation of bass is mainly affected by diffraction effects, and attenuation of treble is mainly affected by directivity and energy loss. When such an attenuation component is restored using a filter, the sense of reality is restored. There are many methods for extracting this attenuation component. The description with reference to FIG.
/ JP97 / 03815.

【0017】S(a)は元信号、IIは元信号の低音域
減衰成分抽出部分であり積分機能から構成される。II
の出力はS(al)である。DDは元信号の高音域減衰
成分抽出部分であり微分機能から構成される。DDの出
力はS(ah)である。MIXはS(al)とS(a
h)を適当な比率で加算する機能である。加算部の出力
はklS(al)+khS(ah)であり、これが
臨場感成分である。
S (a) is an original signal, and II is a low frequency range attenuation component extraction part of the original signal, which is constituted by an integrating function. II
Is S (al). DD is a high frequency range attenuation component extraction part of the original signal, and is constituted by a differentiation function. The output of DD is S (ah). MIX is S (al) and S (a
h) is added at an appropriate ratio. The output of the adder is kl * S (al) + kh * S (ah), which is the presence component.

【0018】[0018]

【発明の実施の形態】BEST MODE FOR CARRYING OUT THE INVENTION

【0019】受け手側の操作に伴い、変化させる臨場感
の演出が必要な、インターネットを代表例とする通信回
線を利用する情報伝達システム、TVゲームを代表とす
る記録メディアを介する情報伝達システム、AV作品の
製作システムなどにおけるソフトウェア。
An information transmission system using a communication line typified by the Internet, an information transmission system via a recording medium typified by a TV game, and an AV, which need to produce a sense of realism that changes with the operation of the receiver. Software for production systems.

【0020】[0020]

【発明の効果】本発明は公知の技術を組み合わせるもの
の、臨場感の成分を元々の信号とは別に設け、それを再
生側で、必要な臨場感の度合に応じて合成できることか
ら、従来にはなかった自由度の高い音響の臨場感度合の
操作が極めて簡単にできる特徴を持つ。送り手側は、受
け手側が画像とリンクさせた自由度の高い臨場感を味わ
えるような情報を発信することができるようになる。
Although the present invention combines known techniques, a realism component is provided separately from the original signal, and it can be synthesized on the reproduction side according to the required degree of realism. It has the feature that it is extremely easy to operate the sound with the high degree of freedom in realism. The sender can transmit information linked to the image so that the receiver can enjoy a high degree of realism.

【0021】[0021]

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施例の説明である。FIG. 1 is an explanation of one embodiment of the present invention.

【図2】臨場感成分を抽出する一実施例の説明図であ
る。
FIG. 2 is an explanatory diagram of an embodiment for extracting a presence component.

【符号の説明】[Explanation of symbols]

S(A) は元信号 F は臨場感成分抽出フィルタ S(AA) は臨場感成分信号 SC は送信制御機能 Media は通信回線又はデータバス又は記録メディ
ア RC は受信制御機能 P は係数機能 kS(AA) は係数機能の出力信号 MIX は加算機能 S(A)+kS(AA) は加算機能の出力信号 S(a) は元信号 II は積分機能 DD は微分機能 S(al) は低域の臨場感成分 S(ah) は高域の臨場感成分 Klal+khah は加算機能の出力信号
S (A) is the original signal F is the presence component extraction filter S (AA) is the presence component signal SC is the transmission control function Media is the communication line or data bus or recording medium RC is the reception control function P is the coefficient function k * S (AA) is the output signal of the coefficient function MIX is the addition function S (A) + k * S (AA) is the output signal of the addition function S (a) is the original signal II is the integration function DD is the differentiation function S (al) is low The presence component S (ah) of the region is the presence component of the high range Kl * al + kh * ah is the output signal of the addition function

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】符号化された、1個又は複数個の音響信号
(以下元信号と称す)とその元信号に任意の信号処理を
作用させて得られる1個又は複数個の信号(以下臨場感
成分と称す)を元信号とは識別できる形で、通信回線に
送信するか又は記録メディアに書き込むか又はデータ通
信バスに送信する機能を持つことを特徴とする音響信号
伝送制御方式。
An encoded audio signal or a plurality of audio signals (hereinafter referred to as an original signal) and one or a plurality of signals (hereinafter referred to as a real signal) obtained by subjecting the original signal to arbitrary signal processing. A sound signal transmission control method characterized by having a function of transmitting the signal to a communication line, writing to a recording medium, or transmitting the signal to a data communication bus in a form that can be distinguished from the original signal.
【請求項2】上記請求項1の信号伝送方式によって送信
された元信号と臨場感成分とを受信し、臨場感成分か又
は大きさを変えた臨場感成分を元信号に加算する機能も
しくは加算の制御信号を発生する機能を有することを特
徴とする音響信号合成方式。
2. A function or addition for receiving an original signal and a presence component transmitted by the signal transmission method according to claim 1, and adding the presence component or the presence component having a changed size to the original signal. A sound signal synthesizing method having a function of generating a control signal of the following.
【請求項3】上記請求項2の、臨場感成分の大きさを変
える機能を、コンピュータのモニタ画面に表示される画
像の制御信号とリンクさせたことを特徴とする音響信号
合成方式。
3. A sound signal synthesizing method according to claim 2, wherein the function of changing the magnitude of the presence component is linked to a control signal of an image displayed on a monitor screen of a computer.
JP2000375293A 2000-11-03 2000-11-03 Presence transmission system for sound signal Pending JP2002140076A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000375293A JP2002140076A (en) 2000-11-03 2000-11-03 Presence transmission system for sound signal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000375293A JP2002140076A (en) 2000-11-03 2000-11-03 Presence transmission system for sound signal

Publications (1)

Publication Number Publication Date
JP2002140076A true JP2002140076A (en) 2002-05-17

Family

ID=18844325

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000375293A Pending JP2002140076A (en) 2000-11-03 2000-11-03 Presence transmission system for sound signal

Country Status (1)

Country Link
JP (1) JP2002140076A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007066754A1 (en) * 2005-12-09 2007-06-14 Konami Digital Entertainment Co., Ltd. Music genre judging device and game machine having the same
WO2014178479A1 (en) * 2013-04-30 2014-11-06 인텔렉추얼디스커버리 주식회사 Head mounted display and method for providing audio content by using same

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007066754A1 (en) * 2005-12-09 2007-06-14 Konami Digital Entertainment Co., Ltd. Music genre judging device and game machine having the same
CN101325990B (en) * 2005-12-09 2011-12-28 科乐美数码娱乐株式会社 Music genre discrimination device and game machine equipped with it
US8315726B2 (en) 2005-12-09 2012-11-20 Konami Digital Entertainment Co., Ltd. Music genre judging device and game machine having the same
WO2014178479A1 (en) * 2013-04-30 2014-11-06 인텔렉추얼디스커버리 주식회사 Head mounted display and method for providing audio content by using same

Similar Documents

Publication Publication Date Title
JP7251592B2 (en) Information processing device, information processing method, and program
RU2110162C1 (en) Interactive multimedia communication system
US12100381B2 (en) Signal processing device, signal processing method, and program
KR102430769B1 (en) Synthesis of signals for immersive audio playback
KR20070074645A (en) Stereo Expansion Network for Two Loudspeakers
JP2007135046A (en) Audio signal processing apparatus, audio signal processing method, and program
JP4840421B2 (en) Audio signal processing apparatus, audio signal processing method, and program
JP4602204B2 (en) Audio signal processing apparatus and audio signal processing method
WO1999049453A1 (en) A method and a system for processing directed sound in an acoustic virtual environment
KR100291890B1 (en) System and apparatus for interactive multimedia entertainment device
JP2002140076A (en) Presence transmission system for sound signal
JP2003079000A (en) Presence control system for video acoustic device
CN114915874A (en) Audio processing method, apparatus, device, medium, and program product
US7920708B2 (en) Low computation mono to stereo conversion using intra-aural differences
JP2004266746A (en) Image and voice communication system
JP2005333279A (en) Broadcast system
US20040117854A1 (en) Method for processing moving pictures responding to user's action
JP2002207488A (en) System for representing and transmitting presence of sound and image
CN120544593A (en) Audio signal processing method and electronic device
KR20010104829A (en) Manufacturing installation of compact disk and driving web installation there of
JP2008206172A (en) Music content file and music content distribution method
JPH0576069A (en) Continuous data communication system
JP2008042453A (en) Camera device and network camera system
JP2021129129A (en) Information processing device, information processing method, and program
JP2008301148A (en) Sound field control method, sound field control program, and sound playback device