JP2002140076A - Presence transmission system for sound signal - Google Patents
Presence transmission system for sound signalInfo
- Publication number
- JP2002140076A JP2002140076A JP2000375293A JP2000375293A JP2002140076A JP 2002140076 A JP2002140076 A JP 2002140076A JP 2000375293 A JP2000375293 A JP 2000375293A JP 2000375293 A JP2000375293 A JP 2000375293A JP 2002140076 A JP2002140076 A JP 2002140076A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- sound
- function
- component
- original
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 15
- 230000005540 biological transmission Effects 0.000 title claims description 13
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 4
- 238000000034 method Methods 0.000 claims description 11
- 230000008054 signal transmission Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 20
- 230000000694 effects Effects 0.000 description 5
- 238000000605 extraction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000004069 differentiation Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 238000001308 synthesis method Methods 0.000 description 1
Landscapes
- Stereophonic System (AREA)
- Stereo-Broadcasting Methods (AREA)
Abstract
Description
【0001】[0001]
【発明の所属する技術分野】この発明は、音響信号の臨
場感を再生する手法であって、情報伝達の送り手側の信
号伝送方法と、受信側の信号合成方法とに関する。イン
ターネットを代表とするところの通信回線をメディアと
する場合のAV作品の臨場感を表現して伝え受けるため
の信号処理や制御ソフトウェア、コンピュータのバス回
線をメディアとしてAV作品の臨場感を表現して伝え受
けるための信号処理や制御ソフトウェア、TVゲームシ
ステムを代表とする記憶メディアを経由して情報を伝え
受けるための信号処理や制御ソフトウェア等がある。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technique for reproducing a sense of presence of an audio signal, and more particularly to a signal transmission method on a sender side of information transmission and a signal synthesis method on a reception side. Signal processing and control software for expressing and transmitting the realism of an AV work when a communication line represented by the Internet is used as a media, and expressing the realism of an AV work using a computer bus line as a medium There are signal processing and control software for transmitting and receiving information, and signal processing and control software for transmitting and receiving information via a storage medium represented by a TV game system.
【0002】[0002]
【従来の技術】通信回線を利用した情報伝達はハードウ
ェア、ソフトウェア共に、画像データ通信の大量化高速
化高圧縮化が進み、視覚に訴える情報の臨場感や受け手
側の場面選択の自由度はかなり高くなってきている。そ
の一方で、聴覚に訴える臨場感や受け手側の場面選択の
自由度に対応した臨場感の演出については、画像信号の
内容ほどには吟味されていないのが現状である。音響の
臨場感を再生する場合、受信側では送信側から送られた
いくつかの信号サンプルを選択するか、又は、受信側に
臨場感を再生するためのフィルタのアルゴリズムを組み
入れる手法が一般的である。前者は受信側の意志でフレ
キシブルに臨場感を変えることができない。後者は臨場
感を変えるためのアルゴリズムをダウンロードするか、
又は、あらかじめ決められたアルゴリズムを受信側が持
っていなければならない。いずれにしても画像と連動さ
せ自由自在に臨場感を演出することは容易でなく、一般
的でもない。2. Description of the Related Art For information transmission using a communication line, in both hardware and software, image data communication has been mass-produced, speeded up, and compressed. It is getting pretty high. On the other hand, at present, the effect of the presence that appeals to the auditory sense and the effect of the presence corresponding to the degree of freedom of scene selection on the receiver side has not been examined as much as the content of the image signal. When reproducing the presence of sound, the receiving side generally selects some signal samples sent from the transmitting side, or incorporates a filter algorithm for reproducing the presence on the receiving side. is there. The former cannot change the sense of presence flexibly by the will of the receiving side. The latter either downloads an algorithm to change the presence,
Alternatively, the receiving side must have a predetermined algorithm. In any case, it is not easy or unusual to produce a sense of realism freely in conjunction with an image.
【0003】[0003]
【用語の定義】特許請求範囲を含む全文を通じ、以下の
用語を定義する。[Definition of terms] The following terms are defined throughout the entire text including the claims.
【0004】音響の臨場感とは、音量だけではなく音源
の近くでなければ聴こえないような音質の成分を聴感で
感じ取った時の感覚のこととする。音響の臨場感の度合
とは、音源の近くであればあるほど聴こえる音質成分の
度合であるものとする。[0004] The sense of presence of sound refers to not only the volume but also the sensation when a sound quality component that cannot be heard unless the sound source is close to the sound source is sensed. The degree of sound presence is the degree of a sound quality component that can be heard closer to the sound source.
【0005】中音とは周波数300Hzから3000H
z程度の範囲を目安とする。低音とは周波数300Hz
から80Hz程度の範囲を目安とする。高音とは周波数
3000Hzから8000Hz程度の範囲を目安とす
る。超低音とは周波数80Hzから20Hz程度の範囲
を目安とする。超高音とは周波数8000Hzから20
000Hz程度の範囲を目安とする。[0005] The medium tone is a frequency of 300 Hz to 3000 H.
A range of about z is used as a guide. Low frequency is 300Hz
To a range of about 80 Hz. The treble refers to a frequency range of about 3000 Hz to 8000 Hz. The ultra-low sound is a frequency range from about 80 Hz to about 20 Hz. Ultra high frequency is from 8000 Hz to 20
A range of about 000 Hz is a standard.
【0006】加算とは数学的に厳密なものではなく、実
用的な装置を作るに充分な機能のことであるものとす
る。加算などの演算が、ディジタル演算かアナログ演算
かは本案の本質とするところではない。[0006] It is assumed that addition is not mathematically exact, but is a function sufficient to make a practical device. Whether the operation such as addition is a digital operation or an analog operation is not the essence of the present invention.
【0007】場面の選択とは、例えば、モニタ上にある
画像があって、その画像の拡大や移動の操作が、受け手
側によって操作されることを意味する。AV作品とは音
響と画像によるテレビゲームや放送番組の作品を意味す
る。The selection of a scene means that, for example, there is an image on a monitor, and the operation of enlarging or moving the image is operated by the receiver. An AV work means a work of a video game or a broadcast program using sound and images.
【0008】[0008]
【発明が解決しようとしている課題】情報伝達におけ
る、簡単で有効な音響の臨場感を再生するための信号処
理と制御。画像画面の制御とリアルタイムでリンクした
音響の臨場感の制御。画像の臨場感は、広角、望遠、接
写、左右の移動などの手法を使って臨場感を演出するこ
とは通常行なわれている。又、音響の場合、画像ほどに
は臨場感に対する吟味が行われていないことから、せい
ぜいステレオの効果や音量操作などで臨場感の演出が行
われている程度である。音響の臨場感の演出は画像ほど
には誰にでも認識できるというものではないことから、
一般的には重要視されていないのが現状である。SUMMARY OF THE INVENTION In information transmission, signal processing and control for reproducing a simple and effective acoustic realism. Control of image screen and real-time sound control linked in real time. As for the realism of an image, it is common practice to produce a sense of realism by using techniques such as wide-angle, telephoto, close-up photography, and left / right movement. Further, in the case of sound, since the scrutiny of the sense of realism is not performed as much as the image, the effect of the sense of realism is performed at most by the effect of the stereo or the volume operation. Because the production of sound presence is not something that anyone can recognize as much as images,
At present, it is not generally regarded as important.
【0009】[0009]
【課題を解決するための手段】図1は本発明を簡単に説
明するためのブロック図であり、元信号が1個で、それ
に対応する臨場感成分が1個の場合の一実施例である。
S(A)はAという音響信号の符号データである。Fは
臨場感の成分を抽出するフィルタである。このフィルタ
の特性そのものについては本発明の本質とするところで
はない。FIG. 1 is a block diagram for simply explaining the present invention, and shows an embodiment in which one original signal and one corresponding realism component are provided. .
S (A) is the code data of the acoustic signal A. F is a filter for extracting the presence component. The characteristics of the filter itself are not the essence of the present invention.
【0010】S(A)なる入力信号のFの出力はS(A
A)である。S(AA)はS(A)の臨場感成分であ
る。SCは符号データを送信制御又は記録制御するため
の送信制御機能で、受信側でS(A)とS(AA)を識
別して受け取れるよう送信制御する。実用機において、
SCは音響信号だけではなく、他の信号を送受信制御す
るための機能も含む。Mediaは、通信回線、記録メ
ディアである。RCは通信回線、記録メディアからの信
号を受信し、送信側からの音響データS(A)とS(A
A)を得るための受信制御機能である。実用機におい
て、RCは音響信号だけではなく他の信号を送受信する
機能をも含む。The output of F of the input signal S (A) is S (A)
A). S (AA) is the presence component of S (A). SC is a transmission control function for controlling transmission or recording of code data, and controls transmission so that the receiving side can identify and receive S (A) and S (AA). In practical machines,
The SC includes not only an audio signal but also a function for controlling transmission and reception of other signals. Media is a communication line and a recording medium. The RC receives signals from a communication line and a recording medium, and receives audio data S (A) and S (A) from the transmission side.
This is a reception control function for obtaining A). In a practical device, RC includes a function of transmitting and receiving not only an acoustic signal but also other signals.
【0011】Pは臨場感の度合を調整するための係数機
能であり、その係数をkとし、Pの出力k*S(AA)
は臨場感の度合の成分である。MIXは元信号S(A)
と臨場感の度合い成分k*S(AA)を加算する加算機
能である。MIXの出力S(A)+k*S(AA)は元
信号に元信号の臨場感成分を加算した信号である。この
信号を再生すると、臨場感の度合が係数kの値に依存す
るところの再生音響信号が得られる。P is a coefficient function for adjusting the degree of presence. The coefficient is k, and the output of P is k * S (AA).
Is a component of the degree of presence. MIX is the original signal S (A)
And an addition function of adding the presence component k * S (AA). The MIX output S (A) + k * S (AA) is a signal obtained by adding the presence component of the original signal to the original signal. When this signal is reproduced, a reproduced sound signal whose degree of presence depends on the value of the coefficient k is obtained.
【0012】情報の送り手側も受けて側もコンピュータ
を介するのが一般的である。コンピュータの場合は音響
信号をデータファイルとして持ち、特定のアルゴリズム
によってそのデータファイルの音響信号を変換したもの
を別のファイルとして持つことができ、通信回線やバス
ラインを通じて他の装置に伝送することもでき、受信し
た信号から決められた手順によりファイルを分類しそれ
らを合成し、音響信号として再生することもできる。本
発明を構成するそれぞれの機能は公知のものである。本
発明の本質は元々の音響信号から抽出した臨場感の成分
を元々の音響信号とは区別して送り、受けて側で元々の
信号に臨場感の成分を合成して再生するところにある。In general, both the sender and the receiver of the information pass through a computer. In the case of a computer, the sound signal is stored as a data file, and the sound signal of the data file converted by a specific algorithm can be stored as another file, which can be transmitted to other devices via a communication line or bus line. It is also possible to classify the files according to a procedure determined from the received signal, combine them, and reproduce the resultant as an audio signal. Each function constituting the present invention is known. The essence of the present invention resides in that the presence component extracted from the original sound signal is sent separately from the original sound signal, and the reception side synthesizes and reproduces the presence component with the original signal.
【0013】元信号と臨場感成分を分離して送受信する
ための信号処理や制御の機能については本発明の本質と
するところではない。The function of signal processing and control for transmitting and receiving the original signal and the presence component in a separated manner is not the essence of the present invention.
【0014】元信号と臨場感成分を受信側で合成する手
段そのもの、また、臨場感成分を含む信号を音波に変換
する手段についても、本発明の本質とするところではな
い。The means for synthesizing the original signal and the presence component on the receiving side and the means for converting a signal containing the presence component into a sound wave are not essential to the present invention.
【0015】図2は臨場感の成分を得るための一実施例
を示す。臨場感の成分を抽出する手段については本発明
の本質とするところではないが、本発明により臨場感を
再生できることの実現性を説明する上で重要であること
から、以下、例を引用して簡単に説明する。FIG. 2 shows an embodiment for obtaining a realistic component. The means for extracting the presence component is not the essence of the present invention, but is important in explaining the feasibility of reproducing the presence according to the present invention. A brief description will be given.
【0016】一般的に微細な音響特性は極めて複雑であ
ることから、精密な定義は難しい。しかし、どのような
音響特性をもそれを巨視的に見れば、中音から外れて低
音から超低音に向かうほど、また、中音から外れて高音
から超高音に向かうほど、音波の伝播と、音波から電気
信号への変換と、電気信号から音波への変換、の過程で
臨場感成分が多く減衰する。低音の減衰は主に回折効果
の影響、高音の減衰は主に指向性とエネルギー損失の影
響を受ける。フィルタを使って、このような減衰成分を
復元すると臨場感は回復する。この減衰成分の抽出手法
は数多くある。図2を用いた説明は国際特許出願PCT
/JP97/03815から一部を引用したものであ
る。In general, since fine acoustic characteristics are extremely complicated, precise definition is difficult. However, if we look at any acoustic characteristics macroscopically, the more the sound deviates from the middle sound and goes from the bass to the ultra-low sound, and from the middle sound and goes from the high sound to the ultra-high sound, the sound wave propagation, In the process of converting a sound wave into an electric signal and converting an electric signal into a sound wave, a large amount of the presence component is attenuated. Attenuation of bass is mainly affected by diffraction effects, and attenuation of treble is mainly affected by directivity and energy loss. When such an attenuation component is restored using a filter, the sense of reality is restored. There are many methods for extracting this attenuation component. The description with reference to FIG.
/ JP97 / 03815.
【0017】S(a)は元信号、IIは元信号の低音域
減衰成分抽出部分であり積分機能から構成される。II
の出力はS(al)である。DDは元信号の高音域減衰
成分抽出部分であり微分機能から構成される。DDの出
力はS(ah)である。MIXはS(al)とS(a
h)を適当な比率で加算する機能である。加算部の出力
はkl*S(al)+kh*S(ah)であり、これが
臨場感成分である。S (a) is an original signal, and II is a low frequency range attenuation component extraction part of the original signal, which is constituted by an integrating function. II
Is S (al). DD is a high frequency range attenuation component extraction part of the original signal, and is constituted by a differentiation function. The output of DD is S (ah). MIX is S (al) and S (a
h) is added at an appropriate ratio. The output of the adder is kl * S (al) + kh * S (ah), which is the presence component.
【0018】[0018]
【0019】受け手側の操作に伴い、変化させる臨場感
の演出が必要な、インターネットを代表例とする通信回
線を利用する情報伝達システム、TVゲームを代表とす
る記録メディアを介する情報伝達システム、AV作品の
製作システムなどにおけるソフトウェア。An information transmission system using a communication line typified by the Internet, an information transmission system via a recording medium typified by a TV game, and an AV, which need to produce a sense of realism that changes with the operation of the receiver. Software for production systems.
【0020】[0020]
【発明の効果】本発明は公知の技術を組み合わせるもの
の、臨場感の成分を元々の信号とは別に設け、それを再
生側で、必要な臨場感の度合に応じて合成できることか
ら、従来にはなかった自由度の高い音響の臨場感度合の
操作が極めて簡単にできる特徴を持つ。送り手側は、受
け手側が画像とリンクさせた自由度の高い臨場感を味わ
えるような情報を発信することができるようになる。Although the present invention combines known techniques, a realism component is provided separately from the original signal, and it can be synthesized on the reproduction side according to the required degree of realism. It has the feature that it is extremely easy to operate the sound with the high degree of freedom in realism. The sender can transmit information linked to the image so that the receiver can enjoy a high degree of realism.
【0021】[0021]
【図1】本発明の一実施例の説明である。FIG. 1 is an explanation of one embodiment of the present invention.
【図2】臨場感成分を抽出する一実施例の説明図であ
る。FIG. 2 is an explanatory diagram of an embodiment for extracting a presence component.
S(A) は元信号 F は臨場感成分抽出フィルタ S(AA) は臨場感成分信号 SC は送信制御機能 Media は通信回線又はデータバス又は記録メディ
ア RC は受信制御機能 P は係数機能 k*S(AA) は係数機能の出力信号 MIX は加算機能 S(A)+k*S(AA) は加算機能の出力信号 S(a) は元信号 II は積分機能 DD は微分機能 S(al) は低域の臨場感成分 S(ah) は高域の臨場感成分 Kl*al+kh*ah は加算機能の出力信号S (A) is the original signal F is the presence component extraction filter S (AA) is the presence component signal SC is the transmission control function Media is the communication line or data bus or recording medium RC is the reception control function P is the coefficient function k * S (AA) is the output signal of the coefficient function MIX is the addition function S (A) + k * S (AA) is the output signal of the addition function S (a) is the original signal II is the integration function DD is the differentiation function S (al) is low The presence component S (ah) of the region is the presence component of the high range Kl * al + kh * ah is the output signal of the addition function
Claims (3)
(以下元信号と称す)とその元信号に任意の信号処理を
作用させて得られる1個又は複数個の信号(以下臨場感
成分と称す)を元信号とは識別できる形で、通信回線に
送信するか又は記録メディアに書き込むか又はデータ通
信バスに送信する機能を持つことを特徴とする音響信号
伝送制御方式。An encoded audio signal or a plurality of audio signals (hereinafter referred to as an original signal) and one or a plurality of signals (hereinafter referred to as a real signal) obtained by subjecting the original signal to arbitrary signal processing. A sound signal transmission control method characterized by having a function of transmitting the signal to a communication line, writing to a recording medium, or transmitting the signal to a data communication bus in a form that can be distinguished from the original signal.
された元信号と臨場感成分とを受信し、臨場感成分か又
は大きさを変えた臨場感成分を元信号に加算する機能も
しくは加算の制御信号を発生する機能を有することを特
徴とする音響信号合成方式。2. A function or addition for receiving an original signal and a presence component transmitted by the signal transmission method according to claim 1, and adding the presence component or the presence component having a changed size to the original signal. A sound signal synthesizing method having a function of generating a control signal of the following.
える機能を、コンピュータのモニタ画面に表示される画
像の制御信号とリンクさせたことを特徴とする音響信号
合成方式。3. A sound signal synthesizing method according to claim 2, wherein the function of changing the magnitude of the presence component is linked to a control signal of an image displayed on a monitor screen of a computer.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000375293A JP2002140076A (en) | 2000-11-03 | 2000-11-03 | Presence transmission system for sound signal |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000375293A JP2002140076A (en) | 2000-11-03 | 2000-11-03 | Presence transmission system for sound signal |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002140076A true JP2002140076A (en) | 2002-05-17 |
Family
ID=18844325
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000375293A Pending JP2002140076A (en) | 2000-11-03 | 2000-11-03 | Presence transmission system for sound signal |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002140076A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007066754A1 (en) * | 2005-12-09 | 2007-06-14 | Konami Digital Entertainment Co., Ltd. | Music genre judging device and game machine having the same |
| WO2014178479A1 (en) * | 2013-04-30 | 2014-11-06 | 인텔렉추얼디스커버리 주식회사 | Head mounted display and method for providing audio content by using same |
-
2000
- 2000-11-03 JP JP2000375293A patent/JP2002140076A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007066754A1 (en) * | 2005-12-09 | 2007-06-14 | Konami Digital Entertainment Co., Ltd. | Music genre judging device and game machine having the same |
| CN101325990B (en) * | 2005-12-09 | 2011-12-28 | 科乐美数码娱乐株式会社 | Music genre discrimination device and game machine equipped with it |
| US8315726B2 (en) | 2005-12-09 | 2012-11-20 | Konami Digital Entertainment Co., Ltd. | Music genre judging device and game machine having the same |
| WO2014178479A1 (en) * | 2013-04-30 | 2014-11-06 | 인텔렉추얼디스커버리 주식회사 | Head mounted display and method for providing audio content by using same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7251592B2 (en) | Information processing device, information processing method, and program | |
| RU2110162C1 (en) | Interactive multimedia communication system | |
| US12100381B2 (en) | Signal processing device, signal processing method, and program | |
| KR102430769B1 (en) | Synthesis of signals for immersive audio playback | |
| KR20070074645A (en) | Stereo Expansion Network for Two Loudspeakers | |
| JP2007135046A (en) | Audio signal processing apparatus, audio signal processing method, and program | |
| JP4840421B2 (en) | Audio signal processing apparatus, audio signal processing method, and program | |
| JP4602204B2 (en) | Audio signal processing apparatus and audio signal processing method | |
| WO1999049453A1 (en) | A method and a system for processing directed sound in an acoustic virtual environment | |
| KR100291890B1 (en) | System and apparatus for interactive multimedia entertainment device | |
| JP2002140076A (en) | Presence transmission system for sound signal | |
| JP2003079000A (en) | Presence control system for video acoustic device | |
| CN114915874A (en) | Audio processing method, apparatus, device, medium, and program product | |
| US7920708B2 (en) | Low computation mono to stereo conversion using intra-aural differences | |
| JP2004266746A (en) | Image and voice communication system | |
| JP2005333279A (en) | Broadcast system | |
| US20040117854A1 (en) | Method for processing moving pictures responding to user's action | |
| JP2002207488A (en) | System for representing and transmitting presence of sound and image | |
| CN120544593A (en) | Audio signal processing method and electronic device | |
| KR20010104829A (en) | Manufacturing installation of compact disk and driving web installation there of | |
| JP2008206172A (en) | Music content file and music content distribution method | |
| JPH0576069A (en) | Continuous data communication system | |
| JP2008042453A (en) | Camera device and network camera system | |
| JP2021129129A (en) | Information processing device, information processing method, and program | |
| JP2008301148A (en) | Sound field control method, sound field control program, and sound playback device |