[go: up one dir, main page]

JP2000004500A - Speaker system for deciding azimuth automatically - Google Patents

Speaker system for deciding azimuth automatically

Info

Publication number
JP2000004500A
JP2000004500A JP16686998A JP16686998A JP2000004500A JP 2000004500 A JP2000004500 A JP 2000004500A JP 16686998 A JP16686998 A JP 16686998A JP 16686998 A JP16686998 A JP 16686998A JP 2000004500 A JP2000004500 A JP 2000004500A
Authority
JP
Japan
Prior art keywords
frequency
difference
calculating
reflectance
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP16686998A
Other languages
Japanese (ja)
Other versions
JP3264249B2 (en
Inventor
Koji Hirayanagi
幸治 平柳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP16686998A priority Critical patent/JP3264249B2/en
Publication of JP2000004500A publication Critical patent/JP2000004500A/en
Application granted granted Critical
Publication of JP3264249B2 publication Critical patent/JP3264249B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Circuit For Audible Band Transducer (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Transducers For Ultrasonic Waves (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a speaker system where a position of a listener is calculated and a radiation direction of acoustic vibration is directed toward the listener in matching with the movement of the listener. SOLUTION: The speaker system is provided with a parametric speaker 10, a detector 20 that detects reflection vibration resulting from emitted acoustic vibration reflected from a listener 1 in front, a calculation device 30 that calculates a deviation in the listener 1 with respect to a radiation axis of the acoustic vibration based on a signal generated in the parametric speaker and the reflection vibration and a direction adjustment device 40. Thus, the radiation direction of the acoustic vibration is directed in the direction of the listener 1 based on the calculation result of the calculation device 30.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、パラメトリックス
ピーカを用いた、聴取者の位置を算出し、聴取者の移動
にあわせて音響振動の放射方向を聴取者に向けることを
可能とするスピーカ装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a loudspeaker device using a parametric loudspeaker, which can calculate the position of a listener and can direct the radiation direction of acoustic vibration to the listener in accordance with the movement of the listener. .

【0002】[0002]

【従来の技術】従来より、超音波に対する空気の非線形
性を用いて、有限振幅レベルの被変調超音波から可聴音
を合成する方式のスピーカ(パラメトリックスピーカ)
が知られている。パラメトリックスピーカは指向性に優
れたスピーカである。
2. Description of the Related Art A loudspeaker (parametric loudspeaker) which synthesizes an audible sound from a modulated ultrasonic wave having a finite amplitude level by using the nonlinearity of air with respect to the ultrasonic wave.
It has been known. A parametric speaker is a speaker having excellent directivity.

【0003】パラメトリックスピーカについて図6を用
いて説明する。音声生成器81からの音声信号は、高周
波生成器82からの出力を搬送波として振幅変調器83
で振幅変調され、増幅器で増幅され、電気音響変換器8
5に入力される。電気音響変換器85から被変調超音波
である音響振動を有限振幅レベルで空中に放射すると、
空気の非線形特性により、超音波が一種の非線形相互作
用を起こし、空中で鋭い指向性を有する元の信号波(音
声信号)が復調される。
[0003] A parametric speaker will be described with reference to FIG. The audio signal from the audio generator 81 is output from the high-frequency
The amplitude is modulated by the amplifier, amplified by the amplifier, and the electroacoustic transducer 8
5 is input. When an acoustic vibration that is a modulated ultrasonic wave is radiated into the air at a finite amplitude level from the electroacoustic transducer 85,
Due to the non-linear characteristics of air, ultrasonic waves cause a kind of non-linear interaction, and an original signal wave (voice signal) having sharp directivity in the air is demodulated.

【0004】ここで、気体の非線形音響現象の一種であ
るパラメトリック現象について簡単に説明する。スピー
カをf1,f2という2つの周波数で駆動すると、 f1とf2
(一時波)が媒質(空気)の非線形特性によって干渉を
起こし、これらの和と差の周波数、つまりf1+f2とf2−
f1とをもつ波(二次波)が発生する。そこでf1+f2を超
音波にし、f2−f1を可聴周波になるようにすると、発生
した可聴音を聞くことができる。
Here, a parametric phenomenon, which is a kind of nonlinear acoustic phenomenon of gas, will be briefly described. When the speaker is driven at two frequencies, f1 and f2, f1 and f2
The (temporary wave) causes interference due to the nonlinear characteristics of the medium (air), and the frequency of the sum and difference thereof, that is, f1 + f2 and f2-
A wave (secondary wave) having f1 is generated. Therefore, if f1 + f2 is set to an ultrasonic wave and f2-f1 is set to an audio frequency, the generated audible sound can be heard.

【0005】このパラメトリックスピーカを用いた技術
として、特許第2665007号広報には、聴取者の有無をパ
ラメトリックスピーカから放射された音響振動の聴取者
からの反射波を検出することにより、聴取者の有無を判
別する技術が記載されている。
[0005] As a technique using the parametric speaker, Japanese Patent No. 2665007 discloses the presence or absence of a listener by detecting the reflected wave of the acoustic vibration radiated from the parametric speaker from the listener. Is described.

【0006】[0006]

【発明が解決しようとする課題】しかしながら、この特
許第2665007号広報記載の技術では、聴取者の有無を判
別するだけであるので、聴取者が移動して、音響放射の
可聴エリア外に移動した場合には、聴取者は放射された
音響を聞くことができない。
However, according to the technique described in the publication of Japanese Patent No. 2665507, only the presence or absence of a listener is determined, so that the listener moves and moves out of the audible area of the acoustic radiation. In some cases, the listener cannot hear the emitted sound.

【0007】そこで、本発明の目的は、聴取者の位置を
算出し、聴取者の移動にあわせて音響振動の放射方向を
聴取者に向けることを可能とするスピーカ装置を提供す
る。
Accordingly, an object of the present invention is to provide a speaker device capable of calculating the position of a listener and directing the radiation direction of acoustic vibration to the listener in accordance with the movement of the listener.

【0008】[0008]

【課題を解決するための手段】本発明の自動方位決めス
ピーカ装置は、音声信号を出力する音声信号出力手段
と、予め定められた周波数を持つ高周波信号を出力する
高周波出力手段と、前記音声信号と前記高周波信号とを
振幅変調し被振幅変調信号を出力する振幅変調手段と、
該被振幅変調信号を増幅する増幅手段と、増幅された前
記被振幅変調信号を超音波の音響振動として放射する放
射手段とから構成されるパラメトリックスピーカと、放
射された前記音響振動の前方の聴取者等から反射する反
射振動を検出する検出手段と、前記パラメトリックスピ
ーカ内で生成される信号と検出された前記反射振動とが
入力され、前記パラメトリックスピーカ内で生成される
信号と前記反射振動とから前記音響振動の放射軸に対す
る前記聴取者等のずれを算出する算出手段と、前記算出
手段の算出の結果により、前記音響振動の放射方向を前
記聴取者等の方向に向かせる指示手段とを備えたことを
特徴とする。
According to the present invention, there is provided an automatic azimuth determining speaker device comprising: an audio signal output unit for outputting an audio signal; a high frequency output unit for outputting a high frequency signal having a predetermined frequency; And amplitude modulation means for amplitude-modulating the high-frequency signal and outputting an amplitude-modulated signal,
A parametric loudspeaker comprising amplification means for amplifying the amplitude-modulated signal, radiating means for radiating the amplified amplitude-modulated signal as ultrasonic acoustic vibration, and listening in front of the radiated acoustic vibration Detecting means for detecting reflected vibration reflected from a person or the like, and a signal generated in the parametric speaker and the detected reflected vibration are input, and a signal generated in the parametric speaker and the reflected vibration Calculation means for calculating the deviation of the listener or the like from the radiation axis of the acoustic vibration, and instruction means for directing the radiation direction of the acoustic vibration to the direction of the listener or the like based on the calculation result of the calculation means. It is characterized by having.

【0009】また、前記算出手段は、第1の周波数をも
つ前記被振幅変調信号のエネルギー量を検出する第1の
周波数検出手段と、第2の周波数をもつ前記被振幅変調
信号のエネルギー量を検出する第2の周波数検出手段
と、前記第1の周波数をもつ前記反射振動のエネルギー
量を検出する第3の周波数検出手段と、前記第2の周波
数をもつ前記反射振動のエネルギー量を検出する第4の
周波数検出手段と、前記第1の周波数検出手段及び前記
前記第3の周波数検出手段で検出されたエネルギー量の
差分を求め、該差分から第1の反射率を求める第1の回
路と、前記第2の周波数検出手段及び前記前記第4の周
波数検出手段で検出されたエネルギー量の差分を求め、
該差分から第2の反射率を求める第2の回路と、前記第
1の反射率と前記第2の反射率との差分を求め、該差分
から記音響振動の放射軸に対する前記聴取者等のずれを
求める第3の回路とを備えたことを特徴とする。
[0009] The calculating means may include first frequency detecting means for detecting an energy amount of the amplitude modulated signal having a first frequency, and an energy amount of the amplitude modulated signal having a second frequency. Second frequency detecting means for detecting, third frequency detecting means for detecting the energy amount of the reflected vibration having the first frequency, and detecting the energy amount of the reflected vibration having the second frequency. A fourth frequency detecting means, a first circuit for obtaining a difference between the energy amounts detected by the first frequency detecting means and the third frequency detecting means, and obtaining a first reflectance from the difference; Calculating a difference between the energy amounts detected by the second frequency detecting means and the fourth frequency detecting means,
A second circuit for obtaining a second reflectance from the difference; obtaining a difference between the first reflectance and the second reflectance; and calculating a difference between the listener and the like with respect to a radiation axis of the acoustic vibration from the difference. And a third circuit for obtaining a shift.

【0010】[0010]

【発明の実施の形態】以下、本発明のスピーカ装置の実
施の形態について図面を参照して詳細に説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of a speaker device according to the present invention will be described below in detail with reference to the drawings.

【0011】図1は、本発明のスピーカ装置の実施の形
態の構成を示すブロック図である。
FIG. 1 is a block diagram showing a configuration of an embodiment of a speaker device according to the present invention.

【0012】本発明の実施の形態は、超直進性音響振動
放射回路10と、音響検出器20と、位置算出装置30
と、放射方向調整器40とから構成される。
The embodiment of the present invention includes a super-linear acoustic vibration radiation circuit 10, an acoustic detector 20, and a position calculating device 30.
And a radiation direction adjuster 40.

【0013】超直進性音響振動放射回路10は、音声信
号を出力する音声生成器11と、搬送波信号を出力する
高周波生成器12と、これらから出力された音声信号と
搬送波信号とが入力され、振幅変調して出力する振幅変
調器13と、出力された被振幅変調信号が入力され、十
分に増幅して出力する増幅器14と、増幅された被振幅
変調信号が入力され、音響振動として放射する電気音響
変換器15とから構成されるパラメトリックスピーカで
ある。
The super-straight acoustic vibration radiating circuit 10 receives a voice generator 11 for outputting a voice signal, a high frequency generator 12 for outputting a carrier signal, and a voice signal and a carrier signal output from these components. An amplitude modulator 13 that outputs an amplitude-modulated signal, an amplitude-modulated signal that is output is input, and an amplifier 14 that sufficiently amplifies and outputs the signal, and an amplified amplitude-modulated signal that is input and radiates as acoustic vibration. This is a parametric speaker including the electroacoustic transducer 15.

【0014】音響検出器20は、電気音響変換器15か
ら放射された音響振動の聴取者1で反射した反射振動を
検出し、位置算出装置30は、音響検出器20が検出し
た反射振動及び振幅変調波信号に基づき、聴取者1の方
向及び距離を算出する。尚、送受信位置を同一にするた
め、電気音響変換機15と音響検出器20とは超音波の
送受信が可能な同一の素子を使用すれば聴取者1の方向
及び距離の算出の精度が向上する。
The acoustic detector 20 detects the reflected vibration of the acoustic vibration radiated from the electroacoustic transducer 15 and reflected by the listener 1, and the position calculator 30 calculates the reflected vibration and the amplitude detected by the acoustic detector 20. The direction and distance of the listener 1 are calculated based on the modulated wave signal. In order to make the transmitting and receiving positions the same, if the electroacoustic transducer 15 and the acoustic detector 20 use the same element capable of transmitting and receiving ultrasonic waves, the accuracy of calculating the direction and the distance of the listener 1 is improved. .

【0015】図2に、位置算出装置30の構成を示す。
図2は、位置算出装置30の構成を示すブロック図であ
る。
FIG. 2 shows the configuration of the position calculating device 30.
FIG. 2 is a block diagram illustrating a configuration of the position calculation device 30.

【0016】図2を参照すると、位置算出装置30は、
計測部2と、制御部3とから構成される。
Referring to FIG. 2, the position calculating device 30 comprises:
It comprises a measuring unit 2 and a control unit 3.

【0017】計測部2には、増幅器14から、被振幅変
調信号が、音響検出器20から、反射振動が入力され
る。
The measuring section 2 receives the amplitude modulated signal from the amplifier 14 and the reflected vibration from the acoustic detector 20.

【0018】周波数検出器51及び53は、それぞれ周
波数A及び周波数Bの被振幅変調信号を検出する。周波
数検出器52及び54は、それぞれ周波数A及び周波数
Bの反射振動を検出する。尚、周波数検出器は、周波数
のエネルギー量を検出する装置である。
The frequency detectors 51 and 53 detect amplitude-modulated signals of frequency A and frequency B, respectively. The frequency detectors 52 and 54 detect the reflected vibration of the frequency A and the frequency B, respectively. Note that the frequency detector is a device that detects the amount of frequency energy.

【0019】差分回路55は、周波数検出器51及び5
2から得られた周波数エネルギーの差分を求め、この差
分から反射率を求める。差分回路56は、周波数検出器
53及び54から得られた周波数エネルギーの差分を求
め、この差分から反射率を求める。差分回路58は、差
分回路55及び56で求められた反射率の差分から、音
響振動の放射軸に対しての聴取者1のずれを算出する。
タイマカウンタ回路57は、周波数検出器53及び54
で検出する被振幅変調信号及び反射振動から放射する音
響振動に対しての反射振動の遅延時間を算出する。
The difference circuit 55 includes frequency detectors 51 and 5
2 is obtained, and the reflectance is obtained from the difference. The difference circuit 56 calculates the difference between the frequency energies obtained from the frequency detectors 53 and 54, and calculates the reflectance from the difference. The difference circuit 58 calculates the deviation of the listener 1 with respect to the radiation axis of the acoustic vibration from the difference between the reflectances obtained by the difference circuits 55 and 56.
The timer counter circuit 57 includes frequency detectors 53 and 54
Then, the delay time of the reflected vibration with respect to the amplitude-modulated signal to be detected and the acoustic vibration radiated from the reflected vibration is calculated.

【0020】また、計測部2が検出する周波数A及び周
波数Bのうちの1つを搬送波信号と同じ周波数とするこ
とにより、上記の図2を用いて説明した計測部2では4
つ備えている周波数検出器を1つ省き3つにすることが
できる。図3を参照して説明する。図3は計測部2の他の
例の構成を示すブロック図である。
Further, by setting one of the frequency A and the frequency B detected by the measuring unit 2 to the same frequency as the carrier signal, the measuring unit 2 described with reference to FIG.
One frequency detector can be omitted and three can be provided. This will be described with reference to FIG. FIG. 3 is a block diagram showing a configuration of another example of the measuring unit 2. As shown in FIG.

【0021】この例では、計測部2には、周波数Aの被
振幅変調信号が増幅器14から、周波数Bの搬送波信号
が高周波生成器12から、音響検出器20から、検出さ
れた反射振動の周波数A及び周波数Bの反射振動が入力
される。尚、周波数Aと周波数Bとは異なる周波数であ
る。
In this example, the amplitude modulated signal having the frequency A is supplied from the amplifier 14, the carrier signal having the frequency B is supplied from the high frequency generator 12, and the acoustic detector 20 is supplied to the measuring section 2. A and frequency B reflected vibrations are input. Note that the frequency A and the frequency B are different frequencies.

【0022】図3を参照すると、周波数検出器61は、
周波数Aの被振幅変調信号を検出し、周波数検出器62
は、周波数Aの反射振動を検出し、周波数検出器63
は、周波数Bの反射振動を検出する。
Referring to FIG. 3, the frequency detector 61 includes:
The amplitude modulated signal having the frequency A is detected, and the frequency
Detects the reflected vibration of the frequency A,
Detects the reflected vibration of frequency B.

【0023】差分回路64は、周波数検出器61及び6
2から得られた周波数エネルギーの差分を求め、その差
分から反射率を求める。差分回路65には、搬送波信号
(周波数B)が入力され、周波数検出器63から得られ
た周波数エネルギーとの差分を求め、その差分から反射
率を求める。差分回路67は、差分回路64及び65で
求められた反射率の差分を求め、その差分から、音響振
動の放射軸に対しての聴取者1のずれを算出する。タイ
マカウンタ回路67は、入力される搬送波信号及び周波
数検出器63で検出する反射波から放射振動に対しての
反射振動の遅延時間を算出する。搬送波信号は出力が一
定であるため、常に安定した聴取者1の位置検出が可能
である。
The difference circuit 64 includes frequency detectors 61 and 6
2 is obtained, and the reflectance is obtained from the difference. The carrier signal (frequency B) is input to the difference circuit 65, and a difference from the frequency energy obtained from the frequency detector 63 is obtained, and a reflectance is obtained from the difference. The difference circuit 67 obtains a difference between the reflectances obtained by the difference circuits 64 and 65, and calculates a deviation of the listener 1 with respect to the radiation axis of the acoustic vibration from the difference. The timer counter circuit 67 calculates the delay time of the reflected vibration with respect to the radiated vibration from the input carrier wave signal and the reflected wave detected by the frequency detector 63. Since the output of the carrier signal is constant, the position of the listener 1 can always be stably detected.

【0024】さらに、計測部2が検出する周波数A及び
周波数Bをそれぞれ搬送波信号の周波数及び搬送波信号
の2次高調波の周波数とすることにより、周波数検出器
を2つにすることができる。図4を参照して説明する。
図4は計測部2の他の例の構成を示すブロック図であ
る。
Further, by setting the frequency A and the frequency B detected by the measuring unit 2 to the frequency of the carrier signal and the frequency of the second harmonic of the carrier signal, respectively, it is possible to use two frequency detectors. This will be described with reference to FIG.
FIG. 4 is a block diagram illustrating a configuration of another example of the measuring unit 2.

【0025】図4を参照すると、周波数検出器71は、
周波数Aの反射振動を検出し、周波数検出器73は、周
波数Bの反射振動を検出する。差分回路74には、搬送
波信号(周波数A)が入力され、差分回路75には、分
周器72を介して搬送波信号の2次高調波(周波数B)
が入力される。以下の動作は、上記の例と同様である。
この例では、2次高調波が発生しやすいように回路を調
節する必要があるが、2つの周波数の出力を一定に保つ
ことができるため、さらに安定した聴取者1の位置検出
が可能となる。
Referring to FIG. 4, the frequency detector 71 includes:
The reflected vibration of the frequency A is detected, and the frequency detector 73 detects the reflected vibration of the frequency B. The carrier signal (frequency A) is input to the difference circuit 74, and the second harmonic (frequency B) of the carrier signal is input to the difference circuit 75 via the frequency divider 72.
Is entered. The following operation is the same as in the above example.
In this example, it is necessary to adjust the circuit so that the second harmonic is easily generated, but since the outputs of the two frequencies can be kept constant, the position of the listener 1 can be detected more stably. .

【0026】また、この分周器72を図5に示す位置に
配置することも可能である。
The frequency divider 72 can be arranged at the position shown in FIG.

【0027】図5を参照すると、図1で説明した本装置
の構成に加えて、振幅変調器13と増幅器14との間に
ミキサー16が設けられ、高周波生成器12とミキサー
16との間に分周器72が設けられている。高周波生成
器12から搬送波信号を入力された分周器72は、搬送
波信号を分周してミキサー16に出力する。
Referring to FIG. 5, in addition to the configuration of the present apparatus described with reference to FIG. 1, a mixer 16 is provided between the amplitude modulator 13 and the amplifier 14, and a mixer 16 is provided between the high-frequency generator 12 and the mixer 16. A frequency divider 72 is provided. The frequency divider 72 to which the carrier signal has been input from the high frequency generator 12 divides the frequency of the carrier signal and outputs it to the mixer 16.

【0028】つまり、予め分周器72により基準信号を
生成して、送信波に加えておくことにより、2次高調波
を発生させずに同様の安定した位置検出を可能とする。
That is, by generating a reference signal in advance by the frequency divider 72 and adding it to the transmission wave, the same stable position detection can be performed without generating a second harmonic.

【0029】制御部3は、位置算出器30で算出された
聴取者1の音響振動の放射軸に対してのずれを基にし
て、放射方向調整器40に、本装置の向きを変化させ、
音響振動が聴取者11に放射されるように指示する。ま
た、算出された聴取者1との距離に基づき、増幅器14
に、適切な音量となる増幅率にするよう指示する。
The control unit 3 causes the radiation direction adjuster 40 to change the direction of the apparatus based on the deviation of the acoustic vibration of the listener 1 with respect to the radiation axis calculated by the position calculator 30,
Instruct the listener 11 to emit acoustic vibrations. Further, based on the calculated distance to the listener 1, the amplifier 14
Is instructed to set the gain to an appropriate volume.

【0030】次に、本実施の形態の動作を説明する。こ
の説明に用いる位置算出装置は図2に示す位置算出装置
である。尚、高周波生成器12から出力される搬送波信
号の周波数は40KHzであり、電気音響変換器15には
超音波トランスジューサを用い、動作電圧は60Vであ
るとする。
Next, the operation of this embodiment will be described. The position calculation device used in this description is the position calculation device shown in FIG. It is assumed that the frequency of the carrier signal output from the high frequency generator 12 is 40 KHz, the ultrasonic transducer is used for the electroacoustic transducer 15, and the operating voltage is 60V.

【0031】音声生成器11から出力される音声信号
と、高周波生成器12から出力される40KHzの搬送波
信号とは、振幅変調器13により振幅変調され、増幅器
14により、電気音響変換器15が駆動可能な電圧の6
0Vまで増幅され、電気音響変換器15は、増幅された
被振幅変調信号を音響振動に変換し、空中に放射する。
The audio signal output from the audio generator 11 and the 40 KHz carrier signal output from the high frequency generator 12 are amplitude-modulated by the amplitude modulator 13, and the electro-acoustic converter 15 is driven by the amplifier 14. 6 of possible voltage
The electro-acoustic transducer 15 is amplified to 0 V, converts the amplified amplitude-modulated signal into acoustic vibration, and radiates it into the air.

【0032】空気中に放射された音響振動は、空気の非
線形特性により歪み波となり、空気中を伝搬中に元の可
聴音に復調される。この復調された可聴音は、元の超音
波の超指向特性を持つ。
The acoustic vibration radiated into the air becomes a distorted wave due to the non-linear characteristics of the air, and is demodulated to the original audible sound while propagating through the air. This demodulated audible sound has the super directional characteristics of the original ultrasonic wave.

【0033】今、位置算出装置30の周波数検出器51
及び52の検出周波数は30KHzに、周波数検出器53
及び54の検出周波数は50KHzに設定されているとす
る。尚、音声信号と搬送波信号とを振幅変調すると、搬
送波信号の周波数を中心にして対称の周波数成分を持つ
ようになるため、検出する30KHz及び50KHzの音響振
動の振幅変調前の音声信号は10KHzである。
Now, the frequency detector 51 of the position calculating device 30
And 52 have a detection frequency of 30 KHz and a frequency detector 53
And 54 are set to 50 KHz. When the audio signal and the carrier signal are amplitude-modulated, they have symmetrical frequency components centered on the frequency of the carrier signal. Therefore, the sound signal before the amplitude modulation of the 30 KHz and 50 KHz acoustic vibration to be detected is 10 KHz. is there.

【0034】周波数検出器51及び52は、それぞれ送
信波及び反射波の30KHzの信号を検出し、差分回路5
5によって反射率を算出する。同様に周波数検出器53
及び54は、それぞれ送信波と反射波の50KHzの信号
を検出し、差分回路56によって反射率を算出する。
The frequency detectors 51 and 52 detect 30 KHz signals of the transmitted wave and the reflected wave, respectively, and
5 is used to calculate the reflectance. Similarly, the frequency detector 53
And 54 detect a signal of 50 KHz of the transmitted wave and the reflected wave, respectively, and calculate the reflectance by the difference circuit 56.

【0035】空気中を伝搬する振動は、周波数が高くな
るほど直進性が増し、低くなるほど拡散する特性から、
低い周波数の場合には、対象物が振動の放射軸からずれ
ていても拡散した振動が反射する。この特性を利用し、
2つの周波数の反射率から、聴取者1の音響振動の放射
軸に対してのずれを算出する。さらに、タイマカウンタ
57によって、送信波に対する反射波の遅延時間から、
聴取者1との距離を算出する。
As for the vibration propagating in the air, the higher the frequency, the more the straightness increases, and the lower the frequency, the more the vibration spreads.
In the case of a low frequency, the diffused vibration is reflected even if the object is shifted from the radiation axis of the vibration. Utilizing this characteristic,
The deviation of the acoustic vibration of the listener 1 from the radiation axis is calculated from the reflectances of the two frequencies. Further, the timer counter 57 calculates the delay time of the reflected wave with respect to the transmitted wave from
The distance from the listener 1 is calculated.

【0036】ここで、聴取者1が放射軸に対して右にず
れたと仮定する。聴取者1が放射軸からずれることによ
り、差分回路55及び56から得られる反射率が減少す
る。この時、前述した低い周波数の振動ほど拡散する特
性から、差分回路55から得られる反射率の減少度は、
差分回路56から得られる反射率の減少度に比べて低く
なり、制御部は、聴取者1の放射軸に対してのずれを算
出することができる。尚、本装置を横に2台配置すれ
ば、2つの装置から算出されたずれの違いから聴取者1
の方角を算出することができる。すなわち聴取者が右へ
移動したことを算出する。
Here, it is assumed that the listener 1 is shifted to the right with respect to the radiation axis. As the listener 1 shifts from the radiation axis, the reflectance obtained from the difference circuits 55 and 56 decreases. At this time, from the characteristic that the lower the frequency of the vibration is, the lower the reflectance obtained from the difference circuit 55 is,
The control unit can calculate the deviation from the radiation axis of the listener 1 with respect to the degree of decrease in the reflectance obtained from the difference circuit 56. In addition, if two of this apparatus are arranged horizontally, the listener 1
Can be calculated. That is, it is calculated that the listener has moved to the right.

【0037】そして、上述した方法で算出した聴取者1
の放射軸からのずれを基に、制御部3は、放射方向調整
器40に本装置を聴取者1に向けるように指示する。
尚、本装置を横に2台配置すれば、聴取者の方角をも算
出することができ、1回の動作で本装置を聴取者1に向
けることができる。
The listener 1 calculated by the above method
The control unit 3 instructs the radiation direction adjuster 40 to point the apparatus toward the listener 1 based on the deviation from the radiation axis of the listener.
By arranging two apparatuses horizontally, the direction of the listener can be calculated, and the apparatus can be directed to the listener 1 by one operation.

【0038】次に、聴取者1が後方に動いたと仮定す
る。聴取者1が放射軸にいるため、差分回路55及び5
6から得られる反射率は殆ど変化しないが、本装置から
の距離が離れるため、タイマカウンタ57が計測する時
間が増す。
Next, assume that the listener 1 has moved backward. Since the listener 1 is on the radiation axis, the difference circuits 55 and 5
Although the reflectivity obtained from 6 hardly changes, the time measured by the timer counter 57 increases because the distance from the apparatus increases.

【0039】制御部は、このタイマカウンタ57が計測
する時間により、聴取者1が後方に移動したことを算出
する。さらに、遅延時間から聴取者1との距離を算出
し、距離に応じて適正な音量になるように増幅器14の
増幅率を変化させる。
The control unit calculates that the listener 1 has moved backward based on the time measured by the timer counter 57. Further, the distance to the listener 1 is calculated from the delay time, and the amplification factor of the amplifier 14 is changed so as to have an appropriate volume according to the distance.

【0040】[0040]

【発明の効果】本発明には、指向性の高いスピーカを常
に聴取者に向け、聴取者との距離にあわせて音量を調整
するため、聴取者が移動しても、聴取者のみに常に最適
な音量で音声を聴取させることができるという効果があ
る。
According to the present invention, since the speaker having high directivity is always directed to the listener and the volume is adjusted in accordance with the distance to the listener, the speaker is always optimal only for the listener even when the listener moves. There is an effect that the voice can be heard at an appropriate volume.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の実施の形態の構成を示すブロック図で
ある。
FIG. 1 is a block diagram showing a configuration of an embodiment of the present invention.

【図2】位置算出装置30の構成を示すブロック図であ
る。
FIG. 2 is a block diagram showing a configuration of a position calculating device 30.

【図3】計測部2の他の例の構成を示すブロック図であ
る。
FIG. 3 is a block diagram showing a configuration of another example of the measuring unit 2.

【図4】計測部2の他の例の構成を示すブロック図であ
る。
FIG. 4 is a block diagram showing a configuration of another example of the measuring unit 2.

【図5】分周器72を配置する位置を示すブロック図で
ある。
FIG. 5 is a block diagram showing positions where frequency dividers 72 are arranged.

【図6】パラメトリックスピーカの構成を示すブロック
図である。
FIG. 6 is a block diagram illustrating a configuration of a parametric speaker.

【符号の説明】[Explanation of symbols]

1:聴取者 2:計測部 3:制御部 10:超直進性音響振動放射回路 11:音声生成器 12:高周波生成器 13:振
幅変調器 14:増幅器 15:電気音響変換器 16:ミキ
サー 20:音響検出器 30:位置算出装置 40:放
射方向調整器 51〜54,61〜63,71,73:周波数検出器 55,56,58,64,65,67,74,75,7
7:差分回路 57,66,76:タイマカウンタ 72,分周器
1: listener 2: measuring unit 3: control unit 10: super-linear acoustic vibration emission circuit 11: sound generator 12: high-frequency generator 13: amplitude modulator 14: amplifier 15: electro-acoustic converter 16: mixer 20: Acoustic detector 30: Position calculation device 40: Radiation direction adjuster 51 to 54, 61 to 63, 71, 73: Frequency detector 55, 56, 58, 64, 65, 67, 74, 75, 7
7: Difference circuit 57, 66, 76: Timer counter 72, frequency divider

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】 音声信号を出力する音声信号出力手段
と、予め定められた周波数を持つ高周波信号を出力する
高周波出力手段と、前記音声信号と前記高周波信号とを
振幅変調し被振幅変調信号を出力する振幅変調手段と、
該被振幅変調信号を増幅する増幅手段と、増幅された前
記被振幅変調信号を超音波の音響振動として放射する放
射手段とから構成されるパラメトリックスピーカと、 放射された前記音響振動の前方の聴取者等から反射する
反射振動を検出する検出手段と、 前記パラメトリックスピーカ内で生成される信号と検出
された前記反射振動とが入力され、前記パラメトリック
スピーカ内で生成される信号と前記反射振動とから前記
音響振動の放射軸に対する前記聴取者等のずれを算出す
る算出手段と、 前記算出手段の算出の結果により、前記音響振動の放射
方向を前記聴取者等の方向に向かせる指示手段とを備え
たことを特徴とする自動方位決めスピーカ装置。
1. An audio signal output means for outputting an audio signal, a high frequency output means for outputting a high frequency signal having a predetermined frequency, and an amplitude modulation signal for modulating the amplitude of the audio signal and the high frequency signal. Amplitude modulation means for outputting;
A parametric speaker comprising amplification means for amplifying the amplitude-modulated signal, and radiating means for radiating the amplified amplitude-modulated signal as ultrasonic acoustic vibration; and listening in front of the radiated acoustic vibration. Detecting means for detecting a reflected vibration reflected from a person or the like, a signal generated in the parametric speaker and the detected reflected vibration are input, and a signal generated in the parametric speaker and the reflected vibration Calculating means for calculating the deviation of the listener or the like from the radiation axis of the acoustic vibration; andinstruction means for directing the radiation direction of the acoustic vibration to the direction of the listener or the like based on the calculation result of the calculating means. An automatic azimuth determination speaker device, characterized in that:
【請求項2】 前記算出手段は、入力された前記反射振
動及び前記パラメトリックスピーカ内で生成される信号
のそれぞれから予め定められた第1の周波数及び第2の
周波数のエネルギー量を検出することを特徴とする請求
項1記載の自動方位決めスピーカ装置。
2. The method according to claim 1, wherein the calculating unit detects energy amounts of predetermined first and second frequencies from the input reflected vibration and a signal generated in the parametric speaker. The speaker device according to claim 1, wherein
【請求項3】 前記算出手段は、 第1の周波数をもつ前記被振幅変調信号のエネルギー量
を検出する第1の周波数検出手段と、第2の周波数をも
つ前記被振幅変調信号のエネルギー量を検出する第2の
周波数検出手段と、前記第1の周波数をもつ前記反射振
動のエネルギー量を検出する第3の周波数検出手段と、
前記第2の周波数をもつ前記反射振動のエネルギー量を
検出する第4の周波数検出手段と、 前記第1の周波数検出手段及び前記前記第3の周波数検
出手段で検出されたエネルギー量の差分を求め、該差分
から第1の反射率を求める第1の回路と、前記第2の周
波数検出手段及び前記前記第4の周波数検出手段で検出
されたエネルギー量の差分を求め、該差分から第2の反
射率を求める第2の回路と、前記第1の反射率と前記第
2の反射率との差分を求め、該差分から記音響振動の放
射軸に対する前記聴取者等のずれを求める第3の回路と
を備えたことを特徴とする請求項1記載の自動方位決め
スピーカ装置。
3. The calculating means comprises: first frequency detecting means for detecting an energy amount of the amplitude-modulated signal having a first frequency; and an energy amount of the amplitude-modulated signal having a second frequency. A second frequency detecting means for detecting, a third frequency detecting means for detecting an energy amount of the reflected vibration having the first frequency,
A fourth frequency detecting means for detecting an energy amount of the reflected vibration having the second frequency; and a difference between the energy amounts detected by the first frequency detecting means and the third frequency detecting means. A first circuit for obtaining a first reflectance from the difference, a difference between energy amounts detected by the second frequency detecting means and the fourth frequency detecting means, and a second circuit for obtaining a second reflectance from the difference. A second circuit for calculating a reflectance, a third circuit for calculating a difference between the first reflectance and the second reflectance, and calculating a shift of the listener or the like with respect to a radiation axis of the acoustic vibration from the difference; The speaker according to claim 1, further comprising a circuit.
【請求項4】 前記算出手段は、 第1の周波数をもつ前記被振幅変調信号のエネルギー量
を検出する第1の周波数検出手段と、前記第1の周波数
をもつ前記反射振動のエネルギー量を検出する第2の周
波数検出手段と、第2の周波数をもつ前記反射振動のエ
ネルギー量を検出する第3の周波数検出手段と、 前記第1の周波数検出手段及び前記前記第2の周波数検
出手段で検出されたエネルギー量の差分を求め、該差分
から第1の反射率を求める第1の回路と、前記第3の周
波数検出手段で検出されたエネルギー量と前記第2の周
波数の高周波信号のエネルギー量との差分を求め、該差
分から第2の反射率を求める第2の回路と、前記第1の
反射率と前記第2の反射率との差分を求め、該差分から
前記音響振動の放射軸に対する前記聴取者等のずれを求
める第3の回路とを備えたことを特徴とする請求項1記
載の自動方位決めスピーカ装置。
4. The calculating means comprises: first frequency detecting means for detecting an energy amount of the amplitude-modulated signal having a first frequency; and detecting an energy amount of the reflected vibration having the first frequency. A second frequency detecting means for detecting the energy of the reflected vibration having a second frequency; a third frequency detecting means for detecting an energy amount of the reflected vibration having a second frequency; A first circuit for obtaining a difference between the obtained energy amounts, and obtaining a first reflectance from the difference; an energy amount detected by the third frequency detecting means; and an energy amount of a high-frequency signal of the second frequency. And a second circuit for obtaining a second reflectance from the difference, obtaining a difference between the first reflectance and the second reflectance, and obtaining a radiation axis of the acoustic vibration from the difference. Of the above listeners Automatic orientation determined speaker apparatus according to claim 1, characterized in that a third circuit for obtaining a record.
【請求項5】 前記算出手段は、 第1の周波数をもつ前記反射振動のエネルギー量を検出
する第1の周波数検出手段と、第2の周波数をもつ前記
反射振動のエネルギー量を検出する第2の周波数検出手
段と、 前記第1の周波数検出手段で検出されたエネルギー量と
前記第1の周波数の高周波信号のエネルギー量との差分
を求め、該差分から第1の反射率を求める第1の回路
と、前記第2の周波数検出手段で検出されたエネルギー
量と前記高周波信号を分周器を用いて生成した前記第2
の周波数を持つ高周波信号とのエネルギー量との差分を
求め、該差分から第2の反射率を求める第2の回路と、
前記第1の反射率と前記第2の反射率との差分を求め、
該差分から前記音響振動の放射軸に対する前記聴取者等
のずれを求める第3の回路とを備えたことを特徴とする
請求項1記載の自動方位決めスピーカ装置。
5. The calculating means comprises: first frequency detecting means for detecting an energy amount of the reflected vibration having a first frequency; and a second frequency detecting means for detecting an energy amount of the reflected vibration having a second frequency. A difference between the amount of energy detected by the first frequency detecting unit and the amount of energy of the high-frequency signal of the first frequency, and a first reflectance is calculated from the difference. A circuit, and an energy amount detected by the second frequency detection means and the second frequency signal generated by using a frequency divider.
A second circuit for calculating a difference between the energy amount and a high-frequency signal having a frequency of
Calculating a difference between the first reflectance and the second reflectance;
3. The automatic azimuth deciding speaker device according to claim 1, further comprising: a third circuit for calculating a deviation of the listener or the like from the radiation axis of the acoustic vibration from the difference.
【請求項6】 前記算出手段は、さらに前記聴取者等と
前記算出手段との距離を算出し、前記指示手段は、さら
に、前記増幅器に前記距離に対応する増幅率にする指示
をすることを特徴とする請求項1記載の自動方位決めス
ピーカ装置。
6. The calculating means further calculates a distance between the listener and the like and the calculating means, and the instructing means further instructs the amplifier to set an amplification factor corresponding to the distance. The speaker device according to claim 1, wherein
【請求項7】 前記算出手段は、 第1の周波数をもつ前記被振幅変調信号のエネルギー量
を検出する第1の周波数検出手段と、第2の周波数をも
つ前記被振幅変調信号のエネルギー量を検出する第2の
周波数検出手段と、前記第1の周波数をもつ前記反射振
動のエネルギー量を検出する第3の周波数検出手段と、
前記第2の周波数をもつ前記反射振動のエネルギー量を
検出する第4の周波数検出手段と、 前記第1の周波数検出手段及び前記前記第3の周波数検
出手段で検出されたエネルギー量の差分を求め、該差分
から第1の反射率を求める第1の回路と、前記第2の周
波数検出手段及び前記前記第4の周波数検出手段で検出
されたエネルギー量の差分を求め、該差分から第2の反
射率を求める第2の回路と、前記第1の反射率と前記第
2の反射率との差分を求め、該差分から記音響振動の放
射軸に対する前記聴取者等のずれを求める第3の回路
と、 前記放射される音響振動に対する前記反射振動の遅延を
求め、該遅延から前記聴取者等と前記算出手段との距離
を算出する手段とを備えたことを特徴とする請求項6記
載の自動方位決めスピーカ装置。
7. The calculating means includes: first frequency detecting means for detecting an energy amount of the amplitude-modulated signal having a first frequency; and an energy amount of the amplitude-modulated signal having a second frequency. A second frequency detecting means for detecting, a third frequency detecting means for detecting an energy amount of the reflected vibration having the first frequency,
A fourth frequency detecting means for detecting an energy amount of the reflected vibration having the second frequency; and a difference between the energy amounts detected by the first frequency detecting means and the third frequency detecting means. A first circuit for obtaining a first reflectance from the difference, a difference between energy amounts detected by the second frequency detecting means and the fourth frequency detecting means, and a second circuit for obtaining a second reflectance from the difference. A second circuit for calculating a reflectance, a third circuit for calculating a difference between the first reflectance and the second reflectance, and calculating a shift of the listener or the like with respect to a radiation axis of the acoustic vibration from the difference; 7. The circuit according to claim 6, further comprising: a circuit; and a means for obtaining a delay of the reflected vibration with respect to the emitted acoustic vibration, and calculating a distance between the listener or the like and the calculation means from the delay. Automatic orientation speaker system.
JP16686998A 1998-06-15 1998-06-15 Automatic orientation speaker system Expired - Fee Related JP3264249B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP16686998A JP3264249B2 (en) 1998-06-15 1998-06-15 Automatic orientation speaker system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP16686998A JP3264249B2 (en) 1998-06-15 1998-06-15 Automatic orientation speaker system

Publications (2)

Publication Number Publication Date
JP2000004500A true JP2000004500A (en) 2000-01-07
JP3264249B2 JP3264249B2 (en) 2002-03-11

Family

ID=15839151

Family Applications (1)

Application Number Title Priority Date Filing Date
JP16686998A Expired - Fee Related JP3264249B2 (en) 1998-06-15 1998-06-15 Automatic orientation speaker system

Country Status (1)

Country Link
JP (1) JP3264249B2 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003111200A (en) * 2001-09-28 2003-04-11 Sony Corp Sound processing device
JP2004515091A (en) * 2000-07-11 2004-05-20 アメリカン・テクノロジー・コーポレーション Power amplifier for parametric speakers
JP2005351897A (en) * 2004-06-09 2005-12-22 Pohang Eng College Measuring device of ultrasonic distance in air using parametric array, and its method
JP2011188445A (en) * 2010-03-11 2011-09-22 Mitsubishi Electric Information Systems Corp Sound output apparatus
US8041049B2 (en) * 2006-04-18 2011-10-18 Seiko Epson Corporation Method for controlling output from ultrasonic speaker and ultrasonic speaker system
JP2012029107A (en) * 2010-07-23 2012-02-09 Nec Casio Mobile Communications Ltd Electronic apparatus
WO2012060041A1 (en) * 2010-11-01 2012-05-10 日本電気株式会社 Oscillator and portable device
JP2013531785A (en) * 2010-05-20 2013-08-08 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Distance estimation using speech signals
CN112689212A (en) * 2020-12-18 2021-04-20 宁波向往智能科技有限公司 Intelligent household sound box structure
CN115499738A (en) * 2022-09-21 2022-12-20 电子科技大学 Programmable parametric array loudspeaker with safety device

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004515091A (en) * 2000-07-11 2004-05-20 アメリカン・テクノロジー・コーポレーション Power amplifier for parametric speakers
JP2003111200A (en) * 2001-09-28 2003-04-11 Sony Corp Sound processing device
JP2005351897A (en) * 2004-06-09 2005-12-22 Pohang Eng College Measuring device of ultrasonic distance in air using parametric array, and its method
US8041049B2 (en) * 2006-04-18 2011-10-18 Seiko Epson Corporation Method for controlling output from ultrasonic speaker and ultrasonic speaker system
JP2011188445A (en) * 2010-03-11 2011-09-22 Mitsubishi Electric Information Systems Corp Sound output apparatus
JP2013531785A (en) * 2010-05-20 2013-08-08 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Distance estimation using speech signals
JP2012029107A (en) * 2010-07-23 2012-02-09 Nec Casio Mobile Communications Ltd Electronic apparatus
WO2012060041A1 (en) * 2010-11-01 2012-05-10 日本電気株式会社 Oscillator and portable device
CN103155590A (en) * 2010-11-01 2013-06-12 日本电气株式会社 Oscillator and portable device
JPWO2012060041A1 (en) * 2010-11-01 2014-05-12 日本電気株式会社 Oscillator and portable device
CN103155590B (en) * 2010-11-01 2016-05-04 日本电气株式会社 Oscillator device and portable equipment
EP2637418A4 (en) * 2010-11-01 2017-01-25 Nec Corporation Oscillator and portable device
CN112689212A (en) * 2020-12-18 2021-04-20 宁波向往智能科技有限公司 Intelligent household sound box structure
CN112689212B (en) * 2020-12-18 2022-07-15 宁波向往智能科技有限公司 Intelligent household sound box structure
CN115499738A (en) * 2022-09-21 2022-12-20 电子科技大学 Programmable parametric array loudspeaker with safety device

Also Published As

Publication number Publication date
JP3264249B2 (en) 2002-03-11

Similar Documents

Publication Publication Date Title
US6556687B1 (en) Super-directional loudspeaker using ultrasonic wave
US6445804B1 (en) Ultra-directional speaker system and speaker system drive method
US20110188672A1 (en) Acoustic reproduction device
JP2000036993A (en) Ultra-directivity speaker equipment
US20050195985A1 (en) Focused parametric array
JP3264249B2 (en) Automatic orientation speaker system
JP2006081117A (en) Super-directional speaker system
US20170188157A1 (en) Microphone with specific audible area using ultrasound wave
US7690792B2 (en) Projector and method of controlling ultrasonic speaker in projector
JP2014143480A (en) Ultra-directional speaker
JP2005318094A (en) Resonance frequency detecting method, resonance frequency selecting method, and resonance frequency detecting device
US7909466B2 (en) Project equipped with ultrasonic speaker, and method for displaying sound reproduction range in projector
JPH11145915A (en) Directional ultrasonic loud-speaker device
JPS58155377A (en) Position detector
JPH03264883A (en) Information apparatus
JP3947649B2 (en) Method and apparatus for generating audible sonic waves by ultrasonic synthesis
KR20010091117A (en) A volume control mechanism for audio
JPH07190717A (en) Distance measuring device and audio equipment employing the device
JP2005236420A (en) Modulator for super-directivity speaker
JP2021048520A (en) Sound field generating device and sound field generating method
JP2022029141A (en) Sound transmission device and silencing device
JPH11304912A (en) Echo hearing equipment
JPH08160060A (en) Method for controlling gain of reception wave in measuring device using ultrasonic wave
JPH11285092A (en) Parametric speaker
JPS628699A (en) Directional controlled loudspeaking system

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20011127

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071228

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081228

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091228

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091228

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101228

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101228

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111228

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111228

Year of fee payment: 10

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111228

Year of fee payment: 10

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111228

Year of fee payment: 10

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111228

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121228

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121228

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121228

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131228

Year of fee payment: 12

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees