JP2009188858A - Audio output device, audio output method, and program - Google Patents
Audio output device, audio output method, and program Download PDFInfo
- Publication number
- JP2009188858A JP2009188858A JP2008028445A JP2008028445A JP2009188858A JP 2009188858 A JP2009188858 A JP 2009188858A JP 2008028445 A JP2008028445 A JP 2008028445A JP 2008028445 A JP2008028445 A JP 2008028445A JP 2009188858 A JP2009188858 A JP 2009188858A
- Authority
- JP
- Japan
- Prior art keywords
- noise
- microphone
- unit
- signal
- audio signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 71
- 230000005236 sound signal Effects 0.000 claims abstract description 78
- 230000008569 process Effects 0.000 claims description 63
- 238000012545 processing Methods 0.000 claims description 47
- 230000008859 change Effects 0.000 claims description 41
- 230000005674 electromagnetic induction Effects 0.000 claims description 31
- 239000002131 composite material Substances 0.000 claims description 19
- 238000012935 Averaging Methods 0.000 claims description 14
- 238000009825 accumulation Methods 0.000 claims description 5
- 239000011368 organic material Substances 0.000 claims description 4
- 239000000126 substance Substances 0.000 claims description 3
- 238000002595 magnetic resonance imaging Methods 0.000 description 48
- 230000005291 magnetic effect Effects 0.000 description 20
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 6
- 239000004065 semiconductor Substances 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 239000003302 ferromagnetic material Substances 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 230000035945 sensitivity Effects 0.000 description 4
- 230000002457 bidirectional effect Effects 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 239000004743 Polypropylene Substances 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 229910052451 lead zirconate titanate Inorganic materials 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 229920001155 polypropylene Polymers 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 239000011347 resin Substances 0.000 description 2
- 229920005989 resin Polymers 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- BZHJMEDXRYGGRV-UHFFFAOYSA-N Vinyl chloride Chemical compound ClC=C BZHJMEDXRYGGRV-UHFFFAOYSA-N 0.000 description 1
- 238000009412 basement excavation Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007177 brain activity Effects 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- HFGPZNIAWCZYJU-UHFFFAOYSA-N lead zirconate titanate Chemical compound [O-2].[O-2].[O-2].[O-2].[O-2].[Ti+4].[Zr+4].[Pb+2] HFGPZNIAWCZYJU-UHFFFAOYSA-N 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000013421 nuclear magnetic resonance imaging Methods 0.000 description 1
- 238000001208 nuclear magnetic resonance pulse sequence Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- -1 polypropylene Polymers 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Landscapes
- Magnetic Resonance Imaging Apparatus (AREA)
- Piezo-Electric Transducers For Audible Bands (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
【課題】発話者の発声した音声に重畳されたノイズを除去することができる音声出力装置を提供する。
【解決手段】発話者の発声した音声を取得する第1のマイク11と、ノイズを取得する第2のマイク12と、第1のマイク11が取得した音声信号と、第2のマイク12が取得したノイズ信号とを用いて、音声信号からノイズ信号をキャンセルするノイズキャンセル部13と、ノイズキャンセル部13によってノイズのキャンセルされた音声信号を出力する出力部14と、を備える。
【選択図】図1An audio output device capable of removing noise superimposed on speech uttered by a speaker is provided.
A first microphone 11 that acquires voice uttered by a speaker, a second microphone 12 that acquires noise, a voice signal acquired by the first microphone 11, and a second microphone 12 acquire the voice. The noise cancellation unit 13 cancels the noise signal from the audio signal using the noise signal thus generated, and the output unit 14 outputs the audio signal whose noise is canceled by the noise cancellation unit 13.
[Selection] Figure 1
Description
本発明は、発話者の発話した音声のノイズをキャンセルして出力する音声出力装置等に関する。 The present invention relates to an audio output device that cancels and outputs noise in speech uttered by a speaker.
従来、騒音下でも発話者が発話した音声を明瞭にとらえることができるようにするための技術開発が行われてきている。例えば、MRI装置(核磁気共鳴撮像装置)において、被験者との通話を明瞭に行うため、リミッタと、ローパスフィルタとを用いて被験者の声をオペレータが明瞭に聞き取れるようにする通信システムが開発されている(例えば、特許文献1参照)。 2. Description of the Related Art Conventionally, technology development has been performed so that speech uttered by a speaker can be clearly captured even under noisy conditions. For example, in an MRI apparatus (nuclear magnetic resonance imaging apparatus), a communication system has been developed that allows an operator to clearly hear the voice of a subject using a limiter and a low-pass filter in order to clearly communicate with the subject. (For example, refer to Patent Document 1).
また、掘削作業などでの通話に用いられるマスクであって、工事の騒音等をキャンセルすることができるマイクを内蔵している防護マスクが開発されている(例えば、特許文献2参照)。
上記特許文献1で開示されている技術は、簡易な構成であるというメリットはあるものの、極めて大きな騒音のレベルを被験者の音声レベルに制限することができるのみであって、被験者の音声に重畳されているノイズをキャンセルすることはできないという問題がある。すなわち、被験者の音声を高S/Nで明瞭化するのに有効でないという問題がある。 Although the technique disclosed in Patent Document 1 has a merit that it has a simple configuration, it can only limit an extremely loud noise level to the voice level of the subject and is superimposed on the voice of the subject. There is a problem that it is not possible to cancel the noise. That is, there is a problem that it is not effective for clarifying the voice of the subject with high S / N.
また、上記特許文献2で開示されている技術は、マスク内部にマイクを備えており、それによって、発話者の発話した音声に重畳されている、マスク外からのノイズをキャンセルすることができるものである。したがって、発話者がマスクをしない環境では、使用することができなくなるという問題がある。特に、マスク内で発声された音声を増強し、マスク外からのノイズをキャンセルするように構成されているため、そのマスクを発話者が装着していない場合には、発話者の音声に対するノイズキャンセルが適切に行われなくなり、例えば、発話者の発声した音声自体も、ノイズと同様にキャンセルされてしまう可能性もありうる。また、MRI環境下で発生する電磁誘導ノイズを適切に除去できないという問題もある。 In addition, the technique disclosed in Patent Document 2 includes a microphone inside the mask, thereby canceling noise from outside the mask that is superimposed on the voice spoken by the speaker. It is. Therefore, there is a problem that it cannot be used in an environment where the speaker does not mask. Especially, it is configured to enhance the voice uttered in the mask and cancel the noise from outside the mask, so if the speaker is not wearing the mask, noise cancellation for the voice of the speaker May not be performed properly, and for example, the voice itself spoken by the speaker may be canceled in the same manner as noise. There is also a problem that electromagnetic induction noise generated in an MRI environment cannot be removed appropriately.
MRI装置は医用画像診断装置の一つで、有用性が高く、最近では、脳研究にもよく使われている。しかしながら、強力なパルス状電流を磁場コイルなどに流して、磁場を急激に変化させて撮像するため、電磁誘導ノイズや騒音ノイズ、振動ノイズ、その振動に起因する電磁誘導ノイズなどを含むノイズを発生する。このため、実際の高磁場のMRI装置が稼動しているときでは、100dB(高架線のガード下の騒音レベル)を超えるような強烈な騒音が発生し、検査者と被験者(患者)との通話が不可能となる。MRI装置を用いた脳研究においては、被験者の発声した音声を記録することも必要とされるが、MRI装置が稼動中では被験者の声を明瞭に記録することができなかった。 The MRI apparatus is one of medical image diagnosis apparatuses, and is highly useful. Recently, the MRI apparatus is often used for brain research. However, since a strong pulsed current is passed through the magnetic field coil and the magnetic field is changed abruptly to capture images, electromagnetic induction noise, noise noise, vibration noise, and noise including electromagnetic induction noise caused by the vibration are generated. To do. For this reason, when an actual high magnetic field MRI apparatus is in operation, intense noise exceeding 100 dB (noise level under the overhead wire guard) is generated, and a call between the inspector and the subject (patient) occurs. Is impossible. In the brain research using the MRI apparatus, it is necessary to record the voice uttered by the subject. However, when the MRI apparatus is in operation, the voice of the subject cannot be clearly recorded.
また、MRI装置下で、画像をみながら、手術を行う装置の開発がなされている(例えば、文献「森川他、日磁医誌,第21巻,2号,p.41−47,2001年」等を参照のこと)。高騒音のMRI装置下で、手術がおこなわれる場合は、術者間での手術中の通話が非常に困難となっていた。これまで、騒音の大きいMRI装置の監視下で行われる手術中において術者間での通話用として有用性の高い通話装置はなかった。 Further, an apparatus for performing an operation while viewing an image under an MRI apparatus has been developed (for example, a document “Morikawa et al., Journal of Magnetics of Japan, Vol. 21, No. 2, p. 41-47, 2001). Etc.)). When an operation is performed under a high-noise MRI apparatus, it is very difficult to make a call between the operators during the operation. Up to now, there has been no communication device that is highly useful for calls between surgeons during surgery performed under the supervision of a noisy MRI device.
本発明は、上記問題点を解決するためになされたものであり、その一つの目的は、発話者の発声した音声に重畳されているノイズを効果的に除去することができる音声出力装置等を提供することである。 The present invention has been made to solve the above-described problems, and one object of the present invention is to provide an audio output device and the like that can effectively remove noise superimposed on the voice uttered by the speaker. Is to provide.
また、本発明の他の目的は、MRI等に起因する電磁誘導ノイズ等を効果的に除去することができる音声出力装置等を提供することである。 Another object of the present invention is to provide an audio output device that can effectively remove electromagnetic induction noise caused by MRI or the like.
上記目的の少なくともいずれかを達成するため、本発明による音声出力装置は、発話者の発声した音声を取得する第1のマイクと、ノイズを取得する第2のマイクと、前記第1のマイクが取得した音声信号と、前記第2のマイクが取得したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルするノイズキャンセル部と、前記ノイズキャンセル部によってノイズのキャンセルされた音声信号を出力する出力部と、を備えたものである。 In order to achieve at least one of the above objects, an audio output device according to the present invention includes a first microphone that acquires a voice uttered by a speaker, a second microphone that acquires noise, and the first microphone. Using the acquired audio signal and the noise signal acquired by the second microphone, a noise cancellation unit that cancels the noise signal from the audio signal, and an audio signal in which noise is canceled by the noise cancellation unit are output And an output unit.
このような構成により、第1のマイクに混入したノイズを、第2のマイクで取得したノイズ信号によって除去することができ、ノイズを低減した音声信号を得ることができる。したがって、例えば、通話や音声の記録の際に、その障害となるノイズを除去することができ、良好な通話システムや、良好な音声記録システム等を実現することができるようになる。 With such a configuration, noise mixed in the first microphone can be removed by the noise signal acquired by the second microphone, and an audio signal with reduced noise can be obtained. Therefore, for example, noise that becomes an obstacle during the call or voice recording can be removed, and a good call system, a good voice recording system, and the like can be realized.
また、本発明による音声出力装置では、前記第2のマイクは、前記第1のマイクと同様の電気的特性を有し、空気の振動をとらえないダミーマイクであってもよい。 In the audio output device according to the present invention, the second microphone may be a dummy microphone that has the same electrical characteristics as the first microphone and does not capture air vibrations.
このような構成により、第1のマイクに混入したノイズ、例えば、電磁誘導ノイズ等を、ダミーマイクでとらえることができ、そのダミーマイクでとらえたノイズを用いることによって、ノイズを低減した音声信号を得ることができる。 With such a configuration, noise mixed in the first microphone, for example, electromagnetic induction noise can be captured by the dummy microphone, and by using the noise captured by the dummy microphone, an audio signal with reduced noise can be obtained. Obtainable.
また、本発明による音声出力装置では、前記第2のマイクが取得するノイズは、電磁誘導ノイズ、高騒音ノイズ、振動ノイズ、振動に起因する電磁誘導ノイズのいずれか1以上のノイズであってもよい。 In the audio output device according to the present invention, the noise acquired by the second microphone may be any one or more of electromagnetic induction noise, high noise noise, vibration noise, and electromagnetic induction noise caused by vibration. Good.
このような構成により、例えば、電磁誘導ノイズ、高騒音ノイズ、振動ノイズ、振動に起因する電磁誘導ノイズ等を除去することができうる。 With such a configuration, for example, electromagnetic induction noise, high noise noise, vibration noise, electromagnetic induction noise caused by vibration, and the like can be removed.
また、本発明による音声出力装置では、前記電磁誘導ノイズ、前記高騒音ノイズ、前記振動ノイズ、前記振動に起因する電磁誘導ノイズは、MRI装置に起因するものであってもよい。 In the audio output device according to the present invention, the electromagnetic induction noise, the high noise noise, the vibration noise, and the electromagnetic induction noise caused by the vibration may be caused by an MRI apparatus.
このような構成により、MRI環境下において、MRI装置に起因する電磁誘導ノイズ等を低減することができる。 With such a configuration, it is possible to reduce electromagnetic induction noise and the like caused by the MRI apparatus in an MRI environment.
また、本発明による音声出力装置では、前記第1のマイクが取得した音声信号を蓄積する音声信号蓄積部と、前記第2のマイクが取得したノイズ信号を蓄積するノイズ信号蓄積部と、をさらに備え、前記ノイズキャンセル部は、前記音声信号蓄積部が蓄積した音声信号と、前記ノイズ信号蓄積部が蓄積したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルしてもよい。 In the audio output device according to the present invention, the audio signal storage unit that stores the audio signal acquired by the first microphone and the noise signal storage unit that stores the noise signal acquired by the second microphone are further provided. The noise cancellation unit may cancel the noise signal from the audio signal using the audio signal accumulated by the audio signal accumulation unit and the noise signal accumulated by the noise signal accumulation unit.
このような構成により、あらかじめノイズキャンセル処理等の処理のされていないデータを蓄積することができるため、各種の設定を変更しながら、何度もノイズキャンセル処理等を行うことができ、ノイズ除去の効率が高く、被験者の音声の変化が少ない設定でのノイズ除去の処理を行いうることになる。 With such a configuration, it is possible to accumulate data that has not been processed in advance such as noise cancellation processing, so it is possible to perform noise cancellation processing, etc. many times while changing various settings, and noise removal processing. It is possible to perform noise removal processing at a setting with high efficiency and little change in the voice of the subject.
また、本発明による音声出力装置では、前記第1のマイクは双指向性のものであり、前記第2のマイクが空気の振動をとらえるものである場合に、当該第2のマイクは双指向性のものであってもよい。
このような構成により、マイクが双指向性であるため、騒音の影響を低減することができる。
In the audio output device according to the present invention, the first microphone is bi-directional, and when the second microphone captures air vibration, the second microphone is bi-directional. It may be.
With such a configuration, since the microphone is bidirectional, the influence of noise can be reduced.
また、本発明による音声出力装置では、前記第1のマイクの形状は、発話者の口の形状に合うものであってもよい。
このような構成により、出力の対象となる音声を効率よく取得できうることになりうる。
In the audio output device according to the present invention, the shape of the first microphone may match the shape of the mouth of the speaker.
With such a configuration, it is possible to efficiently acquire the voice to be output.
また、本発明による音声出力装置では、前記第1のマイク、及び前記第2のマイクは、圧電体素子が有機物中に配置された複合圧電体により構成されたものであってもよい。 In the audio output device according to the present invention, the first microphone and the second microphone may be composed of a composite piezoelectric body in which a piezoelectric element is disposed in an organic substance.
このような構成により、用途に適した任意の大きさや形状のマイクを実現できるようになる。その結果として、ノイズ除去の効率の高い音声出力装置を実現できうる。 With such a configuration, a microphone having an arbitrary size and shape suitable for the application can be realized. As a result, an audio output device with high noise removal efficiency can be realized.
また、本発明による音声出力装置では、前記圧電体素子は、分極されていてもよい。 In the audio output device according to the present invention, the piezoelectric element may be polarized.
また、本発明による音声出力装置では、前記ダミーマイクは、圧電体素子が有機物中に配置された複合圧電体により構成されたものであり、当該複合圧電体は、分極されていなくてもよい。 In the audio output device according to the present invention, the dummy microphone is configured by a composite piezoelectric body in which a piezoelectric element is disposed in an organic material, and the composite piezoelectric body may not be polarized.
また、本発明による音声出力装置では、平均化処理で用いるサンプル数を示すサンプル数情報が記憶されるサンプル数情報記憶部と、前記ノイズキャンセル部によるノイズキャンセル処理の前、あるいは、前後に音声信号及びノイズ信号に対して、または、ノイズキャンセル処理の後に音声信号のみに対して、前記サンプル数情報の示すサンプル数で平均化処理を行う平均処理部と、をさらに備えていてもよい。 In the audio output device according to the present invention, the sample number information storage unit storing the sample number information indicating the number of samples used in the averaging process, and the audio signal before or after the noise cancellation process by the noise cancellation unit And an average processing unit that performs an averaging process with the number of samples indicated by the number-of-samples information for the noise signal or only for the audio signal after the noise cancellation process.
このような構成により、ノイズキャンセル処理と共に、平均化処理も併用することによって、さらに高S/Nで音声信号を出力することができるようになる。 With such a configuration, it is possible to output an audio signal at a higher S / N by using the averaging process together with the noise cancellation process.
また、本発明による音声出力装置では、サンプル数を変更する旨の情報である変更情報を受け付ける変更情報受付部と、前記変更情報受付部が受け付けた変更情報に応じて前記サンプル数情報を変更する変更部と、をさらに備えていてもよい。 In the audio output device according to the present invention, a change information receiving unit that receives change information that is information indicating that the number of samples is changed, and the sample number information is changed according to the change information received by the change information receiving unit. And a changing unit.
このような構成により、高S/Nとなるように、適宜、サンプル数情報を変更することができるようになる。 With such a configuration, the number-of-samples information can be appropriately changed so as to obtain a high S / N.
本発明による音声出力装置等によれば、発話者の発声した音声に重畳されているノイズをキャンセルすることができる。 According to the voice output device or the like according to the present invention, noise superimposed on the voice uttered by the speaker can be canceled.
以下、本発明による音声出力装置について、実施の形態を用いて説明する。なお、以下の実施の形態において、同じ符号を付した構成要素及びステップは同一または相当するものであり、再度の説明を省略することがある。 Hereinafter, an audio output device according to the present invention will be described using embodiments. In the following embodiments, components and steps denoted by the same reference numerals are the same or equivalent, and repetitive description may be omitted.
(実施の形態1)
本発明の実施の形態1による音声出力装置について、図面を参照しながら説明する。本実地の形態による音声出力装置は、発話者の発声した音声に重畳されているノイズをキャンセルするものである。
(Embodiment 1)
An audio output device according to Embodiment 1 of the present invention will be described with reference to the drawings. The voice output device according to the present embodiment cancels noise superimposed on the voice uttered by the speaker.
図1は、本実施の形態による音声出力装置1の構成を示すブロック図である。本実施の形態による音声出力装置1は、第1のマイク11と、第2のマイク12と、ノイズキャンセル部13と、出力部14と、サンプル数情報記憶部15と、平均処理部16と、変更情報受付部17と、変更部18とを備える。 FIG. 1 is a block diagram showing a configuration of an audio output device 1 according to the present embodiment. The audio output device 1 according to the present embodiment includes a first microphone 11, a second microphone 12, a noise cancellation unit 13, an output unit 14, a sample number information storage unit 15, an average processing unit 16, A change information receiving unit 17 and a change unit 18 are provided.
第1のマイク11は、発話者の発声した音声を取得して音声信号に変換する。なお、第1のマイク11は、発話者の発声した音声以外のノイズも取得してしまうものである。したがって、第1のマイク11から得られる音声信号には、ノイズの信号も含まれることになる。第1のマイク11は、例えば、図2で示されるように、枠31と、その枠31によって周辺部が固定されている複合圧電体32とから構成されるものであってもよい。本実施の形態による音声出力装置1がMRIで用いられる場合には、枠31は、磁場の中におかれるため、強磁性体(例えば、鉄など)ではないもの、例えば、樹脂やセラミックなどからなるものが好ましい。樹脂は、例えば、ポリプロピレン(PP)や、塩化ビニル等であってもよい。この枠31は、床や壁、MRI装置等に対して直接的あるいは間接的に固定されることも可能である。また、複合圧電体32は、スピーカやマイクなどの音響機器を構成することができるものである。その複合圧電体32は、圧電体素子が有機物中に配置されたものであり、強磁性体を含まない非磁性のものであるため、MRIで用いるのに好適である。図3は、複合圧電体の構造を示す図である。複合圧電体60は、例えば、有機物61に配置された多数のPZT61から構成される。PZT61は、チタン酸ジルコン酸鉛からなる圧電素子である。なお、複合圧電体32については、すでに公知であり、詳細な説明を省略する。複合圧電体については、例えば、特開昭63−4799等に記載されている。また、圧電体素子は、分極されていることが好適である。また、その分極方向が圧電体素子に明示されていてもよい。分極方向が圧電体素子に明示されていることによって、第1のマイク11を容易に構成することができるようになる。また、本実施の形態による音声出力装置1がMRI以外で用いられる場合には、第1のマイク11は、このような構成に限定されるものではなく、強磁性体を用いたマイク、例えば、ダイナミックマイクや、コンデンサマイク等であってもよい。 The first microphone 11 acquires the voice uttered by the speaker and converts it into a voice signal. Note that the first microphone 11 also acquires noise other than the voice uttered by the speaker. Therefore, the audio signal obtained from the first microphone 11 includes a noise signal. For example, as shown in FIG. 2, the first microphone 11 may include a frame 31 and a composite piezoelectric body 32 having a peripheral portion fixed by the frame 31. When the audio output device 1 according to the present embodiment is used in MRI, the frame 31 is placed in a magnetic field, and therefore is not made of a ferromagnetic material (for example, iron), such as resin or ceramic. Is preferred. The resin may be, for example, polypropylene (PP) or vinyl chloride. The frame 31 can be fixed directly or indirectly to a floor, a wall, an MRI apparatus or the like. The composite piezoelectric body 32 can constitute an acoustic device such as a speaker or a microphone. The composite piezoelectric body 32 is suitable for use in MRI because a piezoelectric element is disposed in an organic material and is non-magnetic without containing a ferromagnetic material. FIG. 3 is a diagram showing the structure of the composite piezoelectric body. The composite piezoelectric body 60 is composed of, for example, a large number of PZTs 61 arranged on the organic material 61. PZT 61 is a piezoelectric element made of lead zirconate titanate. The composite piezoelectric body 32 is already known and will not be described in detail. The composite piezoelectric material is described in, for example, JP-A-63-4799. The piezoelectric element is preferably polarized. Further, the polarization direction may be clearly shown on the piezoelectric element. Since the polarization direction is clearly indicated on the piezoelectric element, the first microphone 11 can be easily configured. When the audio output device 1 according to the present embodiment is used other than MRI, the first microphone 11 is not limited to such a configuration, and a microphone using a ferromagnetic material, for example, A dynamic microphone, a condenser microphone, or the like may be used.
また、第1のマイク11の形状は、発話者の口の形状に合うものであることが好適である。発話者の口の形状に合うものとは、発話者の発声した音声を効果的にとらえることができる形状であり、例えば、図2で示されるように、発話者の口の位置が中心となるように円弧形状を有する帯状のもの(円筒面形状のもの)であってもよく、パラボラアンテナのような放物曲面状のもの(この場合には、発話者の口の位置が放物曲面の焦点となることが好適である)であってもよく、半球面状のもの(この場合には、発話者の口の位置が球面の中心となることが好適である)であってもよく、楕円面状のものであってもよい。なお、発話者の発声した音声を効果的にとらえることができるのであれば、その他の形状であってもよいことは言うまでもない。また、第1のマイク11は、発話者の発声した音声を効果的にとらえることができる大きさであることが好適である。また、第1のマイク11は、その使用時に発話者の口元に近い位置に配置されることが好適である。発話者の発声した音声を効果的に取得することができるようにするためである。 Further, it is preferable that the shape of the first microphone 11 matches the shape of the mouth of the speaker. The shape that matches the shape of the speaker's mouth is a shape that can effectively capture the voice uttered by the speaker. For example, as shown in FIG. 2, the position of the mouth of the speaker is the center. In this case, it may be a belt having a circular arc shape (cylindrical surface), or a parabolic curved surface such as a parabolic antenna (in this case, the position of the speaker's mouth is a parabolic curved surface). It may be a focal point), hemispherical (in this case, the position of the mouth of the speaker is preferably the center of the sphere), An elliptical surface may be used. Needless to say, other shapes may be used as long as the voice uttered by the speaker can be effectively captured. Moreover, it is preferable that the 1st microphone 11 is a magnitude | size which can catch the audio | voice which the speaker uttered effectively. Further, the first microphone 11 is preferably arranged at a position close to the mouth of the speaker when used. This is because the voice uttered by the speaker can be acquired effectively.
また、第1のマイク11は、図4で示されるように、双指向性のものであってもよい。例えば、本実施の形態による音声出力装置1がMRIで用いられる場合に、MRIでは、ガントリーと呼ばれる、撮影時に人体を格納する円筒状容器の内壁から容器の中心に向かうように騒音が発生し、また逆方向に反射音が発生するが、第1のマイク11が双指向性であることによって、騒音に対する感度を低下させることが可能となる。図4は、双指向性のマイクの側面図を示す。被験者の口元に装着された第1のマイク11に対し、ガントリーの径方向に進行するMRIの騒音は、図に示すように、第1のマイク11の側面から入ってくる。これにより、第1のマイク11が双指向性であれば、第1のマイク11の全面と裏面から入ってきた騒音が打ち消しあう形となるため、騒音に対する感度が低下することになる。 Further, the first microphone 11 may be bi-directional as shown in FIG. For example, when the audio output device 1 according to the present embodiment is used in MRI, in MRI, noise is generated from the inner wall of a cylindrical container that stores a human body at the time of photographing, which is called a gantry, toward the center of the container. Moreover, although reflected sound is generated in the reverse direction, the sensitivity to noise can be reduced because the first microphone 11 is bidirectional. FIG. 4 shows a side view of a bidirectional microphone. MRI noise traveling in the radial direction of the gantry enters the first microphone 11 attached to the subject's mouth from the side of the first microphone 11 as shown in the figure. As a result, if the first microphone 11 is bi-directional, noise entering from the entire surface and the back surface of the first microphone 11 cancels out, so that the sensitivity to noise decreases.
第2のマイク12は、ノイズを取得して、信号に変換する。その信号のことをノイズ信号と呼ぶことにする。第2のマイク12は、第1のマイク11と同様に、空気の振動をとらえるもの、すなわち、音を検出することができるものであってもよく、あるいは、第1のマイク11と同様の電気的特性を有し、空気の振動をとらえないダミーマイクであってもよい。ここで、電気的特性は、例えば、静電容量であってもよく、あるいは、周波数1kHz付近での電気インピーダンスであってもよい。同様の電気的特性とは、電気的特性が一致することであってもよく、あるいは、電気的特性が近いことであってもよい。例えば、両者の電気的特性の違いが、いずれかの電気的特性の±15%以下である場合に、両者の電気的特性が近いと考えてもよい。また、第2のマイク12は、第1のマイク11に近接して配置されることが好適である。近接するとは、互いのマイク位置が20mm以内であり、さらには5mm以内であることが望ましい。さらに、第1のマイク11、及び第2のマイク12に複合圧電体を利用した場合には、扁平な構造が可能となるため、近接度をより簡単に高めることができる利点がある。第2のマイク12がダミーマイクである場合でも、第2のマイク12は、電磁誘導ノイズ、振動ノイズ、振動に起因する電磁誘導ノイズのいずれか1以上のノイズを取得することができうる。それらの電磁誘導ノイズ、振動ノイズ、振動に起因する電磁誘導ノイズは、MRIに起因するものであってもよく、あるいは、そうでなくてもよい。前者の場合には、ダミーマイクとしての第2のマイク12は、第1のマイク11に近接しているため、第1のマイク11に発生するMRIの誘導ノイズとほぼ同じMRI誘導ノイズをとらえることができる。ここで、MRI装置に起因するノイズについて説明する。MRI装置では、大きく分けて3種類の磁場、すなわち、静磁場、傾斜磁場、高周波磁場が用いられる。傾斜磁場、高周波磁場の印加手順はパルスシーケンスと呼ばれ、このときに強力な電流パルスが周期的に磁場コイルに流れるため、電磁誘導ノイズや、コイルに生じた振動により大きな騒音を発生する。このように、MRI装置には、電磁誘導ノイズ、騒音、振動、静磁場中での振動による誘導ノイズが発生することになる。また、第2のマイク12がダミーマイクである場合に、上記以外のノイズを取得してもよいことは言うまでもない。 The second microphone 12 acquires noise and converts it into a signal. This signal is called a noise signal. Similar to the first microphone 11, the second microphone 12 may be one that captures air vibrations, that is, one that can detect sound, or the same electric power as the first microphone 11. It may be a dummy microphone that has special characteristics and does not capture air vibrations. Here, the electrical characteristic may be, for example, an electrostatic capacity, or an electrical impedance in the vicinity of a frequency of 1 kHz. The similar electrical characteristics may be that the electrical characteristics match, or that the electrical characteristics are close. For example, when the difference between the two electrical characteristics is ± 15% or less of one of the electrical characteristics, it may be considered that the electrical characteristics of the two are close. The second microphone 12 is preferably arranged in the vicinity of the first microphone 11. To be close, the microphone positions of each other are preferably within 20 mm, and more preferably within 5 mm. Furthermore, when a composite piezoelectric body is used for the first microphone 11 and the second microphone 12, a flat structure is possible, and thus there is an advantage that the proximity can be increased more easily. Even when the second microphone 12 is a dummy microphone, the second microphone 12 can acquire any one or more of electromagnetic induction noise, vibration noise, and electromagnetic induction noise caused by vibration. Such electromagnetic induction noise, vibration noise, and electromagnetic induction noise caused by vibration may or may not be due to MRI. In the former case, the second microphone 12 as a dummy microphone is close to the first microphone 11, and therefore captures MRI induced noise that is substantially the same as the MRI induced noise generated in the first microphone 11. Can do. Here, noise caused by the MRI apparatus will be described. In the MRI apparatus, three types of magnetic fields, that is, a static magnetic field, a gradient magnetic field, and a high-frequency magnetic field are roughly used. The application procedure of the gradient magnetic field and the high-frequency magnetic field is called a pulse sequence. At this time, since a strong current pulse periodically flows in the magnetic field coil, a large noise is generated due to electromagnetic induction noise and vibration generated in the coil. Thus, electromagnetic induction noise, noise, vibration, and induction noise due to vibration in a static magnetic field are generated in the MRI apparatus. Needless to say, when the second microphone 12 is a dummy microphone, noise other than the above may be acquired.
第2のマイク12がダミーマイクでない場合には、第2のマイク12は、第1のマイク11と同様のものであってもよい。すなわち、第2のマイク12は、図2で示されるように、枠と複合圧電体によって構成されたものであってもよく、その複合圧電体に含まれる圧電体素子は分極されていてもよく、また、双指向性のものであってもよい。また、MRIで用いられない場合には、第2のマイク12は、強磁性体を用いたマイクであってもよい。ただし、第2のマイク12は、発話者の発声した音声をとらえないことが好適であるため、その形状は、発話者の口の形状に合っていてもよく、合っていなくてもよい。第2のマイクの形状が発話者の口の形状に合っている場合であっても、第2のマイク12は、発話者の発声した音声を取得しないことが好適である。なお、第2のマイク12は、第1のマイク11に近接して配置されることが好適であることは言うまでもない。また、マイクが枠と複合圧電体によって構成された場合には、目的とする形状で近接した構造をより簡単に作ることができる利点がある。したがって、この場合には、第2のマイク12は、第1のマイク11が取得するノイズとほぼ同じノイズをとらえることができるが、第1のマイク11が取得する発話者の発声した音声をとられることができない位置に配置されることが好適である。また、第2のマイク12がダミーマイクでない場合には、第2のマイク12は、電磁誘導ノイズ、高騒音ノイズ、振動ノイズ、振動に起因する電磁誘導ノイズのいずれか1以上のノイズを取得することができうる。 When the second microphone 12 is not a dummy microphone, the second microphone 12 may be the same as the first microphone 11. That is, as shown in FIG. 2, the second microphone 12 may be constituted by a frame and a composite piezoelectric material, and the piezoelectric element included in the composite piezoelectric material may be polarized. Also, it may be bi-directional. Further, when not used in MRI, the second microphone 12 may be a microphone using a ferromagnetic material. However, since it is preferable that the second microphone 12 does not capture the voice uttered by the speaker, the shape may or may not match the shape of the mouth of the speaker. Even when the shape of the second microphone matches the shape of the speaker's mouth, it is preferable that the second microphone 12 does not acquire the voice spoken by the speaker. Needless to say, the second microphone 12 is preferably arranged close to the first microphone 11. In addition, when the microphone is constituted by a frame and a composite piezoelectric body, there is an advantage that a structure close to the target shape can be easily made. Therefore, in this case, the second microphone 12 can catch almost the same noise as the noise acquired by the first microphone 11, but the voice uttered by the speaker acquired by the first microphone 11 is taken. It is preferable to be arranged at a position where it cannot be done. When the second microphone 12 is not a dummy microphone, the second microphone 12 acquires at least one of electromagnetic induction noise, high noise noise, vibration noise, and electromagnetic induction noise caused by vibration. Can be.
また、第2のマイク12がダミーマイクである場合に、そのダミーマイクは、圧電体素子が有機物中に配置された複合圧電体によって構成されてもよく、その圧電体素子は、分極されていてもよく、あるいは、分極されていなくてもよい。圧電体素子が分極されている場合であっても、ダミーマイクは、空気の振動をとらえない、すなわち、音を検出しない(あるいは、音を検出する機能がほとんどない)ものである。第2のマイク12がダミーマイクである場合には、音を検出する機能がないため、第2のマイク12は、第1のマイク11の近傍に配置されてもよく、あるいは、そうでなくてもよい。図5は、第2のマイク12がダミーマイクである場合の、第1のマイク11と、第2のマイク12と、発話者の口41の位置との位置関係の一例を示す図である。図5で示されるように、発話者の口41から出た音声42は、第1のマイク11によって取得される。一方、第2のマイク12は、第1のマイク11の裏側に配置されているが、空気の振動をとらえないものであるため、音声42そのものを取得することはない。一方、第2のマイク12は、第1のマイク11と同様の電気的特定を有するため、第1のマイク11がとらえた電磁誘導ノイズや、振動ノイズと同様のノイズを取得することができる。 When the second microphone 12 is a dummy microphone, the dummy microphone may be composed of a composite piezoelectric body in which a piezoelectric element is disposed in an organic substance, and the piezoelectric element is polarized. Or it may not be polarized. Even when the piezoelectric element is polarized, the dummy microphone does not catch air vibrations, that is, does not detect sound (or has almost no function for detecting sound). When the second microphone 12 is a dummy microphone, the second microphone 12 may be disposed in the vicinity of the first microphone 11 because there is no function for detecting sound. Also good. FIG. 5 is a diagram illustrating an example of a positional relationship among the first microphone 11, the second microphone 12, and the position of the speaker's mouth 41 when the second microphone 12 is a dummy microphone. As shown in FIG. 5, the voice 42 emitted from the speaker's mouth 41 is acquired by the first microphone 11. On the other hand, the second microphone 12 is arranged on the back side of the first microphone 11, but does not capture air vibrations, and therefore does not acquire the sound 42 itself. On the other hand, since the second microphone 12 has the same electrical specification as that of the first microphone 11, it is possible to acquire electromagnetic induction noise captured by the first microphone 11 and noise similar to vibration noise.
また、第1のマイク11と、第2のマイク12とは、一般に別々のマイクであるが、両者が一体のマイクとして構成されてもよい。 In addition, the first microphone 11 and the second microphone 12 are generally separate microphones, but both may be configured as an integrated microphone.
ノイズキャンセル部13は、第1のマイクが取得した音声信号と、第2のマイクが取得したノイズ信号とを用いて、音声信号からノイズ信号をキャンセルする。図6は、ノイズキャンセルの一例について説明するための図である。図6で示されるように、第1のマイク11が取得した音声信号と、第2のマイク12が取得したノイズ信号とを処理回路51が受け取り、ノイズ信号を反転させたものを音声信号に加算することによって、ノイズを除去することができる。なお、ノイズキャンセルの方法については後述する。 The noise cancellation unit 13 cancels the noise signal from the audio signal using the audio signal acquired by the first microphone and the noise signal acquired by the second microphone. FIG. 6 is a diagram for explaining an example of noise cancellation. As shown in FIG. 6, the processing circuit 51 receives the audio signal acquired by the first microphone 11 and the noise signal acquired by the second microphone 12, and adds the inverted signal to the audio signal. By doing so, noise can be removed. A noise canceling method will be described later.
なお、出力部14は、ノイズキャンセル部13によってノイズのキャンセルされた音声信号を出力する。ここで、この出力は、例えば、所定の機器への通信回線を介した送信でもよく、スピーカによる音声出力でもよく、記録媒体への蓄積でもよく、他の構成要素への引き渡しでもよい。なお、出力部14は、出力を行うデバイス(例えば、スピーカや通信デバイスなど)を含んでもよく、あるいは含まなくてもよい。また、出力部14は、ハードウェアによって実現されてもよく、あるいは、それらのデバイスを駆動するドライバ等のソフトウェアによって実現されてもよい。 The output unit 14 outputs the audio signal whose noise has been canceled by the noise canceling unit 13. Here, the output may be, for example, transmission via a communication line to a predetermined device, audio output by a speaker, accumulation in a recording medium, or delivery to another component. The output unit 14 may or may not include a device that performs output (for example, a speaker or a communication device). The output unit 14 may be realized by hardware, or may be realized by software such as a driver that drives these devices.
サンプル数情報記憶部15では、後述する平均処理部16によって行われる平均化処理で用いるサンプル数を示すサンプル数情報が記憶される。サンプル数情報記憶部15に情報が記憶される過程は問わない。例えば、記録媒体を介して情報がサンプル数情報記憶部15で記憶されるようになってもよく、通信回線等を介して送信された情報がサンプル数情報記憶部15で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された情報がサンプル数情報記憶部15で記憶されるようになってもよい。なお、サンプル数情報記憶部15で記憶されているサンプル数情報は、後述する変更部18によって変更されうるものである。サンプル数情報記憶部15での記憶は、RAM等における一時的な記憶でもよく、あるいは、長期的な記憶でもよい。サンプル数情報記憶部15は、所定の記録媒体(例えば、半導体メモリや磁気ディスク、光ディスクなど)によって実現されうる。 The sample number information storage unit 15 stores sample number information indicating the number of samples used in the averaging process performed by the average processing unit 16 described later. The process of storing information in the sample number information storage unit 15 does not matter. For example, information may be stored in the sample number information storage unit 15 via a recording medium, and information transmitted via a communication line or the like is stored in the sample number information storage unit 15. Alternatively, the information input via the input device may be stored in the sample number information storage unit 15. Note that the sample number information stored in the sample number information storage unit 15 can be changed by the changing unit 18 described later. Storage in the sample number information storage unit 15 may be temporary storage in a RAM or the like, or may be long-term storage. The sample number information storage unit 15 can be realized by a predetermined recording medium (for example, a semiconductor memory, a magnetic disk, an optical disk, etc.).
平均処理部16は、ノイズキャンセル部13によるノイズキャンセル処理の前、あるいは、前後に音声信号及びノイズ信号に対して、または、ノイズキャンセル処理の後に音声信号のみに対して、サンプル数情報の示すサンプル数で平均化処理を行う。平均化処理は、例えば、移動平均処理などで実現することができる。なお、本実施の形態では、平均化処理として、移動平均処理を行う場合について説明する。図7は、サンプル数情報の示すサンプル数が「4」である場合の移動平均処理を行う回路の一例を示す図である。各遅延素子によって、1サンプル時間ずつ遅延されることによって、4個の連続したサンプルが加算され、最後に1/4されることによって、4個の連続したサンプルの平均がとられることになる。この処理が、音声信号の新たなサンプルが入力されるごとに行われることになる。なお、ノイズ信号に対しても、同様にして移動平均処理が行われることになる。また、サンプル数情報の示すサンプル数に応じて、図7で示される処理が変更されることは言うまでもない。 The average processing unit 16 is a sample indicated by the number-of-samples information for the audio signal and the noise signal before or after the noise cancellation processing by the noise cancellation unit 13 or only for the audio signal after the noise cancellation processing. Averaging with numbers. The averaging process can be realized by a moving average process, for example. In the present embodiment, a case where a moving average process is performed as the averaging process will be described. FIG. 7 is a diagram illustrating an example of a circuit that performs moving average processing when the number of samples indicated by the number-of-samples information is “4”. By being delayed by one sample time by each delay element, four consecutive samples are added, and finally four quarters are averaged by being ¼. This process is performed every time a new sample of the audio signal is input. Note that the moving average process is similarly performed on the noise signal. It goes without saying that the processing shown in FIG. 7 is changed according to the number of samples indicated by the sample number information.
変更情報受付部17は、サンプル数を変更する旨の情報である変更情報を受け付ける。この変更情報は、変更後のサンプル数を示す情報であってもよく、サンプル数の差分を示す情報であってもよい。 The change information receiving unit 17 receives change information which is information indicating that the number of samples is changed. This change information may be information indicating the number of samples after the change or information indicating a difference in the number of samples.
変更情報受付部17は、例えば、入力デバイス(例えば、キーボードやマウス、タッチパネルなど)から入力された情報を受け付けてもよく、有線もしくは無線の通信回線を介して送信された情報を受信してもよく、所定の記録媒体(例えば、光ディスクや磁気ディスク、半導体メモリなど)から読み出された情報を受け付けてもよい。なお、変更情報受付部17は、受け付けを行うためのデバイス(例えば、モデムやネットワークカードなど)を含んでもよく、あるいは含まなくてもよい。また、変更情報受付部17は、ハードウェアによって実現されてもよく、あるいは所定のデバイスを駆動するドライバ等のソフトウェアによって実現されてもよい。 For example, the change information receiving unit 17 may receive information input from an input device (for example, a keyboard, a mouse, a touch panel, etc.), or may receive information transmitted via a wired or wireless communication line. Alternatively, information read from a predetermined recording medium (for example, an optical disk, a magnetic disk, a semiconductor memory, etc.) may be received. Note that the change information receiving unit 17 may or may not include a device (for example, a modem or a network card) for receiving. The change information receiving unit 17 may be realized by hardware, or may be realized by software such as a driver that drives a predetermined device.
変更部18は、変更情報受付部17が受け付けた変更情報に応じてサンプル数情報を変更する。変更情報が、変更後のサンプル数を示す情報である場合には、変更部18は、変更情報を用いて、サンプル数情報記憶部15で記憶されているサンプル数情報を上書きしてもよい。また、変更情報が、サンプル数の差分を示す情報である場合には、変更部18は、その変更情報と、サンプル数情報記憶部15で記憶されているサンプル数情報とを用いて、変更後のサンプル数情報を構成し、そのサンプル数情報で、サンプル数情報記憶部15で記憶されているサンプル数情報を上書きしてもよい。 The changing unit 18 changes the sample number information according to the change information received by the change information receiving unit 17. When the change information is information indicating the number of samples after the change, the change unit 18 may overwrite the sample number information stored in the sample number information storage unit 15 using the change information. When the change information is information indicating the difference in the number of samples, the change unit 18 uses the change information and the sample number information stored in the sample number information storage unit 15 to change the change information. The sample number information stored in the sample number information storage unit 15 may be overwritten with the sample number information.
なお、図1では明記していないが、音声出力装置1における各種の処理の際に、音声信号や、ノイズ信号が一時的に図示しない記録媒体等において記憶されていてもよい。 Although not explicitly shown in FIG. 1, an audio signal or a noise signal may be temporarily stored in a recording medium (not shown) during various processes in the audio output device 1.
また、図1では明記していないが、音声信号やノイズ信号は、適宜、A/D変換や、D/A変換されることによって、デジタル信号に変換されてもよく、また、アナログ信号に変換されてもよいことは言うまでもない。 Although not explicitly shown in FIG. 1, the audio signal and the noise signal may be converted into a digital signal by A / D conversion or D / A conversion as appropriate, or converted into an analog signal. It goes without saying that it may be done.
また、この音声出力装置1は、音声通信システムや、音声記録システムとしても用いることができるものであり、音声出力装置1がどのように用いられるのかは限定されるものではない。 The audio output device 1 can also be used as an audio communication system or an audio recording system, and the use of the audio output device 1 is not limited.
次に、本実施の形態による音声出力装置1の動作について、図8のフローチャートを用いて説明する。なお、この図8のフローチャートでは、ノイズキャンセルの前に移動平均処理を行う場合について説明する。 Next, the operation of the audio output device 1 according to the present embodiment will be described with reference to the flowchart of FIG. In the flowchart of FIG. 8, a case where the moving average process is performed before noise cancellation will be described.
(ステップS101)音声出力装置1の図示しない制御部は、ノイズキャンセルの処理を開始するかどうか判断する。そして、開始する場合には、ステップS102に進み、そうでない場合には、開始するまで、ステップS101の処理を繰り返す。図示しない制御部は、例えば、ユーザがノイズキャンセルの処理を開始する旨の指示を入力した場合に、ノイズキャンセルの処理を開始すると判断してもよく、あるいは、第1のマイク11や第2のマイク12から、所定のレベル以上の音声信号やノイズ信号が入力されてきた場合に、ノイズキャンセルの処理を開始すると判断してもよい。 (Step S101) The control unit (not shown) of the audio output device 1 determines whether or not to start the noise canceling process. And when starting, it progresses to step S102, and when that is not right, it repeats the process of step S101 until it starts. For example, when a user inputs an instruction to start noise cancellation processing, the control unit (not shown) may determine to start noise cancellation processing, or the first microphone 11 or the second microphone may be started. When an audio signal or noise signal having a predetermined level or higher is input from the microphone 12, it may be determined that the noise canceling process is started.
(ステップS102)平均処理部16は、第1のマイク11から音声信号を取り込み、第2のマイク12からノイズ信号を取り込む。 (Step S <b> 102) The average processing unit 16 takes in an audio signal from the first microphone 11 and takes in a noise signal from the second microphone 12.
(ステップS103)平均処理部16は、取り込んだ音声信号とノイズ信号に対して、サンプル数情報記憶部15で記憶されているサンプル数情報の示すサンプル数で移動平均処理を行い、その平均処理の結果である音声信号とノイズ信号をノイズキャンセル部13に渡す。 (Step S103) The average processing unit 16 performs moving average processing on the acquired audio signal and noise signal with the number of samples indicated by the sample number information stored in the sample number information storage unit 15, and performs the average processing. The resulting audio signal and noise signal are passed to the noise cancellation unit 13.
(ステップS104)ノイズキャンセル部13は、音声信号と、ノイズ信号とを用いて、音声信号からノイズ成分を除去する。 (Step S104) The noise cancellation unit 13 removes a noise component from the audio signal using the audio signal and the noise signal.
(ステップS105)出力部14は、ノイズキャンセル部13によってノイズのキャンセルされた音声信号を出力する。 (Step S <b> 105) The output unit 14 outputs the audio signal whose noise has been canceled by the noise canceling unit 13.
(ステップS106)図示しない制御部は、ノイズキャンセルの処理を終了するかどうか判断する。そして、終了する場合には、ステップS101に戻り、そうでない場合には、ステップS102に戻る。なお、図示しない制御部は、例えば、ユーザがノイズキャンセルの処理を終了する旨の指示を入力した場合に、ノイズキャンセルの処理を終了すると判断してもよく、あるいは、第1のマイク11や第2のマイク12から音声信号やノイズ信号が入力されなくなった場合や、出力部14の出力する音声信号がしきい値以下のレベルである時間があらかじめ決められている時間以上になった場合(この場合には、発話者があらかじめ決められている時間以上発話を行っていないことになる)に、ノイズキャンセルの処理を終了すると判断してもよい。
なお、図8のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
(Step S106) The control unit (not shown) determines whether or not to end the noise canceling process. If the process is to end, the process returns to step S101; otherwise, the process returns to step S102. Note that the control unit (not shown) may determine that the noise canceling process is to be ended, for example, when the user inputs an instruction to end the noise canceling process, or the first microphone 11 or the first microphone When an audio signal or noise signal is no longer input from the second microphone 12 or when the time during which the audio signal output from the output unit 14 is at a level equal to or lower than a threshold value exceeds a predetermined time (this In this case, it may be determined that the noise canceling process is finished when the speaker has not made a speech for a predetermined time).
In the flowchart of FIG. 8, the process ends when the power is turned off or the process is terminated.
また、前述のように、移動平均処理をノイズキャンセルの後に行ってもよい。その場合には、図8のフローチャートに代えて、図9のフローチャートで示されるように処理が実行されることになる。図9のフローチャートにおいて、ステップS201〜S203以外の処理は、図8のフローチャートと同様であり、その説明を省略する。 Further, as described above, the moving average process may be performed after noise cancellation. In that case, instead of the flowchart of FIG. 8, the processing is executed as shown in the flowchart of FIG. In the flowchart of FIG. 9, processes other than steps S201 to S203 are the same as those in the flowchart of FIG.
(ステップS201)ノイズキャンセル部13は、第1のマイク11から音声信号を取り込み、第2のマイク12からノイズ信号を取り込む。 (Step S <b> 201) The noise cancellation unit 13 takes in an audio signal from the first microphone 11 and takes in a noise signal from the second microphone 12.
(ステップS202)ノイズキャンセル部13は、音声信号と、ノイズ信号とを用いて、音声信号からノイズ成分を除去する。 (Step S202) The noise cancellation unit 13 removes a noise component from the audio signal using the audio signal and the noise signal.
(ステップS203)平均処理部16は、ノイズキャンセル後の音声信号に対して、サンプル数情報記憶部15で記憶されているサンプル数情報の示すサンプル数で移動平均処理を行い、その平均処理の結果である音声信号を出力部14に渡す。 (Step S203) The average processing unit 16 performs a moving average process on the audio signal after noise cancellation with the number of samples indicated by the sample number information stored in the sample number information storage unit 15, and the result of the average process Is delivered to the output unit 14.
また、前述のように、移動平均処理をノイズキャンセルの前後に行ってもよい。その場合には、図8、図9のフローチャートに代えて、図10のフローチャートで示されるように処理が実行されることになる。図10のフローチャートにおいて、ステップS301以外の処理は、図8のフローチャートと同様であり、その説明を省略する。 Further, as described above, the moving average process may be performed before and after the noise cancellation. In that case, instead of the flowcharts of FIGS. 8 and 9, the process is executed as shown in the flowchart of FIG. In the flowchart of FIG. 10, processes other than step S301 are the same as those of the flowchart of FIG.
(ステップS301)平均処理部16は、ノイズキャンセル後の音声信号に対して、サンプル数情報記憶部15で記憶されているサンプル数情報の示すサンプル数で移動平均処理を行い、その平均処理の結果である音声信号を出力部14に渡す。 (Step S301) The average processing unit 16 performs moving average processing on the audio signal after noise cancellation with the number of samples indicated by the sample number information stored in the sample number information storage unit 15, and the result of the average processing Is delivered to the output unit 14.
なお、変更情報受付部17と、変更部18との処理は、変更情報受付部17が変更情報を受け付けると、変更部18がサンプル数情報を変更するものであり、すでに公知の情報変更の方法であるため、その処理のフローチャートの説明は省略する。 The process of the change information receiving unit 17 and the change unit 18 is such that when the change information receiving unit 17 receives the change information, the change unit 18 changes the sample number information. Therefore, description of the flowchart of the process is omitted.
次に、本実施の形態による音声出力装置1の動作について、具体例を用いて説明する。この具体例では、MRIにおいて音声出力装置1が用いられる場合について説明する。その場合には、図11で示されるように、シールドされているMRI室には、第1のマイク11と、第2のマイク12のみが配置され、音声処理室に、その他の構成要素が配置されることになる。ノイズキャンセル部13や、出力部14等が、MRIに起因する強磁場の影響を受けないようにするためである。また、第2のマイク12は、ダミーマイクであるとする。 Next, the operation of the audio output device 1 according to the present embodiment will be described using a specific example. In this specific example, the case where the audio output device 1 is used in MRI will be described. In that case, as shown in FIG. 11, only the first microphone 11 and the second microphone 12 are arranged in the shielded MRI room, and other components are arranged in the sound processing room. Will be. This is to prevent the noise cancellation unit 13, the output unit 14, and the like from being affected by a strong magnetic field caused by MRI. Further, it is assumed that the second microphone 12 is a dummy microphone.
このような状況において、発話者としての被験者が発話すると、その音声を第1のマイク11が集音して取得し、音声信号に変換する。なお、第1のマイク11は、発話された音声をとらえるのが主たる目的であるが、結果として、MRI室で発生したノイズも一緒にとらえてしまうことになる。また、第2のマイク12は、MRIに起因する電磁誘導ノイズや、振動ノイズ等をとらえて、ノイズ信号に変換する。第2のマイク12は、ダミーマイクであるため、被験者の発話した音声をとらえることはない。 In such a situation, when a test subject as a speaker speaks, the first microphone 11 collects and acquires the voice and converts it into a voice signal. The primary purpose of the first microphone 11 is to capture spoken voice, but as a result, noise generated in the MRI room is also captured. Further, the second microphone 12 captures electromagnetic induction noise or vibration noise caused by MRI and converts it into a noise signal. Since the second microphone 12 is a dummy microphone, it does not capture the voice spoken by the subject.
その後、ノイズキャンセル部13によるノイズキャンセルや、平均処理部16による移動平均処理等が行われ、ノイズの抑圧された音声信号が出力部14によって出力されることになる。 Thereafter, noise cancellation by the noise cancellation unit 13, moving average processing by the average processing unit 16, and the like are performed, and an audio signal in which noise is suppressed is output by the output unit 14.
図12は、ノイズキャンセルを行った場合の波形1202と、行わない場合の波形1201との比較結果を示す図である。図12では、MRI実機の騒音を、MRI装置から離れた、電磁誘導ノイズの影響がない位置で録音し、その録音したMRI騒音をラジオカセットレコーダーで出力し、図1の装置にてキャンセル実験を行った例であり、発話者の発声した音声はとらえられていない。図12で示されるとおり、本実施の形態による音声出力装置1により良好なノイズキャンセル効果が得られたことが分かる。 FIG. 12 is a diagram illustrating a comparison result between the waveform 1202 when noise cancellation is performed and the waveform 1201 when noise cancellation is not performed. In FIG. 12, the noise of the actual MRI machine is recorded at a position away from the MRI apparatus and not affected by electromagnetic induction noise, and the recorded MRI noise is output by a radio cassette recorder, and a cancellation experiment is performed with the apparatus of FIG. In this example, the voice uttered by the speaker is not captured. As shown in FIG. 12, it can be seen that a good noise canceling effect is obtained by the audio output device 1 according to the present embodiment.
次に、本実施の形態で説明した平均化処理の効果について述べる。図15は、電磁誘導ノイズや振動の影響などが強い場での波形とそのキャンセル処理の実験結果を示す。原波形1501は、電磁誘導ノイズなどが強く混入したMRI騒音波形であり、ノイズキャンセル後の波形1502は原波形にキャンセル処理のみを施した結果である。この段階ではスパイク状のノイズが残っているが、ノイズキャンセル後に平均化処理ありの波形1503では、そのノイズが最終的に低減され、平均化処理の効果が示されている。 Next, the effect of the averaging process described in this embodiment will be described. FIG. 15 shows waveforms in a field where the influence of electromagnetic induction noise or vibration is strong, and the experimental results of the cancellation process. An original waveform 1501 is an MRI noise waveform in which electromagnetic induction noise or the like is strongly mixed, and a waveform 1502 after noise cancellation is a result of performing only a cancellation process on the original waveform. At this stage, spike-like noise remains, but in the waveform 1503 with the averaging process after the noise cancellation, the noise is finally reduced, and the effect of the averaging process is shown.
図13,図14は、MRI実機で、被験者がガントリー内に入り、MRI装置が稼働した状態で、被験者の音声を取り、図1の装置にてノイズキャンセルした例である。図13,図14は、発話者の発声した音声も含まれた信号に対するノイズキャンセル処理の結果を示す実験結果である。図13で示されるように、キャンセルされたノイズのレベルよりも、発話者の発声した音声のレベルの方が十分に大きいことが分かる。したがって、ノイズの除去された音声信号によって、発話者の発声した音声をクリアに聞き取ることができうる。 FIG. 13 and FIG. 14 show an example in which the subject enters the gantry and the subject's voice is taken and noise is canceled by the apparatus of FIG. FIG. 13 and FIG. 14 are experimental results showing the result of noise cancellation processing for a signal including the voice uttered by the speaker. As shown in FIG. 13, it can be seen that the level of the voice uttered by the speaker is sufficiently higher than the level of the canceled noise. Therefore, the voice uttered by the speaker can be clearly heard by the voice signal from which noise is removed.
なお、図14で示されるように、MRIのトリガー信号も、発話者の音声信号と同時に、計測、記録、表示できるようにしてもよい。また、各実験において、第2のマイク12として、ダミーマイクではなく、通常のマイクを用いた。 As shown in FIG. 14, the MRI trigger signal may be measured, recorded, and displayed simultaneously with the voice signal of the speaker. In each experiment, a normal microphone was used as the second microphone 12 instead of a dummy microphone.
以上、本実施の形態による音声出力装置1により、MRI室内の被験者の音声を高S/Nにて出力することができ、結果として検査者との自由な通話も可能となることが期待できる。 As described above, the voice output apparatus 1 according to the present embodiment can output the voice of the subject in the MRI room at a high S / N, and as a result, it can be expected that a free call with the examiner can be performed.
なお、本実施の形態による音声出力装置1は、MRIにおいて用いられるものでなくてもよい。例えば、騒音や電磁誘導ノイズ等の激しいところにおいて用いられてもよい。具体的には、本実施の形態による音声出力装置1は、発電所や空港、ヘリコプター、航空機、船舶、オートレース場等において用いられてもよい。 Note that the audio output device 1 according to the present embodiment may not be used in MRI. For example, it may be used in a place where noise or electromagnetic induction noise is intense. Specifically, the audio output device 1 according to the present embodiment may be used in a power plant, an airport, a helicopter, an aircraft, a ship, an auto racing field, and the like.
以上のように、本実施の形態による音声出力装置1によれば、第1のマイク11が取得した、発話者の発声した音声に重畳されているノイズを、第2のマイク12が取得したノイズ信号を用いて除去することができる。したがって、S/N(SN比)の高い、クリアな音声を出力できることになる。 As described above, according to the audio output device 1 according to the present embodiment, the noise that is acquired by the first microphone 11 and superimposed on the voice uttered by the speaker is acquired by the second microphone 12. It can be removed using the signal. Therefore, a clear voice with a high S / N (SN ratio) can be output.
従来のMRI環境下では、マイクに強烈なMRI誘導ノイズと、MRI騒音が入ると共に音声も入るため、マイクアンプが飽和しないようにするために、アンプのゲインを低く設定せざるを得なかった。そのため、所望の音声に対する感度が低くなっていた。一方、本実施の形態による音声出力装置1を用いることによって、MRI誘導ノイズをキャンセルすることができ、また、MRI騒音に対する低感度化を実現することができているため、マイクアンプゲインを音声を出力するのに適したレベルにまで上げることが可能となり、高S/N化を実現することができる。 Under the conventional MRI environment, strong MRI induction noise and MRI noise are input to the microphone, and sound is also input. Therefore, in order to prevent the microphone amplifier from being saturated, the gain of the amplifier has to be set low. For this reason, the sensitivity to the desired sound is low. On the other hand, by using the audio output device 1 according to the present embodiment, the MRI induced noise can be canceled and the sensitivity to the MRI noise can be reduced. It becomes possible to raise the level suitable for output, and high S / N can be realized.
また、MRIにおいて、被験者との対話をしながらMRI画像を撮影したい場合がある。そのような場合には、被験者があまり動かないことが求められるため、発声における被験者の動きを小さくしたい(すなわち、被験者があまり大きな声を出さなくてもよいようにしたい)という要請がある。そのような状況において、本実施の形態による音声出力装置1を用いることによって、被験者が大きな声を出さなくても、MRIの強烈なノイズ環境下における被験者の発声した音声からノイズを効率的に除去することができ、被験者のクリアな音声を取得することができるようになる。その結果として、例えば、会話中の被験者の脳活動計測を良好に行うことができる。 In MRI, there are cases where it is desired to take an MRI image while interacting with a subject. In such a case, since it is required that the subject does not move so much, there is a request that the movement of the subject in utterance should be reduced (that is, the subject need not make a loud voice). In such a situation, by using the voice output device 1 according to the present embodiment, noise can be efficiently removed from the voice uttered by the subject under the strong noise environment of MRI even if the subject does not speak loudly. And clear voice of the subject can be acquired. As a result, for example, it is possible to satisfactorily measure the brain activity of the subject during conversation.
また、ノイズキャンセル処理と共に、移動平均処理を併用することによって、電磁誘導ノイズや騒音に対するキャンセル処理効果を向上させることができ、発話者の発声した音声をさらに高S/Nで取得することができるようになる。 Further, by using the moving average process together with the noise cancellation process, the effect of the cancellation process for electromagnetic induction noise and noise can be improved, and the voice uttered by the speaker can be acquired at a higher S / N. It becomes like this.
なお、本実施の形態では、音声出力装置1がサンプル数情報記憶部15で記憶されているサンプル数情報を変更するために、変更情報受付部17と、変更部18とを備えた場合について説明したが、サンプル数情報を変更しない場合には、音声出力装置1は、変更情報受付部17と、変更部18とを備えていなくてもよい。 In the present embodiment, the case where the audio output device 1 includes the change information receiving unit 17 and the changing unit 18 in order to change the sample number information stored in the sample number information storage unit 15 will be described. However, if the sample number information is not changed, the audio output device 1 may not include the change information receiving unit 17 and the changing unit 18.
また、本実施の形態では、音声出力装置1が移動平均処理を行う場合について説明したが、音声出力装置1が移動平均処理を行わない場合には、音声出力装置1は、サンプル数情報記憶部15と、平均処理部16とを備えていなくてもよい。 Further, in the present embodiment, the case where the audio output device 1 performs the moving average process has been described. However, when the audio output device 1 does not perform the moving average process, the audio output device 1 includes the sample number information storage unit. 15 and the average processing unit 16 may not be provided.
また、本実施の形態では、第1のマイク11、及び第2のマイク12での音声信号やノイズ信号の取得から、ノイズのキャンセルされた音声信号の出力までを一連の処理として実行する場合について説明したが、第1のマイク11で取得した音声信号や、第2のマイク12で取得したノイズ信号を、まず蓄積し、その後に、ノイズキャンセルや、移動平均処理等の処理を実行するようにしてもよい。この場合には、ノイズキャンセル後の音声信号をモニタして、その音声信号の適否を判定した後に、適切でなければ、ノイズキャンセルや、移動平均処理の設定を変更しながら、繰り返してノイズキャンセル等の処理を実行することができるようになる。図16は、音声信号と、ノイズ信号とを蓄積する場合における音声出力装置2の構成を示すブロック図である。図16で示されるように、音声出力装置2は、第1のマイク11と、第2のマイク12と、ノイズキャンセル部13と、出力部14と、サンプル数情報記憶部15と、平均処理部16と、変更情報受付部17と、変更部18と、音声信号蓄積部21と、ノイズ信号蓄積部22とを備える。なお、音声信号蓄積部21と、ノイズ信号蓄積部22以外の構成及び動作は、上記説明と同様であり、その説明を省略する。 Further, in the present embodiment, a case where a series of processes from the acquisition of the audio signal and the noise signal by the first microphone 11 and the second microphone 12 to the output of the audio signal from which noise has been canceled is executed. As described above, the audio signal acquired by the first microphone 11 and the noise signal acquired by the second microphone 12 are first accumulated, and thereafter processing such as noise cancellation and moving average processing is executed. May be. In this case, after monitoring the audio signal after noise cancellation and determining the appropriateness of the audio signal, if it is not appropriate, repeatedly canceling noise while changing the setting of noise cancellation or moving average processing, etc. It becomes possible to execute the process. FIG. 16 is a block diagram illustrating a configuration of the audio output device 2 in a case where an audio signal and a noise signal are accumulated. As shown in FIG. 16, the audio output device 2 includes a first microphone 11, a second microphone 12, a noise cancellation unit 13, an output unit 14, a sample number information storage unit 15, and an average processing unit. 16, a change information receiving unit 17, a change unit 18, an audio signal storage unit 21, and a noise signal storage unit 22. The configurations and operations other than the audio signal storage unit 21 and the noise signal storage unit 22 are the same as those described above, and the description thereof is omitted.
音声信号蓄積部21は、第1のマイク11が取得した音声信号を所定の記録媒体に蓄積する。この記録媒体は、例えば、半導体メモリや、光ディスク、磁気ディスク等であり、音声信号蓄積部21が有していてもよく、あるいは音声信号蓄積部21の外部に存在してもよい。また、この記録媒体は、音声信号を一時的に記憶するものであってもよく、そうでなくてもよい。 The audio signal storage unit 21 stores the audio signal acquired by the first microphone 11 in a predetermined recording medium. This recording medium is, for example, a semiconductor memory, an optical disk, a magnetic disk, or the like, and may be included in the audio signal storage unit 21 or may exist outside the audio signal storage unit 21. Further, this recording medium may or may not temporarily store an audio signal.
ノイズ信号蓄積部22は、第2のマイク12が取得したノイズ信号を所定の記録媒体に蓄積する。この記録媒体は、例えば、半導体メモリや、光ディスク、磁気ディスク等であり、ノイズ信号蓄積部22が有していてもよく、あるいはノイズ信号蓄積部22の外部に存在してもよい。また、この記録媒体は、撮影画像を一時的に記憶するものであってもよく、そうでなくてもよい。 The noise signal storage unit 22 stores the noise signal acquired by the second microphone 12 in a predetermined recording medium. The recording medium is, for example, a semiconductor memory, an optical disk, a magnetic disk, or the like, and may be included in the noise signal storage unit 22 or may exist outside the noise signal storage unit 22. The recording medium may or may not temporarily store the captured image.
なお、第1のマイク11が取得した音声信号と、第2のマイク12が取得したノイズ信号とを記録媒体に蓄積する場合に、両者の時間的な対応をとることができるように蓄積しておくことが好適である。後のノイズキャンセル等の処理において、両者の同期をとることができるようにするためである。例えば、同一のタイムコードを付与して蓄積することによって、両者の時間的な対応をとることができるようにしてもよく、あるいは、同一ファイルの2個のトラックに音声信号とノイズ信号とを蓄積することによって、両者の時間的な対応をとることができるようにしてもよい。 In addition, when the audio signal acquired by the first microphone 11 and the noise signal acquired by the second microphone 12 are stored in the recording medium, they are stored so that the time correspondence between them can be taken. It is suitable to leave. This is because both can be synchronized in subsequent processing such as noise cancellation. For example, by assigning and accumulating the same time code, it may be possible to take a temporal correspondence between the two, or audio signals and noise signals are accumulated in two tracks of the same file. By doing so, you may be able to take time correspondence of both.
ここで、ノイズキャンセルについて簡単に説明しておく。ノイズキャンセルおいては、FIR(Finite Impulse Response)フィルタがよく用いられている。図17は、ノイズキャンセルについて説明するための図である。図17において、第1のマイク11の測定した音声信号をDk、第2のマイク12の測定したノイズ信号をUkとしている。Dkにも、ノイズが混入する。ノイズキャンセルでは、Dkに混入したノイズを、Ukを用いて精度よく推定し、キャンセルしなければならない。具体的には、デジタルフィルタ31が、Dkに混入したノイズの推定値Xkを出力する。そして、減算器32が、その推定値Xkを音声信号Dkから減算することによって、推定誤差Ekを得る。また、フィルタパラメータ計算処理部33は、推定誤差Ekを最小化するようにデジタルフィルタ31のパラメータを計算し、その計算したパラメータをデジタルフィルタ31に設定する。この推定誤差Ekが、ノイズキャンセル部13の出力となる。 Here, the noise cancellation will be briefly described. In noise cancellation, an FIR (Finite Impulse Response) filter is often used. FIG. 17 is a diagram for explaining noise cancellation. In FIG. 17, the audio signal measured by the first microphone 11 is Dk, and the noise signal measured by the second microphone 12 is Uk. Noise also enters Dk. In noise cancellation, noise mixed in Dk must be accurately estimated and canceled using Uk. Specifically, the digital filter 31 outputs an estimated value Xk of noise mixed in Dk. Then, the subtractor 32 subtracts the estimated value Xk from the audio signal Dk to obtain an estimated error Ek. The filter parameter calculation processing unit 33 calculates the parameters of the digital filter 31 so as to minimize the estimation error Ek, and sets the calculated parameters in the digital filter 31. This estimated error Ek becomes the output of the noise canceling unit 13.
FIRフィルタでは、次式のように、m個のフィルタパラメータW0,…,Wm−1を用い、Xkを推定する計算が行われる。フィルタパラメータWの計算では、最小2乗推定法やLMS(Least Mean Square)法など、各種の計算方法が知られている。
Xk=θTUk
θ=[W0,…,Wm−1]T
Uk=[Uk,…,Uk−m+1]T
In the FIR filter, calculation for estimating Xk is performed using m filter parameters W 0 ,..., W m−1 as in the following equation. For the calculation of the filter parameter W, various calculation methods such as a least square estimation method and an LMS (Least Mean Square) method are known.
Xk = θ T U k
θ = [W 0 ,..., W m−1 ] T
U k = [U k ,..., U k−m + 1 ] T
なお、ノイズキャンセルなどの波形処理については、例えば、次の文献を参照されたい。
文献:足立、佐野、「能動騒音制御におけるシステム同定の役割」、システム/制御/情報、Vol.41,No.2,p.64−72、1997年
For waveform processing such as noise cancellation, refer to the following document, for example.
Literature: Adachi, Sano, “Role of System Identification in Active Noise Control”, System / Control / Information, Vol. 41, no. 2, p. 64-72, 1997
上記実施の形態によるノイズキャンセル部13では、図6で示される減算処理のみが行われてもよく、図17で示されるFIRフィルタ等を用いたノイズキャンセル処理のみが行われてもよく、あるいは、その両者が行われてもよい。減算処理と、FIRフィルタ等を用いたノイズキャンセル処理との両方を用いる場合には、まず、減算処理を行った後に、FIRフィルタ等によって、ノイズをキャンセルしてもよい。その場合には、減算処理後の複数個(例えば、20個ほど)の過去の信号から、ノイズ波形を予測推定するフィルタを構成し、減算処理後の現在の信号から、その推定値を減算することにより、ノイズをキャンセルするようにしてもよい。その際に、適宜、AD変換や、DA変換等をその処理の前後や途中で行ってもよい。また、それらの処理の前後や途中において平均化処理が行われてもよいことは前述の通りである。 In the noise cancellation unit 13 according to the above embodiment, only the subtraction process shown in FIG. 6 may be performed, or only the noise cancellation process using the FIR filter shown in FIG. 17 may be performed, or Both may be performed. When both the subtraction process and the noise cancellation process using the FIR filter or the like are used, the noise may be canceled by the FIR filter or the like after the subtraction process is performed first. In that case, a filter for predicting and estimating the noise waveform is configured from a plurality of (for example, about 20) past signals after the subtraction process, and the estimated value is subtracted from the current signal after the subtraction process. Thus, noise may be canceled. In that case, you may perform AD conversion, DA conversion, etc. before, during and during the process suitably. Further, as described above, the averaging process may be performed before, after, or during these processes.
また、上記実施の形態では、音声出力装置がスタンドアロンである場合について説明したが、音声出力装置は、スタンドアロンの装置であってもよく、サーバ・クライアントシステムにおけるサーバ装置であってもよい。後者の場合には、出力部は、通信回線を介して情報を出力することになる。また、ノイズキャンセル部13や、平均処理部16も、通信回線を介して第1のマイク11からの音声信号や、第2のマイク12からのノイズ信号を受け付けるようにしてもよい。 In the above embodiment, the case where the audio output device is stand-alone has been described. However, the audio output device may be a stand-alone device or a server device in a server / client system. In the latter case, the output unit outputs information via a communication line. In addition, the noise cancellation unit 13 and the average processing unit 16 may also receive an audio signal from the first microphone 11 and a noise signal from the second microphone 12 via a communication line.
また、上記実施の形態において、各処理または各機能は、単一の装置または単一のシステムによって集中処理されることによって実現されてもよく、あるいは、複数の装置または複数のシステムによって分散処理されることによって実現されてもよい。 In the above embodiment, each process or each function may be realized by centralized processing by a single device or a single system, or may be distributedly processed by a plurality of devices or a plurality of systems. It may be realized by doing.
また、上記実施の形態において、各構成要素が実行する処理に関係する情報、例えば、各構成要素が受け付けたり、取得したり、選択したり、生成したり、送信したり、受信したりした情報や、各構成要素が処理で用いるしきい値や数式、アドレス等の情報等は、上記説明で明記していない場合であっても、図示しない記録媒体において、一時的に、あるいは長期にわたって保持されていてもよい。また、その図示しない記録媒体への情報の蓄積を、各構成要素、あるいは、図示しない蓄積部が行ってもよい。また、その図示しない記録媒体からの情報の読み出しを、各構成要素、あるいは、図示しない読み出し部が行ってもよい。 In the above embodiment, information related to processing executed by each component, for example, information received, acquired, selected, generated, transmitted, or received by each component In addition, information such as threshold values, mathematical formulas, addresses, etc. used by each component in processing is retained temporarily or over a long period of time on a recording medium (not shown) even when not explicitly stated in the above description. It may be. Further, the storage of information in the recording medium (not shown) may be performed by each component or a storage unit (not shown). Further, reading of information from the recording medium (not shown) may be performed by each component or a reading unit (not shown).
また、上記実施の形態において、音声出力装置に含まれる2以上の構成要素が通信デバイスや入力デバイス等を有する場合に、2以上の構成要素が物理的に単一のデバイスを有してもよく、あるいは、別々のデバイスを有してもよい。 In the above embodiment, when two or more components included in the audio output device include a communication device or an input device, the two or more components may physically include a single device. Alternatively, it may have a separate device.
また、上記実施の形態において、各構成要素は専用のハードウェアにより構成されてもよく、あるいは、ソフトウェアにより実現可能な構成要素については、プログラムを実行することによって実現されてもよい。例えば、ハードディスクや半導体メモリ等の記録媒体に記録されたソフトウェア・プログラムをCPU等のプログラム実行部が読み出して実行することによって、各構成要素が実現され得る。なお、上記実施の形態における音声出力装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、発話者の発声した音声を取得する第1のマイクが取得した音声信号と、ノイズを取得する第2のマイクが取得したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルするノイズキャンセル部と、前記ノイズキャンセル部によってノイズのキャンセルされた音声信号を出力する出力部として機能させるためのものである。 In the above embodiment, each component may be configured by dedicated hardware, or a component that can be realized by software may be realized by executing a program. For example, each component can be realized by a program execution unit such as a CPU reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory. The software that realizes the audio output device in the above embodiment is the following program. That is, the program uses the audio signal acquired by the first microphone that acquires the voice uttered by the speaker and the noise signal acquired by the second microphone that acquires the noise, to the computer. To function as a noise canceling unit that cancels the noise signal and an output unit that outputs an audio signal in which noise is canceled by the noise canceling unit.
なお、上記プログラムにおいて、上記プログラムが実現する機能には、ハードウェアでしか実現できない機能は含まれない。例えば、情報を出力する出力部などにおけるモデムやインターフェースカードなどのハードウェアでしか実現できない機能は、上記プログラムが実現する機能には少なくとも含まれない。 In the program, the functions realized by the program do not include functions that can be realized only by hardware. For example, a function that can be realized only by hardware such as a modem or an interface card in an output unit that outputs information is not included in at least the function realized by the program.
また、このプログラムは、サーバなどからダウンロードされることによって実行されてもよく、所定の記録媒体(例えば、CD−ROMなどの光ディスクや磁気ディスク、半導体メモリなど)に記録されたプログラムが読み出されることによって実行されてもよい。 Further, this program may be executed by being downloaded from a server or the like, and a program recorded on a predetermined recording medium (for example, an optical disk such as a CD-ROM, a magnetic disk, a semiconductor memory, or the like) is read out. May be executed by
また、このプログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。 Further, the computer that executes this program may be singular or plural. That is, centralized processing may be performed, or distributed processing may be performed.
図18は、上記プログラムを実行して、上記実施の形態による音声出力装置を実現するコンピュータの外観の一例を示す模式図である。上記実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムによって実現される。 FIG. 18 is a schematic diagram showing an example of the appearance of a computer that executes the program and realizes the audio output device according to the embodiment. The above-described embodiment is realized by computer hardware and a computer program executed on the computer hardware.
図18において、コンピュータシステム100は、CD−ROM(Compact Disk Read Only Memory)ドライブ105、FD(Flexible Disk)ドライブ106を含むコンピュータ101と、キーボード102と、マウス103と、モニタ104とを備える。 In FIG. 18, a computer system 100 includes a computer 101 including a CD-ROM (Compact Disk Read Only Memory) drive 105 and an FD (Flexible Disk) drive 106, a keyboard 102, a mouse 103, and a monitor 104.
図19は、コンピュータシステムを示す図である。図19において、コンピュータ101は、CD−ROMドライブ105、FDドライブ106に加えて、CPU(Central Processing Unit)111と、ブートアッププログラム等のプログラムを記憶するためのROM(Read Only Memory)112と、CPU111に接続され、アプリケーションプログラムの命令を一時的に記憶すると共に、一時記憶空間を提供するRAM(Random Access Memory)113と、アプリケーションプログラム、システムプログラム、及びデータを記憶するハードディスク114と、CPU111、ROM112等を相互に接続するバス115とを備える。なお、コンピュータ101は、LANへの接続を提供する図示しないネットワークカードを含んでいてもよい。 FIG. 19 is a diagram illustrating a computer system. In FIG. 19, in addition to the CD-ROM drive 105 and the FD drive 106, a computer 101 includes a CPU (Central Processing Unit) 111, a ROM (Read Only Memory) 112 for storing a program such as a bootup program, A CPU (Random Access Memory) 113 that is connected to the CPU 111 and temporarily stores application program instructions and provides a temporary storage space, a hard disk 114 that stores application programs, system programs, and data, a CPU 111 and a ROM 112. Etc. to each other. The computer 101 may include a network card (not shown) that provides connection to the LAN.
コンピュータシステム100に、上記実施の形態による音声出力装置の機能を実行させるプログラムは、CD−ROM121、またはFD122に記憶されて、CD−ROMドライブ105、またはFDドライブ106に挿入され、ハードディスク114に転送されてもよい。これに代えて、そのプログラムは、図示しないネットワークを介してコンピュータ101に送信され、ハードディスク114に記憶されてもよい。プログラムは実行の際にRAM113にロードされる。なお、プログラムは、CD−ROM121やFD122、またはネットワークから直接、ロードされてもよい。 A program that causes the computer system 100 to execute the functions of the audio output device according to the above-described embodiment is stored in the CD-ROM 121 or FD 122, inserted into the CD-ROM drive 105 or FD drive 106, and transferred to the hard disk 114. May be. Instead, the program may be transmitted to the computer 101 via a network (not shown) and stored in the hard disk 114. The program is loaded into the RAM 113 at the time of execution. The program may be loaded directly from the CD-ROM 121, the FD 122, or the network.
プログラムは、コンピュータ101に、上記実施の形態による音声出力装置の機能を実行させるオペレーティングシステム(OS)、またはサードパーティプログラム等を必ずしも含んでいなくてもよい。プログラムは、制御された態様で適切な機能(モジュール)を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいてもよい。コンピュータシステム100がどのように動作するのかについては周知であり、詳細な説明は省略する。 The program does not necessarily include an operating system (OS) or a third-party program that causes the computer 101 to execute the functions of the audio output device according to the above-described embodiment. The program may include only a part of an instruction that calls an appropriate function (module) in a controlled manner and obtains a desired result. How the computer system 100 operates is well known and will not be described in detail.
また、本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。 Further, the present invention is not limited to the above-described embodiment, and various modifications are possible, and it goes without saying that these are also included in the scope of the present invention.
以上より、本発明による音声出力装置等によれば、マイクで取得した音声信号からノイズを除去することができるという効果が得られ、騒音下で発話者の発声した音声を効果的に取得して出力する装置等として有用である。 As described above, according to the audio output device or the like according to the present invention, an effect that noise can be removed from the audio signal acquired by the microphone is obtained, and the audio uttered by the speaker under the noise is effectively acquired. It is useful as an output device.
1、2 音声出力装置
11 第1のマイク
12 第2のマイク
13 ノイズキャンセル部
14 出力部
15 サンプル数情報記憶部
16 平均処理部
17 変更情報受付部
18 変更部
21 音声信号蓄積部
22 ノイズ信号蓄積部
DESCRIPTION OF SYMBOLS 1, 2 Audio | voice output apparatus 11 1st microphone 12 2nd microphone 13 Noise cancellation part 14 Output part 15 Sample number information storage part 16 Average processing part 17 Change information reception part 18 Change part 21 Audio | voice signal storage part 22 Noise signal storage Part
Claims (14)
ノイズを取得する第2のマイクと、
前記第1のマイクが取得した音声信号と、前記第2のマイクが取得したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルするノイズキャンセル部と、
前記ノイズキャンセル部によってノイズのキャンセルされた音声信号を出力する出力部と、を備えた音声出力装置。 A first microphone that captures the voice spoken by the speaker;
A second microphone for acquiring noise;
A noise cancellation unit that cancels the noise signal from the audio signal using the audio signal acquired by the first microphone and the noise signal acquired by the second microphone;
An audio output device comprising: an output unit that outputs an audio signal from which noise has been canceled by the noise cancellation unit.
前記第2のマイクが取得したノイズ信号を蓄積するノイズ信号蓄積部と、をさらに備え、
前記ノイズキャンセル部は、前記音声信号蓄積部が蓄積した音声信号と、前記ノイズ信号蓄積部が蓄積したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルする、請求項1から請求項4のいずれか記載の音声出力装置。 An audio signal storage unit for storing the audio signal acquired by the first microphone;
A noise signal storage unit that stores a noise signal acquired by the second microphone;
The noise cancellation unit cancels the noise signal from the audio signal using the audio signal accumulated by the audio signal accumulation unit and the noise signal accumulated by the noise signal accumulation unit. 5. The audio output device according to any one of 4.
前記第2のマイクが空気の振動をとらえるものである場合に、当該第2のマイクは双指向性のものである、請求項1から請求項5のいずれか記載の音声出力装置。 The first microphone is bi-directional;
The audio output device according to any one of claims 1 to 5, wherein when the second microphone captures vibrations of air, the second microphone is bi-directional.
当該複合圧電体は、分極されていない、請求項2記載の音声出力装置。 The dummy microphone is composed of a composite piezoelectric body in which a piezoelectric element is disposed in an organic material,
The audio output device according to claim 2, wherein the composite piezoelectric body is not polarized.
前記ノイズキャンセル部によるノイズキャンセル処理の前、あるいは、前後に音声信号及びノイズ信号に対して、または、ノイズキャンセル処理の後に音声信号のみに対して、前記サンプル数情報の示すサンプル数で平均化処理を行う平均処理部と、をさらに備えた、請求項1から請求項10のいずれか記載の音声出力装置。 A sample number information storage unit in which sample number information indicating the number of samples used in the averaging process is stored;
Averaging with the number of samples indicated by the number-of-samples information before or after noise cancellation processing by the noise canceling unit, with respect to the audio signal and the noise signal, or with respect to only the audio signal after the noise cancellation processing The audio output device according to claim 1, further comprising: an average processing unit that performs.
前記変更情報受付部が受け付けた変更情報に応じて前記サンプル数情報を変更する変更部と、をさらに備えた請求項11記載の音声出力装置。 A change information receiving unit that receives change information that is information indicating that the number of samples is changed;
The audio output device according to claim 11, further comprising: a changing unit that changes the sample number information according to the change information received by the change information receiving unit.
前記ノイズキャンセルステップでノイズのキャンセルされた音声信号を出力する出力ステップと、を備えた音声出力方法。 Noise cancellation for canceling the noise signal from the audio signal using the audio signal acquired by the first microphone that acquires the voice uttered by the speaker and the noise signal acquired by the second microphone that acquires the noise Steps,
An audio output method comprising: outputting an audio signal whose noise has been canceled in the noise cancellation step.
発話者の発声した音声を取得する第1のマイクが取得した音声信号と、ノイズを取得する第2のマイクが取得したノイズ信号とを用いて、前記音声信号から前記ノイズ信号をキャンセルするノイズキャンセル部と、
前記ノイズキャンセル部によってノイズのキャンセルされた音声信号を出力する出力部として機能させるためのプログラム。 Computer
Noise cancellation for canceling the noise signal from the audio signal using the audio signal acquired by the first microphone that acquires the voice uttered by the speaker and the noise signal acquired by the second microphone that acquires the noise And
A program for functioning as an output unit that outputs an audio signal from which noise has been canceled by the noise cancellation unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008028445A JP2009188858A (en) | 2008-02-08 | 2008-02-08 | Audio output device, audio output method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008028445A JP2009188858A (en) | 2008-02-08 | 2008-02-08 | Audio output device, audio output method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2009188858A true JP2009188858A (en) | 2009-08-20 |
Family
ID=41071632
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008028445A Pending JP2009188858A (en) | 2008-02-08 | 2008-02-08 | Audio output device, audio output method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2009188858A (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011194178A (en) * | 2010-03-24 | 2011-10-06 | Ge Medical Systems Global Technology Co Llc | Magnetic resonance imaging apparatus |
| JP2013015726A (en) * | 2011-07-05 | 2013-01-24 | Yamaha Corp | Voice recording server device and voice recording system |
| EP2860544A3 (en) * | 2013-10-08 | 2015-07-22 | Samsung Electronics Co., Ltd | Apparatus and method of reducing noise and audio playing apparatus with non-magnet speaker |
| JP2016013371A (en) * | 2014-07-03 | 2016-01-28 | 株式会社東芝 | Medical image capturing device |
| US9383268B2 (en) | 2013-09-20 | 2016-07-05 | Kabushiki Kaisha Toshiba | Strain sensor, pressure sensor, microphone, blood pressure sensor, personal digital assistant, and hearing aid |
| JP2017139767A (en) * | 2012-11-12 | 2017-08-10 | ヤマハ株式会社 | Microphone unit, host device, and signal processing system |
| CN114822576A (en) * | 2022-04-30 | 2022-07-29 | 中国人民解放军总医院第一医学中心 | Call system voice enhancement method based on magnetic resonance pulse sequence noise estimation |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61103397A (en) * | 1984-10-26 | 1986-05-21 | Murata Mfg Co Ltd | Piezo-electric buzzer |
| JPS63285000A (en) * | 1987-05-18 | 1988-11-22 | Hitachi Ltd | Microphone |
| JPH0336297U (en) * | 1989-08-21 | 1991-04-09 | ||
| JP2002542689A (en) * | 1999-04-12 | 2002-12-10 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | Method and apparatus for signal noise reduction with dual microphones using spectral subtraction |
| JP2003019218A (en) * | 2001-07-09 | 2003-01-21 | Kajima Corp | Protective mask |
| JP2005055667A (en) * | 2003-08-04 | 2005-03-03 | Sony Corp | Audio processing device |
| JP2005057437A (en) * | 2003-08-01 | 2005-03-03 | Sony Corp | Microphone device, noise reduction method, and recording device |
| WO2006062120A1 (en) * | 2004-12-07 | 2006-06-15 | Ntt Docomo, Inc. | Microphone device |
| JP2006154314A (en) * | 2004-11-29 | 2006-06-15 | Kobe Steel Ltd | Sound source separation device, sound source separation program, and sound source separation method |
| JP2007214883A (en) * | 2006-02-09 | 2007-08-23 | Nec Tokin Corp | Receiving device |
-
2008
- 2008-02-08 JP JP2008028445A patent/JP2009188858A/en active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61103397A (en) * | 1984-10-26 | 1986-05-21 | Murata Mfg Co Ltd | Piezo-electric buzzer |
| JPS63285000A (en) * | 1987-05-18 | 1988-11-22 | Hitachi Ltd | Microphone |
| JPH0336297U (en) * | 1989-08-21 | 1991-04-09 | ||
| JP2002542689A (en) * | 1999-04-12 | 2002-12-10 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | Method and apparatus for signal noise reduction with dual microphones using spectral subtraction |
| JP2003019218A (en) * | 2001-07-09 | 2003-01-21 | Kajima Corp | Protective mask |
| JP2005057437A (en) * | 2003-08-01 | 2005-03-03 | Sony Corp | Microphone device, noise reduction method, and recording device |
| JP2005055667A (en) * | 2003-08-04 | 2005-03-03 | Sony Corp | Audio processing device |
| JP2006154314A (en) * | 2004-11-29 | 2006-06-15 | Kobe Steel Ltd | Sound source separation device, sound source separation program, and sound source separation method |
| WO2006062120A1 (en) * | 2004-12-07 | 2006-06-15 | Ntt Docomo, Inc. | Microphone device |
| JP2007214883A (en) * | 2006-02-09 | 2007-08-23 | Nec Tokin Corp | Receiving device |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011194178A (en) * | 2010-03-24 | 2011-10-06 | Ge Medical Systems Global Technology Co Llc | Magnetic resonance imaging apparatus |
| JP2013015726A (en) * | 2011-07-05 | 2013-01-24 | Yamaha Corp | Voice recording server device and voice recording system |
| JP2017139767A (en) * | 2012-11-12 | 2017-08-10 | ヤマハ株式会社 | Microphone unit, host device, and signal processing system |
| US9383268B2 (en) | 2013-09-20 | 2016-07-05 | Kabushiki Kaisha Toshiba | Strain sensor, pressure sensor, microphone, blood pressure sensor, personal digital assistant, and hearing aid |
| EP2860544A3 (en) * | 2013-10-08 | 2015-07-22 | Samsung Electronics Co., Ltd | Apparatus and method of reducing noise and audio playing apparatus with non-magnet speaker |
| US10037765B2 (en) | 2013-10-08 | 2018-07-31 | Samsung Electronics Co., Ltd. | Apparatus and method of reducing noise and audio playing apparatus with non-magnet speaker |
| JP2016013371A (en) * | 2014-07-03 | 2016-01-28 | 株式会社東芝 | Medical image capturing device |
| CN114822576A (en) * | 2022-04-30 | 2022-07-29 | 中国人民解放军总医院第一医学中心 | Call system voice enhancement method based on magnetic resonance pulse sequence noise estimation |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2009188858A (en) | Audio output device, audio output method, and program | |
| CN110809211B (en) | Method for active noise reduction of earphones, active noise reduction system and earphones | |
| US12396672B2 (en) | On-ear detection | |
| EP2095144B1 (en) | Audio apparatus for use within magnetic resonance imaging systems | |
| US8995681B2 (en) | Audio processing apparatus with noise reduction and method of controlling the audio processing apparatus | |
| US9967647B2 (en) | Off-ear and on-ear headphone detection | |
| WO2019164923A1 (en) | Voice capture processing modified by back end audio processing state | |
| TWI823346B (en) | Signal processing system, method, apparatus and storage medium | |
| CN115039415A (en) | System and method for on-ear detection of a headset | |
| CN113507662A (en) | Noise reduction processing method, apparatus, device, storage medium, and program | |
| CN118541752A (en) | Data augmentation system and method for multi-microphone systems | |
| JP2010227500A (en) | Noise canceling system, noise canceling method, and program | |
| JP6076364B2 (en) | Apparatus and method for processing heart sounds for auscultation | |
| CN115039418A (en) | System and method for on-ear detection of a headset | |
| US20230179904A1 (en) | Wireless earphone, mobile phone and sonic ranging method | |
| CN107452398A (en) | Echo acquisition methods, electronic equipment and computer-readable recording medium | |
| CN106797517B (en) | Multi-ear MMSE analysis technique for cleaning audio signals | |
| WO2010055283A1 (en) | Acoustic noise prediction and subtraction from intercom audio signal during magnetic resonance imaging | |
| KR102743731B1 (en) | Wearable electronic apparatus and method for controlling thereof | |
| JP2011119783A (en) | Audio signal processing device | |
| Sun et al. | Adaptive speech enhancement using directional microphone in a 4-T MRI scanner | |
| JP2007082914A (en) | Conversation system and magnetic resonance imaging system | |
| US20240314501A1 (en) | Method for operating a hearing device, hearing device and computer program product | |
| JP2012168345A (en) | Mechanical sound removal device, mechanical sound detection device, and video imaging apparatus | |
| CN114786083B (en) | Noise reduction method, device, earphone equipment and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20110131 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20110131 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20110204 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120528 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120612 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20121102 |