JP2010085913A - 音補正装置 - Google Patents
音補正装置 Download PDFInfo
- Publication number
- JP2010085913A JP2010085913A JP2008257471A JP2008257471A JP2010085913A JP 2010085913 A JP2010085913 A JP 2010085913A JP 2008257471 A JP2008257471 A JP 2008257471A JP 2008257471 A JP2008257471 A JP 2008257471A JP 2010085913 A JP2010085913 A JP 2010085913A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- masking threshold
- power
- recording noise
- correction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Circuit For Audible Band Transducer (AREA)
Abstract
【解決手段】 再生音の単位区間のパワーの平均値と予め定めた閾値とを比較することによって、当該区間の再生音のレベルを複数の段階のいずれかに当てはめ、そのレベルの段階に応じた方法によって、予め収録された雑音信号のマスキング閾値を補正し、補正した収録雑音のマスキング閾値を用いて再生音の補正を行う。
【選択図】 図2
Description
図2は、補正処理部30の詳細を示す構成図である。補正処理部30には、補正処理の対象となる再生音が所定の単位区間ごとに入力される。前述のとおり、再生音は、通信によって得た音でも良いし、記憶部16に記憶されている音でも良い。例えば、放送受信部13を介して受信したテレビ放送波やラジオ放送波から得られる音や、送受信部12を介して受信した音声通話の音声や、記憶部16に記憶されたオーディオなどが考えられる。
7から読み出された収録雑音のマスキング閾値noise_thr[i]に対する補正処理を行う。なお、この補正処理は、後ほど詳細に説明する。
入力され、再生音マスキング特性解析部34から再生音のマスキング特性signal_thr[i]
が入力され、時間/周波数変換部31から再生音の周波数スペクトルが入力される。再生音補正部35は、これらの値を用いて、収録雑音のマスキング閾値によってマスクされている周波数帯域であって、再生音自身によってマスクされていない周波数帯域を増幅するよう再生音の補正を行う。再生音補正部35の詳細な処理については、後述する。
だしTH1<TH2)とを比較する。閾値TH1およびTH2は、予め設定された値であって、再生音の周波数域平均パワーframe_powerがTH1よりも小さい場合には、低レベ
ルの再生音と判定でき、frame_powerがTH2よりも大きい場合には、再生音が十分に大
きく、収録雑音にかかわらず十分に知覚できるような大レベルの再生音と判定できるよう設定される。
TH1およびTH2との比較結果としては、3つの場合がある。
、当該区間の再生音は低レベルであるため、音量増加を含めてより明瞭度を向上させる必要がある。そこで、まず収録雑音のマスキング閾値noise_thr[i]の平均値が再生音の周波数域パワーの平均値frame_powerよりも大きくなるよう補正する。図3は、再生音の周波
数域平均パワーframe_powerがTH1よりも小さいときに、収録雑音マスキング閾値noise_thr[i]を補正するときの処理の概念図である。図3(a)のような収録雑音マスキング
閾値が収録雑音マスキング閾値記憶部37から読み出されている状態で、図3(b)のような信号特性を有する再生音の単位区間が補正処理部30に入力されたとする。収録雑音マスキング閾値補正部33が、この再生音の周波数域平均パワーframe_powerはTH1よ
りも低いと判定すると、図3(c)のように、収録雑音のマスキング閾値の平均値を再生音の周波数域パワーの平均値frame_powerよりも大きくなるよう、収録雑音のマスキング
閾値を補正する。そして、収録雑音マスキング閾値補正部33は、補正処理を施したマスキング閾値を出力する。
再生音の周波数域平均パワーframe_powerがTH1以上であり、TH2未満であるときに
、収録雑音マスキング閾値noise_thr[i]を補正するときの処理の概念図である。図4(a)のような収録雑音マスキング閾値が収録雑音マスキング閾値記憶部37から読み出されている状態で、図4(b)のような信号特性を有する再生音の単位区間が補正処理部30に入力されたとする。収録雑音マスキング閾値補正部33が、この再生音の周波数域平均パワーframe_powerはTH1以上であり、TH2未満であると判定すると、図4(c)の
ように、収録雑音のマスキング閾値の平均値を再生音の周波数域パワーの平均値frame_powerと等しくなるよう、全帯域に対して同じレベル分だけ増幅させる。そして、収録雑音
マスキング閾値補正部33は、補正処理を施したマスキング閾値を出力する。
生音は、収録雑音にかかわらず十分に近くされるレベルであるため、収録雑音マスキング閾値noise_thr[i]に対してとくに補正処理を行わず、そのままnoise_thr[i]を出力する。
関係を示す図である。図5で表されるように、再生音の周波数域平均パワーframe_power
がTH1よりも小さい場合には、収録雑音マスキング閾値の平均値を再生音の周波数平均パワーよりも大きくなるように設定している。一方、再生音の周波数域平均パワーがTH1以上TH2未満の場合には、収録雑音マスキング閾値の平均値を再生音の周波数域平均パワーと同じになるよう設定している。
このように、収録雑音マスキング閾値補正部33では、再生音の周波数域平均パワーに応じて収録雑音マスキング閾値のレベルを補正する。補正後の収録雑音マスキング閾値nose_thr[i]は、後述の再生音補正部35によって算出される再生音の増幅率に影響するた
め、再生音の周波数域平均パワーが小さいほど収録雑音マスキング閾値のレベルが高くなるよう補正することは、再生音の周波数域平均パワーが小さいほど再生音の周波数帯域に対する増幅率を高くすることを意味する。なお、上記説明においては、frame_powerを再
生音の周波数域パワーとして既定の閾値TH1、TH2と比較しているが、単位区間のパワーの大小関係を判定することが目的であり、時間/周波数変換前の時間域平均パワーを用いても良い。
グする理由は、補正係数の算出には収録雑音のマスキング閾値と再生音のパワーとの比が用いられるため、再生音のパワーをスムージングさせないで補正係数を求め、この補正係数を用いて補正を行った場合、再生音の微細な構造が崩れてしまい、聴感が悪くなるためである。再生音のパワーのスムージングは、例えば、加重移動平均を用いる方法が考えられる。
る。この補正係数tmp_coef[i]の算出には、パワースムージング部35bでスムージング
された再生音の周波数成分ごとのパワーと、収録雑音マスキング閾値補正部33から出力された収録雑音のマスキング閾値noise_thr_new[i]の値を用いる。
定する。
波数成分)は、収録雑音が無ければ知覚できるにも関わらず、収録雑音によってマスクされていると判断できる。そこで、この周波数成分を増幅するように補正係数を設定する。
ただし、F()は補正係数tmp_coef[i]を算出する関数であり、例えば、式(3)や式
(4)のような関数である。
・・・(3)
F(noise_thr_new[i]/signal_power[i]) = noise_thr_new[i] / signal_power[i]×α ・・・(4)
なお、式(3)や式(4)中のαは補正係数を調整するための値である。この補正係数を調整するための値は、収録雑音マスキング閾値補正部33で再生音の周波数域平均パワーがTH1未満であると判定された場合であるか、収録雑音マスキング閾値補正部33で再生音の周波数域平均パワーがTH1以上でありTH2未満であると判定された場合であるかに応じて、この値を変えても良い。
ワーがTH1以上でありTH2未満であると判定された場合には、式(5)や式(6)の関数を用いて補正係数tmp_coef[i]を算出するとする。ただし、αとβとの関係はα>β
である。
・・・(5)
F(noise_thr_new[i]/signal_power[i]) = noise_thr_new[i] / signal_power[i]×β ・・・(6)
このように、再生音の周波数域平均パワーがTH1未満であると判定された場合(再生音が低レベルの場合)と再生音の周波数域平均パワーがTH1以上でありTH2未満であると判定された場合(再生音が中レベルの場合)とに応じて、補正係数を調整するために用いる値を変えることによって、もともと聞き取りにくい低レベルの区間に対して重みをつけて補正することができ、さらなる明瞭度の向上をはかることができる。
出力する。出力された補正係数tmp_coef[i]は、補正係数スムージング部35dに入力さ
れる。
自身にマスクされると判定された周波数成分に対する補正係数と、再生音自身にマスクされないと判定された周波数成分に対する補正係数とは算出方法が異なるため、隣接していた場合、不連続になりやすい。そこで、この不連続性を緩和するために、補正係数のスムージングを行い、再生音の品質劣化を抑制する。補正係数のスムージングは、例えば加重移動平均によって行う。
5dによってスムージングされた補正係数coef[i]とが入力される。補正演算部35eは
、入力された補正係数coef[i]と再生音のスペクトルsignal[i]とを式(7)のようにかけ合わせて補正後の再生音のスペクトルsignal_new[i]を得て、この値を出力する。
なお、補正演算部35eによって再生音の補正を行うときに、低域信号(例えば、100Hz以下の信号)は補正を行わないという条件や、低域信号を増幅させるときには所定の閾値以下の補正係数とするという条件などを付しても良い。
が入力される。ユーザボリューム適用部38では、入力された再生信号パワー情報をユーザボリューム値に応じて式(8)のように補正を行う。ただし、式(8)中のΔVは、基
準となるボリューム値(0dB)とユーザによって設定されたボリューム値との差分の値である。
また、再生音の周波数域パワーsignal_power[i]も同様にユーザボリューム値に応じて
式(9)のように補正を行う。
このようにユーザボリューム適用部38では、再生音の周波数域平均パワーframe_powerおよび再生音の周波数パワーsignal_power[i]を補正することによって、収録雑音マスキング閾値補正部33における再生音のレベル(低レベルか中レベルか大レベルか)の判定をより正確に行うことができ、聞き取りやすさを向上することができる。なお、実施例1と同様、上記説明においては、frame_powerを再生音の周波数域パワーとしているが、単
位区間のパワーの大小関係を判定することが目的であり、時間/周波数変換前の時間域平均パワーを用いても良い。
Claims (6)
- 再生音の周波数成分に対する補正係数を算出し、再生音の補正を行う音補正装置であって、
予め収録された収録雑音のマスキング閾値を記憶する収録雑音マスキング閾値記憶手段と、
再生音の所定の区間のパワーの平均値を算出し、この再生音の区間ごとのパワーの平均値に応じて前記収録雑音マスキング閾値記憶手段から読み出した収録雑音のマスキング閾値を補正し、補正後の収録雑音マスキング閾値未満のパワーを有する再生音の周波数成分を増幅させるよう補正する補正手段を有することを特徴とする音補正装置。 - 前記補正手段は、前記収録雑音のマスキング閾値記憶手段から読み出した収録雑音のマスキング閾値を補正する際、前記再生音の所定の区間ごとのパワーの平均値が所定の閾値未満である場合は、収録雑音のマスキング閾値を前記所定の区間の再生音よりも大きくなるよう補正することを特徴とする請求項1に記載の音補正装置。
- 前記補正手段は、前記収録雑音のマスキング閾値記憶手段から読み出した収録雑音のマスキング閾値を補正する際、前記再生音の所定の区間ごとのパワーの平均値が第1の閾値未満である場合には、前記収録雑音のマスキング閾値を前記所定の区間の再生音よりも大きくなるよう補正し、第1の閾値よりも大きい第2の閾値未満である場合には、前記収録雑音のマスキング閾値を前記所定の区間の再生音のレベルと同じになるよう補正することを特徴とする請求項1に記載の音補正装置。
- 前記補正手段は、補正後の収録雑音マスキング閾値未満のパワーを有する再生音の周波数成分を増幅させるときに、前記再生音の所定の区間ごとのパワーの平均値が所定の閾値未満であった場合には、前記再生音の所定の区間ごとのパワーの平均値が所定の閾値以上であった場合よりも増幅率を高く設定することを特徴とする請求項1に記載の音補正装置。
- ユーザからの再生音の音量増減操作を受ける操作手段を更に有し、
前記補正手段は、前記操作手段によって設定された再生音の音量増減設定値を用いて再生音の所定の区間ごとのパワーの平均値を補正し、補正後の再生音のパワーの平均値に応じて前記収録雑音マスキング閾値記憶手段から読み出した収録雑音のマスキング閾値を補正し、補正後の収録雑音マスキング閾値未満のパワーを有する再生音の周波数成分を増幅させるよう補正することを特徴とする請求項1に記載の音補正装置。 - 予め記憶されていた再生音または受信した再生音を補正する音補正装置であって、
収録雑音のマスキング閾値を記憶する収録雑音マスキング閾値記憶手段と、
再生音の所定の区間のパワーの平均値を算出し、この平均値が所定の閾値未満ならば、前記収録雑音マスキング閾値記憶手段から読み出される収録雑音のマスキング閾値を増幅させ、増幅後の収録雑音のマスキング閾値に基づいて前記再生音を補正し、再生音の所定の区間のパワーの平均値が所定の閾値以上ならば前記収録雑音マスキング閾値記憶手段から読み出された収録雑音マスキング閾値に基づいて前記再生音を補正する補正手段を有することを特徴とする音補正装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008257471A JP5172580B2 (ja) | 2008-10-02 | 2008-10-02 | 音補正装置及び音補正方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008257471A JP5172580B2 (ja) | 2008-10-02 | 2008-10-02 | 音補正装置及び音補正方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2010085913A true JP2010085913A (ja) | 2010-04-15 |
| JP5172580B2 JP5172580B2 (ja) | 2013-03-27 |
Family
ID=42249898
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008257471A Expired - Fee Related JP5172580B2 (ja) | 2008-10-02 | 2008-10-02 | 音補正装置及び音補正方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5172580B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012043597A1 (ja) * | 2010-09-28 | 2012-04-05 | ヤマハ株式会社 | マスカ音出力装置及びマスカ音出力方法 |
| JP2013009292A (ja) * | 2011-05-20 | 2013-01-10 | Nippon Hoso Kyokai <Nhk> | ミキシングバランス自動調整装置、システムおよびプログラム |
| JP2019191558A (ja) * | 2018-04-23 | 2019-10-31 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | 音声を増幅する方法及び装置 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109697978B (zh) * | 2018-12-18 | 2021-04-20 | 百度在线网络技术(北京)有限公司 | 用于生成模型的方法和装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008225056A (ja) * | 2007-03-13 | 2008-09-25 | Alpine Electronics Inc | 音声明瞭度改善装置およびその騒音レベル推定方法 |
| JP2008228198A (ja) * | 2007-03-15 | 2008-09-25 | Sharp Corp | 再生音調整装置及び再生音調整方法 |
| JP2009175420A (ja) * | 2008-01-24 | 2009-08-06 | Toshiba Corp | 音補正装置 |
-
2008
- 2008-10-02 JP JP2008257471A patent/JP5172580B2/ja not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008225056A (ja) * | 2007-03-13 | 2008-09-25 | Alpine Electronics Inc | 音声明瞭度改善装置およびその騒音レベル推定方法 |
| JP2008228198A (ja) * | 2007-03-15 | 2008-09-25 | Sharp Corp | 再生音調整装置及び再生音調整方法 |
| JP2009175420A (ja) * | 2008-01-24 | 2009-08-06 | Toshiba Corp | 音補正装置 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012043597A1 (ja) * | 2010-09-28 | 2012-04-05 | ヤマハ株式会社 | マスカ音出力装置及びマスカ音出力方法 |
| JP2012095262A (ja) * | 2010-09-28 | 2012-05-17 | Yamaha Corp | マスカ音出力装置 |
| CN103109317A (zh) * | 2010-09-28 | 2013-05-15 | 雅马哈株式会社 | 掩蔽声音输出装置和掩蔽声音输出方法 |
| US9286880B2 (en) | 2010-09-28 | 2016-03-15 | Yamaha Corporation | Masking sound outputting device and masking sound outputting method |
| JP2013009292A (ja) * | 2011-05-20 | 2013-01-10 | Nippon Hoso Kyokai <Nhk> | ミキシングバランス自動調整装置、システムおよびプログラム |
| JP2019191558A (ja) * | 2018-04-23 | 2019-10-31 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | 音声を増幅する方法及び装置 |
| US10891967B2 (en) | 2018-04-23 | 2021-01-12 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and apparatus for enhancing speech |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5172580B2 (ja) | 2013-03-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4940158B2 (ja) | 音補正装置 | |
| JP5704470B2 (ja) | オーディオ明瞭度増大方法および装置とコンピュータ装置 | |
| US9208767B2 (en) | Method for adaptive audio signal shaping for improved playback in a noisy environment | |
| US9173020B2 (en) | Control method of sound producing, sound producing apparatus, and portable apparatus | |
| JP5012995B2 (ja) | オーディオ信号処理装置及びオーディオ信号処理方法 | |
| JP2007500466A (ja) | 音声調整装置、方法及びコンピュータプログラム | |
| JP5136378B2 (ja) | 音響処理方法 | |
| US9271089B2 (en) | Voice control device and voice control method | |
| JP5172580B2 (ja) | 音補正装置及び音補正方法 | |
| US20060159281A1 (en) | Method and apparatus to record a signal using a beam forming algorithm | |
| CN103814584B (zh) | 声音处理装置和声音处理方法 | |
| US8254590B2 (en) | System and method for intelligibility enhancement of audio information | |
| US8954322B2 (en) | Acoustic shock protection device and method thereof | |
| US9070371B2 (en) | Method and system for peak limiting of speech signals for delay sensitive voice communication | |
| JP2001188599A (ja) | オーディオ信号復号装置 | |
| US8457955B2 (en) | Voice reproduction with playback time delay and speed based on background noise and speech characteristics | |
| JP2005333191A (ja) | 携帯端末型テレビジョン受信装置 | |
| JP2586847B2 (ja) | 電子電話機 | |
| JP2000349893A (ja) | 音声再生方法および音声再生装置 | |
| JP2010154037A (ja) | 音補正装置 | |
| KR100604583B1 (ko) | 오디오 신호의 주파수 대역 레벨 특성 변환이 가능한 이동통신단말기 | |
| JP2012129692A (ja) | 携帯端末、オーディオデータ再生システム、オーディオデータ再生方法及びプログラム | |
| JP5535428B2 (ja) | 音声信号の出力方法、スピーカシステム、携帯機器及びコンピュータプログラム | |
| KR20060097259A (ko) | 적응 등화기를 이용하는 휴대 단말의 음질 보정 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110311 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20110311 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120525 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120605 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120806 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120911 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121112 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121204 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121226 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160111 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |