[go: up one dir, main page]

RU2015134388A - Бинауральная аудиообработка - Google Patents

Бинауральная аудиообработка Download PDF

Info

Publication number
RU2015134388A
RU2015134388A RU2015134388A RU2015134388A RU2015134388A RU 2015134388 A RU2015134388 A RU 2015134388A RU 2015134388 A RU2015134388 A RU 2015134388A RU 2015134388 A RU2015134388 A RU 2015134388A RU 2015134388 A RU2015134388 A RU 2015134388A
Authority
RU
Russia
Prior art keywords
reverb
data
early
audio component
transfer function
Prior art date
Application number
RU2015134388A
Other languages
English (en)
Other versions
RU2656717C2 (ru
Inventor
Ерун Герардус Хенрикус КОППЕНС
Арнольдус Вернер Йоханнес ОМЕН
Эрик Госейнус Петрус СХЕЙЕРС
Original Assignee
Конинклейке Филипс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Н.В. filed Critical Конинклейке Филипс Н.В.
Publication of RU2015134388A publication Critical patent/RU2015134388A/ru
Application granted granted Critical
Publication of RU2656717C2 publication Critical patent/RU2656717C2/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S1/005—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Stereophonic System (AREA)

Claims (53)

1. Устройство для обработки аудиосигнала, причем устройство содержит
приемное устройство (801) для приема входных данных, причем входные данные содержат, по меньшей мере, данные, описывающие бинауральную передаточную функцию головы, содержащую раннюю часть и часть реверберации, причем данные содержат
данные ранней части, указывающие раннюю часть бинауральной передаточной функции головы,
данные реверберации, указывающие часть реверберации бинауральной передаточной функции головы,
индикатор синхронизации, указывающий сдвиг по времени между ранней частью и частью реверберации;
схему (803) ранней части для формирования первого аудиокомпонента посредством применения бинауральной обработки к аудиосигналу, причем бинауральная обработка, по меньшей мере, частично определяется посредством данных ранней части;
ревербератор (807) для формирования второго аудиокомпонента посредством применения реверберационной обработки к аудиосигналу, причем реверберационная обработка, по меньшей мере, частично определяется посредством данных реверберации;
модуль (809) комбинирования для формирования, по меньшей мере, первого слухового сигнала из бинаурального сигнала, причем модуль комбинирования выполнен с возможностью комбинировать первый аудиокомпонент и второй аудиокомпонент; и
синхронизатор (805) для синхронизации первого аудиокомпонента и второго аудиокомпонента в ответ на индикатор синхронизации.
2. Устройство по п. 1, в котором синхронизатор (805) выполнен с возможностью вводить задержку для второго аудиокомпонента относительно первого аудиокомпонента, причем задержка является зависимой от индикатора синхронизации.
3. Устройство по п. 1, в котором данные ранней части служат признаком безэховой части бинауральной передаточной функции головы.
4. Устройство по п. 1, в котором данные ранней части содержат параметры фильтрации в частотной области, и обработка ранней части представляет собой обработку в частотной области.
5. Устройство по п. 1, в котором данные части реверберации содержат параметры для модели реверберации, и ревербератор (807) выполнен с возможностью реализовывать модель реверберации с использованием параметров, указываемых посредством данных части реверберации.
6. Устройство по п. 1, в котором ревербератор (807) содержит синтетический ревербератор, и данные части реверберации содержат параметры для синтетического ревербератора.
7. Устройство по п. 1, в котором ревербератор (807) содержит реверберационный фильтр, и данные реверберации содержат параметры для реверберационного фильтра.
8. Устройство по п. 1, в котором бинауральная передаточная функция головы дополнительно содержит часть ранних отражений между ранней частью и частью реверберации, и данные дополнительно содержат
данные части ранних отражений, указывающие часть ранних отражений бинауральной передаточной функции головы; и
второй индикатор синхронизации, указывающий сдвиг по времени между частью ранних отражений и, по меньшей мере, одной из ранней части и части реверберации; и
устройство дополнительно содержит:
процессор части ранних отражений для формирования третьего аудиокомпонента посредством применения обработки отражения к аудиосигналу, причем обработка отражения, по меньшей мере, частично определяется посредством данных части ранних отражений; и
модуль (809) комбинирования выполнен с возможностью формировать первый слуховой сигнал из бинаурального сигнала в ответ на комбинирование, по меньшей мере, первого аудиокомпонента, второго аудиокомпонента и третьего аудиокомпонента; и
синхронизатор (805) выполнен с возможностью синхронизировать третий аудиокомпонент, по меньшей мере, с одним
из первого аудиокомпонента и второго аудиокомпонента в ответ на второй индикатор синхронизации.
9. Устройство по п. 1, в котором ревербератор (807) выполнен с возможностью формировать второй аудиокомпонент в ответ на процесс реверберации, применяемый к первому аудиокомпоненту.
10. Устройство по п. 1, в котором индикатор синхронизации компенсируется в отношении задержки бинауральной обработки.
11. Устройство по п. 1, в котором индикатор синхронизации компенсируется в отношении задержки реверберационной обработки.
12. Устройство для формирования потока битов, причем устройство содержит
процессор (1101) для приема бинауральной передаточной функции головы, содержащей раннюю часть и часть реверберации;
схему (1103) о ранней части для формирования данных ранней части, указывающих раннюю часть бинауральной передаточной функции головы;
схему (1105) реверберации для формирования данных реверберации, указывающих часть реверберации бинауральной передаточной функции головы;
схему (1107) синхронизации для формирования данных синхронизации, содержащих индикатор синхронизации, указывающий сдвиг по времени между данными ранней части и данными реверберации; и
выходную схему (1109) для формирования потока битов, содержащего данные ранней части, данные реверберации и данные синхронизации.
13. Способ обработки аудиосигнала, при этом способ содержит этапы, на которых
принимают входные данные, причем входные данные содержат, по меньшей мере, данные, описывающие бинауральную передаточную функцию головы, содержащую раннюю часть и часть реверберации, причем данные содержат:
данные ранней части, указывающие раннюю часть бинауральной передаточной функции головы,
данные реверберации, указывающие часть реверберации
бинауральной передаточной функции головы,
индикатор синхронизации, указывающий сдвиг по времени между ранней частью и частью реверберации;
формируют первый аудиокомпонент посредством применения бинауральной обработки к аудиосигналу, причем бинауральная обработка, по меньшей мере, частично определяется посредством данных ранней части;
формируют второй аудиокомпонент посредством применения реверберационной обработки к аудиосигналу, причем реверберационную обработка, по меньшей мере, частично определяют посредством данных реверберации;
формируют, по меньшей мере, первый слуховой сигнал из бинаурального сигнала в ответ на комбинирование первого аудиокомпонента и второго аудиокомпонента; и
синхронизируют первый аудиокомпонент и второй аудиокомпонент в ответ на индикатор синхронизации.
14. Способ формирования потока битов, при этом способ содержит этапы, на которых
принимают бинауральную передаточную функцию головы, содержащую раннюю часть и часть реверберации;
формируют данные ранней части, указывающие раннюю часть бинауральной передаточной функции головы;
формируют данные реверберации, указывающие часть реверберации бинауральной передаточной функции головы;
формируют данные синхронизации, содержащие индикатор синхронизации, указывающий сдвиг по времени между данными ранней части и данными реверберации; и
формируют поток битов, содержащий данные ранней части, данные реверберации и данные синхронизации.
15. Компьютерный программный продукт, содержащий средство компьютерного программного кода, выполненное с возможностью осуществлять все этапы по п. 13 или 14, когда упомянутая программа выполняется на компьютере.
16. Поток битов, содержащий данные, представляющие бинауральную передаточную функцию головы, содержащую раннюю часть и часть реверберации, причем данные содержат
данные ранней части, указывающие раннюю часть бинауральной передаточной функции головы;
данные реверберации, указывающие часть реверберации бинауральной передаточной функции головы;
данные синхронизации, содержащие индикатор синхронизации, указывающий сдвиг по времени между данными ранней части и данными реверберации.
RU2015134388A 2013-01-17 2014-01-08 Бинауральная аудиообработка RU2656717C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361753459P 2013-01-17 2013-01-17
US61/753,459 2013-01-17
PCT/IB2014/058126 WO2014111829A1 (en) 2013-01-17 2014-01-08 Binaural audio processing

Publications (2)

Publication Number Publication Date
RU2015134388A true RU2015134388A (ru) 2017-02-22
RU2656717C2 RU2656717C2 (ru) 2018-06-06

Family

ID=50000055

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2015134388A RU2656717C2 (ru) 2013-01-17 2014-01-08 Бинауральная аудиообработка

Country Status (8)

Country Link
US (1) US9973871B2 (ru)
EP (1) EP2946572B1 (ru)
JP (1) JP6433918B2 (ru)
CN (1) CN104919820B (ru)
BR (1) BR112015016978B1 (ru)
MX (1) MX346825B (ru)
RU (1) RU2656717C2 (ru)
WO (1) WO2014111829A1 (ru)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104982042B (zh) 2013-04-19 2018-06-08 韩国电子通信研究院 多信道音频信号处理装置及方法
WO2014171791A1 (ko) 2013-04-19 2014-10-23 한국전자통신연구원 다채널 오디오 신호 처리 장치 및 방법
EP2830043A3 (en) 2013-07-22 2015-02-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for Processing an Audio Signal in accordance with a Room Impulse Response, Signal Processing Unit, Audio Encoder, Audio Decoder, and Binaural Renderer
US9319819B2 (en) * 2013-07-25 2016-04-19 Etri Binaural rendering method and apparatus for decoding multi channel audio
CN104681034A (zh) * 2013-11-27 2015-06-03 杜比实验室特许公司 音频信号处理
CN104768121A (zh) * 2014-01-03 2015-07-08 杜比实验室特许公司 响应于多通道音频通过使用至少一个反馈延迟网络产生双耳音频
CN107770717B (zh) 2014-01-03 2019-12-13 杜比实验室特许公司 响应于多通道音频通过使用至少一个反馈延迟网络产生双耳音频
US10382880B2 (en) 2014-01-03 2019-08-13 Dolby Laboratories Licensing Corporation Methods and systems for designing and applying numerically optimized binaural room impulse responses
WO2015102920A1 (en) * 2014-01-03 2015-07-09 Dolby Laboratories Licensing Corporation Generating binaural audio in response to multi-channel audio using at least one feedback delay network
CN108600935B (zh) * 2014-03-19 2020-11-03 韦勒斯标准与技术协会公司 音频信号处理方法和设备
US11606685B2 (en) 2014-09-17 2023-03-14 Gigsky, Inc. Apparatuses, methods and systems for implementing a trusted subscription management platform
US9584938B2 (en) * 2015-01-19 2017-02-28 Sennheiser Electronic Gmbh & Co. Kg Method of determining acoustical characteristics of a room or venue having n sound sources
ES2898951T3 (es) * 2015-02-12 2022-03-09 Dolby Laboratories Licensing Corp Virtualización de auricular
EP3320311B1 (en) * 2015-07-06 2019-10-09 Dolby Laboratories Licensing Corporation Estimation of reverberant energy component from active audio source
EA202090186A3 (ru) 2015-10-09 2020-12-30 Долби Интернешнл Аб Кодирование и декодирование звука с использованием параметров преобразования представления
WO2017161383A2 (en) 2016-01-26 2017-09-21 Ferrer Julio System and method for real-time synchronization of media content via multiple devices and speaker systems
US10142755B2 (en) * 2016-02-18 2018-11-27 Google Llc Signal processing methods and systems for rendering audio on virtual loudspeaker arrays
CN112954582B (zh) * 2016-06-21 2024-08-02 杜比实验室特许公司 用于预渲染的双耳音频的头部跟踪
US10187740B2 (en) * 2016-09-23 2019-01-22 Apple Inc. Producing headphone driver signals in a digital audio signal processing binaural rendering environment
US10531220B2 (en) * 2016-12-05 2020-01-07 Magic Leap, Inc. Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems
US10560661B2 (en) 2017-03-16 2020-02-11 Dolby Laboratories Licensing Corporation Detecting and mitigating audio-visual incongruence
US9820073B1 (en) 2017-05-10 2017-11-14 Tls Corp. Extracting a common signal from multiple audio signals
WO2019032543A1 (en) * 2017-08-10 2019-02-14 Bose Corporation VEHICLE AUDIO SYSTEM WITH REVERB PRESENTED CONTENT
WO2019054559A1 (ko) * 2017-09-15 2019-03-21 엘지전자 주식회사 Brir/rir 파라미터화(parameterization)를 적용한 오디오 인코딩 방법 및 파라미터화된 brir/rir 정보를 이용한 오디오 재생 방법 및 장치
US10390171B2 (en) 2018-01-07 2019-08-20 Creative Technology Ltd Method for generating customized spatial audio with head tracking
CN116249053B (zh) * 2018-10-05 2024-07-19 奇跃公司 用于双耳音频渲染的耳间时间差交叉渐变器
US11503423B2 (en) * 2018-10-25 2022-11-15 Creative Technology Ltd Systems and methods for modifying room characteristics for spatial audio rendering over headphones
US12183351B2 (en) 2019-09-23 2024-12-31 Dolby Laboratories Licensing Corporation Audio encoding/decoding with transform parameters
GB2593419A (en) 2019-10-11 2021-09-29 Nokia Technologies Oy Spatial audio representation and rendering
GB2588171A (en) * 2019-10-11 2021-04-21 Nokia Technologies Oy Spatial audio representation and rendering
GB2594265A (en) * 2020-04-20 2021-10-27 Nokia Technologies Oy Apparatus, methods and computer programs for enabling rendering of spatial audio signals
EP4007310A1 (en) * 2020-11-30 2022-06-01 ASK Industries GmbH Method of processing an input audio signal for generating a stereo output audio signal having specific reverberation characteristics
AT523644B1 (de) * 2020-12-01 2021-10-15 Atmoky Gmbh Verfahren für die Erzeugung eines Konvertierungsfilters für ein Konvertieren eines multidimensionalen Ausgangs-Audiosignal in ein zweidimensionales Hör-Audiosignal
CN117917097A (zh) 2021-09-09 2024-04-19 瑞典爱立信有限公司 滤波器的高效建模
CN113872565B (zh) * 2021-09-27 2025-09-19 中国政法大学 一种基于层级集成的个性化头相关传输函数模型
CN116939474A (zh) 2022-04-12 2023-10-24 北京荣耀终端有限公司 一种音频信号处理方法及电子设备

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5371799A (en) * 1993-06-01 1994-12-06 Qsound Labs, Inc. Stereo headphone sound source localization system
GB9324240D0 (en) * 1993-11-25 1994-01-12 Central Research Lab Ltd Method and apparatus for processing a bonaural pair of signals
ES2167046T3 (es) * 1994-02-25 2002-05-01 Henrik Moller Sintesis binaural, funcion de transferencia relacionada con una cabeza y su utilizacion.
JPH08102999A (ja) * 1994-09-30 1996-04-16 Nissan Motor Co Ltd 立体音響再生装置
KR20010030608A (ko) * 1997-09-16 2001-04-16 레이크 테크놀로지 리미티드 청취자 주변의 음원의 공간화를 향상시키기 위한 스테레오헤드폰 디바이스에서의 필터링 효과의 이용
JP4240683B2 (ja) * 1999-09-29 2009-03-18 ソニー株式会社 オーディオ処理装置
CN1647044A (zh) 2002-06-20 2005-07-27 松下电器产业株式会社 多任务控制设备和音乐数据再现设备
JP4123376B2 (ja) * 2004-04-27 2008-07-23 ソニー株式会社 信号処理装置およびバイノーラル再生方法
GB0419346D0 (en) * 2004-09-01 2004-09-29 Smyth Stephen M F Method and apparatus for improved headphone virtualisation
DE102005010057A1 (de) * 2005-03-04 2006-09-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines codierten Stereo-Signals eines Audiostücks oder Audiodatenstroms
KR100708196B1 (ko) * 2005-11-30 2007-04-17 삼성전자주식회사 모노 스피커를 이용한 확장된 사운드 재생 장치 및 방법
WO2007080211A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation Decoding of binaural audio signals
JP2009526264A (ja) 2006-02-07 2009-07-16 エルジー エレクトロニクス インコーポレイティド 符号化／復号化装置及び方法
US9009057B2 (en) 2006-02-21 2015-04-14 Koninklijke Philips N.V. Audio encoding and decoding to generate binaural virtual spatial signals
US8670570B2 (en) * 2006-11-07 2014-03-11 Stmicroelectronics Asia Pacific Pte., Ltd. Environmental effects generator for digital audio signals
JP5302207B2 (ja) 2006-12-07 2013-10-02 エルジー エレクトロニクス インコーポレイティド オーディオ処理方法及び装置
AU2008309951B8 (en) * 2007-10-09 2011-12-22 Dolby International Ab Method and apparatus for generating a binaural audio signal
EP2214425A1 (en) * 2009-01-28 2010-08-04 Auralia Emotive Media Systems S.L. Binaural audio guide
JP5533248B2 (ja) * 2010-05-20 2014-06-25 ソニー株式会社 音声信号処理装置および音声信号処理方法
US8908874B2 (en) * 2010-09-08 2014-12-09 Dts, Inc. Spatial audio encoding and reproduction
KR101217544B1 (ko) * 2010-12-07 2013-01-02 래드손(주) 음질 향상 효과를 가지는 오디오 신호를 생성하는 오디오 장치 및 방법

Also Published As

Publication number Publication date
US20150350801A1 (en) 2015-12-03
EP2946572A1 (en) 2015-11-25
JP2016507986A (ja) 2016-03-10
MX2015009002A (es) 2015-09-16
RU2656717C2 (ru) 2018-06-06
CN104919820A (zh) 2015-09-16
MX346825B (es) 2017-04-03
CN104919820B (zh) 2017-04-26
WO2014111829A1 (en) 2014-07-24
US9973871B2 (en) 2018-05-15
JP6433918B2 (ja) 2018-12-05
BR112015016978B1 (pt) 2021-12-21
EP2946572B1 (en) 2018-09-05
BR112015016978A2 (pt) 2017-07-11

Similar Documents

Publication Publication Date Title
RU2015134388A (ru) Бинауральная аудиообработка
WO2015152663A3 (ko) 오디오 신호 처리 방법 및 장치
EP4246513A3 (en) Audio signal processing method and parameterization device for same
EP4376005A3 (en) Apparatuses and methods for determining a phase relationship between an input clock signal and a multiphase clock signal
MX364461B (es) Método y dispositivo para lograr el registro de audio objetivo y aparato electrónico.
CN103888237A (zh) 一种实现时钟时间同步的方法及装置
CN109240159B (zh) 多路同步信号触发方法、终端、数据采集系统及存储介质
RU2016110099A (ru) Способ для определения опорных синхросигналов, подвергнутых воздействию изменения в асимметрии задержки трассы распространения между узлами в сети связи
TW201614959A (en) Clock and data recovery circuit and method
MX2019004078A (es) Sistema y métodos para detectar componentes esclavo no auténticos utilizando cambios de frecuencia de reloj.
RU2016114565A (ru) Устройство обработки информации, способ и программа
MX342099B (es) Dispositivo, método y programa de computadora para desplazamientos de frecuencia libremente seleccionables en el dominio de subbanda.
WO2016046696A3 (en) Digital mri receiver coil with built-in received phase noise indicator
JP5791828B2 (ja) 中継装置及び通信システム及び中継方法
WO2020098349A1 (zh) 一种基于时钟周期的脉宽调制信号占空比倍增电路
US20140133614A1 (en) Eye pattern generation of unequalized eye patterns using a serial receiver with embedded eye capability
CN108540128B (zh) 一种时钟分频电路及其分频方法
JP2005141738A (ja) 環境内に空間分散された複数の非同期センサからの信号を同期させる方法および信号を同期させるシステム
DE502008001261D1 (de) Verfahren zur erzeugung einer taktfrequenz
JP2016224089A5 (ru)
EP1976130A3 (en) Apparatus for processing packets and method of doing the same
CN102467097B (zh) 一种外设控制器和外设控制电路
US10110371B2 (en) Phase difference estimation device and communication device having the phase difference estimation device
CN104301582A (zh) 一种复合视频信号产生方法
EP2391007A3 (en) Division circuit, division device, and electronic apparatus