[go: up one dir, main page]

CN104136299B - 用于在车内对声音进行导向的系统、方法以及装置 - Google Patents

用于在车内对声音进行导向的系统、方法以及装置 Download PDF

Info

Publication number
CN104136299B
CN104136299B CN201180075921.9A CN201180075921A CN104136299B CN 104136299 B CN104136299 B CN 104136299B CN 201180075921 A CN201180075921 A CN 201180075921A CN 104136299 B CN104136299 B CN 104136299B
Authority
CN
China
Prior art keywords
sound
vehicle
described vehicle
positioning
external voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180075921.9A
Other languages
English (en)
Other versions
CN104136299A (zh
Inventor
J·希利
D·L·格劳曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN104136299A publication Critical patent/CN104136299A/zh
Application granted granted Critical
Publication of CN104136299B publication Critical patent/CN104136299B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R27/00—Public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Transportation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Stereophonic System (AREA)

Abstract

本发明的一些实施例可以包括用于在车内对声音进行导向的系统、方法和装置。根据本发明的一个示例性实施例，提供了一种用于改变车内声音的方向的方法。所述方法包括从连接至车辆的至少一个相机接收一个或多个图像；从所述一个或多个图像中定位与车辆内一个或多个乘员相关联的一个或多个身体特征；生成至少一个用于控制一个或多个声音变换器的信号；以及至少基于所述定位，将所述一个或多个生成的信号路由给所述一个或多个声音变换器，以用于将声波导向至所述一个或多个身体特征中的至少一个。

Description

用于在车内对声音进行导向的系统、方法以及装置
技术领域
本发明通常涉及声音音频处理，更具体地，涉及用于在车内对声音进行导向的系统、方法和装置。
背景技术
术语“多声道音频”或“环绕声”通常是指可以产生像是源自于围绕听者的多个不同方向的声音的系统。传统的及商业可用的包括杜比数字、DTS以及索尼动态数字声(SDDS)在内的系统和技术，通常被用于在可控的收听环境中使用预录制和/或编码的多声道音频产生定向的声音。在车厢内提供逼真的定向声音会带来一些挑战，这是由于靠近的反射表面、有限的空间以及乘员的物理属性方面的变化，等等。
附图说明
现在参考附图和流程图，其并不一定是按比例绘制的，其中：
图1是根据本发明一个示例性实施例的示例性车辆音频系统的框图；
图2是根据本发明一个示例性实施例的车辆内的示例性扬声器布置；
图3是根据本发明一个示例性实施例的示例性定向声场的图；
图4是根据本发明一个示例性实施例的示例性声音方向布局的图；
图5是根据本发明一个示例性实施例的示例性音频和图像处理系统的框图；
图6是根据本发明一个示例性实施例的示例性方法的流程图。
具体实施方式
接下来将参考附图更加全面地描述本发明的实施例，附图中示出了本发明的实施例。然而，本发明可以以许多不同的形式实施，并不应被解释为仅限于本文中所阐述的实施例；相反，提供这些实施例使得本公开是透彻的、完整的，并且充分地向本领域技术人员说明了本发明的范围。
在下面的描述中，阐述了许多具体细节。然而，可以理解的是可以在没有这些具体细节的情况下实施本发明的实施例。在其他的情况下，众所周知的方法、结构和技术并未被详细地示出，以免妨碍对本说明书的理解。对“一个实施例”、“实施例”、“示例性实施例”、“各个实施例”等的引用表明所述的本发明的实施例可包括特定的特征、结构或特性，但不是每个实施例都必须包含该特定的特征、结构或特性。此外，短语“在一个实施例中”的重复使用并不一定是指同一个实施例，虽然这也是可以的。
如在本文中所使用的，除非另外说明，否则使用序数形容词“第一”、“第二”、“第三”等描述相同的对象，仅仅表明正在指代相似对象的不同实例，而并不是要暗示所述的对象必须按照给定的次序(时间上、空间上、排名上或以任何其他方式)。
接下来将参考附图更加全面地描述本发明的实施例。然而，本发明可以以许多不同的形式实施，并不应被解释为仅限于本文中所阐述的实施例；相反，提供这些实施例使得本公开是透彻的、完整的，并且说明了本发明的范围。
图1示出了根据本发明一个实施例的示例性车辆音频系统100。在一个示例性实施例中，处理器/路由器102可以用于接受和处理来自音频源106的音频，其可包括，例如，来自标准汽车收音机、CD播放机、磁带卡座或其他高保真立体声源的立体声音频；单声道音频源或数字化多声道源(例如杜比5.1环绕声)；和/或来自包括手机、导航系统等在内的通讯设备的音频。根据一个示例性实施例，处理器/路由器102也可以接受和处理来自一个或多个相机104的图像。根据一个示例性实施例，处理器/路由器102也可接受和处理从一个或多个连接至车辆上的麦克风接收到的信号。
根据一个示例性实施例，处理器/路由器102可以提供处理、路由、分离、过滤、转换、压缩、限制、放大、衰减、延迟、平移、相位调整、混合、发送、旁路等等，以至少部分地基于一个或多个相机104捕获的图像信息和/或来自一个或多个麦克风108的信号信息，来选择性地生成或重新生成车内的定向声音。根据一个示例性实施例，视频图像可以通过处理器/路由器102进行实时的或接近实时的分析，以提取空间信息，所述空间信息可以被编码或以其他方式用于设置信号的参数，所述信号可以被发送给扬声器110，或发送至其他外部装置以用于进一步处理。在本发明一个示例性实施例中，通过从一个或多个相机104所获得的图像中提取的信息，声音信息的明显的方向性可以相对于对象或乘员的位置而被编码和/或生成。
根据一个示例性实施例，声音的局部化可以至少部分地基于对视频信息的处理和分析而自动地生成，所述视频信息可包括相对深度信息以及与车辆的一个或多个乘员的物理特性或位置相关的信息。根据本发明的其他实施例，对象或乘员位置信息可以由处理器/路由器102来处理，以用于在车内动态地定位和/或布置多个声音。
根据一个示例性实施例，一个或多个扬声器110的阵列可以与处理器/路由器102通信，并且可以对由处理器/路由器102生成的信号做出响应。在一个实施例中，系统100也可以包括一个或多个麦克风108，用于同时检测来自车外一个或多个方向的声音。
图2是根据本发明的一个示例性实施例的在具有乘员202、204的车内的示例性扬声器布置。在一个示例性实施例中，与处理器/路由器102进行通信的扬声器110可以被布置在车厢内，例如，在门中、头枕中、中控台中、车顶中等等。根据另一示例性实施例，车内的扬声器110的数目和物理布局可变。
根据示例性实施例，车厢可包括各种表面，其可以以不同的方式与声音相互作用。例如，座椅可包括吸声材料，而车窗和仪表板可以反射声音。在示例性实施例中，车内的各种车辆部件、物体和/或乘员202、204的位置、形状和声学属性可以被建模，以提供例如用于确定与来自每个扬声器110的声音相关联的方向、散度、反射和延迟的传递函数。
图3是根据本发明的一个示例性实施例的从声源314发出并包括音锥302、304的示例性定向声场的图。根据一个示例性实施例，第一音锥302的外边界可以代表相对于最大声压水平(SPL)的-3dB SPL位置，该最大SPL可以位于第一音锥302的中心附近。根据一个示例性实施例，第二音锥304的外部边界可以大致对应于相对于最大SPL的-6dB SPL位置。根据一个示例性实施例，在乘员耳朵312平面内的各个音锥302、304的有效直径可以是声音频率和从声源314至乘员耳朵312的距离306的函数。根据示例性实施例，乘员耳朵312可以在第一音锥302的中心附近，此处SPL最大。在第一音锥302内所感知到的音量308例如可以比正好在第一音锥302外但在第二音锥304内的区域中所感知到的音量310大大约3dB。图3示出了所感知的音量随着乘员耳朵312相对于声场方向进行移动而减小的示例。
根据示例性实施例，乘员耳朵312可以相对于定向声场移动，或者定向声场可以相对于乘员耳朵312转向。例如，可通过在供给两个或更多个扬声器的信号中引入相移而将声源转向。根据一个示例性实施例，乘员耳朵312的位置可以使用相机追踪，定向声场可选择性地转向。例如，声场可朝着乘员耳朵312转向，以为特定的乘员提供相对大声的(或者隔离的)可听信号(相比于车内其他乘员)。
根据示例性实施例，声场的频率内容可调节，以控制音锥的直径或加强声场的方向性。已知的是，具有低频内容(例如，在20Hz-500Hz范围内)的声音由于更长的波长而可能看起来是全向的。例如，20Hz音调具有大约17米的波长。500Hz音调具有大约70厘米的波长。根据一个示例性实施例，可通过选择性地对音频信号应用低通滤波器从而将低于1700Hz的频率移除(导致波长为大约20cm或更小的声音)，使得能够选择性地对声音进行导向。根据示例性实施例，所获得的声音的频率内容可以被选择性地调整，以过滤掉更大范围的低频，以给出更小直径的音锥302，并在例如驾驶员和乘客之间提供更多的可听隔离。根据一些示例性实施例，可以过滤掉大约3000Hz以下的频率，以提供更多的隔离。
图4示出了根据本发明的一个示例性实施例的示例性声音方向布置400。所示出的并与声音方向布置400相关联的各个位置404可以作为针对在空间中对相对于乘员头部402的声音局部化的相对布置而进行描述的辅助。根据一个示例性实施例，声音方向布置400可以以乘员头部402为中心。例如，面朝车辆前方的乘员可能朝向子区域位置4。根据其他实施例，各个位置404(例如，被标记为1到8的位置)可包括更多或更少的子区域。然而，为了限定定向声场信息的主要的方向、矢量、局部化等的目的，声音方向布置400可提供一种方便的构架，用于理解本发明的实施例。
根据一个示例性实施例，本发明的一个方面是，实时地或者接近实时地对发送给多个扬声器的信号进行调整，从而使得声音的全部或部分被动态地局部化到空间中的特定区域，并因此被感知为来自特定的方向。
根据一个示例性实施例，图4中示出的各个位置404可代表麦克风(例如，如图1中所示的麦克风108)的布置。根据一个示例性实施例，可将麦克风围绕车辆的外部布置，并可用于例如局部化车辆外部的声音方向。根据示例性实施例，源自车辆外的声音可被追踪，以确定外部声音的主导方向。根据一个示例性实施例，外部声音可在车内重新产生，以提供相应的车内声场，就像源自外部声音的对应主导方向一样，例如，以提供对外部声音方向的加强的感知。通常难以通过警笛声来分辨紧急车辆正在行驶的方向，而本发明的示例性实施例可以为这种外部声音的方向提供额外的线索。在一个示例性情景中，车辆驾驶员可能无法看见处于他/她盲点中的车辆。本发明的示例性实施例可以使用多个麦克风或其他传感器与车内的扬声器相结合，以提供另一车辆或对象的方向和距离的可听指示。
图5是示例性音频和图像处理系统500的框图，其包括用于接收、处理和输出信号的控制器502。根据一个示例性实施例，一个或多个输入/输出接口522可用于接收来自一个或多个音频源106和一个或多个相机104的输入。根据一个示例性实施例，一个或多个输入/输出接口522可以用于接收来自一个或多个麦克风108的输入，如参考图4所讨论的。
根据一个示例性实施例，音频源106可以与音频处理器506通信，而相机104可以与图像处理器504通信。根据一个示例性实施例，图像处理器504和音频处理器506可以是同一个微处理器。无论在哪种情况下，处理器504、506中的每个可以与存储器设备508通信。
在一个示例性实施例中，存储器508可包括操作系统510。根据一个示例性实施例，存储器508可用于存储数据512。在一个示例性实施例中，存储器508可包括一些机器可读代码模块，其用于与处理器504、506结合在一起工作，以执行与音频和/或图像处理相关的各种处理。例如，图像处理模块514可用于执行与图像相关的各种功能。例如，图像处理模块514可以接收来自相机104的图像，并可以隔离出与图像相关联的感兴趣区域(ROI)。在一个示例性实施例中，图像处理模块514可以用于分析输入的图像流，并可以提供针对相机104的焦距和/或光圈控制。
根据一个示例性实施例，存储器508可以包括头部追踪模块516，其可以与图像处理模块514结合在一起工作，以定位且追踪与图像相关联的某些特征，该追踪信息可用于对音频进行导向。根据一个示例性实施例，追踪模块516可用于持续地追踪乘员的头部或其他身体部位，并且至少部分地基于在乘员移动他/她头部或躯干时的追踪，声音可以被选择性地导向至乘员的耳朵。在另一示例性实施例中，可设置追踪模块516，从而音锥(或者声音的主导方向)可以被初始地设定并接着被固定，以允许人员有意地移入或移出音锥。在一个示例性实施例中，一个或多个相机104可用于捕获车辆乘员、尤其是乘员的头部部分的图像。根据一个示例性实施例，乘员的头部和上半身部分可被分析，以确定或估算头部的传递函数，该函数可用于改变音频输出。例如，与乘员头部、耳朵等相关联的位置、倾斜、姿势等等可通过处理来自相机104的图像以及识别并隔离感兴趣区域来进行追踪。根据一个示例性实施例，头部追踪模块516可提供关于车辆乘员头部的位置的实时或接近实时的信息，从而可以执行合适的音频处理，正如现在将参考声学模型模块518和音频处理模块520所描述的。
根据示例性实施例，声学模型模块518可包括关于车内对象的结构、材料和布置的声学建模信息。例如，声学模型模块518可考虑车内的反射表面，且可以提供例如关于从声源(例如扬声器)至可对应于乘员头部或耳朵的车内位置的声压水平传递函数的信息。根据一个示例性实施例，声学模型模块518可进一步基于频率内容，考虑声场声束宽度、反射以及散射，并可用于调整对音频信号的滤波。
根据一个示例性实施例，存储器508还可以包括音频处理模块520。根据一个示例性实施例，音频处理模块520可与头部追踪模块516和声学模型518结合在一起工作以提供例如一个或多个音频声道的路由、频率滤波、相位调整、响度等等，以选择性地将声音导向至车内的特定主导位置。例如，音频处理模块520可基于乘员头部的位置(如从相机104和头部追踪模块516所确定的)来修改车内声场的转向。根据一个示例性实施例，音频处理模块520可将特定音频的音锥限定于车辆的特定乘员。例如，车内可能有多人，每个人都有其自己的音乐收听偏好。根据一个示例性实施例，声音处理模块520可将特定的音频信息导向至驾驶员，而一个或多个乘客可接收完全不同的音频信号。
根据一个示例性实施例，音频处理模块520也可用于在车内布置声音，所述声音对应于可被一个或多个麦克风108检测到的车辆外部的声音的方向。
根据一个示例性实施例，控制器502可包括用于分离和路由音频信号的处理功能。根据一个示例性实施例，音频信号可包括模拟信号和/或数字信号。根据一个示例性实施例，控制器502可包括多声道调平放大器，其用于处理来自多个麦克风108或其他音频源106的输入。多声道调平放大器可与多声道滤波器或转接线路进行通信，以用于进一步地按照频率分离出信号以用于特定的路由。在一个示例性实施例中，控制器可包括多声道延迟或相位变化能力，以选择性地改变信号相位。根据一个示例性实施例，系统500可包括多声道输出放大器532，其用于使用定制的信号来单独地驱动扬声器110。
继续参考图5，根据本发明的一个示例性实施例，具有多个合并/混合/路由节点的多信号总线可用于路由、导向、合并或混合信号至模块514-520中的任意模块和/或多声道输出放大器532，或路由、导向、合并或混合来自这些模块和/或器件的信号。根据本发明的一个示例性实施例，音频处理器506可包括多声道调平放大器，其可用于规格化输入的音频声道，或者另外选择性地加强或减弱某些总线信号。根据一个示例性实施例，音频处理器506也可以包括多声道滤波器/转接线路模块，其可用于音频信号的选择性均衡。根据一个示例性实施例，多声道滤波器/转接线路的一个功能可以是选择性地改变某些音频声道的频率内容，从而例如仅将相对中频率和高频率的信息引导给特定的扬声器110，或者仅将来自所有声道的低频内容引导给超低音扬声器。
继续参考图5，根据一个示例性实施例，音频处理器506可包括多声道延迟，其可以经由并行音频总线以及合并/混合/路由节点、或者通过输入分离路由器接收来自进行任意组合的其他模块514-520中的任意模块的信号。多声道延迟可以用于向最终可被发送到扬声器的音频的各个声道给予可变的延迟。多声道延迟也可以包括子模块，其可给予相位延迟以例如在车内选择性地增加相长干涉或相消干涉、或者调整声场锥的尺寸和位置。
根据一个示例性实施例，音频和图像处理系统500可被配置为通过网络526无线地与远程服务器528和/或远程服务530进行通信。例如，针对控制器和其他相关联的设备的固件更新可通过无线网络连接以及通过一个或多个网络接口524来处理。
现在将参考图6的流程图，描述用于在车内改变声音方向的示例性方法600。方法600开始于方框602，并且根据本发明的一个示例性实施例，其包括接收来自连接至车辆的至少一个相机的一个或多个图像。在方框604中，方法600包括从一个或多个图像中定位与车辆的一个或多个乘员相关联的一个或多个身体特征。在方框606中，方法600包括产生至少一个用于控制一个或多个声音变换器的信号。在方框608中，方法600包括至少基于该定位，将一个或多个生成的信号路由给一个或多个声音变换器，以用于将声波导向至一个或多个身体特征中的至少一个。方法600在方框608之后终止。
根据示例性实施例，可以提供某些技术效果，例如创建某些系统、方法和装置，其提供车内定向的声音。本发明的示例性实施例可提供以下更进一步的技术效果：提供系统、方法和装置，其用于在车内重新生成所检测到的源自车辆外部的声音，以用于对外部声音的方向的加强检测。
在本发明的示例性实施例中，音频和图像处理系统500可包括任何数目的硬件和/或软件应用，其被执行以便于任何操作。在示例性实施例中，一个或多个输入/输出接口可便于音频和图像处理系统500与一个或多个输入/输出设备之间的通信。例如，通用串行总线端口、串行端口、盘驱动器、CD-ROM驱动器和/或一个或多个用户接口设备，例如显示器、键盘、小键盘、鼠标、控制面板、触摸屏显示器、麦克风等等，可便于用户与音频和图像处理系统500的交互。一个或多个输入/输出接口可用于接收或收集来自很多种输入设备的数据和/或用户指令。所接收的数据可以如在本发明各个实施例中所期望的那样通过一个或多个计算机处理器进行处理，和/或可存储在一个或多个存储器设备中。
一个或多个网络接口可便于将音频和图像处理系统500输入和输出连接至一个或多个合适的网络和/或连接：例如，便于和与系统相关联的任何数目的传感器进行通信的连接。一个或多个网络接口可进一步便于连接至一个或多个适合的网络；例如，局域网、广域网、互联网、蜂窝网络、射频网络、支持蓝牙TM(Telefonaktiebolaget LM Ericsson所有)的网络、支持Wi-FiTM(Wi-Fi联盟所有)的网络、基于卫星的网络、任何有线网络、任何无线网络等等，用于与外部设备和/或系统进行通信。
如所期望的，本发明的实施例可包括具有更多或更少的图5中示出的部件的音频和图像处理系统500。
上文参照根据本发明示例性实施例的系统、方法、装置和/或计算机程序产品的框图和流程图描述了本发明的某些实施例。可以理解的是，可通过计算机可执行程序指令分别地实施框图和流程图中的框图和流程图的一个或多个方框以及方框的组合。同样地，根据本发明的一些实施例，框图和流程图中的一些方框可以不是必须以示出的顺序执行，或者可以根本不必执行。
这些计算机可执行程序指令可被加载到通用计算机、专用计算机、处理器或其他可编程数据处理装置，以生成特定机器，从而在计算机、处理器或其他可编程数据处理装置上执行的指令创建用于实施流程图方框中所指定的一个或多个功能的模块。这些计算机程序指令也可被存储在计算机可读存储器中，其可以命令计算机或其他可编程数据处理装置以特定的方式运行，从而存储在计算机可读存储器中的指令生成制品，其包括实施流程图方框中所指定的一个或多个功能的指令模块。例如，本发明的实施例可提供一种计算机程序产品，其包括其中实施有计算机可读程序代码或程序指令的计算机可用介质，所述计算机可读程序代码适用于被执行以实施流程图方框中所指定的一个或多个功能。计算机程序指令也可加载至计算机或其他可编程数据处理装置上，以使得一系列操作单元或步骤在计算机或其它可编程装置上执行，来产生计算机实施的过程，从而使得在计算机或其它可编程装置上执行的指令提供用于实施流程图方框中所指定的单元或步骤。
因此，框图和流程图的方框支持用于执行特定功能的模块的组合、用于执行特定功能的单元或步骤以及用于执行特定功能的程序指令模块的组合。也将理解的是，框图和流程图中的每个方框，以及框图和流程图中的方框的组合，可以通过专用的、基于硬件的、执行特定的功能、元件或步骤的计算机系统，或者专用硬件和计算机指令的组合来实施。
尽管本发明的某些实施例已经结合当前被认为是最实际的和多种的实施例进行了描述，可以理解的是本发明不限于所公开的实施例，相反地，其旨在覆盖包含于所附权利要求范围内的各个修改和等同布置。尽管本文中使用了特定的术语，但是它们仅仅是在一般性的和描述的意义上来使用，而并不是为了限制的目的。
所写的说明书使用示例来公开包括最佳模式在内的本发明的某些实施例，还使得任何本领域技术人员都可以实践本发明的某些实施例，其包括制造和使用任何设备或系统以及执行任何所包含的方法。本发明某些实施例的可专利范围限定在权利要求中，且可包括本领域技术人员可想到的其他示例。如果这些其他示例具有与权利要求的字面语言没有区别的结构性单元，或者如果它们包括具有与权利要求的字面语言有非本质的区别的等同结构性单元，则它们是要落入权利要求的范围内。

Claims (22)

1.一种用于提供车内定向的声音的方法，所述方法包括：
从连接至车辆的至少一个相机接收一个或多个图像；
从所述一个或多个图像中定位与所述车辆的一个或多个乘员相关联的一个或多个身体特征；
生成至少一个用于控制一个或多个声音变换器的信号；以及
至少部分地基于所述定位，路由所生成的一个或多个信号给所述一个或多个声音变换器，以用于将声波导向至所述一个或多个身体特征中的至少一个，
所述方法进一步包括：
检测一个或多个外部声音并且检测所述一个或多个外部声音的方向，其中，所述一个或多个外部声音源自所述车辆外，
重新生成检测到的外部声音并且选择性地对重新生成的外部声音进行导向，以至少模拟相对于所述车辆的方向的所述外部声音的检测到的方向，其中，所述重新生成的外部声音来自所述车辆内的一个或多个声源。
2.如权利要求1所述的方法，其中，对所述一个或多个身体特征的定位包括定位至少头部。
3.如权利要求1所述的方法，其中，对所述一个或多个身体特征的定位包括定位至少一个耳朵。
4.如权利要求1所述的方法，其中，路由所生成的一个或多个信号包括选择性地将所生成的一个或多个信号路由到所述车辆内的一个或多个扬声器。
5.如权利要求1所述的方法，其中，对声波进行导向包括形成至少第一声束，其中，所述第一声束是主要局部化到与所述车辆的第一乘员相关联的一个或多个身体特征的。
6.如权利要求5所述的方法，其中，对声波进行导向进一步包括形成第二声束，其中，所述第二声束是主要局部化到与所述车辆的第二乘员相关联的一个或多个身体特征的。
7.如权利要求1所述的方法，进一步包括：使用所述外部声音来提高对相对于所述车辆的方向的所述外部声音的方向的检测。
8.一种车辆，包括：
连接至所述车辆的至少一个相机；
连接至所述车辆的一个或多个扬声器；
用于存储数据和计算机可执行指令的至少一个存储器；以及
一个或多个处理器，其被配置为访问所述至少一个存储器并且进一步被配置为执行计算机可执行指令，其用于：
从所述至少一个相机接收一个或多个图像；
从所述一个或多个图像中定位与所述车辆的一个或多个乘员相关联的一个或多个身体特征；
生成至少一个用于控制所述一个或多个扬声器的信号；以及
至少部分地基于所述定位，选择性地路由所生成的一个或多个信号给所述一个或多个扬声器，以用于将声波导向至所述一个或多个身体特征中的至少一个，
所述车辆进一步包括：
连接至所述车辆的多个麦克风，其用于检测外部声音并且检测所述外部声音的方向，其中，所述外部声音源自所述车辆外，
其中，所述一个或多个处理器进一步被配置为用于通过选择性地将对应于所检测到的外部声音的信号引导至所述一个或多个扬声器来重新生成所检测到的外部声音，以至少模拟相对于所述车辆的方向的所述外部声音的检测到的方向。
9.如权利要求8所述的车辆，其中，对所述一个或多个身体特征的定位包括定位至少头部。
10.如权利要求8所述的车辆，其中，对所述一个或多个身体特征的定位包括定位至少一个耳朵。
11.如权利要求8所述的车辆，其中，对声波进行导向包括形成至少第一声束，其中，所述第一声束是主要局部化到与所述车辆的第一乘员相关联的一个或多个身体特征的。
12.如权利要求8所述的车辆，其中，对声波进行导向进一步包括形成第二声束，其中，所述第二声束是主要局部化到与所述车辆的第二乘员相关联的一个或多个身体特征的。
13.一种用于提供车内定向的声音的装置，包括：
至少一个存储器，其用于存储数据和计算机可执行指令；以及
一个或多个处理器，其被配置为访问所述至少一个存储器并且进一步被配置为执行计算机可执行指令，其用于：
从连接至车辆的至少一个相机接收一个或多个图像；
从所述一个或多个图像中定位与所述车辆的一个或多个乘员相关联的一个或多个身体特征；
生成至少一个用于控制连接到所述车辆的一个或多个扬声器的信号；以及
至少部分地基于所述定位，选择性地路由所生成一个或多个信号给所述一个或多个扬声器，以用于将声波导向至所述一个或多个身体特征中的至少一个，
其中，所述一个或多个处理器进一步被配置为用于接收来自连接至所述车辆的多个麦克风的麦克风信号，以用于检测外部声音并且检测所述外部声音的方向，其中，所述外部声音源自所述车辆外，以及，通过选择性地将对应于所检测到的外部声音的信号引导至所述一个或多个扬声器来重新生成所检测到的外部声音，以至少模拟相对于所述车辆的方向的所述外部声音的检测到的方向。
14.如权利要求13所述的装置，其中，对所述一个或多个身体特征的定位包括定位所述车辆的乘员的至少头部。
15.如权利要求13所述的装置，其中，对所述一个或多个身体特征的定位包括定位至少一个耳朵。
16.如权利要求13所述的装置，其中，对声波进行导向包括形成至少第一声束，其中，所述第一声束是主要局部化到与所述车辆的第一乘员相关联的一个或多个身体特征的。
17.如权利要求13所述的装置，其中，对声波进行导向进一步包括形成第二声束，其中，所述第二声束是主要局部化到与所述车辆的第二乘员相关联的一个或多个身体特征的。
18.一种用于改变车辆内声音的方向的装置，所述装置进一步包括：
用于从连接至所述车辆的至少一个相机接收一个或多个图像的单元；
用于从所述一个或多个图像中定位与所述车辆的一个或多个乘员相关联的一个或多个身体特征的单元；
用于生成至少一个用于控制一个或多个声音变换器的信号的单元；
用于至少部分地基于所述定位路由所生成的一个或多个信号给所述一个或多个声音变换器，以用于将声波导向至所述一个或多个身体特征中的至少一个的单元；
用于检测一个或多个外部声音并且检测所述一个或多个外部声音的方向的单元，其中，所述外部声音源自所述车辆外；以及
用于重新生成所检测到的外部声音并且选择性地对重新生成的外部声音进行导向以至少模拟相对于所述车辆的方向的所述外部声音的检测到的方向的单元，其中，所述重新生成的外部声音来自所述车辆内的一个或多个声源。
19.如权利要求18所述的装置，其中，对所述一个或多个身体特征的定位包括定位至少头部。
20.如权利要求18所述的装置，其中，对所述一个或多个身体特征的定位包括定位至少一个耳朵。
21.如权利要求18所述的装置，其中，路由所生成的一个或多个信号包括选择性地将所生成的一个或多个信号路由到所述车辆内的一个或多个扬声器。
22.如权利要求18所述的装置，其中，对声波进行导向包括形成至少第一声束，其中，所述第一声束是主要局部化到与所述车辆的第一乘员相关联的一个或多个身体特征的。
CN201180075921.9A 2011-12-29 2011-12-29 用于在车内对声音进行导向的系统、方法以及装置 Active CN104136299B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2011/067840 WO2013101061A1 (en) 2011-12-29 2011-12-29 Systems, methods, and apparatus for directing sound in a vehicle

Publications (2)

Publication Number Publication Date
CN104136299A CN104136299A (zh) 2014-11-05
CN104136299B true CN104136299B (zh) 2017-02-15

Family

ID=48698297

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180075921.9A Active CN104136299B (zh) 2011-12-29 2011-12-29 用于在车内对声音进行导向的系统、方法以及装置

Country Status (6)

Country Link
US (1) US20140294210A1 (zh)
EP (1) EP2797795A4 (zh)
JP (1) JP2015507572A (zh)
KR (1) KR20140098835A (zh)
CN (1) CN104136299B (zh)
WO (1) WO2013101061A1 (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2927642A1 (en) 2014-04-02 2015-10-07 Volvo Car Corporation System and method for distribution of 3d sound in a vehicle
EP3349485A1 (en) 2014-11-19 2018-07-18 Harman Becker Automotive Systems GmbH Sound system for establishing a sound zone using multiple-error least-mean-square (melms) adaptation
US9544679B2 (en) * 2014-12-08 2017-01-10 Harman International Industries, Inc. Adjusting speakers using facial recognition
JP6470041B2 (ja) * 2014-12-26 2019-02-13 株式会社東芝 ナビゲーション装置、ナビゲーション方法及びプログラム
US10142271B2 (en) * 2015-03-06 2018-11-27 Unify Gmbh & Co. Kg Method, device, and system for providing privacy for communications
JP2017069805A (ja) * 2015-09-30 2017-04-06 ヤマハ株式会社 車載音響装置
DE102017100628A1 (de) 2017-01-13 2018-07-19 Visteon Global Technologies, Inc. System und Verfahren zum Bereitstellen einer personenbezogenen Audiowiedergabe
JP7091311B2 (ja) * 2017-03-29 2022-06-27 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、及び、移動体
CA3003840C (en) * 2017-05-03 2025-02-04 Soltare Inc. AUDIO PROCESSING OF VEHICLE SENSOR SYSTEMS
EP3419309A1 (en) * 2017-06-19 2018-12-26 Nokia Technologies Oy Methods and apparatuses for controlling the audio output of loudspeakers
JP6733705B2 (ja) * 2017-08-23 2020-08-05 株式会社デンソー 車両用情報提供装置及び車両用情報提供システム
JP6827561B2 (ja) * 2017-11-29 2021-02-10 三菱電機株式会社 音響信号制御装置及び方法、並びにプログラム及び記録媒体
US11465631B2 (en) * 2017-12-08 2022-10-11 Tesla, Inc. Personalization system and method for a vehicle based on spatial locations of occupants' body portions
CN108366316B (zh) * 2018-01-16 2019-10-08 中山市悦辰电子实业有限公司 一种满足杜比全景声标准实现的技术方法
JP6965783B2 (ja) * 2018-02-13 2021-11-10 トヨタ自動車株式会社 音声提供方法および音声提供システム
US10650798B2 (en) * 2018-03-27 2020-05-12 Sony Corporation Electronic device, method and computer program for active noise control inside a vehicle
CN110636413A (zh) * 2018-06-22 2019-12-31 长城汽车股份有限公司 调节车载音响音效的系统和方法以及车辆
KR102675289B1 (ko) * 2018-10-29 2024-06-17 현대자동차주식회사 차량 및 그 제어 방법
US11221820B2 (en) * 2019-03-20 2022-01-11 Creative Technology Ltd System and method for processing audio between multiple audio spaces
EP3866457A1 (en) * 2020-02-14 2021-08-18 Nokia Technologies Oy Multi-media content
US11170752B1 (en) * 2020-04-29 2021-11-09 Gulfstream Aerospace Corporation Phased array speaker and microphone system for cockpit communication
US11696084B2 (en) * 2020-10-30 2023-07-04 Bose Corporation Systems and methods for providing augmented audio
CN119856516A (zh) * 2022-08-12 2025-04-18 艾比奎蒂数字公司 车辆中的空间声音图像校正

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6778672B2 (en) * 1992-05-05 2004-08-17 Automotive Technologies International Inc. Audio reception control arrangement and method for a vehicle
JP2008236397A (ja) * 2007-03-20 2008-10-02 Fujifilm Corp 音響調整システム
WO2011135283A2 (en) * 2010-04-26 2011-11-03 Cambridge Mechatronics Limited Loudspeakers with position tracking
CN102256192A (zh) * 2010-05-18 2011-11-23 哈曼贝克自动系统股份有限公司 声音信号的分离

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2776092B2 (ja) * 1991-09-27 1998-07-16 日産自動車株式会社 車両警報装置
EP1482763A3 (en) * 2003-05-26 2008-08-13 Matsushita Electric Industrial Co., Ltd. Sound field measurement device
KR20050006865A (ko) * 2003-07-10 2005-01-17 현대자동차주식회사 머리위치추적을 통한 차량 스피커위치 제어시스템
GB0415625D0 (en) * 2004-07-13 2004-08-18 1 Ltd Miniature surround-sound loudspeaker
WO2006009028A1 (ja) * 2004-07-20 2006-01-26 Pioneer Corporation 音響再生装置および音響再生システム
WO2007113718A1 (en) * 2006-03-31 2007-10-11 Koninklijke Philips Electronics N.V. A device for and a method of processing data
JP2008113190A (ja) * 2006-10-30 2008-05-15 Nissan Motor Co Ltd 可聴音指向性制御装置
JP5205993B2 (ja) * 2007-02-01 2013-06-05 日産自動車株式会社 車両用聴覚モニター装置および方法
JP4561785B2 (ja) * 2007-07-03 2010-10-13 ヤマハ株式会社 スピーカアレイ装置
JP4655098B2 (ja) * 2008-03-05 2011-03-23 ヤマハ株式会社 音声信号出力装置、音声信号出力方法およびプログラム
JP5139577B2 (ja) * 2008-04-09 2013-02-06 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ フィルタ特性を生成する装置および方法
GB0821999D0 (en) * 2008-12-02 2009-01-07 Pss Belgium Nv Method and apparatus for improved directivity of an acoustic antenna
DE102010022165B4 (de) * 2010-05-20 2023-12-07 Mercedes-Benz Group AG Verfahren und Vorrichtung zur Erfassung zumindest eines von einem Einsatzfahrzeug ausgehenden akustischen Sondersignals für ein Fahrzeug
US20120121103A1 (en) * 2010-11-12 2012-05-17 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Audio/sound information system and method
US20120281858A1 (en) * 2011-05-03 2012-11-08 Menachem Margaliot METHOD AND APPARATUS FOR TRANSMISSION OF SOUND WAVES WITH HIGH LOCALIZATION of SOUND PRODUCTION

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6778672B2 (en) * 1992-05-05 2004-08-17 Automotive Technologies International Inc. Audio reception control arrangement and method for a vehicle
JP2008236397A (ja) * 2007-03-20 2008-10-02 Fujifilm Corp 音響調整システム
WO2011135283A2 (en) * 2010-04-26 2011-11-03 Cambridge Mechatronics Limited Loudspeakers with position tracking
CN102256192A (zh) * 2010-05-18 2011-11-23 哈曼贝克自动系统股份有限公司 声音信号的分离

Also Published As

Publication number Publication date
EP2797795A4 (en) 2015-08-26
CN104136299A (zh) 2014-11-05
US20140294210A1 (en) 2014-10-02
EP2797795A1 (en) 2014-11-05
KR20140098835A (ko) 2014-08-08
JP2015507572A (ja) 2015-03-12
WO2013101061A1 (en) 2013-07-04

Similar Documents

Publication Publication Date Title
CN104136299B (zh) 用于在车内对声音进行导向的系统、方法以及装置
US9293151B2 (en) Speech signal enhancement using visual information
US9049534B2 (en) Directionally radiating sound in a vehicle
US20080273722A1 (en) Directionally radiating sound in a vehicle
JP2019511888A (ja) 個々のサウンド領域を提供するための装置および方法
US20230300552A1 (en) Systems and methods for providing augmented audio
US10070242B2 (en) Devices and methods for conveying audio information in vehicles
JP2010531125A (ja) 指向性をもって音を放射するシステムおよび方法
US20180098175A1 (en) Apparatus and method for driving an array of loudspeakers with drive signals
KR101791843B1 (ko) 차량 내 음향 공간 보정 시스템
EP3392619B1 (en) Audible prompts in a vehicle navigation system
US11968517B2 (en) Systems and methods for providing augmented audio
JP6434165B2 (ja) 前面ラウドスピーカによって個別の三次元音響を達成する、車内再生のためのステレオ信号を処理する装置および方法
JP2010272911A (ja) 音情報提供装置及び音情報提供方法
WO2019032543A1 (en) VEHICLE AUDIO SYSTEM WITH REVERB PRESENTED CONTENT
US20250303861A1 (en) Audio playback devices for vehicle media playback systems
US20250220374A1 (en) Systems and methods for providing augmented ultrasonic audio
CN118661433A (zh) 交通工具座舱中的音频控制
WO2026027466A1 (en) Electronic device, method and computer program
WO2016135964A1 (ja) 音量制御装置、音量制御方法、及び、音量制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant