[go: up one dir, main page]

WO2018079584A1 - 制御装置、制御システム、制御方法、及びプログラム - Google Patents

制御装置、制御システム、制御方法、及びプログラム Download PDF

Info

Publication number
WO2018079584A1
WO2018079584A1 PCT/JP2017/038476 JP2017038476W WO2018079584A1 WO 2018079584 A1 WO2018079584 A1 WO 2018079584A1 JP 2017038476 W JP2017038476 W JP 2017038476W WO 2018079584 A1 WO2018079584 A1 WO 2018079584A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
sound
control
output
outside
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2017/038476
Other languages
English (en)
French (fr)
Inventor
洋人 河内
昭光 藤吉
洋一 奥山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Corp filed Critical Pioneer Corp
Publication of WO2018079584A1 publication Critical patent/WO2018079584A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones

Definitions

  • the present invention relates to a control device, a control system, a control method, and a program.
  • a technology for calming the vehicle has been developed so that the volume of outside sound (sound generated outside the vehicle) that can be heard in the passenger compartment is reduced.
  • outside sound is captured by an input device such as a microphone, and the outside sound is output from the output device such as a speaker to the inside of the vehicle so that the passengers in the vehicle can hear the outside sound.
  • Patent Document 1 discloses a technique for suppressing the presentation of unnecessary audio information in the vehicle by presenting the sound generated by the sound outside the vehicle in the vehicle by a method according to the running state of the vehicle.
  • the device according to Patent Document 1 detects the driver's line-of-sight direction, suppresses ambient sounds in the line-of-sight direction, and presents the vehicle exterior sound to the driver.
  • Patent Document 2 discloses a technique for outputting a type of vehicle exterior sound designated by a user operation into the passenger compartment.
  • information representing an identifier is included in sound output from a sound source (for example, a siren of an emergency vehicle). Then, in the in-vehicle device that controls the output of the vehicle exterior sound to the vehicle interior, whether or not the identifier included in the vehicle exterior sound captured by the microphone is extracted and the vehicle exterior sound is output to the vehicle interior using this identifier. Is controlling.
  • JP 2009-258802 A Japanese Patent Laying-Open No. 2015-032155
  • Patent Document 1 cannot suppress unnecessary sounds that can be heard from other than the driver's line-of-sight direction.
  • Patent Document 2 only sound including an identifier, that is, sound output from a specific sound source can be controlled.
  • the present invention has been made in view of the above-described problems, and an object thereof is to provide a technique for flexibly controlling the output of vehicle exterior sound into the vehicle interior.
  • detection means for acquiring a vehicle exterior sound that is a sound generated outside the vehicle via an input device, and detecting a predetermined feature from the vehicle exterior sound; (2) And a control unit that controls output of the vehicle exterior sound by an output device that outputs the vehicle exterior sound into the vehicle interior based on a detection result of the detection unit.
  • the invention according to claim 11 is: (1) an input device that captures external sound generated outside the vehicle; (2) an output device that outputs the external sound to the interior of the vehicle; and (3) a control device.
  • the control device includes (1) a detection unit that acquires a vehicle exterior sound, which is a sound generated outside the vehicle, and detects a predetermined feature from the vehicle exterior sound, and (2) the detection unit.
  • Control means for controlling the output of the vehicle exterior sound by an output device for outputting the vehicle exterior sound to the vehicle interior based on a detection result.
  • the invention according to claim 12 is a control method executed by a computer.
  • the invention according to claim 13 is a program for causing a computer to execute each step of the control method according to claim 12.
  • FIG. 1 It is a figure which illustrates the control apparatus of Embodiment 1, and its use environment. It is a block diagram which illustrates a control device. It is a figure which illustrates the hardware constitutions of a control apparatus. 3 is a flowchart illustrating a flow of processing executed by the control device according to the first embodiment. It is a figure which illustrates matching with the characteristic of the sound outside a vehicle, and the control information corresponding to the characteristic in a table format. It is a figure which illustrates the relationship between the detection value of a volume sensor, and the amplification factor of the amplifier of an output device in a graph format.
  • each block in the block diagram represents a functional unit configuration, not a hardware unit configuration.
  • FIG. 1 is a diagram illustrating a control device 200 according to the first embodiment and a use environment thereof.
  • FIG. 1 is a diagram for facilitating understanding of the control apparatus 200, and does not limit the operation of the control apparatus 200.
  • the vehicle 240 is an arbitrary vehicle such as an automobile or a train.
  • the vehicle 240 may or may not have an automatic driving function.
  • the input device 10 captures outside sound generated outside the vehicle 240.
  • the input device 10 is configured using a microphone.
  • the output device 20 acquires the vehicle exterior sound captured by the input device 10 and outputs the vehicle exterior sound to the interior of the vehicle 240.
  • the output device 20 is configured using a speaker.
  • the control device 200 controls the output device 20 to control the output of the vehicle exterior sound to the interior of the vehicle 240. At that time, the control device 200 performs control based on the characteristics of the outside sound.
  • FIG. 2 is a block diagram illustrating the control device 200.
  • the control device 200 includes a detection unit 202 and a control unit 204.
  • the detection unit 202 acquires a vehicle exterior sound captured by the input device 10. Furthermore, the detection unit 202 detects a predetermined feature from the vehicle exterior sound.
  • the control unit 204 controls the output of the outside sound by the output device 20 based on the detection result by the detection unit 202.
  • the vehicle exterior sound to be heard by the passenger of the vehicle 240 is controlled based on the characteristics of the vehicle exterior sound.
  • the vehicle exterior sound having a predetermined characteristic is not output to the vehicle interior, or only the vehicle exterior sound having the predetermined characteristic is output to the vehicle interior. It is possible to flexibly control the output of the vehicle exterior sound to the 240 rooms. As a result, for example, only the sound outside the vehicle that suits the passenger of the vehicle 240 is output to the vehicle interior, or only the vehicle external sound that should be heard by the passenger of the vehicle 240 is output to the vehicle interior. The sound outside the car can be output for various purposes.
  • control device 200 of the present embodiment will be described in more detail.
  • Each functional component of the control device 200 may be realized by hardware (eg, a hard-wired electronic circuit) that implements each functional component, or a combination of hardware and software (eg, electronic A combination of a circuit and a program for controlling the circuit may be realized.
  • hardware eg, a hard-wired electronic circuit
  • software eg, electronic A combination of a circuit and a program for controlling the circuit may be realized.
  • FIG. 3 is a diagram illustrating a hardware configuration of the control device 200.
  • the computer 100 is a computer that implements the control device 200.
  • the computer 100 is a ECU (Electronic Control Unit) that controls various hardware provided in the vehicle 240.
  • the computer 100 may be a computer designed exclusively for realizing the control device 200, or may be a general-purpose computer.
  • the computer 100 includes a bus 102, a processor 104, a memory 106, a storage device 108, an input / output interface 110, and a network interface 112.
  • the bus 102 is a data transmission path through which the processor 104, the memory 106, the storage device 108, the input / output interface 110, and the network interface 112 transmit / receive data to / from each other.
  • the method of connecting the processors 104 and the like is not limited to bus connection.
  • the processor 104 is an arithmetic processing device realized using a microprocessor or the like.
  • the memory 106 is a main storage device realized using a RAM (Random Access Memory) or the like.
  • the storage device 108 is an auxiliary storage device realized using a ROM (Read Only Memory), a flash memory, or the like.
  • the storage device 108 may be configured by hardware similar to the hardware configuring the main storage device such as a RAM.
  • the input / output interface 110 is an interface for connecting the computer 100 to peripheral devices.
  • a microphone 12 that realizes the input device 10 and a speaker 22 that realizes the output device 20 are connected to the input / output interface 110.
  • Various analog signals and digital signals used for controlling the vehicle 240 are input or output to the computer 100 via the input / output interface 110.
  • an audio signal representing outside-vehicle sound captured by the input device 10 is input from the input device 10 to the computer 100 via the input / output interface 110.
  • an audio signal to be output from the output device 20 is output from the computer 100 to the output device 20 via the input / output interface 110.
  • the input / output interface 110 appropriately includes an A / D converter that converts an analog input signal into a digital signal, a D / A converter that converts a digital output signal into an analog signal, and the like.
  • the network interface 112 is an interface for connecting the computer 100 to a communication network.
  • This communication network is, for example, a CAN (Controller Area Network) communication network.
  • the method of connecting the network interface 112 to the communication network may be a wireless connection or a wired connection.
  • the storage device 108 stores a program module for realizing each functional component of the control device 200.
  • the processor 104 reads out the program module to the memory 106 and executes it, thereby realizing the function of the control device 200.
  • the input device 10 is an arbitrary device that can capture the outside sound of the vehicle 240.
  • the input device 10 is configured using the microphone 12 described above.
  • the output device 20 is an arbitrary device that can output the sound captured by the vehicle 240 to the interior of the vehicle 240.
  • the output device 20 is configured using the speaker 22 described above.
  • FIG. 4 is a flowchart illustrating the flow of processing executed by the control device 200 according to the first embodiment.
  • the detection unit 202 detects a predetermined feature from the vehicle exterior sound captured by the input device 10 (S102).
  • the control unit 204 controls the output of the vehicle exterior sound by the output device 20 based on the detection result by the detection unit 202 (S104).
  • the detection unit 202 detects a predetermined feature from the vehicle exterior sound captured by the input device 10 (S102). As the predetermined feature, various features relating to sound can be handled.
  • the predetermined feature is a feature related to a temporal change in sound volume, a feature related to a sound frequency distribution, a feature related to a sound frequency band, or a feature related to a periodic change in sound.
  • a feature related to a temporal change in sound volume a feature related to a sound frequency distribution
  • a feature related to a sound frequency band a feature related to a periodic change in sound.
  • the predetermined characteristic regarding the time change of the sound volume is, for example, a characteristic that “the time change of the sound volume is a predetermined value or less”.
  • the vehicle exterior sound that satisfies the feature that “the time change of the sound volume is a predetermined value or less” is, for example, the idling sound of the engine of the vehicle around the vehicle 240 or the ambient sound around the vehicle 240 (the surrounding sound Human voice, machine sound heard from the factory, or wave sound heard from the sea).
  • the predetermined characteristic regarding the frequency distribution of the sound is, for example, a characteristic that “the similarity with the predetermined frequency distribution is equal to or greater than a predetermined value”.
  • the predetermined frequency distribution is determined in advance according to the type of sound to be detected. For example, the frequency distribution is predetermined for each type of sound such as a human voice, engine sound, machine sound, wave sound, siren sound, or the like.
  • the predetermined characteristic regarding the sound frequency band is, for example, a characteristic that “the frequency band of the sound is included in a predetermined range”.
  • the predetermined range of the frequency band is determined in advance according to the type of sound to be detected, similarly to the predetermined frequency distribution.
  • Predetermined features related to periodic sound changes include, for example, the feature that “change in sound volume has periodicity (including arbitrary changes periodically)” and “change in sound volume, It is a feature of “including a predetermined change periodically”.
  • the vehicle exterior sound having periodicity in the change in the sound volume includes, for example, an idling sound of a vehicle engine around the vehicle 240, a sound of a machine of the vehicle 240, or a sound of a wave.
  • the “predetermined change” described above is determined in advance according to the type of sound to be detected.
  • FIG. 5 is a diagram exemplifying the correspondence between the feature of the outside sound and the control information corresponding to the feature in a table format.
  • the control information is information indicating the content of control performed by the control unit 204 based on the detection result regarding the feature.
  • the table of FIG. The table 500 includes a feature 502, a detection result 504, and control information 506.
  • a feature 502 represents a feature to be detected. The detection result 504 and the control information 506 will be described later.
  • the storage device 30 is an arbitrary storage device accessible from the control device 200.
  • the storage device 30 may be provided inside the control device 200 or may be provided outside the control device 200. In the latter case, the storage device 30 may be provided inside the vehicle 240 or may be provided outside the vehicle 240.
  • the storage device 30 provided outside the vehicle 240 is provided, for example, in a server machine that can be accessed from the control device 200 via a WAN fence.
  • the control unit 204 controls the output device 20 based on the state information (S104). For example, the control unit 204 performs control so that the vehicle exterior sound is output to the room of the vehicle 240 when a predetermined feature is detected from the vehicle exterior sound. On the other hand, the control unit 204 performs control so that the sound outside the vehicle is not output to the room of the vehicle 240 when a predetermined feature is not detected from the sound outside the vehicle. Conversely, when the predetermined feature is not detected from the vehicle exterior sound, the control unit 204 performs control so that the vehicle exterior sound is output to the room of the vehicle 240, and when the predetermined feature is detected from the vehicle exterior sound. In addition, control may be performed so that external sound is not output to the interior of the vehicle 240.
  • the characteristics of the external sound detected by the detection unit 202 and the content of the control performed by the control unit 204 are associated in advance. Specifically, it is assumed that the association is stored in the storage device 30 in advance. A specific example of this association is the table 500 described above (see FIG. 5).
  • the detection result 504 indicates whether or not the feature indicated by the feature 502 has been detected from the sound outside the vehicle.
  • the control information 506 indicates the content of control performed by the control unit 204 for the combination of the feature 502 and the detection result 504.
  • the control unit 204 determines that the time change in loudness is a predetermined value.
  • the contents shown in the control information 506 are controlled.
  • the control unit 204 determines that the time change in the sound volume is from the outside sound.
  • the control unit 204 acquires control information corresponding to the feature of the external sound detected by the detection unit 202 from the storage device 30. Then, the control indicated by the acquired control information is performed.
  • control based on the characteristics of external noise ⁇ Specific examples of control based on the characteristics of external noise
  • the content of the control performed by the control unit 204 varies depending on the characteristics detected from the sound outside the vehicle.
  • the control method of the output device 20 will be specifically described for each feature of the detected outside vehicle sound.
  • the control unit 204 controls the output device 20 not to output the vehicle exterior sound when the feature that “the time change of the sound volume is equal to or less than a predetermined value” is detected from the vehicle exterior sound.
  • the outside sound whose magnitude changes with time is a sound that is constantly generated, such as an idling sound of an engine of a vehicle around the vehicle 240 and an environmental sound around the vehicle 240. There is a high probability that this is an unnecessary and troublesome sound for passengers. Therefore, the control unit 204 controls the output device 20 so that such outside sound is not output to the interior of the vehicle 240.
  • the control unit 204 performs control so that the sound outside the vehicle is output from the output device 20 when the feature that “the time change in the volume of the sound is below a predetermined value” is not detected from the sound outside the vehicle. It can be said that the sound outside the vehicle whose magnitude changes with time is suddenly generated.
  • the situation where such a vehicle outside noise is generated may be a situation in which a surrounding vehicle suddenly brakes, a person screams, or an emergency vehicle starts to sound a siren. Such a situation is a situation that should be perceived by the passenger of the vehicle 240 (particularly the driver of the vehicle 240). Therefore, in such a situation, the control unit 204 controls the output device 20 so that the vehicle exterior sound is not output to the interior of the vehicle 240.
  • a frequency distribution representing a sound unnecessary for the passenger of the vehicle 240 is determined as a predetermined frequency distribution.
  • the control unit 204 controls the output device 20 so that the vehicle exterior sound is not output to the room of the vehicle 240 when the feature “similarity with the predetermined frequency distribution is greater than or equal to a predetermined value” is detected from the vehicle exterior sound. . By doing so, the outside sound unnecessary for the passenger is prevented from being output to the interior of the vehicle 240.
  • control unit 204 outputs an output device so that the sound outside the vehicle 240 is output to the room of the vehicle 240 when the feature that “similarity with the predetermined frequency distribution is a predetermined value or more” is not detected from the sound outside the vehicle. 20 is controlled. In this way, external sound necessary for the passenger is output to the interior of the vehicle 240.
  • the predetermined frequency distribution may represent a frequency distribution that represents a sound necessary for the passenger (a sound that should be output to the room of the vehicle 240).
  • the control unit 204 outputs an output device so that the sound outside the vehicle is output to the room of the vehicle 240 when the feature that “similarity with the predetermined frequency distribution is a predetermined value or more” is detected from the sound outside the vehicle. 20 is controlled. By doing so, a sound necessary for the passenger of the vehicle 240 is output to the interior of the vehicle 240.
  • a frequency distribution representing a sound unnecessary for a passenger of the vehicle 240 a frequency distribution representing an idling sound of a vehicle engine is determined.
  • a frequency distribution representing a sound necessary for a passenger of the vehicle 240 a frequency distribution representing a sound that a driving person wants to hear, such as a wave sound heard from the sea, is determined.
  • a frequency band of sound unnecessary for the passenger of the vehicle 240 is determined as a predetermined frequency band. Then, when the feature “included in a predetermined frequency band” is detected from the outside sound, the control unit 204 controls the output device 20 so that the outside sound is not output to the room of the vehicle 240. By doing so, the control unit 204 controls the output device 20 so that sounds unnecessary for the passenger are not output to the interior of the vehicle 240.
  • control unit 204 controls the output device 20 so that the sound outside the vehicle is output to the room of the vehicle 240. By doing so, the sound outside the vehicle necessary for the passenger is output to the interior of the vehicle 240.
  • the predetermined frequency band may represent a frequency band of a sound necessary for the passenger (a sound to be output to the room of the vehicle 240).
  • the control unit 204 controls the output device 20 so that the vehicle exterior sound is output to the room of the vehicle 240 when the feature “included in the predetermined frequency band” is detected from the vehicle exterior sound. By doing so, the sound outside the vehicle necessary for the passenger is output to the interior of the vehicle 240.
  • control unit 204 controls the output device 20 so that the vehicle exterior sound is not output to the interior of the vehicle 240 when the feature that “a change in sound volume has periodicity” is detected from the vehicle exterior sound. By doing so, unnecessary sounds that are regularly emitted (such as idling sound of the engine of the vehicle around the vehicle 240 and mechanical sound emitted from the factory) are not output to the interior of the vehicle 240.
  • control unit 204 controls the output device 20 so that the sound outside the vehicle is output to the room of the vehicle 240 when the feature that “a change in sound volume has periodicity” is not detected from the sound outside the vehicle. To do. In this way, unnecessary sounds outside the vehicle 240 that are to be heard by the passenger of the vehicle 240, such as suddenly generated sounds, are output to the vehicle 240.
  • the characteristic regarding the periodic sound change may be a characteristic that “a change in sound volume periodically includes a predetermined change”. By doing so, it is possible to divide the external sound having periodicity into an unnecessary one and a necessary one. Therefore, it is possible to more precisely control the output of the vehicle exterior sound to the interior of the vehicle 240.
  • ⁇ About the control of outside sound with multiple features Multiple features may be detected from the outside sound.
  • a priority is assigned in advance to each predetermined feature detected from the sound outside the vehicle.
  • a column indicating priority is provided in the table 500.
  • the control part 204 performs control corresponding to the feature with the highest priority among the features detected from the outside sound.
  • Control of hardware configuring output device 20 There are various specific methods for controlling the hardware constituting the output device 20.
  • the control unit 204 performs control for turning on the switch of the output device 20 and control for not applying the sound filter to the output device 20 (control for bypassing the sound filter so that the sound outside the vehicle is output). By doing so, the sound outside the vehicle is output from the output device 20.
  • control unit 204 performs control to turn off the switch of the output device 20 and control to apply a sound filter to the output device 20 (control to output sound outside the vehicle through the sound filter).
  • the audio filter is a low-frequency cut filter, a band-pass filter, or the like.
  • control unit 204 performs control to adjust the magnitude of the vehicle exterior sound output from the output device 20 instead of performing control to output vehicle exterior sound from the output device 20 or control not to output vehicle exterior sound from the output device 20. You may go. For example, the control unit 204 performs control to relatively reduce the volume of the vehicle exterior sound output from the output device 20 instead of the control not to output the vehicle exterior sound to the output device 20. Similarly, the control unit 204 performs control for relatively increasing the volume of the vehicle exterior sound output from the output device 20 instead of the control for causing the output device 20 to output the vehicle exterior sound.
  • the control of the loudness outside the vehicle output by the output device 20 can be realized by controlling the amplification factor of the amplifier included in the output device 20, for example.
  • the timing at which the control device 200 executes a series of processes is arbitrary.
  • the control device 200 executes a series of processes at a predetermined cycle.
  • the predetermined period may be set in advance in the control device 200 or may be stored in a storage device accessible from the control device 200.
  • the control device 200 when the control device 200 repeatedly executes a series of processes, for example, when a predetermined feature is detected from the vehicle exterior sound captured by the input device 10 at a certain first time point, Sound outside the vehicle will not be output. Thereafter, at another second time point, when a predetermined feature is not detected from the vehicle exterior sound captured by the input device 10, the vehicle exterior sound is output into the vehicle 240.
  • the output of the vehicle exterior sound by the output device 20 is appropriately controlled according to the sound around the vehicle 240 that changes with time.
  • Control for letting a passenger of the vehicle 240 hear outside sound (control for outputting outside sound from the output device 20, control for increasing the volume of outside sound output from the output device 20, etc.)
  • the control device 200 does not have to execute the series of processes described above until a predetermined condition is satisfied.
  • the predetermined condition is, for example, a condition that “a predetermined time has elapsed since the output device 20 was controlled” or “the vehicle 240 has traveled a predetermined distance since the output device 20 was controlled”. By doing so, the computer resources consumed by the control device 200 are reduced by maintaining the state of the output device 20 for a while under the assumption that the outside sound to be heard by the passenger of the vehicle 240 will continue to be generated for a while. be able to.
  • the outside sound that should be heard by the passenger of the vehicle 240 may be generated thereafter. It is preferable to continue executing a series of processes at a predetermined cycle.
  • control device 200 is configured to output the vehicle outside sound from the output device 20 in a normal state, and the above-described series of control is performed only in a situation where there is a high probability that the vehicle outside sound unnecessary for the passenger is generated. May be executed.
  • the “situation in which there is a high probability that an external noise unnecessary for a passenger is generated” is, for example, a situation where the vehicle 240 is traveling on a road or a highway in a traffic jam.
  • a predetermined situation is defined in advance and stored in the storage device 30 or the like.
  • the situation “traveling on a congested road” is (1) slowing down and stopping for a predetermined time or more, or (2) the current position of the vehicle 240 is congested in the car navigation system. It can be defined as a situation where the current section is.
  • the control apparatus 200 performs a series of control shown in FIG. 4, when the vehicle 240 exists in the predetermined condition mentioned above.
  • Embodiment 2 The control apparatus 200 of Embodiment 2 is represented by FIG. 1 like the control apparatus 200 of Embodiment 1, for example. Except for the items described below, the control device 200 of the second embodiment is the same as the control device 200 of the first embodiment.
  • the controller 204 determines the magnitude of the vehicle exterior sound to be output based on the volume of the sound generated in the vehicle 240 when the vehicle exterior sound is output into the vehicle 240.
  • the loudness of the room in the vehicle 240 is detected using a volume sensor provided in the room of the vehicle 240, for example.
  • control unit 204 controls the set value of the output device 20 so that the loudness of the vehicle 240 is increased, and the loudness of the vehicle exterior sound that is output into the vehicle 240 is increased. To do.
  • control unit 204 increases the reproduction volume of the output device 20 by setting the amplification factor of the amplifier included in the output device 20 to a higher value as the loudness of the room in the vehicle 240 increases.
  • control unit 204 sets the sensitivity of the sound filter provided in the output device 20 to a lower value as the loudness of the room in the vehicle 240 increases, so that the output is output by the output device 20. Increase the loudness of the outside sound.
  • FIG. 6 is a graph illustrating the relationship between the detection value of the volume sensor and the amplification factor of the amplifier of the output device 20 in a graph format.
  • the control unit 204 acquires a detection value from the volume sensor. Then, the control unit 204 sets the amplification factor of the amplifier of the output device 20 to a value corresponding to the acquired detection value.
  • the hardware configuration of the control device 200 according to the second embodiment is represented in FIG. 3, for example, similarly to the hardware configuration of the control device 200 according to the first embodiment.
  • the program module stored in the storage device 108 further includes a program that implements the functions described in the present embodiment.
  • the loudness of the vehicle exterior sound that is output to the interior of the vehicle 240 is determined based on the loudness of the sound that is generated in the interior of the vehicle 240. By doing so, the passenger can more reliably hear the sound that the passenger of the vehicle 240 wants to hear.
  • control device 200 can include the functions of the following modified examples in addition to or instead of the functions of the above-described embodiments.
  • the vehicle 240 has an automatic driving function.
  • a driving authority may be transferred from the system to a person, that is, switching from automatic driving to manual driving may occur.
  • the control unit 204 causes the output device 20 to output sound when the vehicle 240 is switched from automatic driving to manual driving. At this time, the control unit 204 acquires information indicating a time point at which switching from automatic operation to manual operation is performed (hereinafter referred to as “switching time point”). Then, the control unit 204 causes the output device 20 to output sound at a time before the switching time. In this way, the driver is notified that the automatic operation is switched to the manual operation.
  • the control unit 204 may control the sound output from the output device 20 in accordance with the emergency degree of the switching. For example, in the case of switching with a high degree of urgency (when it is necessary to immediately switch to manual operation), the control unit 204 causes the output device 20 to output an alarm sound instead of a vehicle exterior sound. On the other hand, in the case of switching with a low degree of urgency (when it is not necessary to immediately switch to manual operation), the control unit 204 causes the output device 20 to output sound outside the vehicle.
  • an index value representing the emergency degree is set in advance for each cause (event) that requires switching from automatic driving to manual driving.
  • the control unit 204 acquires an index value representing the urgent degree of switching together with the switching time described above. When the acquired index value is greater than or equal to the predetermined value, the control unit 204 causes the output device 20 to output an alarm sound. On the other hand, when the index value is less than the predetermined value, the control unit 204 causes the output device 20 to output a sound outside the vehicle.
  • the control unit 204 outputs the signal before the switch to manual operation occurs (for example, after 30 seconds have passed after the hand is released from the handle) because the passenger has released the hand from the handle.
  • a sound outside the vehicle may be output from the device 20.
  • an alarm sound is output from the output device 20 to warn that a switch from automatic operation to manual operation occurs after a predetermined time, and then an external sound is output from the output device 20 at the timing when the actual switch occurs.
  • the control unit 204 may control the traveling of the vehicle 240 according to the feature of the outside sound. For example, when a siren of an emergency vehicle is heard, it is preferable to stop the vehicle 240 on the shoulder. Therefore, when the feature of the external sound is similar to the feature of the siren of the emergency vehicle, it is preferable that the control unit 204 controls the traveling of the vehicle 240 to stop on the road shoulder.
  • the control information for controlling the traveling of the vehicle 240 indicates a traveling control method of the vehicle 240 in association with a predetermined feature of the outside sound.
  • the method for controlling the traveling of the vehicle 240 is represented by any one of acceleration, deceleration, and steering, or a combination thereof. Steering corresponds to control for changing the travel position of the vehicle 240. For example, by bringing the traveling position of the vehicle 240 to the roadside zone by steering, a space for the subsequent emergency vehicle to travel can be secured. By combining steering with acceleration or deceleration, the vehicle 240 can be accelerated or decelerated while changing the travel position. For example, in order to stop the vehicle 240 in the roadside band, control is performed such that the vehicle 240 is decelerated until the speed becomes zero while the traveling position of the vehicle 240 is changed toward the roadside band by steering.
  • a distance measuring device such as a lidar (Light Detection and Ranging) or a camera is used to recognize and control the surrounding terrain and obstacles.
  • a distance measuring device such as a lidar (Light Detection and Ranging) or a camera is used to recognize and control the surrounding terrain and obstacles.
  • These methods use electromagnetic waves such as light waves. Since sound waves are diffracted more than electromagnetic waves, according to the method of detecting obstacles and the like with sound outside the vehicle, it is also possible to detect obstacles and the like that are not detected by distance measuring devices or cameras (for example, emergency vehicles in the shadows). Can do. Therefore, by controlling the running of the vehicle 240 using the sound outside the vehicle, the vehicle 240 can be safely controlled in consideration of obstacles that are not detected by the distance measuring device or the camera.
  • control of the traveling of the vehicle 240 by the control device 200 is preferably used in combination with control using a distance measuring device or a camera, instead of using only outside sound.
  • a distance measuring device or a camera instead of using only outside sound.
  • the running of the vehicle 240 is continued as it is. can do.
  • the control unit 204 estimates the source of the external sound based on the characteristics of the external sound, and specifies the estimated source from the objects recognized by the distance measuring device or the camera. And the control part 204 controls driving
  • the position of the ambulance is on the travel lane of the vehicle 240 and behind the vehicle 240, or the vehicle 240 and the ambulance enter the intersection at the same timing if the vehicle 240 travels as it is.
  • the control unit 204 stops the vehicle 240 in the roadside zone.
  • the control information includes the characteristics of the sound outside the vehicle, information for detecting the generation source having the characteristics with a camera or the like (for example, the feature amount of the appearance of the object), and the status of the generation source.
  • the control methods of the vehicle 240 are associated with each other.
  • control unit 204 applies a bandpass filter that extracts only this frequency band to the vehicle exterior sound, thereby enhancing the sound having a predetermined characteristic, that is, the vehicle exterior sound that is used to control the vehicle 240. Can be obtained.
  • the control unit 204 causes the control of the traveling.
  • the sound outside the vehicle may be processed so that the sound related to the resulting object is emphasized, and the sound outside the vehicle after processing may be output into the vehicle interior.
  • traveling of the vehicle 240 is controlled in accordance with detection of an ambulance by the camera.
  • the object causing the control of the traveling of the vehicle 240 is an ambulance.
  • the control unit 204 performs a filter process for extracting sound having the characteristics of an ambulance siren on the vehicle exterior sound, and causes the output device 20 to output the vehicle exterior sound after the filter process.
  • the control unit 204 performs a filter process for extracting a sound having the characteristics of the railroad crossing sound on the vehicle outside sound,
  • the output device 20 is made to output the vehicle exterior sound after processing.
  • information such as filter coefficients in the filter processing
  • for extracting sound emitted from the object is determined for each object (such as an ambulance or a railroad crossing) that may cause the vehicle 240 to travel. .

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

入力装置(10)は、車両(240)の外部で発生する車外音を取り込む。出力装置(20)は、入力装置(10)によって取り込まれた車外音を取得し、その車外音を車両(240)の室内に出力する。制御装置(200)は検出部(202)及び制御部(204)を有する。検出部(202)は、入力装置(10)によって取り込まれた車外音を取得する。さらに検出部(202)は、その車外音から所定の特徴を検出する。制御部(204)は、検出部(202)による検出結果に基づいて、出力装置(20)による車外音の出力を制御する。

Description

制御装置、制御システム、制御方法、及びプログラム
 本発明は、制御装置、制御システム、制御方法、及びプログラムに関する。
 自動車などの車両において、車室内で聞こえる車外音(車両の外で発生した音)の大きさが小さくなるように、車両を静穏化する技術が開発されている。一方で、車外音は危険察知などの目的で必要なケースもある。そこで、車外音をマイクなどの入力装置で取り込み、その車外音をスピーカなどの出力装置から車内に出力することで、車外音を車内の乗員に聞かせる技術が開発されている。
 例えば特許文献1は、車外音で発生した音を車両の走行状態に応じた方法で車内に提示することで、車内における不要な音声情報の提示を抑制する技術を開示している。例えば特許文献1に係る装置は、ドライバの視線方向を検出し、視線方向の周囲音について抑圧して車外音をドライバに提示する。
 その他にも例えば、特許文献2は、ユーザ操作によって指定された種別の車外音を車室内に出力する技術を開示している。ここで、特許文献2では、音源(例えば緊急車両のサイレン)から出力される音声に、識別子を表す情報が内包されている。そして、車両の室内に対する車外音の出力を制御する車載装置において、マイクによって取り込まれた車外音に内包されている識別子を抽出し、この識別子を用いて、車外音を車室内に出力するかどうかを制御している。
特開2009-258802号公報 特開2015-032155号公報
 特許文献1の技術では、ドライバの視線方向以外から聞こえる不要な音を抑制することはできない。特許文献2の技術では、識別子を内包する音、即ち特定の音源から出力される音しか制御することができない。
 本発明は、上述の課題鑑みてなされたものであり、車室内への車外音の出力を柔軟に制御する技術を提供することを一つの目的とする。
 請求項1に記載の発明は、(1)入力装置を介して、車両の外で発生した音である車外音を取得し、前記車外音から所定の特徴を検出する検出手段と、(2)前記検出手段による検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御手段と、を有する制御装置である。
 請求項11に記載の発明は、(1)車両の外部で発生する車外音を取り込む入力装置と、(2)前記車外音を前記車両の室内に出力する出力装置と、(3)制御装置と、を有する。
 この制御装置は、(1)入力装置を介して、車両の外で発生した音である車外音を取得し、前記車外音から所定の特徴を検出する検出手段と、(2)前記検出手段による検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御手段と、を有する。
 請求項12に記載の発明は、コンピュータによって実行される制御方法である。
 当該制御方法は、(1)入力装置を介して、車両の外で発生した音である車外音を取得し、前記車外音から所定の特徴を検出する検出ステップと、(2)前記検出ステップにおける検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御ステップと、を有する。
 請求項13に記載の発明は、請求項12に記載の制御方法の各ステップをコンピュータに実行させるプログラムである。
 上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
実施形態1の制御装置及びその使用環境を例示する図である。 制御装置を例示するブロック図である。 制御装置のハードウエア構成を例示する図である。 実施形態1の制御装置によって実行される処理の流れを例示するフローチャートである。 車外音の特徴と、その特徴に対応する制御情報との対応づけをテーブル形式で例示する図である。 音量センサの検出値と出力装置のアンプの増幅率との関係をグラフ形式で例示する図である。
 以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また、特に説明する場合を除き、ブロック図における各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。
 図1は、実施形態1の制御装置200及びその使用環境を例示する図である。なお、図1は制御装置200に関する理解を容易にするための図であり、制御装置200の動作を何ら限定するものではない。
 車両240は、自動車や電車などの任意の車両である。車両240は、自動運転機能を有していてもよいし、有していなくてもよい。入力装置10は、車両240の外部で発生する車外音を取り込む。例えば入力装置10はマイクを用いて構成される。出力装置20は、入力装置10によって取り込まれた車外音を取得し、その車外音を車両240の室内に出力する。例えば出力装置20はスピーカを用いて構成される。
 制御装置200は、出力装置20を制御することで、車両240の室内に対する車外音の出力を制御する。その際、制御装置200は、車外音の特徴に基づいた制御を行う。
 図2は、制御装置200を例示するブロック図である。制御装置200は、検出部202及び制御部204を有する。検出部202は、入力装置10によって取り込まれた車外音を取得する。さらに検出部202は、その車外音から所定の特徴を検出する。制御部204は、検出部202による検出結果に基づいて、出力装置20による車外音の出力を制御する。
 本実施形態の制御装置200によれば、車外音の特徴に基づいて、車両240の搭乗者に聞かせる車外音が制御される。こうすることにより、例えば、所定の特徴を持つ車外音については車室内に出力しないようにする、又は所定の特徴を持つ車外音のみが車室内に出力されるようにするなどのように、車両240の室内に対する車外音の出力を柔軟に制御することができる。その結果、例えば、車両240の搭乗者の好みにあった車外音のみが車室内に出力されるようにする、又は車両240の搭乗者に聞かせるべき車外音のみが車室内に出力されるようにするなどのように、様々な目的に合わせて車外音を出力できるようになる。
 以下、本実施形態の制御装置200について、さらに詳細に説明する。
<制御装置200のハードウエア構成の例>
 制御装置200の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、制御装置200の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
 図3は、制御装置200のハードウエア構成を例示する図である。計算機100は、制御装置200を実現する計算機である。例えば計算機100は、車両240に設けられている種々のハードウエアを制御する ECU(Electronic Control Unit)である。計算機100は、制御装置200を実現するために専用に設計された計算機であってもよいし、汎用の計算機であってもよい。
 計算機100は、バス102、プロセッサ104、メモリ106、ストレージデバイス108、入出力インタフェース110、及びネットワークインタフェース112を有する。バス102は、プロセッサ104、メモリ106、ストレージデバイス108、入出力インタフェース110、及びネットワークインタフェース112が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ104などを互いに接続する方法は、バス接続に限定されない。プロセッサ104は、マイクロプロセッサなどを用いて実現される演算処理装置である。メモリ106は、RAM(Random Access Memory)などを用いて実現される主記憶装置である。ストレージデバイス108は、ROM(Read Only Memory)やフラッシュメモリなどを用いて実現される補助記憶装置である。ただし、ストレージデバイス108は、RAM など、主記憶装置を構成するハードウエアと同様のハードウエアで構成されてもよい。
 入出力インタフェース110は、計算機100を周辺機器と接続するためのインタフェースである。図3において、入出力インタフェース110には、入力装置10を実現するマイク12と、出力装置20を実現するスピーカ22が接続されている。
 計算機100には、入出力インタフェース110を介し、車両240の制御に用いる各種のアナログ信号やデジタル信号が入力又は出力される。例えば、入力装置10によって取り込まれた車外音を表す音声信号が、入出力インタフェース110を介して、入力装置10から計算機100へ入力される。その他にも例えば、出力装置20に出力させる音声信号が、入出力インタフェース110を介して、計算機100から出力装置20へ出力される。
 ここで、入出力インタフェース110には、アナログの入力信号をデジタル信号に変換する A/D コンバータや、デジタルの出力信号をアナログ信号に変換する D/A コンバータなどが適宜含まれる。
 ネットワークインタフェース112は、計算機100を通信網に接続するためのインタフェースである。この通信網は、例えば CAN(Controller Area Network)通信網である。ネットワークインタフェース112が通信網に接続する方法は、無線接続であってもよいし、有線接続であってもよい。
 ストレージデバイス108は、制御装置200の各機能構成部を実現するためのプログラムモジュールを記憶している。プロセッサ104は、このプログラムモジュールをメモリ106に読み出して実行することで、制御装置200の機能を実現する。
<入力装置10について>
 入力装置10は、車両240の車外音を取り込むことができる任意の装置である。例えば入力装置10は、前述したマイク12を用いて構成される。
<出力装置20について>
 出力装置20は、車両240によって取り込まれた音を車両240の室内に対して出力できる任意の装置である。例えば出力装置20は、前述したスピーカ22を用いて構成される。
<処理の流れ>
 図4は、実施形態1の制御装置200によって実行される処理の流れを例示するフローチャートである。検出部202は、入力装置10によって取り込まれた車外音から所定の特徴を検出する(S102)。制御部204は、検出部202による検出結果に基づいて、出力装置20による車外音の出力を制御する(S104)。
<車外音の特徴の検出:S102>
 検出部202は、入力装置10によって取り込まれた車外音から所定の特徴を検出する(S102)。所定の特徴としては、音に関する様々な特徴を扱うことが可能である。
 例えば所定の特徴は、音の大きさの時間変化に関する特徴、音の周波数分布に関する特徴、音の周波数帯域に関する特徴、又は音の周期的な変化に関する特徴などである。以下、それぞれの特徴について説明する。
<<音の大きさの時間変化に関する特徴>>
 音の大きさの時間変化に関する所定の特徴は、例えば、「音の大きさの時間変化が所定値以下である」という特徴である。「音の大きさの時間変化が所定値以下である」という特徴を満たす車外音は、例えば、車両240の周囲にある車両のエンジンのアイドリング音や、車両240の周囲の環境音(周囲にいる人の声、工場から聞こえる機械の音、又は海から聞こえる波の音など)がある。
<<音の大きさの周波数分布に関する特徴>>
 音の周波数分布に関する所定の特徴は、例えば、「所定の周波数分布との類似度が所定値以上である」という特徴である。ここで、所定の周波数分布は、検出したい音の種類に応じて予め定めておく。例えば、人の声、エンジン音、機械の音、波の音、又はサイレンの音などといった音の種類ごとに、その周波数分布を予め定めておく。
<<音の周波数帯域に関する特徴>>
 音の周波数帯域に関する所定の特徴は、例えば、「音の周波数帯域が所定範囲内に含まれる」という特徴である。ここで、周波数帯域の所定範囲についても、所定の周波数分布と同様に、検出したい音の種類によって予め定めておく。
<<音の周期的な変化に関する特徴>>
 周期的な音の変化に関する所定の特徴は、例えば、「音の大きさの変化が周期性を有する(任意の変化を周期的に含む)」という特徴や、「音の大きさの変化が、所定の変化を周期的に含む」という特徴である。音の大きさの変化に周期性を有する車外音には、例えば、車両240の周囲にある車両のエンジンのアイドリング音や、車両240の機械の音、又は波の音などがある。また、上述の「所定の変化」については、検出したい音の種類に応じて予め定めておく。
 図5は、車外音の特徴と、その特徴に対応する制御情報との対応づけをテーブル形式で例示する図である。制御情報は、その特徴に関する検出結果に基づいて制御部204が行う制御の内容を示す情報である。図5のテーブルを、テーブル500とする。テーブル500は、特徴502、検出結果504、及び制御情報506を有する。特徴502は、検出対象の特徴を表す。検出結果504及び制御情報506については後述する。
 記憶装置30は、制御装置200からアクセス可能な任意の記憶装置である。記憶装置30は、制御装置200の内部に設けられていてもよいし、制御装置200の外部に設けられていてもよい。後者の場合、記憶装置30は、車両240の内部に設けられていてもよいし、車両240の外部に設けられていてもよい。車両240の外部に設けられる記憶装置30は、例えば、WAN を介して制御装置200からアクセス可能なサーバマシンに設けられる。
<制御部204による制御:S104>
 制御部204は、状態情報に基づいて出力装置20を制御する(S104)。例えば制御部204は、車外音から所定の特徴が検出された場合に、車外音が車両240の室内に出力されるように制御を行う。一方、制御部204は、車外音から所定の特徴が検出されなかった場合に、車外音が車両240の室内に出力されないように制御を行う。逆に、制御部204は、車外音から所定の特徴が検出されなかった場合に、車外音が車両240の室内に出力されるように制御を行い、車外音から所定の特徴が検出された場合に、車外音が車両240の室内に出力されないように制御を行ってもよい。
 検出部202によって検出される車外音の特徴と、制御部204が行う制御の内容とは、予め対応づけられているとする。具体的には、上記対応付けは、予め記憶装置30に記憶されているものとする。この対応付けの具体例は、前述したテーブル500である(図5参照)。
 テーブル500において、検出結果504は、特徴502に示す特徴が車外音から検出されたか否かの結果を示す。制御情報506は、特徴502及び検出結果504の組み合わせに対して、制御部204が行う制御の内容を示す。
 例えば、特徴502が「音の大きさの時間変化が所定値以下」を示し、検出結果504が「検出有り」を示す場合、制御部204は、車外音から「大きさの時間変化が所定値以下である」という特徴が検出された場合に、制御情報506に示す内容の制御を行う。一方、例えば、特徴502が「音の大きさの時間変化が所定値以下」を示し、検出結果504が「検出無し」を示す場合、制御部204は、車外音から「大きさの時間変化が所定値以下である」という特徴が検出されなかった場合に、制御情報506に示す内容の制御を行う。
 制御部204は、検出部202によって検出された車外音の特徴に対応する制御情報を記憶装置30から取得する。そして、取得した制御情報に示される制御を行う。
<<車外音の特徴に基づく制御の具体例>>
 制御部204が行う制御の内容は、車外音から検出される特徴によって異なる。以下、検出される車外音の特徴ごとに、出力装置20の制御方法を具体的に説明する。
<<<音の大きさの時間変化に関する特徴>>>
 制御部204は、車外音から「音の大きさの時間変化が所定値以下である」という特徴が検出された場合に、出力装置20から車外音が出力されないように制御する。ここで、大きさの時間変化が小さい車外音は、例えば車両240の周囲にある車両のエンジンのアイドリング音や車両240の周囲の環境音など、定常的に発生している音であり、車両240の搭乗者にとって不要で煩わしい音である蓋然性が高い。そこで制御部204は、このような車外音が車両240の室内に出力されないように出力装置20を制御する。
 一方で、制御部204は、車外音から「音の大きさの時間変化が所定値以下である」という特徴が検出されなかった場合、出力装置20から車外音が出力されるように制御する。大きさの時間変化が大きい車外音は、突発的に発生した音とも言える。例えばこのような車外音が発生する状況には、周囲の車両が急ブレーキをかけた、人が悲鳴をあげた、緊急車両がサイレンを鳴らし始めたなどの状況が考えられる。そして、このような状況は、車両240の搭乗者(特に車両240のドライバ)が知覚すべき状況である。そこで、制御部204は、このような状況においては、車外音が車両240の室内に出力されないように出力装置20を制御する。
<<<周波数分布に関する特徴>>>
 例えば、車両240の搭乗者にとって不要な音を表す周波数分布を、所定の周波数分布として定めておく。制御部204は、車外音から「所定の周波数分布との類似度が所定値以上である」という特徴が検出された場合、車両240の室内に車外音が出力されないように出力装置20を制御する。こうすることで、搭乗者にとって不要な車外音が車両240の室内に出力されないようにする。
 一方、制御部204は、車外音から「所定の周波数分布との類似度が所定値以上である」という特徴が検出されなかった場合、車両240の室内に車外音が出力されるように出力装置20を制御する。こうすることで、搭乗者にとって必要な車外音が車両240の室内に出力されるようにする。
 なお、所定の周波数分布は、搭乗者にとって必要な音(車両240の室内に出力されるべき音)を表す周波数分布を表してもよい。この場合、制御部204は、車外音から「所定の周波数分布との類似度が所定値以上である」という特徴が検出された時に、車両240の室内に車外音が出力されるように出力装置20を制御する。こうすることで、車両240の搭乗者にとって必要な音が車両240の室内に出力されるようになる。
 例えば、車両240の搭乗者にとって不要な音を表す周波数分布として、車両のエンジンのアイドリング音などを表す周波数分布を定めておく。一方、車両240の搭乗者にとって必要な音を表す周波数分布として、海から聞こえる波の音など、ドライブをしている人が聞きたがる音を表す周波数分布を定めておく。
<<<周波数帯域に関する特徴>>>
 例えば、車両240の搭乗者にとって不要な音の周波数帯域を、所定の周波数帯域として定めておく。そして制御部204は、車外音から「所定の周波数帯域に含まれる」という特徴が検出された場合、車両240の室内に車外音が出力されないように出力装置20を制御する。こうすることで、制御部204は、搭乗者にとって不要な音が車両240の室内に出力されないように出力装置20を制御する。
 一方、制御部204は、車外音から「所定の周波数帯域に含まれる」という特徴が検出されなかった場合、車両240の室内に車外音が出力されるように出力装置20を制御する。こうすることで、搭乗者にとって必要な車外音が車両240の室内に出力される。
 なお、所定の周波数帯域は、搭乗者にとって必要な音(車両240の室内に出力されるべき音)の周波数帯域を表してもよい。この場合、制御部204は、車外音から「所定の周波数帯域に含まれる」という特徴が検出された時に、車両240の室内に車外音が出力されるように出力装置20を制御する。こうすることで、搭乗者にとって必要な車外音が車両240の室内に出力される。
<<<周期的な音の変化に関する特徴>>>
 例えば制御部204は、車外音から「音の大きさの変化が周期性を有する」という特徴が検出された場合、車両240の室内に車外音が出力されないように出力装置20を制御する。こうすることで、定常的に発せられている不要な音(車両240の周囲にある車両のエンジンのアイドリング音や工場から発せられる機械音など)が車両240の室内に出力されないようになる。
 一方、制御部204は、車外音から「音の大きさの変化が周期性を有する」という特徴が検出されなかった場合、車両240の室内に車外音が出力されるように出力装置20を制御する。こうすることで、突発的に発生した音など、車両240の搭乗者に聞かせるべき車外音が車両240の室内に不要な音が車両240の室内に出力される。
 前述したように、周期的な音の変化に関する特徴は、「音の大きさの変化が、所定の変化を周期的に含む」という特徴であってもよい。こうすることで、周期性を有する車外音を、不要なものと必要なものに分けることができる。よって、車両240の室内に対する車外音の出力を、より細かく制御することができる。
<<複数の特徴を有する車外音の制御について>>
 車外音から複数の特徴が検出する可能性がある。この場合、例えば、車外音から検出する各所定の特徴に、予め優先度を付けておく。例えばこの場合、テーブル500に優先度を示す列を設けておく。そして制御部204は、車外音から検出された特徴のうち、優先度が最も高い特徴に対応する制御を行う。
<<出力装置20を構成するハードウエアの制御について>>
 出力装置20を構成するハードウエアを制御する具体的な方法は様々である。例えば制御部204は、出力装置20のスイッチをオンにする制御や、出力装置20に音声フィルタを適用しないようにする制御(音声フィルタをバイパスして車外音が出力されるようにする制御)を行うことで、出力装置20から車外音が出力されるようにする。
 一方、制御部204は、出力装置20のスイッチをオフにする制御や、出力装置20に音声フィルタを適用する制御(音声フィルタを通過して車外音が出力されるようにする制御)を行うことで、車外音が出力装置20から出力されないようにする。例えば音声フィルタは、低域カットフィルタやバンドパスフィルタなどである。
 なお、制御部204は、出力装置20から車外音を出力させる制御や出力装置20から車外音を出力させない制御を行う代わりに、出力装置20から出力される車外音の大きさを調整する制御を行ってもよい。例えば制御部204は、出力装置20に車外音を出力させない制御の代わりに、出力装置20から出力される車外音の音量を相対的に小さくする制御を行う。同様に、制御部204は、出力装置20に車外音を出力させる制御の代わりに、出力装置20から出力される車外音の音量を相対的に大きくする制御を行う。
 出力装置20によって出力される車外音の大きさの制御は、例えば、出力装置20に含まれるアンプの増幅率を制御することで実現できる。
<制御装置200が一連の処理を実行するタイミング>
 制御装置200が一連の処理(図4に示した処理)を実行するタイミングは任意である。例えば制御装置200は、所定周期で一連の処理を実行する。所定周期は、制御装置200に予め設定されていてもよいし、制御装置200からアクセス可能な記憶装置に記憶されていてもよい。
 このように、制御装置200が繰り返し一連の処理を実行すると、例えば、或る第1の時点において、入力装置10によって取り込まれた車外音から所定の特徴が検出された場合、車両240の室内に車外音が出力されないようになる。その後、別の第2の時点において、入力装置10によって取り込まれた車外音から所定の特徴が検出されなかった場合、車両240の室内に車外音が出力されるようになる。このように、時間と共に変化する車両240の周囲の音に応じて、出力装置20による車外音の出力が適切に制御されるようになる。
 なお、車両240の搭乗者に車外音を聞かせるための制御(出力装置20から車外音が出力されるようにする制御や、出力装置20から出力される車外音の音量を大きくする制御など)が実行された後、所定の条件が満たされるまで、制御装置200は、前述した一連の処理を実行しなくてもよい。所定の条件は、例えば、「出力装置20を制御してから所定時間が経過した」や「出力装置20を制御してから車両240が所定距離走行した」という条件である。こうすることで、車両240の搭乗者に聞かせるべき車外音がしばらく発生し続けるという仮定の下、出力装置20の状態をしばらく維持し続けることで、制御装置200が消費する計算機資源を削減することができる。
 一方、車両240の搭乗者に車外音を聞かせないようにする制御をした場合、その後に車両240の搭乗者に聞かせるべき車外音が発生する可能性があるため、制御装置200は、前述した所定周期で一連の処理を実行し続けることが好ましい。
 その他にも例えば、制御装置200は、通常時は出力装置20から車外音が出力されるようにしておき、搭乗者にとって不要な車外音が発生する蓋然性が高い状況においてのみ、前述した一連の制御を実行してもよい。「搭乗者にとって不要な車外音が発生する蓋然性が高い状況」は、例えば、車両240が渋滞中の道路や高速道路を走行している状況である。
 この場合、所定の状況を予め定義しておき、記憶装置30などに記憶しておく。例えば「渋滞中の道路を走行している」という状況は、(1)徐行と停止を所定時間以上繰り返されている、又は(2)車両240の現在位置が、カーナビゲーションシステムにおいて渋滞中となっている区間であるといった状況として定義することができる。そして制御装置200は、車両240が上述した所定の状況下にある場合に、図4に示した一連の制御を行う。
[実施形態2]
 実施形態2の制御装置200は、実施形態1の制御装置200と同様に、例えば図1で表される。下記で説明する事項を除き、実施形態2の制御装置200は、実施形態1の制御装置200と同様である。
 実施形態2の制御部204は、車両240の室内に車外音を出力する際、車両240の室内で発生している音の大きさに基づいて、出力される車外音の大きさを決定する。車両240の室内の音の大きさは、例えば車両240の室内に設けられた音量センサを用いて検出される。
 具体的には、制御部204は、車両240の室内の音の大きさが大きいほど、車両240の室内に出力される車外音の大きさが大きくなるように、出力装置20の設定値を制御する。例えば制御部204は、車両240の室内の音の大きさが大きいほど、出力装置20に含まれるアンプの増幅率を高い値に設定することで、出力装置20の再生音量を大きくする。
 その他にも例えば、制御部204は、車両240の室内の音の大きさが大きいほど、出力装置20に設けられた音声フィルタの感度を低い値に設定することで、出力装置20によって出力される車外音の大きさを大きくする。
 音量センサの検出値と制御部204によって制御される設定値との関係は、予め定められているものとする。図6は、音量センサの検出値と出力装置20のアンプの増幅率との関係をグラフ形式で例示する図である。まず制御部204は、音量センサから検出値を取得する。そして制御部204は、出力装置20のアンプの増幅率を、取得した検出値に対応する値に設定する。
<ハードウエア構成の例>
 実施形態2の制御装置200のハードウエア構成は、実施形態1の制御装置200のハードウエア構成と同様に、例えば図3で表される。また本実施形態において、前述したストレージデバイス108に記憶されるプログラムモジュールには、本実施形態で説明した機能を実現するプログラムがさらに含まれる。
 本実施形態の制御装置200によれば、車両240の室内に出力される車外音の大きさが、車両240の室内で発生している音の大きさに基づいて定まる。こうすることで、車両240の搭乗者に聞かせたい音を、より確実に搭乗者が聞かせることができる。
[変形例]
 以下、制御装置200の変形例を説明する。制御装置200は、前述した各実施形態の機能に加えて又は代えて、以下の変形例の機能を備えることができる。
 前提として、車両240が自動運転機能を有するとする。自動運転車両では、システムから人へ運転の権限委譲、すなわち、自動運転から手動運転への切り替えが生じることがある。
<権限委譲時の音声出力>
 制御部204は、車両240において自動運転から手動運転への切り替えが生じる際に、出力装置20から音声を出力させる。この際、制御部204は、自動運転から手動運転への切り替えが行われる時点(以下、切り替え時点)を示す情報を取得する。そして制御部204は、切り替え時点よりも前の時点で、出力装置20から音声を出力させる。こうすることで、自動運転から手動運転へ切り替わることをドライバに通知する。
 制御部204は、当該切り替えの緊急度合いに応じて、出力装置20から出力される音声を制御してもよい。例えば、緊急度合いが高い切り替えの場合(すぐに手動運転へ切り替える必要がある場合)、制御部204は、車外音ではなくアラーム音を出力装置20から出力させる。一方、緊急度合いが低い切り替えの場合(すぐに手動運転へ切り替える必要がない場合)、制御部204は、車外音を出力装置20から出力させる。
 このようにすると、緊急度合いが高い切り替えの場合、その緊急性を効果的に車両240の搭乗者に伝えることができる。また、その際に車外音をシャットアウトすることで、より確実にアラーム音を搭乗者に伝えることができる。一方、緊急度合いが低い切り替えの場合は、アラーム音ではなく車外音を使用することで、より自然でストレスの少ない切り替えが可能になる。
 切り替えの緊急度合いを判定するために、例えば予め、自動運転から手動運転への切り替えを必要とする原因(イベント)毎に、緊急度合いを表す指標値を定めおく。制御部204は、前述した切り替え時点と共に、切り替えの緊急度合いを表す指標値を取得する。取得した指標値が所定値以上である場合、制御部204は、出力装置20からアラーム音を出力させる。一方、指標値が所定値未満である場合、制御部204は、出力装置20から車外音を出力させる。
 自動運転から手動運転への切り替えの原因としては、自動運転中の車両240のハンドルから搭乗者が手を放した状態が所定時間(例えば65秒)以上続いた場合なども想定される。そこで、搭乗者がハンドルから手を放した状態が続いたことにより、手動運転への切り替えが発生する前の時点(例えばハンドルから手を放して30秒経過後)で、制御部204が、出力装置20から車外音を出力させるようにしても良い。もしくは、出力装置20からのアラーム音の出力によって、所定時間後に自動運転から手動運転への切り替えが生じることを警告した後、実際に切り替えが発生したタイミングで出力装置20から車外音を出力させるようにしても良い。
<車外音に基づく走行制御>
 制御部204は、車外音の特徴に応じて車両240の走行を制御してもよい。例えば、緊急車両のサイレンが聞こえた場合には車両240を路肩に停車させることが好適である。そこで、車外音の特徴が緊急車両のサイレンの特徴に類似している場合、制御部204は、車両240の走行を制御して路肩に停車させることが好適である。
 車両240の走行を制御するための制御情報は、車外音の所定の特徴に対応づけて、車両240の走行の制御方法を示す。車両240の走行の制御方法は、例えば、加速、減速、及び操舵のいずれか1つ又はこれらの組み合わせで表される。操舵は、車両240の走行位置を変更する制御に該当する。例えば、操舵によって車両240の走行位置を路側帯に寄せることで、後続の緊急車両が走行するスペースを確保できる。操舵を加速又は減速と組み合わせることで、走行位置を変更しながら車両240を加速又は減速させることができる。例えば車両240を路側帯で停車するためには、操舵によって車両240の走行位置を路側帯の方へ変更しつつ、速度がゼロになるまで車両240を減速させるという制御が行われる。
 ここで、自動運転機能を有する車両の走行を制御する方法には、Lidar(Light Detection and Ranging)などの測距装置やカメラなどを用いることで、周囲の地形や障害物などを認識して制御を行うという方法もある。これらの方法は、光波などの電磁波を利用する方法である。音波は電磁波よりも回折が大きいため、車外音で障害物等を検出する方法によれば、測距装置やカメラなどでは検出されていない障害物等(例えば物陰にある緊急車両)も検出することができる。よって、車外音を利用して車両240の走行を制御することにより、測距装置やカメラなどでは検出されていない障害物等を考慮して車両240を安全に制御することができる。
 なお、制御装置200による車両240の走行の制御は、車外音のみを利用するのではなく、測距装置やカメラを利用した制御と併用されることが好適である。例えば、緊急車両が対向車線を走行している場合、この緊急車両のサイレンが聞こえたとしても、車両240を停車させる必要がない場合もある。特に、車両240の走行車線と緊急車両が走行している車線とが中央分離帯で区切られている場合、緊急車両が車両240の走行車線に入ってくる可能性は無いと言えるため、車両240を停車させる必要がない。このように、車外音を用いて障害物等が検出されたとしても、その障害物等の状態(位置や速度など)が車両240の走行に影響を与えなければ、車両240の走行をそのまま継続することができる。
 そこで制御部204は、車外音の特徴に基づいて車外音の発生源を推定し、その推定された発生源を、測距装置やカメラによって認識された物体の中から特定する。そして制御部204は、特定された物体の状況(位置など)に基づいて、車両240の走行を制御する。例えば制御部204が、車外音の特徴に基づいて、車外音の発生源が救急車であると特定したとする。この場合、例えば制御部204は、カメラによって生成された映像から救急車を検出し、その位置を特定する。例えば救急車の位置が、中央分離帯を挟んだ対向車線上である場合、制御部204は、車両240の走行を特に制御しない。一方、例えば救急車の位置が、車両240の走行車線上でなおかつ車両240の後方である場合や、このまま車両240が走行すれば車両240と救急車が同じようなタイミングで共に交差点に入ることになる場合などには、制御部204は、車両240を路側帯に停車させる。
 上記制御を行う場合、制御情報は、車外音の特徴、その特徴を持つ発生源をカメラ等で検出するための情報(例えば、物体の外見の特徴量など)、及び発生源の状況に対して、車両240の制御方法を対応づけておく。
 このように、車外音を利用して車両240の走行を制御する際、車外音だけでなく、測距装置やカメラなどから得られる情報も併用することで、より詳細かつ高い精度で車両240の走行を制御することができる。
<車両240の走行の制御に関連した車外音の出力>
 車両240の周囲で様々な音が発生している場合、入力装置10を介して取得される車外音の中には、緊急車両のサイレンなど、制御情報に示される所定の特徴を持つ音だけでなく、別の音も含まれうる。そこで制御部204は、車外音を利用して車両240の走行を制御した際、車外音の中からその制御に利用された音(例えば緊急車両のサイレン)が強調されるように車外音を処理し、その処理後の車外音を車両240の室内に出力させてもよい。このようにすることで、車両240の走行状態が変化した場合に、車両240の搭乗者がその原因を認識しやすくなる。
 例えば制御情報が、所定の特徴として周波数帯域を示しているとする。この場合、制御部204は、この周波数帯域のみを抽出するバンドパスフィルタを車外音に適用することにより、所定の特徴を持つ音、すなわち車両240の制御に利用される音が強調された車外音を得ることができる。
 また、車両240の走行の制御に車外音が利用されず、測距装置やカメラなどで物体を認識することで車両240の走行が制御される場合において、制御部204は、走行の制御の原因となった物体に関連する音が強調されるように車外音を加工し、加工後の車外音を車室内に出力させてもよい。例えば、カメラによって救急車が検出されたことに伴い、車両240の走行が制御されたとする。この場合、車両240の走行の制御の原因となった物体は、救急車である。そこで例えば、制御部204は、救急車のサイレンの特徴を持つ音を抽出するフィルタ処理を車外音に施して、フィルタ処理後の車外音を出力装置20に出力させる。その他にも例えば、カメラによって踏切が認識されたことによって車両240の走行が制御された場合、制御部204は、踏切の音の特徴を持つ音を抽出するフィルタ処理を車外音に施して、フィルタ処理後の車外音を出力装置20に出力させる。上記フィルタ処理を実現するため、車両240の走行の原因となりうる物体(救急車や踏切など)ごとに、その物体から発せられる音を抽出するための情報(フィルタ処理におけるフィルタ係数など)を定めておく。
 以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記各実施形態の組み合わせ、又は上記以外の様々な構成を採用することもできる。
 この出願は、2016年10月27日に出願された日本出願特願2016-210435号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (13)

  1.  車両の外で発生した音であり、入力装置を介して取得される車外音から所定の特徴を検出する検出手段と、
     前記検出手段による検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御手段と、を有する制御装置。
  2.  前記所定の特徴は、音の大きさの時間変化に関する特徴、音の周波数分布に関する特徴、音の周波数帯域に関する特徴、及び音の周期的な変化に関する特徴のうち少なくとも一つを含む請求項1に記載の制御装置。
  3.  前記制御手段は、複数の所定の特徴それぞれに対応づけて前記出力装置の制御方法を記憶している記憶装置から、前記検出手段によって検出された前記所定の特徴に対応づけられている制御方法を取得し、前記取得した制御方法に基づいて前記出力装置を制御する、請求項1又は2に記載の制御装置。
  4.  前記制御手段は、前記検出手段による検出結果に基づいて、前記出力装置に前記車外音を出力させるか否かを決定する、請求項1~3いずれか一項に記載の制御装置。
  5.  前記制御手段は、前記検出手段による検出結果に基づいて、前記出力装置が有する音声フィルタを前記出力装置によって出力される車外音に適用するか否かを決定する、請求項1~3いずれか一項に記載の制御装置。
  6.  前記制御手段は、第1の時点において前記入力装置が取り込んだ第1の前記車外音から第1の前記所定の特徴が検出されたことに応じて、前記車両の室内で第1の前記車外音が出力されないように前記出力装置を制御した後、前記第1の時点よりも後の時点である第2の時点において前記入力装置が取り込んだ第2の前記車外音から第1の前記所定の特徴が検出されないことに応じて、前記車両の室内で第2の前記車外音が再生されるように前記出力装置を制御する、請求項1~5いずれか一項に記載の制御装置。
  7.  前記車両の室内で発生する音の大きさに基づいて、前記出力装置から出力される前記車外音の大きさを決定する、請求項1~6いずれか一項に記載の制御装置。
  8.  前記車両は自動運転機能を有し、
     前記制御手段は、前記車外音から所定の特徴が検出されたことに応じて、前記車両の加速、減速、及び操舵のいずれか1つ以上を制御することで、前記車両の走行を制御する、請求項1~7いずれか一項に記載の制御装置。
  9.  前記制御手段は、前記車両の走行を制御した際、その制御の原因となった所定の特徴を持つ音が強調されるように前記車外音を加工し、前記加工された車外音を前記車両の室内に出力させる、請求項8に記載の制御装置。
  10.  前記制御手段は、前記車両の位置と、前記車両の走行の制御の原因となった他の車両との位置関係に基づいて前記車両の走行を制御する、請求項8又は9に記載の制御装置。
  11.  車両の外部で発生する車外音を取り込む入力装置と、
     前記車外音を前記車両の室内に出力する出力装置と、
     制御装置と、を有し、
     前記制御装置は、
      前記入力装置を介して前記車外音を取得し、前記車外音から所定の特徴を検出する検出手段と、
      前記検出手段による検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御手段と、を有する制御システム。
  12.  コンピュータによって実行される制御方法であって、
      入力装置を介して、車両の外で発生した音である車外音を取得し、前記車外音から所定の特徴を検出する検出ステップと、
      前記検出ステップにおける検出結果に基づいて、前記車外音を前記車両の室内に出力する出力装置による前記車外音の出力を制御する制御ステップと、を有する制御方法。
  13.  請求項12に記載の制御方法の各ステップをコンピュータに実行させるプログラム。
PCT/JP2017/038476 2016-10-27 2017-10-25 制御装置、制御システム、制御方法、及びプログラム Ceased WO2018079584A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016210435 2016-10-27
JP2016-210435 2016-10-27

Publications (1)

Publication Number Publication Date
WO2018079584A1 true WO2018079584A1 (ja) 2018-05-03

Family

ID=62025016

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/038476 Ceased WO2018079584A1 (ja) 2016-10-27 2017-10-25 制御装置、制御システム、制御方法、及びプログラム

Country Status (1)

Country Link
WO (1) WO2018079584A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2025225312A1 (ja) * 2024-04-23 2025-10-30 株式会社デンソー 車両用制御装置及び車両用制御方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06245289A (ja) * 1993-02-17 1994-09-02 Fujitsu Ten Ltd 車載用電子装置
JPH082339A (ja) * 1994-06-16 1996-01-09 Mitsubishi Automob Eng Co Ltd 車外音導入装置
JP2006050063A (ja) * 2004-08-02 2006-02-16 Suzuki Motor Corp 車両用オーディオの制御装置
JP2015118438A (ja) * 2013-12-17 2015-06-25 みこらった株式会社 自動運転車

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06245289A (ja) * 1993-02-17 1994-09-02 Fujitsu Ten Ltd 車載用電子装置
JPH082339A (ja) * 1994-06-16 1996-01-09 Mitsubishi Automob Eng Co Ltd 車外音導入装置
JP2006050063A (ja) * 2004-08-02 2006-02-16 Suzuki Motor Corp 車両用オーディオの制御装置
JP2015118438A (ja) * 2013-12-17 2015-06-25 みこらった株式会社 自動運転車

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2025225312A1 (ja) * 2024-04-23 2025-10-30 株式会社デンソー 車両用制御装置及び車両用制御方法

Similar Documents

Publication Publication Date Title
US12459468B2 (en) Vehicle control device and vehicle control method
US11673569B2 (en) Alert control apparatus and alert control method
CN111361552B (zh) 自动驾驶系统
KR102590981B1 (ko) 차량용 외부 오디오 경보 시스템 및 방법
CN110310618B (zh) 车辆行驶环境声音的处理方法、处理装置和车辆
JP6724986B2 (ja) 自動運転車のためのホーンの適応検出および適用のための方法およびシステム
CN107709079B (zh) 在车辆中使用的用于检测外部事件的系统和方法
US9056550B2 (en) Vehicle speed limiting and/or controlling system that is responsive to GPS signals
US20180144636A1 (en) Distracted driver detection, classification, warning, avoidance system
US10152884B2 (en) Selective actions in a vehicle based on detected ambient hazard noises
WO2017022417A1 (ja) 運転支援制御装置
US20200122773A1 (en) System and Method for Rear Collision Avoidance
JP7311648B2 (ja) 運転者及び乗客用の車載音響監視システム
US12296675B2 (en) Control device and control program product
US20250234126A1 (en) Acoustic control method and acoustic control device
JP7347459B2 (ja) 制御装置及び制御プログラム
WO2018163545A1 (ja) 情報処理装置、情報処理方法及び記録媒体
WO2018079527A1 (ja) 制御装置、出力方法及びプログラム
JP2009078628A (ja) 車両用報知システム
WO2018079584A1 (ja) 制御装置、制御システム、制御方法、及びプログラム
JP2018169771A (ja) 報知制御方法およびそれを利用した報知制御装置、自動運転制御装置、車両、プログラム、報知制御システム
CN110139205B (zh) 用于辅助信息呈现的方法及装置
US20240300544A1 (en) Driver monitoring device, driver monitoring method, and non-transitory recording medium
WO2020059115A1 (ja) 運転判定装置および運転判定方法
WO2018139650A1 (ja) 音声制御装置、音声制御方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17864321

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17864321

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP