[go: up one dir, main page]

JP2014052883A - Pedestrian warning device - Google Patents

Pedestrian warning device Download PDF

Info

Publication number
JP2014052883A
JP2014052883A JP2012197516A JP2012197516A JP2014052883A JP 2014052883 A JP2014052883 A JP 2014052883A JP 2012197516 A JP2012197516 A JP 2012197516A JP 2012197516 A JP2012197516 A JP 2012197516A JP 2014052883 A JP2014052883 A JP 2014052883A
Authority
JP
Japan
Prior art keywords
pedestrian
vehicle
image
relative angle
risk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012197516A
Other languages
Japanese (ja)
Other versions
JP5863607B2 (en
Inventor
Yuki Yamazaki
祐樹 山▲崎▼
Yukinori Midorikawa
幸則 緑川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Autoliv Development AB
Original Assignee
Autoliv Development AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Autoliv Development AB filed Critical Autoliv Development AB
Priority to JP2012197516A priority Critical patent/JP5863607B2/en
Publication of JP2014052883A publication Critical patent/JP2014052883A/en
Application granted granted Critical
Publication of JP5863607B2 publication Critical patent/JP5863607B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a pedestrian warning device which urges a pedestrian to an action to avoid an accident and can reduce the possibility of an accident by a simple configuration without impairing quietness.SOLUTION: A pedestrian warning device 100 which is mounted on a vehicle 102 and outputs a warning to a pedestrian comprises: an infrared camera 104 for capturing an image of an area ahead of the vehicle and generating the image; a pedestrian detecting unit 134 for detecting a position of a pedestrian in the image; a self-vehicle travel area setting unit 132 which sets a self-vehicle travel area 116 to which the vehicle is predicted to travel in the future in the image; a pedestrian intrusion determination unit 138 for determining whether the pedestrian is in the self-vehicle travel area on the basis of the position of the pedestrian and the self-vehicle travel area; a relative angle measuring unit 140 which, if it is determined that the pedestrian is in the self-vehicle travel area, measures a relative angle which the direction from the vehicle to the pedestrian forms in reference to the vehicle's travel direction; and a loudspeaker 106 for outputting a narrow directional warning sound from the vehicle to the pedestrian on the basis of the relative angle.

Description

本発明は、車両に搭載され歩行者に警告を発する歩行者警告装置に関する。   The present invention relates to a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian.

交通事故は、歩行者の事故の割合が多く、例えば夕暮れまたは夜間時に発生し易い。特に高齢者においては、車両に気付かない、あるいは車両と自身との距離を見誤るなどして、無理な横断を行い、事故に遭う事例が見られる。   A traffic accident has a high proportion of pedestrian accidents, and is likely to occur at dusk or at night, for example. In particular, there are cases where elderly people do not notice the vehicle, or misunderstand the distance between the vehicle and themselves, forcing an accidental crossing and encountering an accident.

近年、ハイブリッド車や電気自動車が普及しているが、これらの車両は静粛性が高く、歩行者による車両の認知がますます困難になっている。これらの車両に対しては、擬似走行音やクラクションなどで、歩行者に自車を認識させることも考えられる。   In recent years, hybrid vehicles and electric vehicles have become widespread, but these vehicles are highly quiet and it is becoming increasingly difficult for pedestrians to recognize the vehicles. For these vehicles, it may be possible to make the pedestrian recognize the vehicle with simulated running sound or horn.

しかし、擬似走行音やクラクションにより警告を行うと、静粛性が損なわれ、また、対向車などの周囲への騒音による影響が考えられる。このため、上記の警告は、使用に制約がある。   However, if a warning is given by simulated running sound or horn, the quietness is impaired, and the influence of surrounding noise such as oncoming vehicles can be considered. For this reason, use of the above warning is limited.

一方、歩行者を検出し、車両の運転者に報知する技術が知られている。しかし、この技術は、車両側だけで事故の回避をするものであり、ある程度の速度で走行している車両には慣性があることから、事故の回避にも限界がある。   On the other hand, a technique for detecting a pedestrian and notifying a driver of the vehicle is known. However, this technique avoids accidents only on the vehicle side, and there is a limit in avoiding accidents because vehicles traveling at a certain speed have inertia.

また上記の技術では、検知距離が長くかつ高精度なカメラが必要とされるので、コストが高くなり、普及し難い。さらに、事故の回避動作として、急ブレーキをかけてしまうと、後続車に追突される可能性もあるので、急ブレーキをかけるような状況を未然に防止することが好ましい。   In addition, the above technique requires a camera with a long detection distance and high accuracy, which increases costs and is difficult to spread. Further, as an accident avoidance operation, if a sudden brake is applied, there is a possibility of a rear-end vehicle crashing. Therefore, it is preferable to prevent a situation in which a sudden brake is applied.

特許文献1には、歩行者に対して音と光とを出力し、歩行者に自車を報知する技術が記載されている。しかし、特許文献1に記載の技術は、単に歩行者に報知するだけであり、横断者に対して警告し、事故の回避動作を促すものではない。   Patent Document 1 describes a technique for outputting sound and light to a pedestrian and notifying the pedestrian of the vehicle. However, the technique described in Patent Document 1 merely notifies a pedestrian, does not warn a crossing person, and does not prompt an accident avoidance operation.

特許文献2には、状況に応じて音量を変化させた警告音により、歩行者に注意を喚起する技術が記載されているものの、音量を状況に応じて変化させるため、静粛性が損なわれる場合もあり得る。一例として、聴力の衰えた高齢者や周囲の騒音環境を考慮した場合には、上記の技術では、ある程度以上の音量に設定する必要があり、静粛性が損なわれてしまう。   Patent Document 2 describes a technique for alerting a pedestrian with a warning sound whose volume is changed according to the situation, but the silence is impaired because the volume is changed according to the situation. There is also a possibility. As an example, when considering an elderly person whose hearing ability has deteriorated and a surrounding noise environment, it is necessary to set the sound volume to a certain level or more in the above-described technique, and silence is impaired.

特開2011−218826号公報JP 2011-218826 A 特開2011−189916号公報JP 2011-189916 A 特開2010−93610号公報JP 2010-93610 A 特開2010−244474号公報JP 2010-244474 A

ところで、歩行者と自車との距離は、通常、2つのカメラから得られた2つの画像の視差を利用して正確に測定されるため、複雑な構成が必要となる。これに対して、特許文献3、4には、単眼カメラを用いて歩行者を検知する技術が記載されている。これらの技術によれば、検知される対象物が移動しているか否かを検知し、自車から対象物までの距離のデータが不要となる。   By the way, since the distance between a pedestrian and the own vehicle is usually accurately measured using the parallax between two images obtained from two cameras, a complicated configuration is required. On the other hand, Patent Documents 3 and 4 describe techniques for detecting a pedestrian using a monocular camera. According to these techniques, it is detected whether or not the object to be detected is moving, and data on the distance from the vehicle to the object becomes unnecessary.

しかし、上記技術では、検知される対象物の移動を検知するものの、対象物が警告を行うべき対象物であるか否かは判定していない。   However, although the above technique detects the movement of the detected object, it does not determine whether the object is an object to be warned.

本発明は、このような課題に鑑み、簡素な構成で歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる歩行者警告装置を提供することを目的としている。   The present invention has been made in view of such a problem, and an object thereof is to provide a pedestrian warning device that can prompt a pedestrian to avoid an accident with a simple configuration and can reduce the possibility of an accident without impairing silence.

上記課題を解決するために、本発明にかかる歩行者警告装置の代表的な構成は、車両に搭載され歩行者に警告を発する歩行者警告装置において、車両前方を撮像し画像を生成する1つの撮像部と、画像内の歩行者の位置を検知する歩行者検知部と、車両が将来進行すると予測される自車進行領域を画像内に設定する自車進行領域設定部と、歩行者の位置および自車進行領域に基づいて、自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、自車進行領域に歩行者が侵入していると判定されたとき、車両の進行方向を基準として車両から歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、相対角度に基づき、車両から歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする。   In order to solve the above problems, a typical configuration of a pedestrian warning device according to the present invention is a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian. An imaging unit, a pedestrian detection unit that detects the position of a pedestrian in the image, a host vehicle travel region setting unit that sets a host vehicle travel region in which the vehicle is predicted to travel in the future, and a pedestrian position And a pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the own vehicle traveling area, and when it is determined that a pedestrian has entered the own vehicle traveling area A relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to the traveling direction of the vehicle, and a warning that outputs a narrow directivity warning sound from the vehicle to the pedestrian based on the relative angle And a section.

上記構成によれば、1つの撮像部で車両前方を画像として捉え、この画像を画像処理することで歩行者の位置を検知する。なお撮像部としては、赤外線カメラが挙げられる。赤外線カメラを用いることで、夜間でも歩行者の検知が可能となる。さらに、歩行者が自車進行領域に侵入している場合には、車両の進行方向に対して歩行者がどういう位置関係にあるかを示す相対角度に基づいて、この歩行者に向けて狭指向性の警告音を出力する。   According to the above configuration, the front of the vehicle is captured as an image by one imaging unit, and the position of the pedestrian is detected by performing image processing on the image. An example of the imaging unit is an infrared camera. By using an infrared camera, pedestrians can be detected even at night. Furthermore, when a pedestrian has entered the own vehicle traveling area, the direction toward the pedestrian is narrowly directed based on the relative angle indicating the positional relationship of the pedestrian with respect to the traveling direction of the vehicle. A sex warning sound is output.

なお既存の技術では、2つのカメラから得られた画像に基づいて、左右の視差を利用して歩行者などの対象物までの距離(奥行)を測定している。これに対して、上記構成では、車両に対する歩行者の相対角度を計測しているので、歩行者までの距離を正確に測る必要がない。また、警告部は、狭指向性のスピーカなどであり、車両のクラクションやライトとは異なり、対象となる歩行者にのみ警告音を出力でき、歩行者の周囲に騒音あるいは光による影響を与えず静粛性が損なわれない。したがって、上記構成によれば、比較的簡素な構成で、歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる。   In the existing technology, the distance (depth) to an object such as a pedestrian is measured using left and right parallax based on images obtained from two cameras. On the other hand, in the said structure, since the relative angle of the pedestrian with respect to a vehicle is measured, it is not necessary to measure the distance to a pedestrian correctly. Also, the warning section is a narrow-directional speaker, etc., and unlike a vehicle horn or light, it can output a warning sound only to the target pedestrian and does not affect the pedestrian around by noise or light. Silence is not impaired. Therefore, according to the said structure, the possibility of an accident can be reduced without impairing quietness with a comparatively simple structure, prompting a pedestrian to avoid an accident.

上記の自車進行領域に複数の歩行者が侵入していると判定されたとき、自車進行領域でのそれぞれの歩行者の位置の、車両の進行方向における座標に応じて遠近を判定し、座標の置が小さい歩行者ほど自車から近く危険度が高いと判定する危険度判定部をさらに備え、相対角度測定部は、危険度判定部で危険度が最も高いと判定された歩行者の相対角度を計測するとよい。   When it is determined that a plurality of pedestrians have entered the vehicle traveling area, the position of each pedestrian in the vehicle traveling area is determined according to the coordinates in the traveling direction of the vehicle, It further includes a risk determination unit that determines that a pedestrian with a smaller coordinate position is closer to the host vehicle and has a higher risk, and the relative angle measurement unit is a pedestrian whose risk is determined to be highest by the risk determination unit. It is good to measure the relative angle.

これにより、自車進行領域に複数の歩行者が存在した場合、自車との距離に応じて警告の優先度を決定できる。すなわち、複数の歩行者のうち、自車との距離がより小さい位置に存在する歩行者に対して、まず警告音を出力し、事故の可能性をより低減できる。   Thereby, when a plurality of pedestrians exist in the own vehicle traveling region, the priority of the warning can be determined according to the distance from the own vehicle. That is, a warning sound is first output to a pedestrian that is present at a position where the distance from the host vehicle is smaller among a plurality of pedestrians, thereby further reducing the possibility of an accident.

上記の自車進行領域の、自車の進行方向に直交する左右方向の幅が、自車の幅より大きいとよい。これにより、歩行者が自車の幅で規定された領域ではなく、自車の幅より大きい幅を有する自車進行領域に侵入したとき、相対角度に基づいて警告音が出力される。よって、歩行者に対してより迅速に事故回避行動を促すことが可能となる。
The width in the left-right direction perpendicular to the traveling direction of the host vehicle in the host vehicle traveling region may be larger than the width of the host vehicle. Thereby, when a pedestrian enters the own vehicle traveling area having a width larger than the width of the own vehicle instead of the area defined by the width of the own vehicle, a warning sound is output based on the relative angle. Therefore, it is possible to prompt the pedestrian to take an accident avoidance action more quickly.

上記課題を解決するために、本発明にかかる他の歩行者警告装置の代表的な構成は、車両に搭載され歩行者に警告を発する歩行者警告装置において、車両前方を撮像し画像を生成する1つの撮像部と、画像内の歩行者の位置を検知する歩行者検知部と、車両が将来進行すると予測される自車進行領域を画像内に設定する自車進行領域設定部と、歩行者の位置および自車進行領域に基づいて、自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、自車進行領域に歩行者が侵入していないと判定されたとき、画像内での歩行者の危険度を判定する危険度判定部と、危険度判定部により危険度が高いと判定された歩行者について、車両の進行方向を基準として車両から歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、相対角度に基づき、車両から歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする。   In order to solve the above problems, a typical configuration of another pedestrian warning device according to the present invention is a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian, and images the front of the vehicle and generates an image. One imaging unit, a pedestrian detection unit that detects the position of a pedestrian in the image, a host vehicle traveling region setting unit that sets a host vehicle traveling region in which the vehicle is predicted to travel in the future, and a pedestrian And a pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area, and a pedestrian has not entered the own vehicle traveling area A risk determination unit that determines the risk level of the pedestrian in the image, and a pedestrian determined to have a high risk level by the risk level determination unit, from the vehicle to the pedestrian based on the traveling direction of the vehicle Relative angle to measure the relative angle formed by the direction of heading A measuring section, based on the relative angle, characterized in that it comprises a warning unit which toward the pedestrian from the vehicle to output a narrow directivity of the alarm sound.

上記構成によれば、上記同様に、車両に対する歩行者の相対角度を計測しているので、歩行者までの距離を正確に測る必要がなく、撮像部は1つで済む。また、また、警告部は、狭指向性のスピーカなどであり、歩行者の周囲に騒音あるいは光による影響を与えず、静粛性が損なわれない。   According to the above configuration, the relative angle of the pedestrian with respect to the vehicle is measured in the same manner as described above. Therefore, it is not necessary to accurately measure the distance to the pedestrian, and only one imaging unit is required. Further, the warning unit is a narrow directivity speaker or the like, and does not affect the surroundings of the pedestrian by noise or light, so that quietness is not impaired.

さらに、上記構成では、自車進行領域に侵入してはいないが、画像内の危険度の高い歩行者を特定し、この歩行者の車両に対する相対角度に基づいて、歩行者に狭指向性の警告音を出力できる。したがって、比較的簡素な構成で、自車進行領域に未だ侵入していない歩行者に対して事故回避行動を促し、静粛性を損なうことなく事故の可能性をより低減できる。   Furthermore, in the above configuration, a pedestrian with a high degree of danger in the image is identified without entering the own vehicle traveling area, and the pedestrian has a narrow directivity based on the relative angle of the pedestrian to the vehicle. A warning sound can be output. Therefore, with a relatively simple configuration, an accident avoidance action can be promoted for a pedestrian who has not yet entered the own vehicle traveling area, and the possibility of an accident can be further reduced without impairing silence.

上記の危険度判定部は、画像内に自車進行領域の先の消失点を設定し、消失点から歩行者の最下点を通る直線が、下縁ラインと交差する交差点を特定し、交差点が画像の中心方向に向かって移動するとき危険度が高いと判定するとよい。   The risk determination unit described above sets the vanishing point ahead of the own vehicle traveling area in the image, identifies the intersection where the straight line passing through the pedestrian's lowest point from the vanishing point intersects the lower edge line, It may be determined that the risk is high when the image moves toward the center of the image.

これにより、交差点が画像の中心方向に向かっているときは、歩行者が自車進行領域に近付いているので、危険度が高いと判定できる。なお、交差点が画像の中心から遠ざかる方向に向かっているときは、歩行者が自車進行領域から遠ざかっているので、危険度が低いと判定してよい。このように、交差点に着目することで、歩行者の移動方向に伴う自車進行領域への侵入の危険性も判定できる。   As a result, when the intersection is directed toward the center of the image, it can be determined that the degree of danger is high because the pedestrian is approaching the own vehicle travel region. Note that when the intersection is moving away from the center of the image, the pedestrian is moving away from the traveling area of the vehicle, and therefore, it may be determined that the degree of risk is low. In this way, by paying attention to the intersection, it is also possible to determine the risk of intrusion into the own vehicle traveling area according to the moving direction of the pedestrian.

上記の危険度判定部は、交差点が画像の中心方向に向かって移動する場合であって、交差点の単位時間当たりの移動量が所定値を越えるとき、危険度が高いと判定するとよい。これにより、交差点の移動方向だけでなく、単位時間当たりの移動量も考慮して、より精度の高い危険度の判定が可能となる。   The risk determination unit may determine that the risk is high when the intersection moves toward the center of the image and the amount of movement of the intersection per unit time exceeds a predetermined value. This makes it possible to determine the degree of risk with higher accuracy in consideration of not only the moving direction of the intersection but also the moving amount per unit time.

上記の歩行者検知部が検知する歩行者の位置は、歩行者の最下点の座標であり、歩行者侵入判定部による判定は、歩行者の最下点の座標が自車進行領域内に位置するか否かによって行われ、相対角度は、画像の下縁である下縁ラインの中央から垂直に延びる車両の進行方向を示す直線と、下縁ラインの中央から歩行者の最下点までを結ぶ直線との成す角度により得られるとよい。   The position of the pedestrian detected by the pedestrian detection unit is the coordinate of the lowest point of the pedestrian, and the determination by the pedestrian intrusion determination unit is that the coordinate of the lowest point of the pedestrian is within the own vehicle traveling region. The relative angle is determined from the center of the lower edge line, which is the lower edge of the image, to the vertical direction of the vehicle, and from the center of the lower edge line to the lowest point of the pedestrian. It may be obtained by an angle formed by a straight line connecting the two.

これにより、各角度に対応した直線から画像内に位置する線分を設定し、歩行者の最下点の座標がどの線分上に存在するかを判定することで、自車に対する歩行者の相対角度を算出できる。   Thereby, the line segment located in the image is set from the straight line corresponding to each angle, and by determining which line segment the coordinate of the lowest point of the pedestrian exists, The relative angle can be calculated.

本発明によれば、簡素な構成で歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる歩行者警告装置を提供することが可能となる。   ADVANTAGE OF THE INVENTION According to this invention, it becomes possible to provide the pedestrian warning device which can accelerate | stimulate accident avoidance action to a pedestrian with a simple structure, and can reduce the possibility of an accident, without impairing silence.

本発明の実施形態における歩行者警告装置を適用する車両を概略的に例示した図である。It is the figure which illustrated roughly the vehicle to which the pedestrian warning device in the embodiment of the present invention is applied. 図1の歩行者警告装置の機能ブロック図である。It is a functional block diagram of the pedestrian warning device of FIG. 図2の歩行者警告装置の動作を例示したフローチャートである。It is the flowchart which illustrated operation | movement of the pedestrian warning device of FIG. 図2の歩行者警告装置での自車に対する歩行者の相対角度を計測する手法を説明する図である。It is a figure explaining the method of measuring the relative angle of the pedestrian with respect to the own vehicle in the pedestrian warning device of FIG. 図2の歩行者警告装置での歩行者の移動方向に伴う危険度の判定を説明する図である。It is a figure explaining determination of the risk accompanying the pedestrian's moving direction in the pedestrian warning device of FIG. 本発明の他の実施形態である歩行者警告装置の動作を例示したフローチャートである。It is the flowchart which illustrated operation | movement of the pedestrian warning device which is other embodiment of this invention. 図6の歩行者警告装置での歩行者の上下方向の位置に伴う危険度の判定を説明する図である。It is a figure explaining the judgment of the risk accompanying the position of a pedestrian's up-down direction in the pedestrian warning device of FIG. 図2の歩行者警告装置により歩行者に警告を出力した場合での具体例を示す図である。It is a figure which shows the specific example at the time of outputting a warning to a pedestrian by the pedestrian warning device of FIG.

以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。かかる実施形態に示す寸法、材料、その他具体的な数値などは、発明の理解を容易とするための例示に過ぎず、特に断る場合を除き、本発明を限定するものではない。なお、本明細書及び図面において、実質的に同一の機能、構成を有する要素については、同一の符号を付することにより重複説明を省略し、また本発明に直接関係のない要素は図示を省略する。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The dimensions, materials, and other specific numerical values shown in the embodiments are merely examples for facilitating understanding of the invention, and do not limit the present invention unless otherwise specified. In the present specification and drawings, elements having substantially the same function and configuration are denoted by the same reference numerals, and redundant description is omitted, and elements not directly related to the present invention are not illustrated. To do.

図1は、本発明の実施形態における歩行者警告装置を適用する車両を概略的に例示した図である。図1(a)は、歩行者警告装置を備えた車両の上面図である。図1(b)は、赤外線カメラにより得られる画像データを例示する図である。   FIG. 1 is a diagram schematically illustrating a vehicle to which a pedestrian warning device according to an embodiment of the present invention is applied. FIG. 1A is a top view of a vehicle including a pedestrian warning device. FIG. 1B is a diagram illustrating image data obtained by an infrared camera.

歩行者警告装置100は、図1(a)に示すように、車両102に搭載され歩行者に警告を発する装置であり、1つの撮像部(赤外線カメラ104)と、車両前側に設置された警告部(スピーカ106)とを備える。赤外線カメラ104は、車両前方を撮像し、撮像データを生成する。なお図1(b)に例示する画像データ108は、撮像データに対して後述する画像処理を施して生成された加工データである。   As shown in FIG. 1A, the pedestrian warning device 100 is a device that is mounted on a vehicle 102 and issues a warning to a pedestrian. One imaging unit (infrared camera 104) and a warning installed on the front side of the vehicle. (Speaker 106). The infrared camera 104 images the front of the vehicle and generates imaging data. Note that the image data 108 illustrated in FIG. 1B is processed data generated by performing later-described image processing on the captured data.

スピーカ106は、裏面に配置されたアクチュエータ110により任意の角度に駆動され、図中一点鎖線で示すように、狭指向性の警告音112を出力する。ここでは、スピーカ106は、画像データ108内に存在する歩行者A、Bのうち、図1(a)に示すように歩行者Aに向けてのみ警告音112が出力されている。   The speaker 106 is driven at an arbitrary angle by an actuator 110 disposed on the back surface, and outputs a narrow directivity warning sound 112 as indicated by a one-dot chain line in the figure. Here, the speaker 106 outputs the warning sound 112 only toward the pedestrian A among the pedestrians A and B existing in the image data 108 as shown in FIG.

歩行者Aは、車両前後方向に延びていて対向する判定ライン114a、114bの間に位置し車両が将来進行すると予想される自車進行領域116内に存在している。なお歩行者Bは、判定ライン114bの外側に位置し自車進行領域116には存在していない。つまり、判定ライン114a、114bとは、歩行者が自車進行領域116内に存在しているか否かを判定するラインである。   The pedestrian A extends in the vehicle front-rear direction and is located between the opposing determination lines 114a and 114b, and is present in the own vehicle traveling region 116 where the vehicle is expected to travel in the future. The pedestrian B is located outside the determination line 114b and does not exist in the own vehicle traveling region 116. That is, the determination lines 114a and 114b are lines for determining whether or not a pedestrian is present in the own vehicle traveling area 116.

自車進行領域116の車幅方向に沿った幅Waは、車両102の車幅Wbに、車外側にそれぞれ余裕分の幅Wcを加算した値である(すなわち、Wa=Wb+2Wc)。なお幅Wcは、車両102の速度に応じて適宜設定してよい。一例として、車両102が30〜40km/hで走行していた場合には、余裕分の幅2Wcを車幅Wbと同じ程度に設定してよい。   The width Wa along the vehicle width direction of the own vehicle traveling region 116 is a value obtained by adding a margin width Wc to the vehicle width Wb of the vehicle 102 on the outside of the vehicle (that is, Wa = Wb + 2Wc). The width Wc may be appropriately set according to the speed of the vehicle 102. As an example, when the vehicle 102 is traveling at 30 to 40 km / h, the margin width 2Wc may be set to the same level as the vehicle width Wb.

なお赤外線カメラ104から延びるように図1(a)にて点線で示されたライン118a、118b同士が成す角度は、いわゆる視野角に対応してよい。また、画像データ108内での双方の判定ライン114a、114bは、図1(b)に示すように、画像データ108の下縁となる下縁ライン120にそれぞれの交わる点122a、122bから画面中央の消失点124に向けて引かれた線分として示されている。   Note that an angle formed by the lines 118a and 118b indicated by dotted lines in FIG. 1A so as to extend from the infrared camera 104 may correspond to a so-called viewing angle. Further, as shown in FIG. 1B, both determination lines 114a and 114b in the image data 108 are displayed at the center of the screen from the points 122a and 122b that intersect with the lower edge line 120 that is the lower edge of the image data 108, respectively. It is shown as a line drawn toward the vanishing point 124.

以下、図2および図3を参照して、歩行者警告装置100の機能および動作を説明する。図2は、図1の歩行者警告装置100の機能ブロック図である。図3は、図2の歩行者警告装置100の動作を例示したフローチャートである。   Hereinafter, the function and operation of the pedestrian warning device 100 will be described with reference to FIGS. 2 and 3. FIG. 2 is a functional block diagram of the pedestrian warning device 100 of FIG. FIG. 3 is a flowchart illustrating the operation of the pedestrian warning device 100 of FIG.

歩行者警告装置100は、図2に示すように、上記赤外線カメラ104、スピーカ106およびアクチュエータ110に加えて、車両情報取得部126と、警告可否判定部128と、画像情報取得部130と、自車進行領域設定部132と、歩行者検知部134と、制御部136とを備える。制御部136は、例えばアクチュエータ110を駆動する駆動信号を生成するものであり、歩行者侵入判定部138、相対角度計測部140および危険度判定部142を備える。   As shown in FIG. 2, in addition to the infrared camera 104, the speaker 106, and the actuator 110, the pedestrian warning device 100 includes a vehicle information acquisition unit 126, a warning availability determination unit 128, an image information acquisition unit 130, A vehicle travel region setting unit 132, a pedestrian detection unit 134, and a control unit 136 are provided. The control unit 136 generates a drive signal for driving the actuator 110, for example, and includes a pedestrian intrusion determination unit 138, a relative angle measurement unit 140, and a risk determination unit 142.

車両情報取得部126は、例えば、車両ECU(Electronic Control Unit)あるいはナビゲーション装置などから車両情報、すなわち車両が走行しているか、左折中または右折中ではなく直進しているかなどを取得する。   The vehicle information acquisition unit 126 acquires, for example, vehicle information from a vehicle ECU (Electronic Control Unit), a navigation device, or the like, that is, whether the vehicle is traveling, whether it is going straight instead of turning left or right.

警告可否判定部128は、車両情報取得部126からの車両情報に基づいて、図3に示すように、警告の可否を判定する(ステップS101)。ステップS101では、上記の車両情報により車両が走行し直進しているという条件が成立したとき、警告を許可して(Yes)、ステップS103の処理に進み、条件が成立しなければ、歩行者への警告は妥当でないと判定し(No)、再度、ステップS101の処理に戻る。   Based on the vehicle information from the vehicle information acquisition unit 126, the warning availability determination unit 128 determines whether or not a warning is possible (step S101). In step S101, when the condition that the vehicle travels and travels straight according to the vehicle information is satisfied, a warning is permitted (Yes), and the process proceeds to step S103. Is determined to be invalid (No), and the process returns to step S101 again.

警告可否判定部128により警告が許可されると、赤外線カメラ104が起動し、車両102の前方を撮像し、撮像データが生成される。つぎに、画像情報取得部130は、赤外線カメラ104で生成された撮像データに基づいて画像情報を取得し(ステップS103)、自車進行領域設定部132および歩行者検知部134に出力する。   When the warning is permitted by the warning availability determination unit 128, the infrared camera 104 is activated, the front of the vehicle 102 is imaged, and imaging data is generated. Next, the image information acquisition unit 130 acquires image information based on the imaging data generated by the infrared camera 104 (step S <b> 103), and outputs the image information to the own vehicle travel region setting unit 132 and the pedestrian detection unit 134.

自車進行領域設定部132は、画像情報取得部130から得た画像情報に基づいて、図1(a)および図1(b)に示す上記自車進行領域116を設定する(ステップS105)。ステップS105では、1つの赤外線カメラ104によって1点で測定することで得られた画像情報に基づいて、幅Waが画像データ108上でどの程度のスケールとなるか測定する。そして、上記下縁ライン120との交点122a、122bから消失点124に向かって引いた線分を判定ライン114a、114bとし、その判定ライン114a、114b間に位置する領域を自車進行領域116として設定する。   Based on the image information obtained from the image information acquisition unit 130, the host vehicle travel region setting unit 132 sets the host vehicle travel region 116 shown in FIGS. 1 (a) and 1 (b) (step S105). In step S105, based on the image information obtained by measuring at one point by one infrared camera 104, the scale of the width Wa on the image data 108 is measured. Then, the line segments drawn from the intersections 122a and 122b with the lower edge line 120 toward the vanishing point 124 are set as the determination lines 114a and 114b, and an area located between the determination lines 114a and 114b is set as the own vehicle traveling area 116. Set.

また、歩行者検知部134は、画像情報取得部130から得た画像情報に基づいて、パターンマッチングや表面温度が28℃〜39℃の顔形状を検知するなどにより、画像内の歩行者の位置を検知する(ステップS107)。なお、ここでの歩行者の位置とは、歩行者の最下点の座標である。   Further, the pedestrian detection unit 134 detects the position of the pedestrian in the image by detecting a face shape having a surface temperature of 28 ° C. to 39 ° C. based on the image information obtained from the image information acquisition unit 130. Is detected (step S107). In addition, the position of a pedestrian here is a coordinate of the lowest point of a pedestrian.

続いて、歩行者侵入判定部138は、自車進行領域設定部132で設定された自車進行領域116と、歩行者検知部134で検知された歩行者の位置とに基づいて、自車進行領域116内に歩行者が存在するか否かを判定する(ステップS109)。ステップS109で自車進行領域116内に歩行者が存在すれば(Yes)、相対角度計測部140は、自車の進行方向に対する歩行者の相対角度の計測を行う(ステップS111)。   Subsequently, the pedestrian intrusion determination unit 138 advances the own vehicle based on the own vehicle advance region 116 set by the own vehicle advance region setting unit 132 and the position of the pedestrian detected by the pedestrian detection unit 134. It is determined whether or not there is a pedestrian in the area 116 (step S109). If there is a pedestrian in the own vehicle traveling area 116 in step S109 (Yes), the relative angle measurement unit 140 measures the relative angle of the pedestrian with respect to the traveling direction of the own vehicle (step S111).

ステップS111では、相対角度計測部140に、歩行者侵入判定部138から判定結果が出力されると、ステップS105で設定された自車進行領域116と、ステップS107で生成された歩行者の位置とに基づいて、上記相対角度を計測する。なお、上記判定結果を示す信号は、相対角度計測部140の起動信号となる。   In step S111, when the determination result is output from the pedestrian intrusion determination unit 138 to the relative angle measurement unit 140, the own vehicle traveling region 116 set in step S105, and the position of the pedestrian generated in step S107. Based on the above, the relative angle is measured. The signal indicating the determination result is an activation signal for the relative angle measurement unit 140.

図4は、図2の歩行者警告装置100での自車に対する歩行者の相対角度を計測する手法を説明する図である。図4(a)は、簡略化して示す画像データ108Aを用いて相対角度を説明する図である。図4(b)は、相対角度の計測の原理を示す模式図である。   FIG. 4 is a diagram for explaining a method of measuring the relative angle of the pedestrian with respect to the own vehicle in the pedestrian warning device 100 of FIG. FIG. 4A is a diagram for explaining the relative angle by using simplified image data 108A. FIG. 4B is a schematic diagram showing the principle of relative angle measurement.

まず、相対角度計測部140は、図4(a)に示すように、画像データ108A内の歩行者Aの最下点Cと画像データ108Aの下縁ライン120の中央点122Cとを結ぶ直線144を生成する。そして、相対角度計測部140は、この直線144と、中央点122cと消失点124とを結ぶ直線145との成す角度Yを、車両102の進行方向に対する歩行者の相対角度としてよい。言い換えると、相対角度は、車両102の進行方向を基準として車両102から歩行者Aに向かう方向が成す角度をいう。   First, the relative angle measurement unit 140, as shown in FIG. 4A, a straight line 144 connecting the lowest point C of the pedestrian A in the image data 108A and the center point 122C of the lower edge line 120 of the image data 108A. Is generated. Then, the relative angle measurement unit 140 may set an angle Y formed by the straight line 144 and the straight line 145 connecting the center point 122 c and the vanishing point 124 as a relative angle of the pedestrian with respect to the traveling direction of the vehicle 102. In other words, the relative angle refers to an angle formed by a direction from the vehicle 102 toward the pedestrian A based on the traveling direction of the vehicle 102.

ここで図4(b)に示すように、単純な平板状の光学レンズ146と、受光素子148とを備えたカメラ104Aを用いた相対角度の計測の原理について説明する。なおカメラ104Aは、視野角X、焦点距離Lとする。   Here, as shown in FIG. 4B, the principle of relative angle measurement using a camera 104 </ b> A equipped with a simple flat optical lens 146 and a light receiving element 148 will be described. The camera 104A has a viewing angle X and a focal length L.

点Dからの映像は、カメラ104Aの視野端に位置するため、光学レンズ146の中心線150から「L・tan(X/2)」の位置Eに投影される。また、カメラの正面すなわち中心線150から角度Yずれた点Fからの映像は、中心線150から「L・tan(Y)」の位置Gに投影される。   Since the image from the point D is located at the field edge of the camera 104A, it is projected from the center line 150 of the optical lens 146 to the position E of “L · tan (X / 2)”. In addition, an image from the front of the camera, that is, a point F shifted by an angle Y from the center line 150 is projected from the center line 150 to a position G of “L · tan (Y)”.

ここで図4(a)に示すように、視野角Xに対応する映像(画像データ108A)の左右幅がピクセルZ(画素数がZ個)である場合、点Dが「Z/2」ピクセルの位置となる(図4(b)参照)。このため、角度Yに対応する点Fの画像データ108A上の位置は、式「tan(Y)/tan(X/2)・Z/2」で示すピクセルの位置となる。   Here, as shown in FIG. 4A, when the horizontal width of the video (image data 108A) corresponding to the viewing angle X is the pixel Z (the number of pixels is Z), the point D is “Z / 2” pixels. (See FIG. 4B). For this reason, the position on the image data 108A of the point F corresponding to the angle Y is the position of the pixel represented by the expression “tan (Y) / tan (X / 2) · Z / 2”.

この式により、各角度に対応した直線から画像データ108内に位置する線分を複数設定し、歩行者Aの最下点Cがどの線分上に存在するかを判定することで、自車に対する歩行者の相対角度Yを算出できる。なおここでは、単純な平板状の光学レンズ146を用いて説明したが、通常使用される曲面レンズであっても、屈折率を考慮することで上記同様の変換が可能となる。   By this formula, a plurality of line segments located in the image data 108 are set from straight lines corresponding to each angle, and by determining which line segment the lowest point C of the pedestrian A exists is The relative angle Y of the pedestrian with respect to can be calculated. Although a simple flat optical lens 146 has been described here, even a curved lens that is normally used can be converted in the same manner as described above in consideration of the refractive index.

このようにして、図2に示す相対角度計測部140は、ステップS111での相対角度の計測を行う。続いて、相対角度計測部140は、計測した相対角度に応じた駆動信号をアクチュエータ110に出力する。アクチュエータ110は、相対角度計測部140からの駆動信号を受けて、スピーカ106を駆動し、自車進行領域116内に存在する歩行者Aにスピーカ106を向ける(ステップS113)。つまり、相対角度は、自車進行領域116内の歩行者の位置情報として用いられる。   In this way, the relative angle measurement unit 140 shown in FIG. 2 measures the relative angle in step S111. Subsequently, the relative angle measurement unit 140 outputs a drive signal corresponding to the measured relative angle to the actuator 110. The actuator 110 receives the drive signal from the relative angle measurement unit 140, drives the speaker 106, and directs the speaker 106 toward the pedestrian A existing in the own vehicle traveling region 116 (step S113). That is, the relative angle is used as position information of a pedestrian in the own vehicle traveling area 116.

続いてスピーカ106は、図1に示すように、車両102から歩行者Aに向けて狭指向性の警告音112を出力する(ステップS115)。   Subsequently, as shown in FIG. 1, the speaker 106 outputs a narrow directivity warning sound 112 from the vehicle 102 toward the pedestrian A (step S115).

上記ステップS109で自車進行領域116内に歩行者が存在しないとき(No)、危険度判定部142は、ステップS107で得られた自車進行領域116以外の画像内に存在する歩行者の位置と、ステップS105で設定された自車進行領域116とに基づいて、歩行者の危険度を判定する(ステップS117)。なお、ステップS109での判定結果を示す信号は、危険度判定部142の起動信号となる。   When there is no pedestrian in the vehicle traveling area 116 in step S109 (No), the risk determination unit 142 determines the position of the pedestrian present in the image other than the vehicle traveling area 116 obtained in step S107. Based on the vehicle traveling area 116 set in step S105, the pedestrian risk level is determined (step S117). The signal indicating the determination result in step S109 serves as an activation signal for the risk determination unit 142.

図5は、図2の歩行者警告装置100での歩行者の移動方向に伴う危険度の判定を説明する図である。図5(a)は、画像データ108B内に、自車進行領域116を規定する判定ライン114a、114bの車外側にそれぞれ複数の線分152、154を設定した状態を示す図である。図5(b)は、図5(a)の一部を拡大した画像データ108Cを例示する図である。   FIG. 5 is a diagram for explaining the determination of the degree of risk associated with the moving direction of the pedestrian in the pedestrian warning device 100 of FIG. FIG. 5A is a diagram showing a state in which a plurality of line segments 152 and 154 are set on the vehicle exterior side of the determination lines 114a and 114b that define the own vehicle traveling region 116 in the image data 108B. FIG. 5B is a diagram illustrating image data 108C obtained by enlarging a part of FIG.

複数の線分152、154は、図5(a)に示すように、画像データ108Bの下縁ライン120を延長した箇所から消失点124に向けて延びている。このとき、線分152、154は、判定ライン114a、114bと並行な関係を保つので、歩行者がどの線分上に存在するかによって、歩行者と判定ライン114a、114bとの位置関係を推定できる。   As shown in FIG. 5A, the plurality of line segments 152 and 154 extend from the portion where the lower edge line 120 of the image data 108 </ b> B is extended toward the vanishing point 124. At this time, since the line segments 152 and 154 maintain a parallel relationship with the determination lines 114a and 114b, the positional relationship between the pedestrian and the determination lines 114a and 114b is estimated depending on which line segment the pedestrian is on. it can.

一例として図5(b)に示すように、図5(a)の画像データ108Bの右側側部を切り出して示す画像データ108Cに基づいて説明する。また、画像データ108C上に設定した線分152に含まれる線分152a上に歩行者Hの最下点が存在する場合を想定する。ここで、線分152aは、外側から3番目の線分である。このとき、線分152aと下縁ライン120とは、交差点155aにて交差している。なお、歩行者Hの最下点が線分152aに存在する時刻をT1と仮定する。   As an example, as shown in FIG. 5B, description will be made based on image data 108C that shows the right side portion of the image data 108B in FIG. Further, it is assumed that the lowest point of the pedestrian H exists on the line segment 152a included in the line segment 152 set on the image data 108C. Here, the line segment 152a is the third line segment from the outside. At this time, the line segment 152a and the lower edge line 120 intersect at an intersection 155a. It is assumed that the time when the lowest point of the pedestrian H exists on the line segment 152a is T1.

そして時刻T2において、歩行者Hの最下点が位置Iに移動した場合、位置Iは、線分152のうち自車進行領域116の判定ライン118aに最も近い線分152b上にある。このとき、線分152bと下縁ライン120とは、交差点155bにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116に向かって移動している。この場合には、危険度判定部142は、自車進行領域116に侵入する危険度が高いと判定する。   When the lowest point of the pedestrian H moves to the position I at time T2, the position I is on the line segment 152b closest to the determination line 118a of the own vehicle traveling area 116 in the line segment 152. At this time, the line segment 152b and the lower edge line 120 intersect at an intersection 155b. That is, the intersection 155a is moving toward the own vehicle traveling region 116 between the times T1 and T2. In this case, the risk level determination unit 142 determines that the risk level of entering the host vehicle traveling area 116 is high.

また、歩行者Hの最下点が位置Jに移動した場合、位置Jは、線分152のうち最も外側にある線分152c上にある。このとき、線分152cと下縁ライン120とは、交差点155cにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116から遠ざかる方向に向かって移動している。この場合には、危険度判定部142は、自車進行領域116に侵入し横断する兆候はなく、危険度が低いと判定する。   When the lowest point of the pedestrian H moves to the position J, the position J is on the outermost line segment 152 c of the line segments 152. At this time, the line segment 152c and the lower edge line 120 intersect at an intersection 155c. That is, between the times T1 and T2, the intersection 155a moves in a direction away from the own vehicle traveling region 116. In this case, the danger level determination unit 142 determines that there is no sign of entering the vehicle traveling area 116 and crossing, and the risk level is low.

さらに、歩行者Hの最下点が位置Kに移動した場合、位置Kは、内側から3番目の線分152d上にある。このとき、線分152dと下縁ライン120とは、交差点155dにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116に向かって移動している。しかし、この場合には、危険度判定部142は、位置Iに移動した場合と同様に自車進行領域116に侵入する兆候はあるものの、歩行者Hの最下点が位置Iにある場合よりは、自車進行領域116から遠いので危険度が低いと判定する。   Furthermore, when the lowest point of the pedestrian H moves to the position K, the position K is on the third line segment 152d from the inside. At this time, the line segment 152d and the lower edge line 120 intersect at an intersection 155d. That is, the intersection 155a is moving toward the own vehicle traveling region 116 between the times T1 and T2. However, in this case, the risk determination unit 142 is more likely than the case where the lowest point of the pedestrian H is at the position I, although there is a sign of entering the own vehicle traveling area 116 as in the case of moving to the position I. Determines that the risk is low because it is far from the own vehicle traveling area 116.

このようにして、危険度判定部142は、交差点155aの移動方向に伴って、危険度を判定できる。なお、移動方向としては、画像データ108C内の中心方向である自車進行領域116に近付く方向、あるいは自車進行領域116から遠ざかる方向がある。   In this manner, the risk determination unit 142 can determine the risk according to the moving direction of the intersection 155a. The moving direction includes a direction approaching the own vehicle traveling region 116 that is the central direction in the image data 108 </ b> C, or a direction moving away from the own vehicle traveling region 116.

ステップS119で、危険度判定部142は、上記交差点155aが画像データ108Cの中心方向に向かって移動する場合であって、単位時間当たりの移動量が所定値を越えるときは、危険度が高いと判定してもよい。あるいは単位時間当たりの移動量が所定値以下のとき、危険度が低いと判定してもよい。このようにすれば、歩行者Hの移動方向だけでなく、単位時間当たりの移動量も考慮して、より精度の高い危険度の判定が可能となる。   In step S119, the risk determination unit 142 determines that the risk is high when the intersection 155a moves toward the center of the image data 108C and the amount of movement per unit time exceeds a predetermined value. You may judge. Alternatively, when the movement amount per unit time is equal to or less than a predetermined value, it may be determined that the degree of risk is low. In this way, it is possible to determine the degree of risk with higher accuracy in consideration of not only the moving direction of the pedestrian H but also the moving amount per unit time.

そして、危険度判定部142は、ステップS117で危険度を判定した後、危険度が低ければ(ステップS119、No)、再び上記ステップS101の処理に戻る。一方、ステップS119で危険度が高いと判定すれば(Yes)、危険度判定部142は、判定結果を相対角度計測部140に出力する。   Then, after determining the risk level in step S117, if the risk level is low (No in step S119), the risk level determination unit 142 returns to the process in step S101 again. On the other hand, if it is determined in step S119 that the degree of risk is high (Yes), the degree of risk determination unit 142 outputs the determination result to the relative angle measurement unit 140.

続いて、相対角度計測部140は、上記ステップS111にて危険度が高い歩行者の相対角度を計測する。その後、アクチュエータ110は、相対速度に基づいて駆動し(ステップS113)、さらにステップS115にてスピーカ106が警告音を出力する。その後、再びステップS101の処理を繰り返す。   Subsequently, the relative angle measurement unit 140 measures the relative angle of a pedestrian with a high degree of risk in step S111. Thereafter, the actuator 110 is driven based on the relative speed (step S113), and the speaker 106 outputs a warning sound in step S115. Then, the process of step S101 is repeated again.

このように本実施形態の歩行者警告装置100によれば、1つの赤外線カメラ104で車両前方を画像として捉え、この画像を画像処理することで歩行者の有無あるいは位置を検知できる。なお、赤外線カメラ104を用いることで、夜間でも歩行者の検知が可能となる。   Thus, according to the pedestrian warning device 100 of the present embodiment, the presence or position of a pedestrian can be detected by capturing the front of the vehicle as an image with one infrared camera 104 and processing the image. By using the infrared camera 104, it is possible to detect a pedestrian even at night.

また、歩行者が自車進行領域116に侵入している場合には、車両の進行方向に対して歩行者がどういう位置関係にあるかを示す相対角度に基づいて、この歩行者に向けて狭指向性のスピーカ106で警告音を出力する。このように、相対角度を計測しているので、歩行者までの距離を正確に測る必要がなく、赤外線カメラ104が1つで済み、構成を簡素化できる。   In addition, when a pedestrian has entered the own vehicle traveling region 116, the pedestrian is narrowed toward the pedestrian based on a relative angle indicating the positional relationship of the pedestrian with respect to the traveling direction of the vehicle. A warning sound is output from the directional speaker 106. Thus, since the relative angle is measured, it is not necessary to accurately measure the distance to the pedestrian, and only one infrared camera 104 is required, and the configuration can be simplified.

さらに、狭指向性のスピーカ106は、クラクションあるいはライトとは異なり、対象となる歩行者にのみ警告音を出力できるので、歩行者の周囲に騒音あるいは光による影響を与えず静粛性が損なわれない。したがって、比較的簡素な構成で、歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる。なお歩行者の事故回避動作だけでなく、運転者による回避動作も当然に合わせて実行されることで、より事故の可能性を低減できる。   Further, unlike the horn or the light, the narrow-directional speaker 106 can output a warning sound only to the target pedestrian, so that noise or light is not affected around the pedestrian and the quietness is not impaired. . Therefore, with a relatively simple configuration, it is possible to promote accident avoidance behavior to pedestrians and reduce the possibility of an accident without impairing silence. The possibility of an accident can be further reduced by executing not only a pedestrian accident avoidance operation but also a driver avoidance operation.

また、自車進行領域116の幅Waは、車両102の幅Wbよりも大きいので、歩行者が車両102の幅Wbで規定された領域ではなく、幅Wbより大きい幅Waを有する自車進行領域116に侵入したとき、相対角度に基づいて警告音を出力できる。よって、歩行者に対してより迅速に事故回避行動を促すことが可能となる。   In addition, since the width Wa of the own vehicle traveling region 116 is larger than the width Wb of the vehicle 102, the own vehicle traveling region where the pedestrian has a width Wa larger than the width Wb, not the region defined by the width Wb of the vehicle 102. When entering 116, a warning sound can be output based on the relative angle. Therefore, it is possible to prompt the pedestrian to take an accident avoidance action more quickly.

さらに、自車進行領域116に侵入してはいないが、画像内の危険度の高い歩行者を特定し、この歩行者の車両に対する相対角度に基づいて、歩行者に狭指向性の警告音を出力できる。したがって、比較的簡素な構成で、自車進行領域116に未だ侵入していない歩行者に対して事故回避行動を促し、静粛性を損なうことなく事故の可能性をより低減できる。   Furthermore, a pedestrian who has not entered the own vehicle traveling area 116 but has a high degree of danger in the image is identified, and a warning sound with a narrow directivity is given to the pedestrian based on the relative angle of the pedestrian to the vehicle. Can output. Therefore, with a relatively simple configuration, a pedestrian who has not yet entered the own vehicle traveling region 116 can be urged to avoid an accident, and the possibility of an accident can be further reduced without impairing silence.

上記実施形態では、自車進行領域116内に歩行者が1人だけ侵入した例を説明したが、これに限定されず、自車進行領域116に複数の歩行者が侵入した場合には、最も危険度が高い歩行者に対して優先的に警告音を出力してもよい。   In the above embodiment, an example in which only one pedestrian has entered the own vehicle traveling area 116 has been described. However, the present invention is not limited to this. A warning sound may be preferentially output to a pedestrian with a high degree of danger.

図6は、本発明の他の実施形態である歩行者警告装置の動作を例示したフローチャートである。ここでの歩行者警告装置は、図2に示した機能ブロック自体は上記の歩行者警告装置100と同一であるが、歩行者侵入判定部138および危険度判定部142の処理が異なる。   FIG. 6 is a flowchart illustrating the operation of the pedestrian warning device according to another embodiment of the present invention. The functional block itself shown in FIG. 2 is the same as the pedestrian warning device 100 described above, but the processes of the pedestrian intrusion determination unit 138 and the risk level determination unit 142 are different.

すなわち、上記したステップS101〜S107の後、歩行者侵入判定部138は、自車進行領域116内に歩行者が存在しなければ(ステップS201、No)、再び上記ステップS101に戻る。一方、ステップS201で自車進行領域116内に歩行者が存在すると(Yes)、歩行者侵入判定部138は、歩行者が複数か否かを判定する(ステップS203)。   In other words, after steps S101 to S107 described above, the pedestrian intrusion determination unit 138 returns to step S101 again if there is no pedestrian in the own vehicle travel area 116 (No in step S201). On the other hand, if a pedestrian exists in the own vehicle traveling area 116 in step S201 (Yes), the pedestrian intrusion determination unit 138 determines whether there are a plurality of pedestrians (step S203).

ステップS203で歩行者が複数でなければ(No)、上記ステップS111〜S115を実行する。一方、歩行者が複数であれば(ステップS203、Yes)、危険度判定部142は、複数の歩行者と自車との距離を判定し(ステップS205)、最も距離の近い歩行者を決定する(ステップS207)。   If there are not a plurality of pedestrians in step S203 (No), steps S111 to S115 are executed. On the other hand, if there are a plurality of pedestrians (step S203, Yes), the risk determination unit 142 determines the distance between the plurality of pedestrians and the vehicle (step S205), and determines the pedestrian with the closest distance. (Step S207).

図7は、図6の歩行者警告装置での歩行者の上下方向の位置に伴う危険度の判定を説明する図である。ここでは、画像データ108Dに示すように、自車進行領域116に2人の歩行者M、Nが存在する場合を想定する。   FIG. 7 is a diagram for explaining determination of the degree of risk associated with the position of the pedestrian in the vertical direction in the pedestrian warning device in FIG. 6. Here, it is assumed that there are two pedestrians M and N in the own vehicle traveling area 116 as shown in the image data 108D.

この場合には、画像データ108D内に水平な線分156a、l56bを設定する。ここでは、線分156aの方が線分156bよりも手前側に位置しているので、自車との距離(すなわち、衝突までの猶予)が小さいと分かる。なお、歩行者M、Nの最下点の座標は、それぞれ線分156a、156b上に位置している。   In this case, horizontal line segments 156a and l56b are set in the image data 108D. Here, since the line segment 156a is located on the nearer side than the line segment 156b, it can be understood that the distance from the own vehicle (that is, the delay until the collision) is small. The coordinates of the lowest points of the pedestrians M and N are located on the line segments 156a and 156b, respectively.

危険度判定部142は、線分156a上に位置する歩行者Mの方が、線分156b上に位置する歩行者Nよりも危険度が高いと判定する。つまり、危険度判定部142は、自車進行領域116での複数の歩行者の位置の、車両の進行方向における座標に応じて遠近を判定し、この座標の値が小さい歩行者ほど自車から近く危険度が高いと判定している。   The risk determination unit 142 determines that the pedestrian M located on the line segment 156a has a higher risk than the pedestrian N located on the line segment 156b. In other words, the risk determination unit 142 determines the perspective according to the coordinates in the vehicle traveling direction of the positions of a plurality of pedestrians in the own vehicle traveling region 116, and the pedestrian with a smaller value of the coordinates from the own vehicle. Judged that the risk level is high.

このようにして、危険度判定部142は、ステップS205およびステップS207の処理を行う。そして、相対角度計測部140は、危険度判定部142で危険度が最も高い、すなわち自車との距離が小さいと判定された歩行者の相対角度を計測する(ステップS113)。その後、上記ステップS113、S115を実行する。   In this way, the risk determination unit 142 performs the processes of step S205 and step S207. Then, the relative angle measurement unit 140 measures the relative angle of the pedestrian determined that the risk determination unit 142 has the highest risk, that is, the distance from the own vehicle is small (step S113). Thereafter, the above steps S113 and S115 are executed.

したがって、図6での歩行者警告装置の処理によれば、自車進行領域116に複数の歩行者が存在した場合、自車との距離に応じて警告の優先度を決定できる。すなわち、複数の歩行者のうち、自車との距離がより小さい位置に存在する歩行者に対して、まず警告音を出力し、歩行者の事故回避動作を促し、事故の可能性をより低減できる。   Therefore, according to the processing of the pedestrian warning device in FIG. 6, when a plurality of pedestrians exist in the own vehicle traveling region 116, the priority of the warning can be determined according to the distance from the own vehicle. In other words, a warning sound is first output to a pedestrian that is located at a position where the distance from the host vehicle is smaller among a plurality of pedestrians, prompting the pedestrian to avoid an accident and further reducing the possibility of an accident. it can.

図8は、図2の歩行者警告装置100により歩行者に警告を出力した場合での具体例を示す図である。ここでは、車体警告装置100を搭載した車両102の車幅Wbを3ナンバーサイズの1.8m、住宅街などを想定して速度8m/s(約30km/h)とした。また、高齢者を想定して歩行速度1.1m/sとした。   FIG. 8 is a diagram showing a specific example when a warning is output to a pedestrian by the pedestrian warning device 100 of FIG. Here, the vehicle width Wb of the vehicle 102 on which the vehicle body warning device 100 is mounted is set to 1.8 m of 3 number size, and the speed is set to 8 m / s (about 30 km / h) assuming a residential area. The walking speed was 1.1 m / s for elderly people.

このような場合、車両中央に沿った位置にある歩行者Oが、車の端の位置PまたはQまで移動することを想定すると、歩行者の回避行動に要する時間「t1=0.8sec」となる。また、歩行者Oが車両の存在に気付くまでの時間「t2=2.2sec」となる。なおt2は、車両102のブレーキの空走時間に基づいて規定した。   In such a case, assuming that the pedestrian O in the position along the center of the vehicle moves to the position P or Q of the end of the vehicle, the time required for the pedestrian's avoidance action is “t1 = 0.8 sec”. Become. Further, the time until the pedestrian O notices the presence of the vehicle is “t2 = 2.2 sec”. Note that t2 is defined based on the idle running time of the brake of the vehicle 102.

つまり、歩行者Oが車両に気付いてから、回避するまでの時間「T=t1+t2=2.8sec」となる。その間に、車両102が接近する距離は、「8×2.2=22.4m」となる。したがって、上記の想定では、赤外線カメラ104の検知距離は30m程度であれば、上記車体警告装置100が実現可能となる。   In other words, the time from when the pedestrian O notices the vehicle until it is avoided is “T = t1 + t2 = 2.8 sec”. In the meantime, the distance that the vehicle 102 approaches is “8 × 2.2 = 22.4 m”. Therefore, in the above assumption, the vehicle body warning device 100 can be realized if the detection distance of the infrared camera 104 is about 30 m.

以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。   As mentioned above, although preferred embodiment of this invention was described referring an accompanying drawing, it cannot be overemphasized that this invention is not limited to the example which concerns. It will be apparent to those skilled in the art that various changes and modifications can be made within the scope of the claims, and these are naturally within the technical scope of the present invention. Understood.

本発明は、車両に搭載され歩行者に警告を発する歩行者警告装置に利用することができる。   The present invention can be used in a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian.

100…歩行者警告装置、102…車両、104…赤外線カメラ、106…スピーカ、108…画像データ、110…アクチュエータ、112…警告音、114a、114b…判定ライン、116…自車進行領域、120…下縁ライン、124…消失点、126…車両情報取得部、128…警告可否判定部、130…画像情報取得部、132…自車進行領域設定部、134…歩行者検知部、136…制御部、138…歩行者侵入判定部、140…相対角度計測部、142…危険度判定部 DESCRIPTION OF SYMBOLS 100 ... Pedestrian warning apparatus, 102 ... Vehicle, 104 ... Infrared camera, 106 ... Speaker, 108 ... Image data, 110 ... Actuator, 112 ... Warning sound, 114a, 114b ... Judgment line, 116 ... Own vehicle progress area, 120 ... Lower edge line, 124 ... vanishing point, 126 ... vehicle information acquisition unit, 128 ... warning availability determination unit, 130 ... image information acquisition unit, 132 ... own vehicle travel region setting unit, 134 ... pedestrian detection unit, 136 ... control unit 138 ... Pedestrian intrusion determination unit, 140 ... Relative angle measurement unit, 142 ... Risk level determination unit

Claims (7)

車両に搭載され歩行者に警告を発する歩行者警告装置において、
車両前方を撮像し画像を生成する1つの撮像部と、
前記画像内の歩行者の位置を検知する歩行者検知部と、
車両が将来進行すると予測される自車進行領域を前記画像内に設定する自車進行領域設定部と、
前記歩行者の位置および前記自車進行領域に基づいて、該自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、
前記自車進行領域に歩行者が侵入していると判定されたとき、前記車両の進行方向を基準として該車両から該歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、
前記相対角度に基づき、前記車両から前記歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする歩行者警告装置。
In a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian,
One imaging unit that images the front of the vehicle and generates an image;
A pedestrian detection unit for detecting the position of the pedestrian in the image;
A host vehicle travel region setting unit that sets a host vehicle travel region predicted to travel in the future in the image;
A pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the position of the pedestrian and the own vehicle traveling area;
A relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to a traveling direction of the vehicle when it is determined that a pedestrian has entered the own vehicle traveling region;
A pedestrian warning device comprising: a warning unit that outputs a warning sound with narrow directivity from the vehicle toward the pedestrian based on the relative angle.
前記自車進行領域に複数の歩行者が侵入していると判定されたとき、該自車進行領域でのそれぞれの歩行者の位置の、前記車両の進行方向における座標に応じて遠近を判定し、該座標の値が小さい歩行者ほど自車から近く危険度が高いと判定する危険度判定部をさらに備え、
前記相対角度測定部は、前記危険度判定部で危険度が最も高いと判定された歩行者の相対角度を計測することを特徴とする請求項1に記載の歩行者警告装置。
When it is determined that a plurality of pedestrians have entered the own vehicle travel area, the perspective is determined according to the coordinates in the travel direction of the vehicle of the position of each pedestrian in the own vehicle travel area. , Further comprising a risk determination unit that determines that the pedestrian with a smaller value of the coordinate is closer to the own vehicle and has a higher risk,
The pedestrian warning device according to claim 1, wherein the relative angle measurement unit measures a relative angle of a pedestrian determined to have the highest degree of risk by the risk level determination unit.
前記自車進行領域の、自車の進行方向に直交する左右方向の幅が、自車の幅より大きいことを特徴とする請求項1または2に記載の歩行者警告装置。   3. The pedestrian warning device according to claim 1, wherein a width of the own vehicle traveling region in a left-right direction orthogonal to a traveling direction of the own vehicle is larger than a width of the own vehicle. 車両に搭載され歩行者に警告を発する歩行者警告装置において、
車両前方を撮像し画像を生成する1つの撮像部と、
前記画像内の歩行者の位置を検知する歩行者検知部と、
車両が将来進行すると予測される自車進行領域を前記画像内に設定する自車進行領域設定部と、
前記歩行者の位置および前記自車進行領域に基づいて、該自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、
前記自車進行領域に歩行者が侵入していないと判定されたとき、画像内での該歩行者の危険度を判定する危険度判定部と、
前記危険度判定部により危険度が高いと判定された歩行者について、前記車両の進行方向を基準として該車両から該歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、
前記相対角度に基づき、前記車両から前記歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする歩行者警告装置。
In a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian,
One imaging unit that images the front of the vehicle and generates an image;
A pedestrian detection unit for detecting the position of the pedestrian in the image;
A host vehicle travel region setting unit that sets a host vehicle travel region predicted to travel in the future in the image;
A pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the position of the pedestrian and the own vehicle traveling area;
When it is determined that a pedestrian has not entered the own vehicle travel area, a risk determination unit that determines the risk of the pedestrian in the image,
For a pedestrian determined to have a high degree of risk by the risk determination unit, a relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to the traveling direction of the vehicle;
A pedestrian warning device comprising: a warning unit that outputs a warning sound with narrow directivity from the vehicle toward the pedestrian based on the relative angle.
前記危険度判定部は、
前記画像内に前記自車進行領域の先の消失点を設定し、
前記消失点から前記歩行者の最下点を通る直線が、前記下縁ラインと交差する交差点を特定し、
前記交差点が前記画像の中心方向に向かって移動するとき危険度が高いと判定することを特徴とする請求項4に記載の歩行者警告装置。
The risk determination unit
In the image, set the vanishing point ahead of the vehicle traveling area,
A straight line passing through the lowest point of the pedestrian from the vanishing point identifies the intersection where the lower edge line intersects,
The pedestrian warning device according to claim 4, wherein it is determined that the degree of risk is high when the intersection moves toward the center of the image.
前記危険度判定部は、前記交差点が前記画像の中心方向に向かって移動する場合であって、該交差点の単位時間当たりの移動量が所定値を越えるとき、危険度が高いと判定することを特徴とする請求項4に記載の歩行者警告装置。   The risk determination unit determines that the risk is high when the intersection moves toward the center of the image and the amount of movement per unit time of the intersection exceeds a predetermined value. The pedestrian warning device according to claim 4, wherein the pedestrian warning device is characterized. 前記歩行者検知部が検知する歩行者の位置は、歩行者の最下点の座標であり、
前記歩行者侵入判定部による判定は、歩行者の最下点の座標が前記自車進行領域内に位置するか否かによって行われ、
前記相対角度は、前記画像の下縁である下縁ラインの中央から垂直に延びる前記車両の進行方向を示す直線と、該下縁ラインの中央から歩行者の最下点までを結ぶ直線との成す角度により得られることを特徴とする請求項1から6のいずれか1項に記載の歩行者警告装置。
The position of the pedestrian detected by the pedestrian detection unit is the coordinate of the lowest point of the pedestrian,
The determination by the pedestrian intrusion determination unit is performed by whether or not the coordinate of the lowest point of the pedestrian is located in the own vehicle traveling area,
The relative angle is a straight line indicating a traveling direction of the vehicle extending vertically from the center of the lower edge line which is the lower edge of the image, and a straight line connecting the center of the lower edge line to the lowest point of the pedestrian. The pedestrian warning device according to any one of claims 1 to 6, wherein the pedestrian warning device is obtained by an angle formed.
JP2012197516A 2012-09-07 2012-09-07 Pedestrian warning device Expired - Fee Related JP5863607B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012197516A JP5863607B2 (en) 2012-09-07 2012-09-07 Pedestrian warning device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012197516A JP5863607B2 (en) 2012-09-07 2012-09-07 Pedestrian warning device

Publications (2)

Publication Number Publication Date
JP2014052883A true JP2014052883A (en) 2014-03-20
JP5863607B2 JP5863607B2 (en) 2016-02-16

Family

ID=50611311

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012197516A Expired - Fee Related JP5863607B2 (en) 2012-09-07 2012-09-07 Pedestrian warning device

Country Status (1)

Country Link
JP (1) JP5863607B2 (en)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017043705A1 (en) * 2015-09-07 2017-03-16 엘지전자 주식회사 Sensor, head lamp, and vehicle
CN107406059A (en) * 2015-03-20 2017-11-28 本田技研工业株式会社 Brake control method when brake control and collision during collision
CN108021849A (en) * 2016-11-03 2018-05-11 杭州海康威视数字技术股份有限公司 A kind of pedestrian's method for early warning and device
CN108275070A (en) * 2018-02-07 2018-07-13 青岛大学 The alarming device of pedestrian's priority pass on a kind of road zebra crossing
CN109733279A (en) * 2019-02-20 2019-05-10 合肥京东方光电科技有限公司 Vehicle whistle system and method, vehicle
JP2019525353A (en) * 2016-08-19 2019-09-05 2236008 オンタリオ インコーポレイテッド System and method for pedestrian alert
KR20190134892A (en) * 2018-05-08 2019-12-05 현대자동차주식회사 Apparatus and method for generating directional guide signal for pedestrain safety
US10547941B1 (en) * 2019-01-16 2020-01-28 Ford Global Technologies, Llc Vehicle acoustic transducer operation
US10949656B2 (en) 2015-09-29 2021-03-16 Sony Corporation Information processing apparatus and information processing method
CN112498342A (en) * 2020-11-26 2021-03-16 潍柴动力股份有限公司 Pedestrian collision prediction method and system
JP2021509516A (en) * 2018-04-28 2021-03-25 深▲せん▼市商▲湯▼科技有限公司Shenzhen Sensetime Technology Co., Ltd. Collision control methods and devices, electronic devices and storage media
JP2021163260A (en) * 2020-03-31 2021-10-11 株式会社小松製作所 Detection system and detection method
KR20220071560A (en) * 2020-11-24 2022-05-31 상신브레이크주식회사 Apparatus amd method for warning pedestrian in emergency breaking situation
GB2602202A (en) * 2020-12-10 2022-06-22 Bae Systems Plc Sound safety barrier
GB2610175A (en) * 2021-08-23 2023-03-01 Siemens Mobility Ltd Trespassing deterrence
CN115871552A (en) * 2021-09-28 2023-03-31 惠州华阳通用智慧车载系统开发有限公司 Low-speed warning sound device and control method
KR20240087185A (en) * 2022-12-12 2024-06-19 현대모비스 주식회사 Media module, controlling method thereof, and vehicle including media module
JP2024151402A (en) * 2023-04-12 2024-10-25 三菱電機株式会社 Attention warning device and attention warning system
CN119796208A (en) * 2025-03-05 2025-04-11 微牌科技(浙江)有限公司 Vehicle control method, device, computer equipment, storage medium and computer program product

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006298245A (en) * 2005-04-22 2006-11-02 Toyota Motor Corp Vehicle alarm device and vehicle
JP2007251257A (en) * 2006-03-13 2007-09-27 Fujitsu Ten Ltd Image recognition device, vehicle control device, image recognition method, and vehicle control method
JP2008114613A (en) * 2006-10-31 2008-05-22 Aisin Aw Co Ltd Horn controller
US20080273750A1 (en) * 2004-11-30 2008-11-06 Nissan Motor Co., Ltd. Apparatus and Method For Automatically Detecting Objects
JP2011065338A (en) * 2009-09-16 2011-03-31 Toyota Central R&D Labs Inc Object tracking device and program
JP2011150475A (en) * 2010-01-20 2011-08-04 Toyota Motor Corp Periphery monitor

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080273750A1 (en) * 2004-11-30 2008-11-06 Nissan Motor Co., Ltd. Apparatus and Method For Automatically Detecting Objects
JP2006298245A (en) * 2005-04-22 2006-11-02 Toyota Motor Corp Vehicle alarm device and vehicle
JP2007251257A (en) * 2006-03-13 2007-09-27 Fujitsu Ten Ltd Image recognition device, vehicle control device, image recognition method, and vehicle control method
JP2008114613A (en) * 2006-10-31 2008-05-22 Aisin Aw Co Ltd Horn controller
JP2011065338A (en) * 2009-09-16 2011-03-31 Toyota Central R&D Labs Inc Object tracking device and program
JP2011150475A (en) * 2010-01-20 2011-08-04 Toyota Motor Corp Periphery monitor

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107406059A (en) * 2015-03-20 2017-11-28 本田技研工业株式会社 Brake control method when brake control and collision during collision
EP3272598A4 (en) * 2015-03-20 2018-10-24 Honda Motor Company Limited Device and method for controlling braking during collisions
US10486662B2 (en) 2015-03-20 2019-11-26 Honda Motor Co., Ltd. Device and method for controlling braking during collisions
WO2017043705A1 (en) * 2015-09-07 2017-03-16 엘지전자 주식회사 Sensor, head lamp, and vehicle
US10949656B2 (en) 2015-09-29 2021-03-16 Sony Corporation Information processing apparatus and information processing method
US11915522B2 (en) 2015-09-29 2024-02-27 Sony Corporation Information processing apparatus and information processing method
JP2019525353A (en) * 2016-08-19 2019-09-05 2236008 オンタリオ インコーポレイテッド System and method for pedestrian alert
CN108021849A (en) * 2016-11-03 2018-05-11 杭州海康威视数字技术股份有限公司 A kind of pedestrian's method for early warning and device
CN108275070A (en) * 2018-02-07 2018-07-13 青岛大学 The alarming device of pedestrian's priority pass on a kind of road zebra crossing
US11308809B2 (en) 2018-04-28 2022-04-19 Shenzhen Sensetime Technology Co., Ltd. Collision control method and apparatus, and storage medium
JP2021509516A (en) * 2018-04-28 2021-03-25 深▲せん▼市商▲湯▼科技有限公司Shenzhen Sensetime Technology Co., Ltd. Collision control methods and devices, electronic devices and storage media
JP7163407B2 (en) 2018-04-28 2022-10-31 深▲セン▼市商▲湯▼科技有限公司 Collision control method and device, electronic device and storage medium
KR20190134892A (en) * 2018-05-08 2019-12-05 현대자동차주식회사 Apparatus and method for generating directional guide signal for pedestrain safety
KR102644363B1 (en) * 2018-05-08 2024-03-07 현대자동차주식회사 Apparatus and method for generating directional guide signal for pedestrain safety
US10547941B1 (en) * 2019-01-16 2020-01-28 Ford Global Technologies, Llc Vehicle acoustic transducer operation
CN109733279A (en) * 2019-02-20 2019-05-10 合肥京东方光电科技有限公司 Vehicle whistle system and method, vehicle
JP2021163260A (en) * 2020-03-31 2021-10-11 株式会社小松製作所 Detection system and detection method
JP7623105B2 (en) 2020-03-31 2025-01-28 株式会社小松製作所 Working machine and detection method
KR102593554B1 (en) * 2020-11-24 2023-10-24 상신브레이크주식회사 Apparatus amd method for warning pedestrian in emergency breaking situation
KR20220071560A (en) * 2020-11-24 2022-05-31 상신브레이크주식회사 Apparatus amd method for warning pedestrian in emergency breaking situation
CN112498342A (en) * 2020-11-26 2021-03-16 潍柴动力股份有限公司 Pedestrian collision prediction method and system
GB2602202B (en) * 2020-12-10 2023-08-02 Bae Systems Plc Sound safety barrier
GB2602202A (en) * 2020-12-10 2022-06-22 Bae Systems Plc Sound safety barrier
GB2610175A (en) * 2021-08-23 2023-03-01 Siemens Mobility Ltd Trespassing deterrence
CN115871552A (en) * 2021-09-28 2023-03-31 惠州华阳通用智慧车载系统开发有限公司 Low-speed warning sound device and control method
CN115871552B (en) * 2021-09-28 2025-03-25 惠州华阳通用电子有限公司 Low speed warning sound device and control method
KR20240087185A (en) * 2022-12-12 2024-06-19 현대모비스 주식회사 Media module, controlling method thereof, and vehicle including media module
US12263785B2 (en) 2022-12-12 2025-04-01 Hyundai Mobis Co., Ltd. Media module, method of controlling media module, and vehicle including media module
KR102861410B1 (en) * 2022-12-12 2025-09-18 현대모비스 주식회사 Media module, controlling method thereof, and vehicle including media module
JP2024151402A (en) * 2023-04-12 2024-10-25 三菱電機株式会社 Attention warning device and attention warning system
CN119796208A (en) * 2025-03-05 2025-04-11 微牌科技(浙江)有限公司 Vehicle control method, device, computer equipment, storage medium and computer program product

Also Published As

Publication number Publication date
JP5863607B2 (en) 2016-02-16

Similar Documents

Publication Publication Date Title
JP5863607B2 (en) Pedestrian warning device
CN108136987B (en) Parking space detection method and device
US10696224B2 (en) Driving notification method and driving notification system
JP4628683B2 (en) Pedestrian detection device and vehicle driving support device including the pedestrian detection device
JP4615038B2 (en) Image processing device
CN108140314B (en) Parking assistance method and parking assistance device
JP5345350B2 (en) Vehicle driving support device
JP6252365B2 (en) Safety confirmation support system, safety confirmation support method
JP6379779B2 (en) Vehicle display device
WO2016067544A1 (en) Vehicle-mounted attention-attracting system and notification control device
CN102804239A (en) Processing device for assisting driving of vehicle, vehicle driving assisting device, and vehicle device
JP2010113601A (en) Vehicle warning apparatus
JP2008293122A (en) Obstacle monitoring device
JP2016066231A (en) Collision prevention device, collision prevention method, collision prevention program, and recording medium
JP2018092505A (en) Driving assistance device
JP5452004B2 (en) Vehicle driving support device
JP5362770B2 (en) Driving assistance device
JP2012153256A (en) Image processing apparatus
JP6827202B2 (en) Information display device, information display method and program
JP6296684B2 (en) Driving assistance device
JP2013054702A (en) Vehicle approach information notification device, vehicle approach information notification method, and program
JP2012203829A (en) Moving body detection system for vehicle
JP6776535B2 (en) Vehicle control unit
JP7558744B2 (en) Abnormality notification system, control method, and vehicle control system
JP2019172032A (en) Automatic braking device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140403

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150807

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151222

R150 Certificate of patent or registration of utility model

Ref document number: 5863607

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees