JP2014052883A - Pedestrian warning device - Google Patents
Pedestrian warning device Download PDFInfo
- Publication number
- JP2014052883A JP2014052883A JP2012197516A JP2012197516A JP2014052883A JP 2014052883 A JP2014052883 A JP 2014052883A JP 2012197516 A JP2012197516 A JP 2012197516A JP 2012197516 A JP2012197516 A JP 2012197516A JP 2014052883 A JP2014052883 A JP 2014052883A
- Authority
- JP
- Japan
- Prior art keywords
- pedestrian
- vehicle
- image
- relative angle
- risk
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005259 measurement Methods 0.000 claims description 20
- 238000001514 detection method Methods 0.000 claims description 13
- 238000003384 imaging method Methods 0.000 claims description 11
- 230000009471 action Effects 0.000 abstract description 6
- 238000000034 method Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 12
- 230000001771 impaired effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、車両に搭載され歩行者に警告を発する歩行者警告装置に関する。 The present invention relates to a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian.
交通事故は、歩行者の事故の割合が多く、例えば夕暮れまたは夜間時に発生し易い。特に高齢者においては、車両に気付かない、あるいは車両と自身との距離を見誤るなどして、無理な横断を行い、事故に遭う事例が見られる。 A traffic accident has a high proportion of pedestrian accidents, and is likely to occur at dusk or at night, for example. In particular, there are cases where elderly people do not notice the vehicle, or misunderstand the distance between the vehicle and themselves, forcing an accidental crossing and encountering an accident.
近年、ハイブリッド車や電気自動車が普及しているが、これらの車両は静粛性が高く、歩行者による車両の認知がますます困難になっている。これらの車両に対しては、擬似走行音やクラクションなどで、歩行者に自車を認識させることも考えられる。 In recent years, hybrid vehicles and electric vehicles have become widespread, but these vehicles are highly quiet and it is becoming increasingly difficult for pedestrians to recognize the vehicles. For these vehicles, it may be possible to make the pedestrian recognize the vehicle with simulated running sound or horn.
しかし、擬似走行音やクラクションにより警告を行うと、静粛性が損なわれ、また、対向車などの周囲への騒音による影響が考えられる。このため、上記の警告は、使用に制約がある。 However, if a warning is given by simulated running sound or horn, the quietness is impaired, and the influence of surrounding noise such as oncoming vehicles can be considered. For this reason, use of the above warning is limited.
一方、歩行者を検出し、車両の運転者に報知する技術が知られている。しかし、この技術は、車両側だけで事故の回避をするものであり、ある程度の速度で走行している車両には慣性があることから、事故の回避にも限界がある。 On the other hand, a technique for detecting a pedestrian and notifying a driver of the vehicle is known. However, this technique avoids accidents only on the vehicle side, and there is a limit in avoiding accidents because vehicles traveling at a certain speed have inertia.
また上記の技術では、検知距離が長くかつ高精度なカメラが必要とされるので、コストが高くなり、普及し難い。さらに、事故の回避動作として、急ブレーキをかけてしまうと、後続車に追突される可能性もあるので、急ブレーキをかけるような状況を未然に防止することが好ましい。 In addition, the above technique requires a camera with a long detection distance and high accuracy, which increases costs and is difficult to spread. Further, as an accident avoidance operation, if a sudden brake is applied, there is a possibility of a rear-end vehicle crashing. Therefore, it is preferable to prevent a situation in which a sudden brake is applied.
特許文献1には、歩行者に対して音と光とを出力し、歩行者に自車を報知する技術が記載されている。しかし、特許文献1に記載の技術は、単に歩行者に報知するだけであり、横断者に対して警告し、事故の回避動作を促すものではない。 Patent Document 1 describes a technique for outputting sound and light to a pedestrian and notifying the pedestrian of the vehicle. However, the technique described in Patent Document 1 merely notifies a pedestrian, does not warn a crossing person, and does not prompt an accident avoidance operation.
特許文献2には、状況に応じて音量を変化させた警告音により、歩行者に注意を喚起する技術が記載されているものの、音量を状況に応じて変化させるため、静粛性が損なわれる場合もあり得る。一例として、聴力の衰えた高齢者や周囲の騒音環境を考慮した場合には、上記の技術では、ある程度以上の音量に設定する必要があり、静粛性が損なわれてしまう。
ところで、歩行者と自車との距離は、通常、2つのカメラから得られた2つの画像の視差を利用して正確に測定されるため、複雑な構成が必要となる。これに対して、特許文献3、4には、単眼カメラを用いて歩行者を検知する技術が記載されている。これらの技術によれば、検知される対象物が移動しているか否かを検知し、自車から対象物までの距離のデータが不要となる。 By the way, since the distance between a pedestrian and the own vehicle is usually accurately measured using the parallax between two images obtained from two cameras, a complicated configuration is required. On the other hand, Patent Documents 3 and 4 describe techniques for detecting a pedestrian using a monocular camera. According to these techniques, it is detected whether or not the object to be detected is moving, and data on the distance from the vehicle to the object becomes unnecessary.
しかし、上記技術では、検知される対象物の移動を検知するものの、対象物が警告を行うべき対象物であるか否かは判定していない。 However, although the above technique detects the movement of the detected object, it does not determine whether the object is an object to be warned.
本発明は、このような課題に鑑み、簡素な構成で歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる歩行者警告装置を提供することを目的としている。 The present invention has been made in view of such a problem, and an object thereof is to provide a pedestrian warning device that can prompt a pedestrian to avoid an accident with a simple configuration and can reduce the possibility of an accident without impairing silence.
上記課題を解決するために、本発明にかかる歩行者警告装置の代表的な構成は、車両に搭載され歩行者に警告を発する歩行者警告装置において、車両前方を撮像し画像を生成する1つの撮像部と、画像内の歩行者の位置を検知する歩行者検知部と、車両が将来進行すると予測される自車進行領域を画像内に設定する自車進行領域設定部と、歩行者の位置および自車進行領域に基づいて、自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、自車進行領域に歩行者が侵入していると判定されたとき、車両の進行方向を基準として車両から歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、相対角度に基づき、車両から歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする。 In order to solve the above problems, a typical configuration of a pedestrian warning device according to the present invention is a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian. An imaging unit, a pedestrian detection unit that detects the position of a pedestrian in the image, a host vehicle travel region setting unit that sets a host vehicle travel region in which the vehicle is predicted to travel in the future, and a pedestrian position And a pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the own vehicle traveling area, and when it is determined that a pedestrian has entered the own vehicle traveling area A relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to the traveling direction of the vehicle, and a warning that outputs a narrow directivity warning sound from the vehicle to the pedestrian based on the relative angle And a section.
上記構成によれば、1つの撮像部で車両前方を画像として捉え、この画像を画像処理することで歩行者の位置を検知する。なお撮像部としては、赤外線カメラが挙げられる。赤外線カメラを用いることで、夜間でも歩行者の検知が可能となる。さらに、歩行者が自車進行領域に侵入している場合には、車両の進行方向に対して歩行者がどういう位置関係にあるかを示す相対角度に基づいて、この歩行者に向けて狭指向性の警告音を出力する。 According to the above configuration, the front of the vehicle is captured as an image by one imaging unit, and the position of the pedestrian is detected by performing image processing on the image. An example of the imaging unit is an infrared camera. By using an infrared camera, pedestrians can be detected even at night. Furthermore, when a pedestrian has entered the own vehicle traveling area, the direction toward the pedestrian is narrowly directed based on the relative angle indicating the positional relationship of the pedestrian with respect to the traveling direction of the vehicle. A sex warning sound is output.
なお既存の技術では、2つのカメラから得られた画像に基づいて、左右の視差を利用して歩行者などの対象物までの距離(奥行)を測定している。これに対して、上記構成では、車両に対する歩行者の相対角度を計測しているので、歩行者までの距離を正確に測る必要がない。また、警告部は、狭指向性のスピーカなどであり、車両のクラクションやライトとは異なり、対象となる歩行者にのみ警告音を出力でき、歩行者の周囲に騒音あるいは光による影響を与えず静粛性が損なわれない。したがって、上記構成によれば、比較的簡素な構成で、歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる。 In the existing technology, the distance (depth) to an object such as a pedestrian is measured using left and right parallax based on images obtained from two cameras. On the other hand, in the said structure, since the relative angle of the pedestrian with respect to a vehicle is measured, it is not necessary to measure the distance to a pedestrian correctly. Also, the warning section is a narrow-directional speaker, etc., and unlike a vehicle horn or light, it can output a warning sound only to the target pedestrian and does not affect the pedestrian around by noise or light. Silence is not impaired. Therefore, according to the said structure, the possibility of an accident can be reduced without impairing quietness with a comparatively simple structure, prompting a pedestrian to avoid an accident.
上記の自車進行領域に複数の歩行者が侵入していると判定されたとき、自車進行領域でのそれぞれの歩行者の位置の、車両の進行方向における座標に応じて遠近を判定し、座標の置が小さい歩行者ほど自車から近く危険度が高いと判定する危険度判定部をさらに備え、相対角度測定部は、危険度判定部で危険度が最も高いと判定された歩行者の相対角度を計測するとよい。 When it is determined that a plurality of pedestrians have entered the vehicle traveling area, the position of each pedestrian in the vehicle traveling area is determined according to the coordinates in the traveling direction of the vehicle, It further includes a risk determination unit that determines that a pedestrian with a smaller coordinate position is closer to the host vehicle and has a higher risk, and the relative angle measurement unit is a pedestrian whose risk is determined to be highest by the risk determination unit. It is good to measure the relative angle.
これにより、自車進行領域に複数の歩行者が存在した場合、自車との距離に応じて警告の優先度を決定できる。すなわち、複数の歩行者のうち、自車との距離がより小さい位置に存在する歩行者に対して、まず警告音を出力し、事故の可能性をより低減できる。 Thereby, when a plurality of pedestrians exist in the own vehicle traveling region, the priority of the warning can be determined according to the distance from the own vehicle. That is, a warning sound is first output to a pedestrian that is present at a position where the distance from the host vehicle is smaller among a plurality of pedestrians, thereby further reducing the possibility of an accident.
上記の自車進行領域の、自車の進行方向に直交する左右方向の幅が、自車の幅より大きいとよい。これにより、歩行者が自車の幅で規定された領域ではなく、自車の幅より大きい幅を有する自車進行領域に侵入したとき、相対角度に基づいて警告音が出力される。よって、歩行者に対してより迅速に事故回避行動を促すことが可能となる。
The width in the left-right direction perpendicular to the traveling direction of the host vehicle in the host vehicle traveling region may be larger than the width of the host vehicle. Thereby, when a pedestrian enters the own vehicle traveling area having a width larger than the width of the own vehicle instead of the area defined by the width of the own vehicle, a warning sound is output based on the relative angle. Therefore, it is possible to prompt the pedestrian to take an accident avoidance action more quickly.
上記課題を解決するために、本発明にかかる他の歩行者警告装置の代表的な構成は、車両に搭載され歩行者に警告を発する歩行者警告装置において、車両前方を撮像し画像を生成する1つの撮像部と、画像内の歩行者の位置を検知する歩行者検知部と、車両が将来進行すると予測される自車進行領域を画像内に設定する自車進行領域設定部と、歩行者の位置および自車進行領域に基づいて、自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、自車進行領域に歩行者が侵入していないと判定されたとき、画像内での歩行者の危険度を判定する危険度判定部と、危険度判定部により危険度が高いと判定された歩行者について、車両の進行方向を基準として車両から歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、相対角度に基づき、車両から歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする。 In order to solve the above problems, a typical configuration of another pedestrian warning device according to the present invention is a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian, and images the front of the vehicle and generates an image. One imaging unit, a pedestrian detection unit that detects the position of a pedestrian in the image, a host vehicle traveling region setting unit that sets a host vehicle traveling region in which the vehicle is predicted to travel in the future, and a pedestrian And a pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area, and a pedestrian has not entered the own vehicle traveling area A risk determination unit that determines the risk level of the pedestrian in the image, and a pedestrian determined to have a high risk level by the risk level determination unit, from the vehicle to the pedestrian based on the traveling direction of the vehicle Relative angle to measure the relative angle formed by the direction of heading A measuring section, based on the relative angle, characterized in that it comprises a warning unit which toward the pedestrian from the vehicle to output a narrow directivity of the alarm sound.
上記構成によれば、上記同様に、車両に対する歩行者の相対角度を計測しているので、歩行者までの距離を正確に測る必要がなく、撮像部は1つで済む。また、また、警告部は、狭指向性のスピーカなどであり、歩行者の周囲に騒音あるいは光による影響を与えず、静粛性が損なわれない。 According to the above configuration, the relative angle of the pedestrian with respect to the vehicle is measured in the same manner as described above. Therefore, it is not necessary to accurately measure the distance to the pedestrian, and only one imaging unit is required. Further, the warning unit is a narrow directivity speaker or the like, and does not affect the surroundings of the pedestrian by noise or light, so that quietness is not impaired.
さらに、上記構成では、自車進行領域に侵入してはいないが、画像内の危険度の高い歩行者を特定し、この歩行者の車両に対する相対角度に基づいて、歩行者に狭指向性の警告音を出力できる。したがって、比較的簡素な構成で、自車進行領域に未だ侵入していない歩行者に対して事故回避行動を促し、静粛性を損なうことなく事故の可能性をより低減できる。 Furthermore, in the above configuration, a pedestrian with a high degree of danger in the image is identified without entering the own vehicle traveling area, and the pedestrian has a narrow directivity based on the relative angle of the pedestrian to the vehicle. A warning sound can be output. Therefore, with a relatively simple configuration, an accident avoidance action can be promoted for a pedestrian who has not yet entered the own vehicle traveling area, and the possibility of an accident can be further reduced without impairing silence.
上記の危険度判定部は、画像内に自車進行領域の先の消失点を設定し、消失点から歩行者の最下点を通る直線が、下縁ラインと交差する交差点を特定し、交差点が画像の中心方向に向かって移動するとき危険度が高いと判定するとよい。 The risk determination unit described above sets the vanishing point ahead of the own vehicle traveling area in the image, identifies the intersection where the straight line passing through the pedestrian's lowest point from the vanishing point intersects the lower edge line, It may be determined that the risk is high when the image moves toward the center of the image.
これにより、交差点が画像の中心方向に向かっているときは、歩行者が自車進行領域に近付いているので、危険度が高いと判定できる。なお、交差点が画像の中心から遠ざかる方向に向かっているときは、歩行者が自車進行領域から遠ざかっているので、危険度が低いと判定してよい。このように、交差点に着目することで、歩行者の移動方向に伴う自車進行領域への侵入の危険性も判定できる。 As a result, when the intersection is directed toward the center of the image, it can be determined that the degree of danger is high because the pedestrian is approaching the own vehicle travel region. Note that when the intersection is moving away from the center of the image, the pedestrian is moving away from the traveling area of the vehicle, and therefore, it may be determined that the degree of risk is low. In this way, by paying attention to the intersection, it is also possible to determine the risk of intrusion into the own vehicle traveling area according to the moving direction of the pedestrian.
上記の危険度判定部は、交差点が画像の中心方向に向かって移動する場合であって、交差点の単位時間当たりの移動量が所定値を越えるとき、危険度が高いと判定するとよい。これにより、交差点の移動方向だけでなく、単位時間当たりの移動量も考慮して、より精度の高い危険度の判定が可能となる。 The risk determination unit may determine that the risk is high when the intersection moves toward the center of the image and the amount of movement of the intersection per unit time exceeds a predetermined value. This makes it possible to determine the degree of risk with higher accuracy in consideration of not only the moving direction of the intersection but also the moving amount per unit time.
上記の歩行者検知部が検知する歩行者の位置は、歩行者の最下点の座標であり、歩行者侵入判定部による判定は、歩行者の最下点の座標が自車進行領域内に位置するか否かによって行われ、相対角度は、画像の下縁である下縁ラインの中央から垂直に延びる車両の進行方向を示す直線と、下縁ラインの中央から歩行者の最下点までを結ぶ直線との成す角度により得られるとよい。 The position of the pedestrian detected by the pedestrian detection unit is the coordinate of the lowest point of the pedestrian, and the determination by the pedestrian intrusion determination unit is that the coordinate of the lowest point of the pedestrian is within the own vehicle traveling region. The relative angle is determined from the center of the lower edge line, which is the lower edge of the image, to the vertical direction of the vehicle, and from the center of the lower edge line to the lowest point of the pedestrian. It may be obtained by an angle formed by a straight line connecting the two.
これにより、各角度に対応した直線から画像内に位置する線分を設定し、歩行者の最下点の座標がどの線分上に存在するかを判定することで、自車に対する歩行者の相対角度を算出できる。 Thereby, the line segment located in the image is set from the straight line corresponding to each angle, and by determining which line segment the coordinate of the lowest point of the pedestrian exists, The relative angle can be calculated.
本発明によれば、簡素な構成で歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる歩行者警告装置を提供することが可能となる。 ADVANTAGE OF THE INVENTION According to this invention, it becomes possible to provide the pedestrian warning device which can accelerate | stimulate accident avoidance action to a pedestrian with a simple structure, and can reduce the possibility of an accident, without impairing silence.
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。かかる実施形態に示す寸法、材料、その他具体的な数値などは、発明の理解を容易とするための例示に過ぎず、特に断る場合を除き、本発明を限定するものではない。なお、本明細書及び図面において、実質的に同一の機能、構成を有する要素については、同一の符号を付することにより重複説明を省略し、また本発明に直接関係のない要素は図示を省略する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The dimensions, materials, and other specific numerical values shown in the embodiments are merely examples for facilitating understanding of the invention, and do not limit the present invention unless otherwise specified. In the present specification and drawings, elements having substantially the same function and configuration are denoted by the same reference numerals, and redundant description is omitted, and elements not directly related to the present invention are not illustrated. To do.
図1は、本発明の実施形態における歩行者警告装置を適用する車両を概略的に例示した図である。図1(a)は、歩行者警告装置を備えた車両の上面図である。図1(b)は、赤外線カメラにより得られる画像データを例示する図である。 FIG. 1 is a diagram schematically illustrating a vehicle to which a pedestrian warning device according to an embodiment of the present invention is applied. FIG. 1A is a top view of a vehicle including a pedestrian warning device. FIG. 1B is a diagram illustrating image data obtained by an infrared camera.
歩行者警告装置100は、図1(a)に示すように、車両102に搭載され歩行者に警告を発する装置であり、1つの撮像部(赤外線カメラ104)と、車両前側に設置された警告部(スピーカ106)とを備える。赤外線カメラ104は、車両前方を撮像し、撮像データを生成する。なお図1(b)に例示する画像データ108は、撮像データに対して後述する画像処理を施して生成された加工データである。
As shown in FIG. 1A, the
スピーカ106は、裏面に配置されたアクチュエータ110により任意の角度に駆動され、図中一点鎖線で示すように、狭指向性の警告音112を出力する。ここでは、スピーカ106は、画像データ108内に存在する歩行者A、Bのうち、図1(a)に示すように歩行者Aに向けてのみ警告音112が出力されている。
The
歩行者Aは、車両前後方向に延びていて対向する判定ライン114a、114bの間に位置し車両が将来進行すると予想される自車進行領域116内に存在している。なお歩行者Bは、判定ライン114bの外側に位置し自車進行領域116には存在していない。つまり、判定ライン114a、114bとは、歩行者が自車進行領域116内に存在しているか否かを判定するラインである。
The pedestrian A extends in the vehicle front-rear direction and is located between the opposing
自車進行領域116の車幅方向に沿った幅Waは、車両102の車幅Wbに、車外側にそれぞれ余裕分の幅Wcを加算した値である(すなわち、Wa=Wb+2Wc)。なお幅Wcは、車両102の速度に応じて適宜設定してよい。一例として、車両102が30〜40km/hで走行していた場合には、余裕分の幅2Wcを車幅Wbと同じ程度に設定してよい。
The width Wa along the vehicle width direction of the own
なお赤外線カメラ104から延びるように図1(a)にて点線で示されたライン118a、118b同士が成す角度は、いわゆる視野角に対応してよい。また、画像データ108内での双方の判定ライン114a、114bは、図1(b)に示すように、画像データ108の下縁となる下縁ライン120にそれぞれの交わる点122a、122bから画面中央の消失点124に向けて引かれた線分として示されている。
Note that an angle formed by the
以下、図2および図3を参照して、歩行者警告装置100の機能および動作を説明する。図2は、図1の歩行者警告装置100の機能ブロック図である。図3は、図2の歩行者警告装置100の動作を例示したフローチャートである。
Hereinafter, the function and operation of the
歩行者警告装置100は、図2に示すように、上記赤外線カメラ104、スピーカ106およびアクチュエータ110に加えて、車両情報取得部126と、警告可否判定部128と、画像情報取得部130と、自車進行領域設定部132と、歩行者検知部134と、制御部136とを備える。制御部136は、例えばアクチュエータ110を駆動する駆動信号を生成するものであり、歩行者侵入判定部138、相対角度計測部140および危険度判定部142を備える。
As shown in FIG. 2, in addition to the
車両情報取得部126は、例えば、車両ECU(Electronic Control Unit)あるいはナビゲーション装置などから車両情報、すなわち車両が走行しているか、左折中または右折中ではなく直進しているかなどを取得する。
The vehicle
警告可否判定部128は、車両情報取得部126からの車両情報に基づいて、図3に示すように、警告の可否を判定する(ステップS101)。ステップS101では、上記の車両情報により車両が走行し直進しているという条件が成立したとき、警告を許可して(Yes)、ステップS103の処理に進み、条件が成立しなければ、歩行者への警告は妥当でないと判定し(No)、再度、ステップS101の処理に戻る。
Based on the vehicle information from the vehicle
警告可否判定部128により警告が許可されると、赤外線カメラ104が起動し、車両102の前方を撮像し、撮像データが生成される。つぎに、画像情報取得部130は、赤外線カメラ104で生成された撮像データに基づいて画像情報を取得し(ステップS103)、自車進行領域設定部132および歩行者検知部134に出力する。
When the warning is permitted by the warning
自車進行領域設定部132は、画像情報取得部130から得た画像情報に基づいて、図1(a)および図1(b)に示す上記自車進行領域116を設定する(ステップS105)。ステップS105では、1つの赤外線カメラ104によって1点で測定することで得られた画像情報に基づいて、幅Waが画像データ108上でどの程度のスケールとなるか測定する。そして、上記下縁ライン120との交点122a、122bから消失点124に向かって引いた線分を判定ライン114a、114bとし、その判定ライン114a、114b間に位置する領域を自車進行領域116として設定する。
Based on the image information obtained from the image
また、歩行者検知部134は、画像情報取得部130から得た画像情報に基づいて、パターンマッチングや表面温度が28℃〜39℃の顔形状を検知するなどにより、画像内の歩行者の位置を検知する(ステップS107)。なお、ここでの歩行者の位置とは、歩行者の最下点の座標である。
Further, the
続いて、歩行者侵入判定部138は、自車進行領域設定部132で設定された自車進行領域116と、歩行者検知部134で検知された歩行者の位置とに基づいて、自車進行領域116内に歩行者が存在するか否かを判定する(ステップS109)。ステップS109で自車進行領域116内に歩行者が存在すれば(Yes)、相対角度計測部140は、自車の進行方向に対する歩行者の相対角度の計測を行う(ステップS111)。
Subsequently, the pedestrian
ステップS111では、相対角度計測部140に、歩行者侵入判定部138から判定結果が出力されると、ステップS105で設定された自車進行領域116と、ステップS107で生成された歩行者の位置とに基づいて、上記相対角度を計測する。なお、上記判定結果を示す信号は、相対角度計測部140の起動信号となる。
In step S111, when the determination result is output from the pedestrian
図4は、図2の歩行者警告装置100での自車に対する歩行者の相対角度を計測する手法を説明する図である。図4(a)は、簡略化して示す画像データ108Aを用いて相対角度を説明する図である。図4(b)は、相対角度の計測の原理を示す模式図である。
FIG. 4 is a diagram for explaining a method of measuring the relative angle of the pedestrian with respect to the own vehicle in the
まず、相対角度計測部140は、図4(a)に示すように、画像データ108A内の歩行者Aの最下点Cと画像データ108Aの下縁ライン120の中央点122Cとを結ぶ直線144を生成する。そして、相対角度計測部140は、この直線144と、中央点122cと消失点124とを結ぶ直線145との成す角度Yを、車両102の進行方向に対する歩行者の相対角度としてよい。言い換えると、相対角度は、車両102の進行方向を基準として車両102から歩行者Aに向かう方向が成す角度をいう。
First, the relative
ここで図4(b)に示すように、単純な平板状の光学レンズ146と、受光素子148とを備えたカメラ104Aを用いた相対角度の計測の原理について説明する。なおカメラ104Aは、視野角X、焦点距離Lとする。
Here, as shown in FIG. 4B, the principle of relative angle measurement using a
点Dからの映像は、カメラ104Aの視野端に位置するため、光学レンズ146の中心線150から「L・tan(X/2)」の位置Eに投影される。また、カメラの正面すなわち中心線150から角度Yずれた点Fからの映像は、中心線150から「L・tan(Y)」の位置Gに投影される。
Since the image from the point D is located at the field edge of the
ここで図4(a)に示すように、視野角Xに対応する映像(画像データ108A)の左右幅がピクセルZ(画素数がZ個)である場合、点Dが「Z/2」ピクセルの位置となる(図4(b)参照)。このため、角度Yに対応する点Fの画像データ108A上の位置は、式「tan(Y)/tan(X/2)・Z/2」で示すピクセルの位置となる。
Here, as shown in FIG. 4A, when the horizontal width of the video (
この式により、各角度に対応した直線から画像データ108内に位置する線分を複数設定し、歩行者Aの最下点Cがどの線分上に存在するかを判定することで、自車に対する歩行者の相対角度Yを算出できる。なおここでは、単純な平板状の光学レンズ146を用いて説明したが、通常使用される曲面レンズであっても、屈折率を考慮することで上記同様の変換が可能となる。
By this formula, a plurality of line segments located in the
このようにして、図2に示す相対角度計測部140は、ステップS111での相対角度の計測を行う。続いて、相対角度計測部140は、計測した相対角度に応じた駆動信号をアクチュエータ110に出力する。アクチュエータ110は、相対角度計測部140からの駆動信号を受けて、スピーカ106を駆動し、自車進行領域116内に存在する歩行者Aにスピーカ106を向ける(ステップS113)。つまり、相対角度は、自車進行領域116内の歩行者の位置情報として用いられる。
In this way, the relative
続いてスピーカ106は、図1に示すように、車両102から歩行者Aに向けて狭指向性の警告音112を出力する(ステップS115)。
Subsequently, as shown in FIG. 1, the
上記ステップS109で自車進行領域116内に歩行者が存在しないとき(No)、危険度判定部142は、ステップS107で得られた自車進行領域116以外の画像内に存在する歩行者の位置と、ステップS105で設定された自車進行領域116とに基づいて、歩行者の危険度を判定する(ステップS117)。なお、ステップS109での判定結果を示す信号は、危険度判定部142の起動信号となる。
When there is no pedestrian in the
図5は、図2の歩行者警告装置100での歩行者の移動方向に伴う危険度の判定を説明する図である。図5(a)は、画像データ108B内に、自車進行領域116を規定する判定ライン114a、114bの車外側にそれぞれ複数の線分152、154を設定した状態を示す図である。図5(b)は、図5(a)の一部を拡大した画像データ108Cを例示する図である。
FIG. 5 is a diagram for explaining the determination of the degree of risk associated with the moving direction of the pedestrian in the
複数の線分152、154は、図5(a)に示すように、画像データ108Bの下縁ライン120を延長した箇所から消失点124に向けて延びている。このとき、線分152、154は、判定ライン114a、114bと並行な関係を保つので、歩行者がどの線分上に存在するかによって、歩行者と判定ライン114a、114bとの位置関係を推定できる。
As shown in FIG. 5A, the plurality of
一例として図5(b)に示すように、図5(a)の画像データ108Bの右側側部を切り出して示す画像データ108Cに基づいて説明する。また、画像データ108C上に設定した線分152に含まれる線分152a上に歩行者Hの最下点が存在する場合を想定する。ここで、線分152aは、外側から3番目の線分である。このとき、線分152aと下縁ライン120とは、交差点155aにて交差している。なお、歩行者Hの最下点が線分152aに存在する時刻をT1と仮定する。
As an example, as shown in FIG. 5B, description will be made based on image data 108C that shows the right side portion of the
そして時刻T2において、歩行者Hの最下点が位置Iに移動した場合、位置Iは、線分152のうち自車進行領域116の判定ライン118aに最も近い線分152b上にある。このとき、線分152bと下縁ライン120とは、交差点155bにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116に向かって移動している。この場合には、危険度判定部142は、自車進行領域116に侵入する危険度が高いと判定する。
When the lowest point of the pedestrian H moves to the position I at time T2, the position I is on the
また、歩行者Hの最下点が位置Jに移動した場合、位置Jは、線分152のうち最も外側にある線分152c上にある。このとき、線分152cと下縁ライン120とは、交差点155cにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116から遠ざかる方向に向かって移動している。この場合には、危険度判定部142は、自車進行領域116に侵入し横断する兆候はなく、危険度が低いと判定する。
When the lowest point of the pedestrian H moves to the position J, the position J is on the
さらに、歩行者Hの最下点が位置Kに移動した場合、位置Kは、内側から3番目の線分152d上にある。このとき、線分152dと下縁ライン120とは、交差点155dにて交差している。つまり、時刻T1からT2の間で、交差点155aは、自車進行領域116に向かって移動している。しかし、この場合には、危険度判定部142は、位置Iに移動した場合と同様に自車進行領域116に侵入する兆候はあるものの、歩行者Hの最下点が位置Iにある場合よりは、自車進行領域116から遠いので危険度が低いと判定する。
Furthermore, when the lowest point of the pedestrian H moves to the position K, the position K is on the
このようにして、危険度判定部142は、交差点155aの移動方向に伴って、危険度を判定できる。なお、移動方向としては、画像データ108C内の中心方向である自車進行領域116に近付く方向、あるいは自車進行領域116から遠ざかる方向がある。
In this manner, the
ステップS119で、危険度判定部142は、上記交差点155aが画像データ108Cの中心方向に向かって移動する場合であって、単位時間当たりの移動量が所定値を越えるときは、危険度が高いと判定してもよい。あるいは単位時間当たりの移動量が所定値以下のとき、危険度が低いと判定してもよい。このようにすれば、歩行者Hの移動方向だけでなく、単位時間当たりの移動量も考慮して、より精度の高い危険度の判定が可能となる。
In step S119, the
そして、危険度判定部142は、ステップS117で危険度を判定した後、危険度が低ければ(ステップS119、No)、再び上記ステップS101の処理に戻る。一方、ステップS119で危険度が高いと判定すれば(Yes)、危険度判定部142は、判定結果を相対角度計測部140に出力する。
Then, after determining the risk level in step S117, if the risk level is low (No in step S119), the risk
続いて、相対角度計測部140は、上記ステップS111にて危険度が高い歩行者の相対角度を計測する。その後、アクチュエータ110は、相対速度に基づいて駆動し(ステップS113)、さらにステップS115にてスピーカ106が警告音を出力する。その後、再びステップS101の処理を繰り返す。
Subsequently, the relative
このように本実施形態の歩行者警告装置100によれば、1つの赤外線カメラ104で車両前方を画像として捉え、この画像を画像処理することで歩行者の有無あるいは位置を検知できる。なお、赤外線カメラ104を用いることで、夜間でも歩行者の検知が可能となる。
Thus, according to the
また、歩行者が自車進行領域116に侵入している場合には、車両の進行方向に対して歩行者がどういう位置関係にあるかを示す相対角度に基づいて、この歩行者に向けて狭指向性のスピーカ106で警告音を出力する。このように、相対角度を計測しているので、歩行者までの距離を正確に測る必要がなく、赤外線カメラ104が1つで済み、構成を簡素化できる。
In addition, when a pedestrian has entered the own
さらに、狭指向性のスピーカ106は、クラクションあるいはライトとは異なり、対象となる歩行者にのみ警告音を出力できるので、歩行者の周囲に騒音あるいは光による影響を与えず静粛性が損なわれない。したがって、比較的簡素な構成で、歩行者に事故回避行動を促し、静粛性を損なうことなく事故の可能性を低減できる。なお歩行者の事故回避動作だけでなく、運転者による回避動作も当然に合わせて実行されることで、より事故の可能性を低減できる。
Further, unlike the horn or the light, the narrow-
また、自車進行領域116の幅Waは、車両102の幅Wbよりも大きいので、歩行者が車両102の幅Wbで規定された領域ではなく、幅Wbより大きい幅Waを有する自車進行領域116に侵入したとき、相対角度に基づいて警告音を出力できる。よって、歩行者に対してより迅速に事故回避行動を促すことが可能となる。
In addition, since the width Wa of the own
さらに、自車進行領域116に侵入してはいないが、画像内の危険度の高い歩行者を特定し、この歩行者の車両に対する相対角度に基づいて、歩行者に狭指向性の警告音を出力できる。したがって、比較的簡素な構成で、自車進行領域116に未だ侵入していない歩行者に対して事故回避行動を促し、静粛性を損なうことなく事故の可能性をより低減できる。
Furthermore, a pedestrian who has not entered the own
上記実施形態では、自車進行領域116内に歩行者が1人だけ侵入した例を説明したが、これに限定されず、自車進行領域116に複数の歩行者が侵入した場合には、最も危険度が高い歩行者に対して優先的に警告音を出力してもよい。
In the above embodiment, an example in which only one pedestrian has entered the own
図6は、本発明の他の実施形態である歩行者警告装置の動作を例示したフローチャートである。ここでの歩行者警告装置は、図2に示した機能ブロック自体は上記の歩行者警告装置100と同一であるが、歩行者侵入判定部138および危険度判定部142の処理が異なる。
FIG. 6 is a flowchart illustrating the operation of the pedestrian warning device according to another embodiment of the present invention. The functional block itself shown in FIG. 2 is the same as the
すなわち、上記したステップS101〜S107の後、歩行者侵入判定部138は、自車進行領域116内に歩行者が存在しなければ(ステップS201、No)、再び上記ステップS101に戻る。一方、ステップS201で自車進行領域116内に歩行者が存在すると(Yes)、歩行者侵入判定部138は、歩行者が複数か否かを判定する(ステップS203)。
In other words, after steps S101 to S107 described above, the pedestrian
ステップS203で歩行者が複数でなければ(No)、上記ステップS111〜S115を実行する。一方、歩行者が複数であれば(ステップS203、Yes)、危険度判定部142は、複数の歩行者と自車との距離を判定し(ステップS205)、最も距離の近い歩行者を決定する(ステップS207)。
If there are not a plurality of pedestrians in step S203 (No), steps S111 to S115 are executed. On the other hand, if there are a plurality of pedestrians (step S203, Yes), the
図7は、図6の歩行者警告装置での歩行者の上下方向の位置に伴う危険度の判定を説明する図である。ここでは、画像データ108Dに示すように、自車進行領域116に2人の歩行者M、Nが存在する場合を想定する。
FIG. 7 is a diagram for explaining determination of the degree of risk associated with the position of the pedestrian in the vertical direction in the pedestrian warning device in FIG. 6. Here, it is assumed that there are two pedestrians M and N in the own
この場合には、画像データ108D内に水平な線分156a、l56bを設定する。ここでは、線分156aの方が線分156bよりも手前側に位置しているので、自車との距離(すなわち、衝突までの猶予)が小さいと分かる。なお、歩行者M、Nの最下点の座標は、それぞれ線分156a、156b上に位置している。
In this case,
危険度判定部142は、線分156a上に位置する歩行者Mの方が、線分156b上に位置する歩行者Nよりも危険度が高いと判定する。つまり、危険度判定部142は、自車進行領域116での複数の歩行者の位置の、車両の進行方向における座標に応じて遠近を判定し、この座標の値が小さい歩行者ほど自車から近く危険度が高いと判定している。
The
このようにして、危険度判定部142は、ステップS205およびステップS207の処理を行う。そして、相対角度計測部140は、危険度判定部142で危険度が最も高い、すなわち自車との距離が小さいと判定された歩行者の相対角度を計測する(ステップS113)。その後、上記ステップS113、S115を実行する。
In this way, the
したがって、図6での歩行者警告装置の処理によれば、自車進行領域116に複数の歩行者が存在した場合、自車との距離に応じて警告の優先度を決定できる。すなわち、複数の歩行者のうち、自車との距離がより小さい位置に存在する歩行者に対して、まず警告音を出力し、歩行者の事故回避動作を促し、事故の可能性をより低減できる。
Therefore, according to the processing of the pedestrian warning device in FIG. 6, when a plurality of pedestrians exist in the own
図8は、図2の歩行者警告装置100により歩行者に警告を出力した場合での具体例を示す図である。ここでは、車体警告装置100を搭載した車両102の車幅Wbを3ナンバーサイズの1.8m、住宅街などを想定して速度8m/s(約30km/h)とした。また、高齢者を想定して歩行速度1.1m/sとした。
FIG. 8 is a diagram showing a specific example when a warning is output to a pedestrian by the
このような場合、車両中央に沿った位置にある歩行者Oが、車の端の位置PまたはQまで移動することを想定すると、歩行者の回避行動に要する時間「t1=0.8sec」となる。また、歩行者Oが車両の存在に気付くまでの時間「t2=2.2sec」となる。なおt2は、車両102のブレーキの空走時間に基づいて規定した。
In such a case, assuming that the pedestrian O in the position along the center of the vehicle moves to the position P or Q of the end of the vehicle, the time required for the pedestrian's avoidance action is “t1 = 0.8 sec”. Become. Further, the time until the pedestrian O notices the presence of the vehicle is “t2 = 2.2 sec”. Note that t2 is defined based on the idle running time of the brake of the
つまり、歩行者Oが車両に気付いてから、回避するまでの時間「T=t1+t2=2.8sec」となる。その間に、車両102が接近する距離は、「8×2.2=22.4m」となる。したがって、上記の想定では、赤外線カメラ104の検知距離は30m程度であれば、上記車体警告装置100が実現可能となる。
In other words, the time from when the pedestrian O notices the vehicle until it is avoided is “T = t1 + t2 = 2.8 sec”. In the meantime, the distance that the
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。 As mentioned above, although preferred embodiment of this invention was described referring an accompanying drawing, it cannot be overemphasized that this invention is not limited to the example which concerns. It will be apparent to those skilled in the art that various changes and modifications can be made within the scope of the claims, and these are naturally within the technical scope of the present invention. Understood.
本発明は、車両に搭載され歩行者に警告を発する歩行者警告装置に利用することができる。 The present invention can be used in a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian.
100…歩行者警告装置、102…車両、104…赤外線カメラ、106…スピーカ、108…画像データ、110…アクチュエータ、112…警告音、114a、114b…判定ライン、116…自車進行領域、120…下縁ライン、124…消失点、126…車両情報取得部、128…警告可否判定部、130…画像情報取得部、132…自車進行領域設定部、134…歩行者検知部、136…制御部、138…歩行者侵入判定部、140…相対角度計測部、142…危険度判定部
DESCRIPTION OF
Claims (7)
車両前方を撮像し画像を生成する1つの撮像部と、
前記画像内の歩行者の位置を検知する歩行者検知部と、
車両が将来進行すると予測される自車進行領域を前記画像内に設定する自車進行領域設定部と、
前記歩行者の位置および前記自車進行領域に基づいて、該自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、
前記自車進行領域に歩行者が侵入していると判定されたとき、前記車両の進行方向を基準として該車両から該歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、
前記相対角度に基づき、前記車両から前記歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする歩行者警告装置。 In a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian,
One imaging unit that images the front of the vehicle and generates an image;
A pedestrian detection unit for detecting the position of the pedestrian in the image;
A host vehicle travel region setting unit that sets a host vehicle travel region predicted to travel in the future in the image;
A pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the position of the pedestrian and the own vehicle traveling area;
A relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to a traveling direction of the vehicle when it is determined that a pedestrian has entered the own vehicle traveling region;
A pedestrian warning device comprising: a warning unit that outputs a warning sound with narrow directivity from the vehicle toward the pedestrian based on the relative angle.
前記相対角度測定部は、前記危険度判定部で危険度が最も高いと判定された歩行者の相対角度を計測することを特徴とする請求項1に記載の歩行者警告装置。 When it is determined that a plurality of pedestrians have entered the own vehicle travel area, the perspective is determined according to the coordinates in the travel direction of the vehicle of the position of each pedestrian in the own vehicle travel area. , Further comprising a risk determination unit that determines that the pedestrian with a smaller value of the coordinate is closer to the own vehicle and has a higher risk,
The pedestrian warning device according to claim 1, wherein the relative angle measurement unit measures a relative angle of a pedestrian determined to have the highest degree of risk by the risk level determination unit.
車両前方を撮像し画像を生成する1つの撮像部と、
前記画像内の歩行者の位置を検知する歩行者検知部と、
車両が将来進行すると予測される自車進行領域を前記画像内に設定する自車進行領域設定部と、
前記歩行者の位置および前記自車進行領域に基づいて、該自車進行領域に歩行者が侵入しているか否かを判定する歩行者侵入判定部と、
前記自車進行領域に歩行者が侵入していないと判定されたとき、画像内での該歩行者の危険度を判定する危険度判定部と、
前記危険度判定部により危険度が高いと判定された歩行者について、前記車両の進行方向を基準として該車両から該歩行者に向かう方向が成す相対角度を計測する相対角度計測部と、
前記相対角度に基づき、前記車両から前記歩行者に向かって狭指向性の警告音を出力する警告部とを備えることを特徴とする歩行者警告装置。 In a pedestrian warning device that is mounted on a vehicle and issues a warning to a pedestrian,
One imaging unit that images the front of the vehicle and generates an image;
A pedestrian detection unit for detecting the position of the pedestrian in the image;
A host vehicle travel region setting unit that sets a host vehicle travel region predicted to travel in the future in the image;
A pedestrian intrusion determination unit that determines whether or not a pedestrian has entered the own vehicle traveling area based on the position of the pedestrian and the own vehicle traveling area;
When it is determined that a pedestrian has not entered the own vehicle travel area, a risk determination unit that determines the risk of the pedestrian in the image,
For a pedestrian determined to have a high degree of risk by the risk determination unit, a relative angle measurement unit that measures a relative angle formed by a direction from the vehicle toward the pedestrian with respect to the traveling direction of the vehicle;
A pedestrian warning device comprising: a warning unit that outputs a warning sound with narrow directivity from the vehicle toward the pedestrian based on the relative angle.
前記画像内に前記自車進行領域の先の消失点を設定し、
前記消失点から前記歩行者の最下点を通る直線が、前記下縁ラインと交差する交差点を特定し、
前記交差点が前記画像の中心方向に向かって移動するとき危険度が高いと判定することを特徴とする請求項4に記載の歩行者警告装置。 The risk determination unit
In the image, set the vanishing point ahead of the vehicle traveling area,
A straight line passing through the lowest point of the pedestrian from the vanishing point identifies the intersection where the lower edge line intersects,
The pedestrian warning device according to claim 4, wherein it is determined that the degree of risk is high when the intersection moves toward the center of the image.
前記歩行者侵入判定部による判定は、歩行者の最下点の座標が前記自車進行領域内に位置するか否かによって行われ、
前記相対角度は、前記画像の下縁である下縁ラインの中央から垂直に延びる前記車両の進行方向を示す直線と、該下縁ラインの中央から歩行者の最下点までを結ぶ直線との成す角度により得られることを特徴とする請求項1から6のいずれか1項に記載の歩行者警告装置。 The position of the pedestrian detected by the pedestrian detection unit is the coordinate of the lowest point of the pedestrian,
The determination by the pedestrian intrusion determination unit is performed by whether or not the coordinate of the lowest point of the pedestrian is located in the own vehicle traveling area,
The relative angle is a straight line indicating a traveling direction of the vehicle extending vertically from the center of the lower edge line which is the lower edge of the image, and a straight line connecting the center of the lower edge line to the lowest point of the pedestrian. The pedestrian warning device according to any one of claims 1 to 6, wherein the pedestrian warning device is obtained by an angle formed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012197516A JP5863607B2 (en) | 2012-09-07 | 2012-09-07 | Pedestrian warning device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012197516A JP5863607B2 (en) | 2012-09-07 | 2012-09-07 | Pedestrian warning device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014052883A true JP2014052883A (en) | 2014-03-20 |
| JP5863607B2 JP5863607B2 (en) | 2016-02-16 |
Family
ID=50611311
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012197516A Expired - Fee Related JP5863607B2 (en) | 2012-09-07 | 2012-09-07 | Pedestrian warning device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5863607B2 (en) |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017043705A1 (en) * | 2015-09-07 | 2017-03-16 | 엘지전자 주식회사 | Sensor, head lamp, and vehicle |
| CN107406059A (en) * | 2015-03-20 | 2017-11-28 | 本田技研工业株式会社 | Brake control method when brake control and collision during collision |
| CN108021849A (en) * | 2016-11-03 | 2018-05-11 | 杭州海康威视数字技术股份有限公司 | A kind of pedestrian's method for early warning and device |
| CN108275070A (en) * | 2018-02-07 | 2018-07-13 | 青岛大学 | The alarming device of pedestrian's priority pass on a kind of road zebra crossing |
| CN109733279A (en) * | 2019-02-20 | 2019-05-10 | 合肥京东方光电科技有限公司 | Vehicle whistle system and method, vehicle |
| JP2019525353A (en) * | 2016-08-19 | 2019-09-05 | 2236008 オンタリオ インコーポレイテッド | System and method for pedestrian alert |
| KR20190134892A (en) * | 2018-05-08 | 2019-12-05 | 현대자동차주식회사 | Apparatus and method for generating directional guide signal for pedestrain safety |
| US10547941B1 (en) * | 2019-01-16 | 2020-01-28 | Ford Global Technologies, Llc | Vehicle acoustic transducer operation |
| US10949656B2 (en) | 2015-09-29 | 2021-03-16 | Sony Corporation | Information processing apparatus and information processing method |
| CN112498342A (en) * | 2020-11-26 | 2021-03-16 | 潍柴动力股份有限公司 | Pedestrian collision prediction method and system |
| JP2021509516A (en) * | 2018-04-28 | 2021-03-25 | 深▲せん▼市商▲湯▼科技有限公司Shenzhen Sensetime Technology Co., Ltd. | Collision control methods and devices, electronic devices and storage media |
| JP2021163260A (en) * | 2020-03-31 | 2021-10-11 | 株式会社小松製作所 | Detection system and detection method |
| KR20220071560A (en) * | 2020-11-24 | 2022-05-31 | 상신브레이크주식회사 | Apparatus amd method for warning pedestrian in emergency breaking situation |
| GB2602202A (en) * | 2020-12-10 | 2022-06-22 | Bae Systems Plc | Sound safety barrier |
| GB2610175A (en) * | 2021-08-23 | 2023-03-01 | Siemens Mobility Ltd | Trespassing deterrence |
| CN115871552A (en) * | 2021-09-28 | 2023-03-31 | 惠州华阳通用智慧车载系统开发有限公司 | Low-speed warning sound device and control method |
| KR20240087185A (en) * | 2022-12-12 | 2024-06-19 | 현대모비스 주식회사 | Media module, controlling method thereof, and vehicle including media module |
| JP2024151402A (en) * | 2023-04-12 | 2024-10-25 | 三菱電機株式会社 | Attention warning device and attention warning system |
| CN119796208A (en) * | 2025-03-05 | 2025-04-11 | 微牌科技(浙江)有限公司 | Vehicle control method, device, computer equipment, storage medium and computer program product |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006298245A (en) * | 2005-04-22 | 2006-11-02 | Toyota Motor Corp | Vehicle alarm device and vehicle |
| JP2007251257A (en) * | 2006-03-13 | 2007-09-27 | Fujitsu Ten Ltd | Image recognition device, vehicle control device, image recognition method, and vehicle control method |
| JP2008114613A (en) * | 2006-10-31 | 2008-05-22 | Aisin Aw Co Ltd | Horn controller |
| US20080273750A1 (en) * | 2004-11-30 | 2008-11-06 | Nissan Motor Co., Ltd. | Apparatus and Method For Automatically Detecting Objects |
| JP2011065338A (en) * | 2009-09-16 | 2011-03-31 | Toyota Central R&D Labs Inc | Object tracking device and program |
| JP2011150475A (en) * | 2010-01-20 | 2011-08-04 | Toyota Motor Corp | Periphery monitor |
-
2012
- 2012-09-07 JP JP2012197516A patent/JP5863607B2/en not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080273750A1 (en) * | 2004-11-30 | 2008-11-06 | Nissan Motor Co., Ltd. | Apparatus and Method For Automatically Detecting Objects |
| JP2006298245A (en) * | 2005-04-22 | 2006-11-02 | Toyota Motor Corp | Vehicle alarm device and vehicle |
| JP2007251257A (en) * | 2006-03-13 | 2007-09-27 | Fujitsu Ten Ltd | Image recognition device, vehicle control device, image recognition method, and vehicle control method |
| JP2008114613A (en) * | 2006-10-31 | 2008-05-22 | Aisin Aw Co Ltd | Horn controller |
| JP2011065338A (en) * | 2009-09-16 | 2011-03-31 | Toyota Central R&D Labs Inc | Object tracking device and program |
| JP2011150475A (en) * | 2010-01-20 | 2011-08-04 | Toyota Motor Corp | Periphery monitor |
Cited By (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107406059A (en) * | 2015-03-20 | 2017-11-28 | 本田技研工业株式会社 | Brake control method when brake control and collision during collision |
| EP3272598A4 (en) * | 2015-03-20 | 2018-10-24 | Honda Motor Company Limited | Device and method for controlling braking during collisions |
| US10486662B2 (en) | 2015-03-20 | 2019-11-26 | Honda Motor Co., Ltd. | Device and method for controlling braking during collisions |
| WO2017043705A1 (en) * | 2015-09-07 | 2017-03-16 | 엘지전자 주식회사 | Sensor, head lamp, and vehicle |
| US10949656B2 (en) | 2015-09-29 | 2021-03-16 | Sony Corporation | Information processing apparatus and information processing method |
| US11915522B2 (en) | 2015-09-29 | 2024-02-27 | Sony Corporation | Information processing apparatus and information processing method |
| JP2019525353A (en) * | 2016-08-19 | 2019-09-05 | 2236008 オンタリオ インコーポレイテッド | System and method for pedestrian alert |
| CN108021849A (en) * | 2016-11-03 | 2018-05-11 | 杭州海康威视数字技术股份有限公司 | A kind of pedestrian's method for early warning and device |
| CN108275070A (en) * | 2018-02-07 | 2018-07-13 | 青岛大学 | The alarming device of pedestrian's priority pass on a kind of road zebra crossing |
| US11308809B2 (en) | 2018-04-28 | 2022-04-19 | Shenzhen Sensetime Technology Co., Ltd. | Collision control method and apparatus, and storage medium |
| JP2021509516A (en) * | 2018-04-28 | 2021-03-25 | 深▲せん▼市商▲湯▼科技有限公司Shenzhen Sensetime Technology Co., Ltd. | Collision control methods and devices, electronic devices and storage media |
| JP7163407B2 (en) | 2018-04-28 | 2022-10-31 | 深▲セン▼市商▲湯▼科技有限公司 | Collision control method and device, electronic device and storage medium |
| KR20190134892A (en) * | 2018-05-08 | 2019-12-05 | 현대자동차주식회사 | Apparatus and method for generating directional guide signal for pedestrain safety |
| KR102644363B1 (en) * | 2018-05-08 | 2024-03-07 | 현대자동차주식회사 | Apparatus and method for generating directional guide signal for pedestrain safety |
| US10547941B1 (en) * | 2019-01-16 | 2020-01-28 | Ford Global Technologies, Llc | Vehicle acoustic transducer operation |
| CN109733279A (en) * | 2019-02-20 | 2019-05-10 | 合肥京东方光电科技有限公司 | Vehicle whistle system and method, vehicle |
| JP2021163260A (en) * | 2020-03-31 | 2021-10-11 | 株式会社小松製作所 | Detection system and detection method |
| JP7623105B2 (en) | 2020-03-31 | 2025-01-28 | 株式会社小松製作所 | Working machine and detection method |
| KR102593554B1 (en) * | 2020-11-24 | 2023-10-24 | 상신브레이크주식회사 | Apparatus amd method for warning pedestrian in emergency breaking situation |
| KR20220071560A (en) * | 2020-11-24 | 2022-05-31 | 상신브레이크주식회사 | Apparatus amd method for warning pedestrian in emergency breaking situation |
| CN112498342A (en) * | 2020-11-26 | 2021-03-16 | 潍柴动力股份有限公司 | Pedestrian collision prediction method and system |
| GB2602202B (en) * | 2020-12-10 | 2023-08-02 | Bae Systems Plc | Sound safety barrier |
| GB2602202A (en) * | 2020-12-10 | 2022-06-22 | Bae Systems Plc | Sound safety barrier |
| GB2610175A (en) * | 2021-08-23 | 2023-03-01 | Siemens Mobility Ltd | Trespassing deterrence |
| CN115871552A (en) * | 2021-09-28 | 2023-03-31 | 惠州华阳通用智慧车载系统开发有限公司 | Low-speed warning sound device and control method |
| CN115871552B (en) * | 2021-09-28 | 2025-03-25 | 惠州华阳通用电子有限公司 | Low speed warning sound device and control method |
| KR20240087185A (en) * | 2022-12-12 | 2024-06-19 | 현대모비스 주식회사 | Media module, controlling method thereof, and vehicle including media module |
| US12263785B2 (en) | 2022-12-12 | 2025-04-01 | Hyundai Mobis Co., Ltd. | Media module, method of controlling media module, and vehicle including media module |
| KR102861410B1 (en) * | 2022-12-12 | 2025-09-18 | 현대모비스 주식회사 | Media module, controlling method thereof, and vehicle including media module |
| JP2024151402A (en) * | 2023-04-12 | 2024-10-25 | 三菱電機株式会社 | Attention warning device and attention warning system |
| CN119796208A (en) * | 2025-03-05 | 2025-04-11 | 微牌科技(浙江)有限公司 | Vehicle control method, device, computer equipment, storage medium and computer program product |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5863607B2 (en) | 2016-02-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5863607B2 (en) | Pedestrian warning device | |
| CN108136987B (en) | Parking space detection method and device | |
| US10696224B2 (en) | Driving notification method and driving notification system | |
| JP4628683B2 (en) | Pedestrian detection device and vehicle driving support device including the pedestrian detection device | |
| JP4615038B2 (en) | Image processing device | |
| CN108140314B (en) | Parking assistance method and parking assistance device | |
| JP5345350B2 (en) | Vehicle driving support device | |
| JP6252365B2 (en) | Safety confirmation support system, safety confirmation support method | |
| JP6379779B2 (en) | Vehicle display device | |
| WO2016067544A1 (en) | Vehicle-mounted attention-attracting system and notification control device | |
| CN102804239A (en) | Processing device for assisting driving of vehicle, vehicle driving assisting device, and vehicle device | |
| JP2010113601A (en) | Vehicle warning apparatus | |
| JP2008293122A (en) | Obstacle monitoring device | |
| JP2016066231A (en) | Collision prevention device, collision prevention method, collision prevention program, and recording medium | |
| JP2018092505A (en) | Driving assistance device | |
| JP5452004B2 (en) | Vehicle driving support device | |
| JP5362770B2 (en) | Driving assistance device | |
| JP2012153256A (en) | Image processing apparatus | |
| JP6827202B2 (en) | Information display device, information display method and program | |
| JP6296684B2 (en) | Driving assistance device | |
| JP2013054702A (en) | Vehicle approach information notification device, vehicle approach information notification method, and program | |
| JP2012203829A (en) | Moving body detection system for vehicle | |
| JP6776535B2 (en) | Vehicle control unit | |
| JP7558744B2 (en) | Abnormality notification system, control method, and vehicle control system | |
| JP2019172032A (en) | Automatic braking device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140403 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141210 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150219 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150623 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150807 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151208 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151222 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5863607 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |