JP2022030770A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2022030770A5 JP2022030770A5 JP2020134991A JP2020134991A JP2022030770A5 JP 2022030770 A5 JP2022030770 A5 JP 2022030770A5 JP 2020134991 A JP2020134991 A JP 2020134991A JP 2020134991 A JP2020134991 A JP 2020134991A JP 2022030770 A5 JP2022030770 A5 JP 2022030770A5
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- traffic signal
- traffic
- map
- traffic light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Description
その目的を達成するための信号機認識装置は、一例として、車両の周辺に存在する信号機を認識するための信号機認識装置であって、車両の位置を取得する車両位置取得部(F1、F5)と、車両位置取得部が取得した車両の位置に基づき、地図データに登録されている、信号機の位置である地図上信号機位置を取得する地図上位置取得部(F2)と、車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得部(F3)と、地図上位置取得部が取得した地図上信号機位置と観測位置取得部が取得した観測灯火位置の差である近接度に基づいて、灯火装置が信号機であるか否かを判定する信号機認識部(F71)と、を備え、地図データに登録されている信号機までの残り距離が所定の限界距離未満となっても、当該信号機に対応する灯火装置を特定できていない場合には、地図に登録されている信号機の検出に失敗したことを示すエラー信号を地図サーバに送信するように構成されている。
また上記目的を達成するための信号機認識方法は、少なくとも1つのプロセッサ(21)によって実行される、車両の周辺に存在する信号機を認識するための信号機認識方法であって、車両の位置を取得する車両位置取得ステップ(S101)と、車両位置取得ステップで取得した車両の位置に基づき、地図データに登録されている、信号機の位置である地図上信号機位置を取得する地図上位置取得ステップ(S102)と、車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得ステップ(S103)と、地図上位置取得ステップで取得した地図上信号機位置と観測位置取得ステップで取得した観測灯火位置の差である近接度に基づいて、灯火装置が信号機であるか否かを判定する信号機認識ステップ(S107)と、地図データに登録されている信号機までの残り距離が所定の限界距離未満となっても、当該信号機に対応する灯火装置を特定できていない場合には、地図に登録されている信号機の検出に失敗したことを示すエラー信号を地図サーバに送信するステップと、を含む。
さらに上記目的を達成するための車両制御装置は、車両の周辺に存在する信号機の認識状態に応じた車両制御を実施する車両制御装置であって、車両の位置を取得する車両位置取得部(F1、F5)と、車両位置取得部が取得した車両の位置に基づき、地図データに登録されている、信号機の位置である地図上信号機位置を取得する地図上位置取得部(F2)と、車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得部(F3)と、地図上位置取得部が取得した地図上信号機位置と観測位置取得部が取得した観測灯火位置の差である近接度に基づいて、灯火装置が信号機であるか否かを判定する信号機認識部(F71)と、を備え、車両から地図上信号機位置までの残り距離が所定の限界距離未満となっても信号機を認識できていない場合には、車両制御が実行されないことをユーザに通知するとともに、車両から地図上信号機位置までの残り距離が、限界距離よりも大きい所定の中止予告距離となっても信号機を認識できていない場合には、車両制御が実行されない可能性があることをユーザに予告するように構成されている。
Claims (11)
- 車両の周辺に存在する信号機を認識するための信号機認識装置であって、
前記車両の位置を取得する車両位置取得部(F1、F5)と、
前記車両位置取得部が取得した前記車両の位置に基づき、地図データに登録されている、前記信号機の位置である地図上信号機位置を取得する地図上位置取得部(F2)と、
車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得部(F3)と、
前記地図上位置取得部が取得した前記地図上信号機位置と前記観測位置取得部が取得した前記観測灯火位置の差である近接度に基づいて、前記灯火装置が前記信号機であるか否かを判定する信号機認識部(F71)と、を備え、
前記地図データに登録されている前記信号機までの残り距離が所定の限界距離未満となっても、当該信号機に対応する前記灯火装置を特定できていない場合には、地図に登録されている信号機の検出に失敗したことを示すエラー信号を地図サーバに送信するように構成されている信号機認識装置。 - 請求項1に記載の信号機認識装置であって、
前記エラー信号は、現在位置情報、観測時刻情報、検出に失敗した前記信号機の識別情報、及び前記車載カメラのモデル情報の少なくとも何れか1つを含む、信号機認識装置。 - 請求項1又は2に記載の信号機認識装置であって、
前記信号機認識部は、前記近接度が所定の見なし閾値未満であることに基づいて、前記灯火装置を前記信号機と判定するように構成されている信号機認識装置。 - 請求項1から3の何れか1項に記載の信号機認識装置であって、
前記車両位置取得部が推定した前記車両の位置と、実際の前記車両の位置と差である車両位置誤差を取得する位置誤差取得部(F6)を備え、
前記信号機認識部は、前記車両位置誤差が所定の誤差閾値未満であることを条件として、前記灯火装置が前記信号機であるか否かの判定を実施するように構成されている信号機認識装置。 - 請求項4に記載の信号機認識装置であって、
前記車両位置誤差が前記誤差閾値未満であることを条件として、前記信号機に対応する前記灯火装置の観測位置を直接的又は間接的に示す観測結果情報を、前記車両の外部に設けられている地図サーバに送信するように構成されている信号機認識装置。 - 請求項1から5の何れか1項に記載の信号機認識装置であって、
前記車両位置取得部は、前方カメラの撮像した画像フレームを用いて検出される所定のランドマークの位置情報と、前記地図データに登録されている前記ランドマークの位置情報とから、地図上における前記車両の位置座標を特定するものであって、
前記ランドマークは、道路沿いに設置されている案内標識、信号機、ポール、商業看板、及び所定の路面標示の少なくとも何れか1つを含み、
前記車両位置取得部は、少なくとも夜間は、前記ランドマークとして信号機は用いないように構成されている信号機認識装置。 - 請求項1から6の何れか1項に記載の信号機認識装置であって、
前記地図データに登録されている前記信号機までの残り距離が所定の限界距離未満となっても、当該信号機に対応する前記灯火装置を特定できていない場合には、当該信号機の認識状態にかかる情報をユーザに通知するように構成されている信号機認識装置。 - 請求項1から7の何れか1項に記載の信号機認識装置であって、
車両外部に設けられている通信装置から、前記信号機についての情報である信号機情報を受信する信号機情報受信部(F11)を備え、
前記信号機認識部は、前記信号機情報受信部が前記信号機情報を受信した場合には、当該信号機情報を用いて前記信号機に対応する前記灯火装置を特定するように構成されている信号機認識装置。 - 請求項8に記載の信号機認識装置であって、
前記信号機認識部は、前記信号機に対応する前記灯火装置を特定できた場合には、前記信号機としての当該灯火装置を追跡するように構成されており、
前記信号機情報受信部が受信した前記信号機情報に基づいて、前記信号機としての前記灯火装置を追跡する方法を経時的に変更するように構成されている信号機認識装置。 - 少なくとも1つのプロセッサ(21)によって実行される、車両の周辺に存在する信号機を認識するための信号機認識方法であって、
前記車両の位置を取得する車両位置取得ステップ(S101)と、
前記車両位置取得ステップで取得した前記車両の位置に基づき、地図データに登録されている、前記信号機の位置である地図上信号機位置を取得する地図上位置取得ステップ(S102)と、
車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得ステップ(S103)と、
前記地図上位置取得ステップで取得した前記地図上信号機位置と前記観測位置取得ステップで取得した前記観測灯火位置の差である近接度に基づいて、前記灯火装置が前記信号機であるか否かを判定する信号機認識ステップ(S107)と、
前記地図データに登録されている前記信号機までの残り距離が所定の限界距離未満となっても、当該信号機に対応する前記灯火装置を特定できていない場合には、地図に登録されている信号機の検出に失敗したことを示すエラー信号を地図サーバに送信するステップと、を含む信号機認識方法。 - 車両の周辺に存在する信号機の認識状態に応じた車両制御を実施する車両制御装置であって、
前記車両の位置を取得する車両位置取得部(F1、F5)と、
前記車両位置取得部が取得した前記車両の位置に基づき、地図データに登録されている、前記信号機の位置である地図上信号機位置を取得する地図上位置取得部(F2)と、
車載カメラが撮像した画像フレームを用いて検出される灯火装置の位置情報を、観測灯火位置として取得する観測位置取得部(F3)と、
前記地図上位置取得部が取得した前記地図上信号機位置と前記観測位置取得部が取得した前記観測灯火位置の差である近接度に基づいて、前記灯火装置が前記信号機であるか否かを判定する信号機認識部(F71)と、を備え、
前記車両から前記地図上信号機位置までの残り距離が所定の限界距離未満となっても信号機を認識できていない場合には、前記車両制御が実行されないことをユーザに通知するとともに、
前記車両から前記地図上信号機位置までの残り距離が、前記限界距離よりも大きい所定の中止予告距離となっても前記信号機を認識できていない場合には、前記車両制御が実行されない可能性があることをユーザに予告するように構成されている車両制御装置。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020134991A JP7409257B2 (ja) | 2020-08-07 | 2020-08-07 | 信号機認識装置、信号機認識方法、車両制御装置 |
| PCT/JP2021/028302 WO2022030379A1 (ja) | 2020-08-07 | 2021-07-30 | 信号機認識装置、信号機認識方法、車両制御装置 |
| CN202180056649.3A CN116171464B (zh) | 2020-08-07 | 2021-07-30 | 信号灯识别装置、信号灯识别方法、车辆控制装置 |
| DE112021004195.9T DE112021004195T5 (de) | 2020-08-07 | 2021-07-30 | Verkehrssignalerkennungsvorrichtung, Verkehrssignalerkennungsverfahren und Fahrzeugsteuervorrichtung |
| US18/163,769 US12399035B2 (en) | 2020-08-07 | 2023-02-02 | Traffic signal recognition device, traffic signal recognition method and vehicle control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020134991A JP7409257B2 (ja) | 2020-08-07 | 2020-08-07 | 信号機認識装置、信号機認識方法、車両制御装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2022030770A JP2022030770A (ja) | 2022-02-18 |
| JP2022030770A5 true JP2022030770A5 (ja) | 2022-10-12 |
| JP7409257B2 JP7409257B2 (ja) | 2024-01-09 |
Family
ID=80118690
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020134991A Active JP7409257B2 (ja) | 2020-08-07 | 2020-08-07 | 信号機認識装置、信号機認識方法、車両制御装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US12399035B2 (ja) |
| JP (1) | JP7409257B2 (ja) |
| CN (1) | CN116171464B (ja) |
| DE (1) | DE112021004195T5 (ja) |
| WO (1) | WO2022030379A1 (ja) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102019119084A1 (de) * | 2019-07-15 | 2021-01-21 | Valeo Schalter Und Sensoren Gmbh | Bestimmen eines Signalstatus einer Lichtsignalanlage |
| EP3968305B1 (en) * | 2020-09-15 | 2025-09-03 | Volkswagen Aktiengesellschaft | Method, computer program and apparatus for controlling operation of a vehicle equipped with an automated driving function |
| KR20230031730A (ko) * | 2021-08-27 | 2023-03-07 | 현대자동차주식회사 | 신호등 판단 장치, 그를 포함한 시스템 및 그 방법 |
| JP7491291B2 (ja) * | 2021-11-10 | 2024-05-28 | トヨタ自動車株式会社 | 運転支援装置、運転支援方法及び運転支援プログラム |
| CN114743376B (zh) * | 2022-04-20 | 2023-09-05 | 深圳市旗扬特种装备技术工程有限公司 | 一种非灯控路口智能交通系统 |
| JP2023184118A (ja) * | 2022-06-17 | 2023-12-28 | 株式会社デンソーテン | 物体検知装置および物体検知方法 |
| US12187316B2 (en) * | 2022-07-07 | 2025-01-07 | Gm Cruise Holdings Llc | Camera calibration for underexposed cameras using traffic signal targets |
| CN116152784B (zh) * | 2023-04-21 | 2023-07-07 | 深圳市夜行人科技有限公司 | 一种基于图像处理的信号灯预警方法及系统 |
| US12491882B2 (en) * | 2023-05-12 | 2025-12-09 | GM Global Technology Operations LLC | Determining optimal vehicle behavior at intersections |
| JP2025152117A (ja) * | 2024-03-28 | 2025-10-09 | トヨタ自動車株式会社 | 情報処理装置 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2921355B2 (ja) * | 1993-09-09 | 1999-07-19 | 日産自動車株式会社 | 車載用ナビゲーション装置 |
| JP4628200B2 (ja) * | 2005-07-04 | 2011-02-09 | アイシン・エィ・ダブリュ株式会社 | 段差学習システム |
| JP5712847B2 (ja) * | 2011-07-28 | 2015-05-07 | アイシン・エィ・ダブリュ株式会社 | 信号機増減検出システム、信号機増減検出装置、信号機増減検出方法及びコンピュータプログラム |
| RU2666061C2 (ru) * | 2013-04-04 | 2018-09-05 | Ниссан Мотор Ко., Лтд. | Устройство распознавания сигнала регулирования движения |
| JP6325806B2 (ja) * | 2013-12-06 | 2018-05-16 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム |
| WO2015177864A1 (ja) * | 2014-05-20 | 2015-11-26 | 日産自動車株式会社 | 信号機認識装置及び信号機認識方法 |
| EP3168823B1 (en) * | 2014-07-08 | 2020-05-13 | Nissan Motor Co., Ltd | Traffic signal detection device and traffic signal detection method |
| JP6331811B2 (ja) | 2014-07-18 | 2018-05-30 | 日産自動車株式会社 | 信号機検出装置及び信号機検出方法 |
| JP2016112984A (ja) * | 2014-12-12 | 2016-06-23 | 日本精機株式会社 | 車両用虚像表示システム、ヘッドアップディスプレイ |
| JP6432680B2 (ja) * | 2015-06-09 | 2018-12-12 | 日産自動車株式会社 | 信号機検出装置及び信号機検出方法 |
| FR3047217B1 (fr) * | 2016-02-03 | 2019-08-16 | Valeo Schalter Und Sensoren Gmbh | Dispositif de determination de l'etat d'un feu de signalisation, systeme embatque comprenant un tel dispositif, vehicule comprenant un tel systeme et procede de determination associe |
| JP2017182297A (ja) * | 2016-03-29 | 2017-10-05 | パナソニックIpマネジメント株式会社 | 車両制御装置および車両制御方法 |
| US20170350713A1 (en) * | 2016-06-02 | 2017-12-07 | Delphi Technologies, Inc. | Map update system for automated vehicles |
| JP6629169B2 (ja) * | 2016-11-15 | 2020-01-15 | 本田技研工業株式会社 | 信号機認識装置、車両及び信号機認識方法 |
| US10289115B2 (en) * | 2017-06-01 | 2019-05-14 | Aptiv Technologies Limited | Automated vehicle map localization based on observed geometries of roadways |
| JP6939615B2 (ja) * | 2018-02-02 | 2021-09-22 | トヨタ自動車株式会社 | 信号機認識装置 |
| US10773732B1 (en) * | 2018-06-27 | 2020-09-15 | Direct Current Capital LLC | Systems and methods for interfacing with an occupant |
| JP2020061052A (ja) * | 2018-10-12 | 2020-04-16 | トヨタ自動車株式会社 | 信号機判定装置 |
| JP2020134991A (ja) | 2019-02-13 | 2020-08-31 | 極東ゴム株式会社 | 求人求職システム |
| JP7088135B2 (ja) * | 2019-07-23 | 2022-06-21 | トヨタ自動車株式会社 | 信号表示推定システム |
| CN110390829A (zh) * | 2019-07-30 | 2019-10-29 | 北京百度网讯科技有限公司 | 交通信号灯识别的方法及装置 |
| CN110285981A (zh) * | 2019-07-31 | 2019-09-27 | 北京百度网讯科技有限公司 | 自动驾车车辆中交通灯检测模块的异常检测方法及装置 |
-
2020
- 2020-08-07 JP JP2020134991A patent/JP7409257B2/ja active Active
-
2021
- 2021-07-30 CN CN202180056649.3A patent/CN116171464B/zh active Active
- 2021-07-30 WO PCT/JP2021/028302 patent/WO2022030379A1/ja not_active Ceased
- 2021-07-30 DE DE112021004195.9T patent/DE112021004195T5/de active Pending
-
2023
- 2023-02-02 US US18/163,769 patent/US12399035B2/en active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2022030770A5 (ja) | ||
| JP6325806B2 (ja) | 車両位置推定システム | |
| CN109658719B (zh) | 用于识别交通指示牌的方法、车辆设备和可信性验证方法以及存储媒介 | |
| CN105074794B (zh) | 信号识别装置 | |
| CN103578286B (zh) | 交通标志识别 | |
| CN109080640B (zh) | 用于在车辆内提供昏睡警报的方法 | |
| TWI437210B (zh) | 藉由即時交通規則判斷資訊進行導航之電子裝置、方法以及儲存其之電腦可讀取記錄媒體 | |
| JP5734521B2 (ja) | 車載機およびセンター装置 | |
| JPWO2014115563A1 (ja) | 運転支援装置、運転支援方法、および運転支援プログラムを記憶する記録媒体 | |
| US20170227971A1 (en) | Autonomous travel management apparatus, server, and autonomous travel management method | |
| CN108597245B (zh) | 使得车辆能够丢弃不相关道路标记信息的方法和系统 | |
| US10635106B2 (en) | Automated driving apparatus | |
| US9182818B2 (en) | Communication system of a motor vehicle | |
| JP2007232690A (ja) | 現在地検出装置、地図表示装置、および現在地検出方法 | |
| CN104854638A (zh) | 视觉辨认度估计装置、视觉辨认度估计方法及安全驾驶支持系统 | |
| CN102334147A (zh) | 车载信息处理装置及信息处理方法 | |
| CN104655127A (zh) | 基于电子标签的室内导盲系统和导盲方法 | |
| US12240450B2 (en) | V2X warning system for identifying risk areas within occluded regions | |
| KR20170105481A (ko) | 교통 신호 검증을 위한 시스템 및 방법 | |
| JP2024026588A (ja) | 画像認識装置、及び画像認識方法 | |
| US11250695B2 (en) | Method and device for providing a position of at least one object | |
| JP2021174221A (ja) | 列車位置検知装置 | |
| JP2016057655A (ja) | 自動走行管理システム、サーバおよび自動走行管理方法 | |
| JP2007178271A (ja) | 自位置認識システム | |
| JP2007010335A (ja) | 車両位置検出装置及びシステム |