[go: up one dir, main page]

JP2008165765A - 車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法 - Google Patents

車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法 Download PDF

Info

Publication number
JP2008165765A
JP2008165765A JP2007315917A JP2007315917A JP2008165765A JP 2008165765 A JP2008165765 A JP 2008165765A JP 2007315917 A JP2007315917 A JP 2007315917A JP 2007315917 A JP2007315917 A JP 2007315917A JP 2008165765 A JP2008165765 A JP 2008165765A
Authority
JP
Japan
Prior art keywords
vehicle
image
shadow
coordinate information
acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007315917A
Other languages
English (en)
Inventor
Bo Zuoo
ボ ズォー
Nan Wang
ナイ ワン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Publication of JP2008165765A publication Critical patent/JP2008165765A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】他車両の車両側面画像を取得し、該車両側面画像に基づいて車灯誤識別検出し、かつ、車両の安全運転を予測する「車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法」を提供する。
【解決手段】撮像装置で撮像された、識別済みの車両を含む画像を入力し、該入力された画像から、車両が撮像装置の左側または右側に位置する画像を分類して抽出し、該分類された画像に対して車両側面識別処理を行って、車両の側面画像情報を取得し、出力する。車両側面の取得処理に際し、分類された画像より車両の側面車下影を取得し、該分類された画像から車両の側面車下影の上部の車両側面エッジを取得し、車両の側面車下影と車両側面エッジの座標情報に基づいて車両の側面画像の座標情報を確定する。
【選択図】図6

Description

本発明は、車両画像識別分野における車両側面画像取得方法及び装置、取得した車両側面画像を用いた車灯誤認識検出方法及び安全運転予測方法に関する。
他の車両の側面画像情報を取得し、該側面画像情報を用いて車両側面の方向を分析し、これにより他車両の走行方向情報を識別すれば、自車両と他車両との互いの運動関係をより全面的に分析することが可能となり、車両運転の安全性を向上させることができる。
また、車両側面の水平構造と車両の前面(front face)の水平構造とが一定の相似性を有し、かつ、夜間の車両側面上の車灯の反射光と、他の車両の車灯とが相似性を有するため、車両構造、輪郭及び車灯に基づく車両画像識別の算出方法では、車両側面においてよく誤識別することがある。そのため、車両側面画像を取得することによって、車両画像識別方法の前記場合の誤識別を低下させるのに役立つ。
従来の車両側面画像を識別する識別方法は、(1)自車の側面に撮像機を搭載して自車側面に存在する他車両の車両側面画像を撮像し、次に、(2)自車側面に存在する撮像された他車両の2つの側面車輪画像が同一の水平位置にあるはずであるとの特徴に基づいて、自車側面に存在する車両の車輪を識別することによって、自車の側面に位置する車両を識別する。
しかし、従来の車両側面画像識別方法では、識別しようとする車両の2つの側面車輪が同一の水平線に位置するか判断する必要がある。このため、従来方法は自車の側面に撮像機を搭載した車両識別システムにしか用いることができなかった。換言すれば、前方、後方及び側方の車両識別システムに車両側面画像の識別機能を提供することができない問題がある。
従来技術として車両のエッジ特徴を強調し、車両を確実に検出する車両認識装置が提案されている(特許文献1)。しかし、この従来技術は、車両の側面画像を取得して自車両と他車両の衝突の可能性を検出して衝突を防止し、あるいは、他車両の側面における反射光に起因して生じる車両の誤り検出を防止するものではない。
特開平8−329397号公報
以上より、本発明は、他車両の車両側面画像を取得できる車両側面画像取得方法及び装置を提供することを目的とする。
本発明は、自車両と他車両との互いの運動関係をより全面的に把握して、車両運転の安全性を向上させる車両側面画像情報を提供することが可能な車両側面画像取得方法及び装置を提供することを目的とする。
また、本発明は、車両画像識別方法における誤識別を低下させることができる車両側面画像情報を提供する車両側面画像取得方法及び装置を提供することを目的とする。
また、本発明は、車両側面画像情報を用いて車灯の誤識別を検出することができる車灯誤識別検出方法を提供することを目的とする。
また、本発明は、車両側面画像情報を用いて車両の安全運転を予測することができる車両の運転安全予測方法を提供することを目的とする。
・車両側面画像取得方法
本発明の第1は車両側面画像取得方法であり、撮像装置で撮像された識別済みの車両を含む画像を入力する入力ステップと、前記入力された画像から、前記車両が前記撮像装置の左側または右側に位置する画像を分類して抽出する分類抽出ステップと、前記分類された画像に対して車両側面識別処理を行って、前記車両の側面画像情報を取得する取得処理ステップと、取得された前記車両の側面画像情報を出力する出力ステップとを備えている。
前記車両側面の取得処理ステップは、前記分類された画像より前記車両の側面車下影を取得する影取得ステップと、前記分類された画像から前記車両の側面車下影の上に前記車両の車両側面エッジを取得するエッジ取得ステップと、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定する確定ステップとを備えている。
・車両側面画像取得装置
本発明の第2は、車両側面画像取得装置であり、撮像装置で撮像された、識別済みの車両を含む画像を入力する入力手段と、前記入力された画像から、前記車両が前記撮像装置の左側または右側に位置する画像を分類して抽出する分類手段と、前記分類された画像に対して車両側面識別処理を行って、前記車両の側面画像情報を取得する取得処理手段と、
取得された前記車両の側面画像情報を出力する出力手段を備えている。前記取得処理手段は、前記分類された画像より前記車両の側面車下影を取得する影取得モジュールと、前記分類された画像から前記車両の側面車下影の上に前記車両の車両側面エッジを取得するエッジ取得モジュールと、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定する確定モジュールを備えている。
・車灯誤識別検出方法
本発明の第3は車灯誤識別検出方法であり、識別済みの車灯の画像情報と、撮像装置で撮像された、識別済みの車両を含む画像とを入力する入力ステップと、入力された、前記車両を含む画像に基づいて、前記車両の側面画像の座標情報を取得する取得ステップと、前記車灯の画像情報と前記車両の側面画像の座標情報とに基づいて、前記車両の側面画像領域内に位置する車灯を偽車灯として確定する確定ステップと、前記確定された車灯を偽車灯であるとして出力する出力ステップとを備えている。
・安全運転予測方法
本発明の第4は車両安全運転予測方法であり、所定の車両に搭載した撮像装置で撮像された、識別済みの車両(対象車両)を含む画像と、前記所定車両と前記対象車両との相対速度とを入力する入力ステップと、前記対象車両を含む画像に基づいて、前記対象車両の側面画像の座標情報を取得する取得ステップと、前記対象車両の側面画像の座標情報に基づいて、前記所定車両の後方に位置する対象車両と前記所定車両との相対角度を算出する算出ステップと、前記算出された相対角度に基づいて、前記所定車両の後方に位置し、かつ前記所定車両と衝突する可能性が高い対象車両を確定する確定ステップと、前記確定された対象車両が前記所定車両と衝突するのにかかる時間を予測する予測ステップと、前記確定された対象車両と前記予測された時間を出力する出力ステップを備えている。
本発明によれば、自動車の左または右前方及び左または右後方の他車両の側面画像を取得することが可能になった。
本発明によれば、他車両の側面画像を取得し、該側面画像用いて、自車両と他車両との互いの運動関係をより全面的に把握し、衝突の可能性があれば表示して車両運転の安全性を向上することができる。
本発明によれば、車両の側面画像を取得し、該側面画像内の車灯を反射車灯(偽車灯)として車両画像識別部に入力することにより、輪郭や車灯を考慮して車両画像識別をする場合における誤識別を低下することができる。
図1は本発明の一つの実施例の車両側面画像識別方法の流れ図である。図1に示すように、まず、ステップS1で、所定車両(自車両)に搭載した例えばテレビジョン撮像機などの撮像装置で撮像された、識別済みの他車両を含む画像を入力する。ここで識別済み車両とは、他の認識技術で既に認識されている車両を意味する。以下、前記識別済みの他車両を単に対象車両と呼ぶ。なお、撮像装置は後部車両の側面画像を識別する場合には車両後方、例えば、リアナンバー付近またはリアガラス中央(この場合は車室内)に設置する。
次に、ステップS2で、撮像された対象車両の画像中の位置によって、入力された画像を、(1)対象車両が自車両の正面前方又は後正面後方に位置する画像、(2) 対象車両が消失線近傍に位置する画像、及び(3)対象車両が自車両の左側あるいは右側に位置する画像の三つの種類に分類する。
次に、ステップS3で、対象車両が自車両の左側または右側の前方、後方、側方のいずれかに位置する画像を利用して、対象車両に対して車両側面画像取得処理を行うことによって、対象車両の側面画像情報を取得する。本発明の車両側面画像取得処理は図2を参照しながら後で詳しく説明する。
本実施例では、図3に示すように、自車両の後正面後方に位置する車両は画像中に車両側面がないので、自車両の後正面後方に位置する車両に対して車両側面画像取得処理を行わなくてよく、同様に、自車両の正面前方に位置する車両に対しても車両側面画像取得処理を行わない。そして、図4に示すように、消失線近傍に位置する車両は、画像中の面積が非常に小さいので、車両側面がほとんど見えないため、かかる車両に対して車両側面画像識別を行うと、誤差が非常に大きくなる。このため、本実施例では、消失線近傍に位置する車両に対して車両側面画像識別も行わない。
最後に、ステップS4で、取得した対象車両の側面画像情報を出力する。
図2は、本発明の一つの実施例の車両側面画像取得処理の流れ図である。図2に示すように、まず、特願2007-43720の明細書に開示されている「車下影確定方法」を利用して、ステップS31において、画像中の対象車両の左右両側に対して車下影フィルタ処理を行って、該対象車両の側面車下影を取得する(図5(A)のCSH参照)。
次に、ステップS32で、例えばSobel、Cannyなどの従来のエッジ抽出方法を利用して、該取得された側面車下影の上部画像に車両側面エッジのフィルタ処理を行って、該対象車両の車両側面エッジ(図5(A)のEDG 参照)を取得する。
次に、ステップS33で、該取得された側面車下影と車両側面エッジが以下の条件を満たすか否かを判定する。即ち、(1)前記取得された側面車下影と車両側面エッジの位置関係が該対象車両の実際の位置関係に近似するか否か、例えば、それらの間の間隔が該対象車両の実際の車幅の10%より小さいか否か、(2)該取得された側面車下影が車両側面エッジの方向と略平行するか否か(例えば、この両者の角度差が5度より小さいか否か)、(3)該取得された側面車下影と車両側面エッジとの間隔が該対象車両の実際の高さの1/3超かつ該対象車両の高さの2/3未満であるか否かを判定する。なお、10%や1/3〜2/3は経験値である。
最後に、ステップS34で、該取得された側面車下影と車両側面エッジが前記条件を満たすと判定すれば、該取得された側面車下影と車両側面エッジを抽出し、該抽出された側面車下影と車両側面エッジの座標に基づいて該対象車両の側面画像の座標情報(画像中の2次元座標)を確定する。その中、前記対象車両の側面画像の座標情報は、前記分類された側面車下影と車両側面エッジの座標の合併集合である。なお、前記3つの条件を全て満たす場合にステップS34の確定処理を行ってもよいし、3つの条件のうち何れかの条件、例えば(2)の条件を満たすか否か判定し、満たせばステップS34の確定処理を行うようにすることもできる。
図5(A)は撮像装置で撮像された車両CARの側面画像を示す図であり、図5(B)は前記ステップS31とS32に従ってフィルタ処理により得られた側面車下影CSHと車両側面エッジEDGを示す図であり、図5(C)は前記ステップS34に従って抽出された側面車下影CSH′と車両側面エッジEDG′を示す図である。
図6は、本発明の一つの実施例の車両側面画像取得装置のブロック図である。図6に示すように、車両側面画像取得装置100は、自車両に搭載した撮像装置で撮像された、識別済みの車両(対象車両)を含む画像を入力する入力手段102と、前記入力された画像から、前記対象車両が前記自車両の左側あるいは右側の前方、後方、側方に位置する画像を分類して抽出する分類手段104と、前記分類された画像に対して車両側面取得処理を行って、前記対象車両の側面画像情報を取得する取得処理手段106と、前記対象車両の側面画像情報を出力する出力手段108とを含む。
前記取得処理手段106は、さらに、前記分類された画像側に対して車下影フィルタ処理を行って、前記対象車両の側面車下影CSHを取得する影取得モジュール1060と、前記分類された画像に対して前記側面車下影の上部画像に車両側面エッジのフィルタ処理を行って、前記対象車両の車両側面エッジを取得するエッジ取得モジュール1062と、取得された側面車下影と車両側面エッジが以下の条件を満たすか否かを判定する判定モジュール1064と、前記判定した結果が「YES」である場合に、前記側面車下影と車両側面エッジの座標情報に基づいて、前記対象車両の側面画像の座標情報を確定する確定モジュール1066とを含む。前記条件とは、(1)取得された側面車下影と車両側面エッジの位置距離が前記対象車両の実際の車幅の10%より小さいか否か、(2)取得された側面車下影と車両側面エッジとの両方向の間の角度差が5度より小さいか否か、(3)取得された側面車下影と車両側面エッジとの位置距離が前記対象車両の実際の高さの1/3超かつ該車両の高さの2/3未満であるか否かということである。
以下、本発明の車両側面画像識別方法の二つの応用例を説明する。
第1の応用例は、本発明の車両側面画像取得方法により取得した側面画像を採用した車灯誤識別検出方法である。
車両側面の水平構造は車両の前面(front face)の水平構造と非常に相似し、かつ、夜間に車両側面に反射した車灯の反射灯光と、車両の車灯により直接に照射している実際の灯光とが相似性を有するので、車両構造、輪郭及び車灯に基づいて車両画像を識別する従来の算出方法は、車灯の灯光を反射した車両側面を車両のフロントとして誤識別した。しかし、本発明の車両側面画像識別方法を利用することによって、このような誤識別をなくすことができる。
図7は、本発明の一つの実施例の車灯誤識別検出方法を示す流れ図である。図7に示すように、ステップS50で、識別済みの車灯の画像情報と、自車両に搭載した撮像装置で撮像した、識別済みの車両(対象車両)を含む画像とを入力する。識別済みの車灯とは他の認識技術で既に認識済みの車灯を意味しており、車灯の画像情報には位置情報が含まれている。
ステップS52で、前記入力された、前記対象車両を含む画像に対して、前記ステップS1〜S4、S31〜S34を実行して、対象車両の側面画像の座標情報を取得する。
ステップS54で、入力された識別済み車灯の画像情報と取得された対象車両の側面画像の座標情報に基づいて、対象車両の側面画像領域内に位置する車灯を確定する。
ステップS56で、確定された識別済み車灯を誤識別車灯として出力する。
図8は第1の応用例を実現するシステムの構成図であり、201は識別しようとする車両の輪郭や車灯の画像情報を取得して出力する輪郭/車灯画像出力部、202は車両の輪郭や車灯の画像情報、車両構造を参照して車両を識別する車両識別部、203は他車両の側面画像を取得するための撮像装置、204はステップS52により他車両の側面画像を取得する側面画像取得部、205は側面画像領域内に存在する車灯を反射車灯、すなわち、偽車灯として車両識別部202に入力する反射車灯確定部である。車両識別部202は反射車灯確定部205から入力する偽車灯を車灯でないとして輪郭/車灯画像出力部201から入力する偽車灯の画像情報を除外して車両識別処理を行う。
第2の応用例は、本発明の車両側面画像識別方法を採用した車両安全運転予測方法である。運転支援システムは他車両の側面画像情報を取得することによって車両側面の方向を分析して該他車両の走行方向情報を了解し、自車両と他車両との互いの運動関係をより全面的に分析して、車両運転の安全性を向上させる。
図9は本発明の一つの実施例である車両安全運転予測方法を示す流れ図である。図9に示すように、ステップS80で、自車両に搭載した撮像装置で撮像された、識別済み車両(対象車両)を含む画像を入力すると共に、自車両と対象車両との相対速度を周知の方法で測定して入力する。
ステップS82で前記対象車両を含む画像に対して、前記ステップS1〜S4、S31〜S34を実行して、前記対象車両の側面画像の座標情報を取得する。
ステップS84で、取得された対象車両の側面画像の座標情報に基づいて、自車両の後方に位置する対象車両と自車両との相対角度を算出する。相対角度とは対象車両の側面画像の座標情報より求めた他車両の進行方向と自車両の進行方向の角度である。
ステップS86で、算出された相対角度に基づいて、自車両の後方に位置し、かつ自車両と衝突する可能性が高い対象車両を確定する。他車両の進行方向を延長したとき、延長線が自車両に交差すれば衝突の可能性があると判定する。
ステップS88で、確定された対象車両が自車両と衝突するために必要な時間を予測計算する。ステップS90で、確定された対象車両と予測された時間を出力する。
図10は第2応用例の車両安全運転予測システムの構成図であり、301は対象車両の側面画像を取得するための撮像装置、302はステップS82により他車両の側面画像を取得する側面画像取得部、303は自車両と対象車両との相対速度を入力する相対速度測定部、304は対象車両の側面画像の座標情報に基づいて、自車両の後方に位置する対象車両と自車両との相対角度を算出する相対角度算出部、305は衝突可能性を判定する衝突可能性判断部、306は衝突可能性があるとき、相対速度を用いて衝突までの時間を予測する衝突時間計算部、307は衝突する可能性のある対象車両と衝突予測時間を表示する表示部である。
前記実施例において、撮像装置を車両に搭載したことを例として本発明を説明したが、本発明はこれだけに限られない。実質的には、本発明において、撮像装置は、固定の対象に搭載されて道路の状況の画像を撮像してもよい。
当業者であれば、前記本実施例は、例を挙げて本発明を説明しただけのものであり、本発明を限定するものではないことが分かるはずである。
また、当業者であれば、本発明に開示されている各種の方法及び装置は、本発明の本質から離脱しない限り、各種の補正及び変形をすることができるので、本発明の保護範囲は実施例に限定されるものではなく本願の特許請求の範囲に基づいて確定されるべきである。
本発明の一つの実施例の車両側面画像取得方法の流れ図である。 本発明の一つの実施例の車両側面画像取得処理の流れ図である。 自車の真後後方に位置する車両を含む画像を示す図である。 消失線近傍に位置する車両を含む画像を示す図である。 撮像装置で撮像された車両側面画像、フィルタ処理により得られた側面車下影と車両側面エッジを示す図である。 本発明の一つの実施例の車両側面画像取得装置のブロック図である。 本発明の一つの実施例の車灯誤識別検出方法を示す流れ図である。 第1応用例のシステム構成図である。 本発明の第2応用例である車両安全運転予測方法を示す流れ図である。 である。 第2応用例である車両安全運転予測システムの構成図である。
符号の説明
100 車両側面画像取得装置
102 入力手段
104 分類手段
106 側面画像情報を取得する取得処理手段
108 出力手段
1060 影取得モジュール
1062 エッジ取得モジュール
1064 判定モジュール
1066 確定モジュール

Claims (17)

  1. 撮像装置で撮像された、識別済みの車両を含む画像を入力する入力ステップと、
    前記入力された画像から、前記車両が前記撮像装置の左側または右側に位置する画像を分類して抽出する分類抽出ステップと、
    前記分類された画像に対して車両側面識別処理を行って、前記車両の側面画像情報を取得する取得処理ステップと、
    取得された前記車両の側面画像情報を出力する出力ステップと、
    を含むことを特徴とする車両側面画像取得方法。
  2. 前記車両側面の取得処理ステップは、
    前記分類された画像より前記車両の側面車下影を取得する影取得ステップと、
    前記分類された画像から前記車両の側面車下影の上に前記車両の車両側面エッジを取得するエッジ取得ステップと、
    前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定する確定ステップと、
    を含むことを特徴とする請求項1記載の車両側面画像取得方法。
  3. さらに、前記車両の側面車下影と車両側面エッジの各方向の間の角度差が所定の条件を満たすか否かを判定する判定ステップを含み、
    判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項2記載の車両側面画像取得方法。
  4. 前記所定の条件は、前記角度差が5度より小さいことを特徴とする請求項3記載の車両側面画像取得方法。
  5. さらに、前記車両の側面車下影位置と車両側面エッジ位置間の距離が所定の条件を満たすか否かを判定する判定ステップを含み、
    判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項2記載の車両側面画像取得方法。
  6. 前記所定の条件は、前記距離が前記車両の実際の高さの1/3超かつ該車両の高さの2/3未満であることを特徴とする請求項5記載の車両側面画像取得方法。
  7. さらに、前記車両の側面車下影と車両側面エッジとの位置関係と、前記車両の実際の位置関係が所定の条件を満たすか否かを判定する判定ステップを含み、
    判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項2記載の車両側面画像取得方法。
  8. 前記所定の条件は、前記側面車下影位置と車両側面エッジ位置間の距離が前記車両の実際の車幅の10%より小さいことを特徴とする請求項7記載の車両側面画像取得方法。
  9. 撮像装置で撮像された、識別済みの車両を含む画像を入力する入力手段と、
    前記入力された画像から、前記車両が前記撮像装置の左側または右側に位置する画像を分類して抽出する分類手段と、
    前記分類された画像に対して車両側面識別処理を行って、前記車両の側面画像情報を取得する取得処理手段と、
    取得された前記車両の側面画像情報を出力する出力手段と、
    を含むことを特徴とする車両側面画像取得装置。
  10. 前記取得処理手段は、
    前記分類された画像より前記車両の側面車下影を取得する影取得モジュールと、
    前記分類された画像から前記車両の側面車下影の上に前記車両の車両側面エッジを取得するエッジ取得モジュールと、
    前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定する確定モジュールと、
    を含むことを特徴とする請求項9記載の車両側面画像取得装置。
  11. 前記取得処理手段は、さらに、
    前記車両の側面車下影と車両側面エッジの各方向の間の角度差が所定の条件を満たすか否かを判定する判定モジュールを含み、
    前記確定モジュールは、判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項10記載の車両側面画像取得装置。
  12. 前記取得処理手段は、さらに、
    前記車両の側面車下影位置と車両側面エッジ位置間の距離が所定の条件を満たすか否かを判定する判定モジュールを含み、
    前記確定モジュールは、判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項10記載の車両側面画像取得装置。
  13. 前記取得処理手段は、さらに、
    前記車両の側面車下影と車両側面エッジとの位置関係と、前記車両の実際の位置関係が所定の条件を満たすか否かを判定する判定モジュールを含み、
    前記確定モジュールは、判定した結果が「YES」である場合に、前記車両の側面車下影と車両側面エッジの座標情報に基づいて、前記車両の側面画像の座標情報を確定することを特徴とする請求項10記載の車両側面画像取得装置。
  14. 識別済みの車灯の画像情報と、撮像装置で撮像された、識別済みの車両を含む画像とを入力する入力ステップと、
    入力された、前記車両を含む画像に基づいて、前記車両の側面画像の座標情報を取得する取得ステップと、
    前記車灯の画像情報と前記車両の側面画像の座標情報とに基づいて、前記車両の側面画像領域内に位置する車灯を偽車灯として確定する確定ステップと、
    前記確定された車灯を偽車灯であるとして出力する出力ステップと、
    を含むことを特徴とする車灯誤識別検出方法。
  15. 所定の車両に搭載した撮像装置で撮像された、識別済みの車両(対象車両)を含む画像と、前記所定車両と前記対象車両との相対速度とを入力する入力ステップと、
    前記対象車両を含む画像に基づいて、前記対象車両の側面画像の座標情報を取得する取得ステップと、
    前記対象車両の側面画像の座標情報に基づいて、前記所定車両の後方に位置する対象車両と前記所定車両との相対角度を算出する算出ステップと、
    前記算出された相対角度に基づいて、前記所定車両の後方に位置し、かつ前記所定車両と衝突する可能性が高い対象車両を確定する確定ステップと、
    前記確定された対象車両が前記所定車両と衝突するのにかかる時間を予測する予測ステップと、
    前記確定された対象車両と前記予測された時間を出力する出力ステップと、
    を含むことを特徴とする車両安全運転予測方法。
  16. 前記取得ステップは、さらに、
    前記入力された、前記対象車両を含む画像から、前記対象車両が前記撮像装置の左側または右側に位置する画像を分類し抽出する分類ステップと、
    前記分類された画像に対して車両側面識別処理を行って、前記対象車両の側面画像の座標情報を取得する取得処理ステップと、
    を含むことを特徴とする請求項14または15記載の方法。
  17. 前記車両側面の取得処理ステップは、さらに、
    前記分類された画像から前記対象車両の側面車下影を取得する影取得ステップと、
    前記分類された画像から前記対象車両の側面車下影の上に前記対象車両の車両側面エッジを取得するエッジ取得ステップと、
    前記対象車両の側面車下影と車両側面エッジの座標情報に基づいて、前記対象車両の側面画像の座標情報を確定する確定ステップと、
    を含むことを特徴とする請求項16記載の方法。
JP2007315917A 2006-12-29 2007-12-06 車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法 Pending JP2008165765A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2006101562800A CN101211408B (zh) 2006-12-29 2006-12-29 车辆侧面图像识别方法及装置、车灯误识别检测和行驶安全预测方法

Publications (1)

Publication Number Publication Date
JP2008165765A true JP2008165765A (ja) 2008-07-17

Family

ID=39583112

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007315917A Pending JP2008165765A (ja) 2006-12-29 2007-12-06 車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法

Country Status (3)

Country Link
US (1) US8019122B2 (ja)
JP (1) JP2008165765A (ja)
CN (1) CN101211408B (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101262555B1 (ko) 2011-07-05 2013-05-08 현대자동차주식회사 오경보 방지 기능을 가지는 추돌 경보 장치 및 그 방법
WO2015163015A1 (ja) * 2014-04-24 2015-10-29 日立建機株式会社 作業機械の周囲監視装置

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2313863A1 (en) * 2008-07-14 2011-04-27 National ICT Australia Limited Detection of vehicles in images of a night time scene
CN101751676B (zh) * 2008-12-17 2012-10-03 财团法人工业技术研究院 影像侦测方法及其系统
JP5051405B2 (ja) * 2009-11-09 2012-10-17 トヨタ自動車株式会社 距離測定装置、及び距離測定方法
US20150310313A1 (en) * 2012-12-18 2015-10-29 Mitsubishi Electric Corporation Visibility estimation device, visibility estimation method, and safe driving support system
JP2014164426A (ja) * 2013-02-22 2014-09-08 Denso Corp 物体検出装置
WO2016208274A1 (ja) * 2015-06-23 2016-12-29 日本電気株式会社 検出システム、検出方法、及び、プログラム
CN105160324B (zh) * 2015-09-08 2018-10-26 长安大学 一种基于部件空间关系的车辆检测方法
CN105654038B (zh) * 2015-12-22 2019-03-08 上海汽车集团股份有限公司 车灯识别方法及装置
CN105844222B (zh) * 2016-03-18 2019-07-30 上海欧菲智能车联科技有限公司 基于视觉的前方车辆碰撞预警系统及方法
CN107776572A (zh) * 2016-08-31 2018-03-09 奥迪股份公司 车辆辅助驾驶方法及系统
KR102749979B1 (ko) * 2016-11-09 2025-01-03 삼성전자주식회사 주행 차량을 위한 가상의 주행 차선을 생성하는 방법 및 장치
US10421436B2 (en) 2017-03-24 2019-09-24 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for surveillance of a vehicle using camera images
CN111161542B (zh) * 2018-11-08 2021-09-28 杭州海康威视数字技术股份有限公司 车辆识别方法及装置
US10664721B1 (en) 2019-08-07 2020-05-26 Capital One Services, Llc Systems and methods for generating graphical user interfaces
US10885099B1 (en) 2019-08-07 2021-01-05 Capital One Services, Llc Systems and methods for presenting image classification results
JP7310526B2 (ja) * 2019-10-14 2023-07-19 株式会社デンソー 障害物識別装置および障害物識別プログラム
JP7495178B2 (ja) * 2020-04-14 2024-06-04 株式会社Subaru 車両の走行支援装置
US11887460B2 (en) 2021-08-12 2024-01-30 Toyota Motor North America, Inc. Transport-related contact notification
US12214779B2 (en) 2021-08-12 2025-02-04 Toyota Motor North America, Inc. Minimizing airborne objects in a collision
US12097815B2 (en) 2021-08-12 2024-09-24 Toyota Connected North America, Inc. Protecting living objects in transports
US12190733B2 (en) 2021-08-12 2025-01-07 Toyota Connected North America, Inc. Message construction based on potential for collision
US12030489B2 (en) 2021-08-12 2024-07-09 Toyota Connected North America, Inc. Transport related emergency service notification
US11608030B2 (en) 2021-08-12 2023-03-21 Toyota Connected North America, Inc. Vehicle surveillance system and early vehicle warning of potential threat
US11894136B2 (en) 2021-08-12 2024-02-06 Toyota Motor North America, Inc. Occupant injury determination

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10244890A (ja) * 1997-03-07 1998-09-14 Nissan Motor Co Ltd 自動駐車装置
JPH11353565A (ja) * 1998-06-09 1999-12-24 Yazaki Corp 車両用衝突警報方法及び装置
JP2006234779A (ja) * 2005-02-21 2006-09-07 Sigma Denki Kogyo Kk 夜間におけるヘッドライト及びテールランプ位置検出方法並びに夜間走行車両計測方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3726309B2 (ja) 1995-05-26 2005-12-14 日産自動車株式会社 車両認識装置及びそれを用いた車両接近報知装置
JP3812384B2 (ja) 2001-08-31 2006-08-23 日産自動車株式会社 先行車両認識装置
JP4657765B2 (ja) * 2005-03-09 2011-03-23 三菱自動車工業株式会社 ノーズビューシステム
US8164628B2 (en) * 2006-01-04 2012-04-24 Mobileye Technologies Ltd. Estimating distance to an object using a sequence of images recorded by a monocular camera
CN101030256B (zh) 2006-02-28 2010-05-12 东软集团股份有限公司 车辆图像分割方法和装置
JP4544233B2 (ja) * 2006-10-11 2010-09-15 株式会社デンソー 車両検出装置及びヘッドランプ制御装置
CN101187982B (zh) * 2006-11-17 2011-08-24 东软集团股份有限公司 一种用于从图像中分割出对象的方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10244890A (ja) * 1997-03-07 1998-09-14 Nissan Motor Co Ltd 自動駐車装置
JPH11353565A (ja) * 1998-06-09 1999-12-24 Yazaki Corp 車両用衝突警報方法及び装置
JP2006234779A (ja) * 2005-02-21 2006-09-07 Sigma Denki Kogyo Kk 夜間におけるヘッドライト及びテールランプ位置検出方法並びに夜間走行車両計測方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101262555B1 (ko) 2011-07-05 2013-05-08 현대자동차주식회사 오경보 방지 기능을 가지는 추돌 경보 장치 및 그 방법
WO2015163015A1 (ja) * 2014-04-24 2015-10-29 日立建機株式会社 作業機械の周囲監視装置
JP2015210602A (ja) * 2014-04-24 2015-11-24 日立建機株式会社 作業機械の周囲監視装置
US10160383B2 (en) 2014-04-24 2018-12-25 Hitachi Construction Machinery Co., Ltd. Surroundings monitoring system for working machine

Also Published As

Publication number Publication date
CN101211408B (zh) 2011-05-25
CN101211408A (zh) 2008-07-02
US20080158014A1 (en) 2008-07-03
US8019122B2 (en) 2011-09-13

Similar Documents

Publication Publication Date Title
JP2008165765A (ja) 車両側面画像取得方法及び装置、車灯誤識別検出方法及び安全運転予測方法
US10984509B2 (en) Image processing apparatus, imaging device, moving body device control system, image information processing method, and program product
EP3179445B1 (en) Outside environment recognition device for vehicles and vehicle behavior control device using same
US9047518B2 (en) Method for the detection and tracking of lane markings
US11004215B2 (en) Image processing apparatus, imaging device, moving body device control system, image information processing method, and program product
EP3576008B1 (en) Image based lane marking classification
JP6246014B2 (ja) 外界認識システム、車両、及びカメラの汚れ検出方法
EP3545464B1 (en) Information processing device, imaging device, equipment control system, mobile object, information processing method, and computer-readable recording medium
EP2717219B1 (en) Object detection device, object detection method, and object detection program
US20130286205A1 (en) Approaching object detection device and method for detecting approaching objects
CN104380341B (zh) 车辆周边对象物检测装置
WO2014002692A1 (ja) ステレオカメラ
EP3115933A1 (en) Image processing device, image capturing device, mobile body control system, image processing method, and computer-readable recording medium
JPH11351862A (ja) 前方車両検出方法及び装置
WO2016059643A1 (en) System and method for pedestrian detection
JP4123138B2 (ja) 車両検知方法及び車両検知装置
CN111914610A (zh) 立体物检测装置、以及立体物检测方法
CN112758086B (zh) 车外环境识别装置
JP2007179386A (ja) 白線認識方法及び白線認識装置
CN111133439B (zh) 全景监视系统
JP2018073049A (ja) 画像認識装置、画像認識システム、及び画像認識方法
JP4772622B2 (ja) 周辺監視システム
JP5487648B2 (ja) 移動物体計測システム、移動物体計測装置、移動物体計測方法及びプログラム
US9965692B2 (en) System and method for detecting vehicle
JP7379268B2 (ja) 画像処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101124

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120117

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120501

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120618

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120807