[go: up one dir, main page]

AT527121B1 - Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking - Google Patents

Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking Download PDF

Info

Publication number
AT527121B1
AT527121B1 ATA50510/2023A AT505102023A AT527121B1 AT 527121 B1 AT527121 B1 AT 527121B1 AT 505102023 A AT505102023 A AT 505102023A AT 527121 B1 AT527121 B1 AT 527121B1
Authority
AT
Austria
Prior art keywords
vehicle
distance
lateral distance
actual
camera
Prior art date
Application number
ATA50510/2023A
Other languages
German (de)
Other versions
AT527121A4 (en
Inventor
Priller Dipl -Ing Peter
Original Assignee
Avl List Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Avl List Gmbh filed Critical Avl List Gmbh
Priority to ATA50510/2023A priority Critical patent/AT527121B1/en
Priority to PCT/AT2024/060249 priority patent/WO2025000007A1/en
Application granted granted Critical
Publication of AT527121B1 publication Critical patent/AT527121B1/en
Publication of AT527121A4 publication Critical patent/AT527121A4/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • B60W30/16Control of distance between vehicles, e.g. keeping a distance to preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • B60W30/18163Lane change; Overtaking manoeuvres
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • B60W60/0017Planning or execution of driving tasks specially adapted for safety of other traffic participants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4026Cycles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/801Lateral distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2754/00Output or target parameters relating to objects
    • B60W2754/10Spatial relation or speed relative to objects
    • B60W2754/20Lateral distance
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

Es wird ein Verfahren und eine Vorrichtung zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang mit einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Abstandsmesseinheit (14), einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Kamera (16), einer Bildverarbeitungseinheit (18) und einer Recheneinheit (15), vorgeschlagen, bei dem über die Abstandsmesseinheit (14) ein Ist-Abstand E(t) des ersten Fahrzeugs (10) zum zweiten Fahrzeug (12) kontinuierlich oder zyklisch gemessen wird, und über die Kamera (16) kontinuierlich ein Bild des zweiten Fahrzeugs (12) aufgezeichnet wird und in der Bildverarbeitungseinheit (18) zyklisch aus den Bilddaten und dem ermittelten Ist-Abstand E(t) ein aktueller Ist-Versatz einer am weitesten zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) zur Kameraachse (X) ermittelt wird und aus diesem Ist-Versatz in der Recheneinheit (15) ein Ist-Seitenabstand S(t) berechnet wird. Des Weiteren ist eine Verifizierung der über die Kamera (16) und die Abstandsmesseinheit (14) ermittelten Abstände möglich, um die Genauigkeit des berechneten Seitenabstandes S(t) zu verbessern.A method and a device for determining and maintaining a lateral distance S(t) of a first vehicle (10) from a second vehicle (12) during an overtaking maneuver with a distance measuring unit (14) directed in the direction of travel of the first vehicle (10), a camera (16) directed in the direction of travel of the first vehicle (10), an image processing unit (18) and a computing unit (15) are proposed, in which an actual distance E(t) of the first vehicle (10) from the second vehicle (12) is measured continuously or cyclically via the distance measuring unit (14), and an image of the second vehicle (12) is continuously recorded via the camera (16), and in the image processing unit (18) a current actual offset of a side surface (Z) of the second vehicle (12) facing furthest towards the center of the road to the camera axis (X) is determined cyclically from the image data and the determined actual distance E(t), and from this actual offset an actual lateral distance S(t) is calculated in the computing unit (15). Furthermore, a verification of the distances determined via the camera (16) and the distance measuring unit (14) is possible in order to improve the accuracy of the calculated lateral distance S(t).

Description

BeschreibungDescription

VERFAHREN UND VORRICHTUNG ZUR ERMITTLUNG UND EINHALTUNG EINES SEITENABSTANDES EINES ERSTEN FAHRZEUGS ZU EINEM ZWEITEN FAHRZEUG BEIM UBERHOLVORGANG METHOD AND DEVICE FOR DETERMINING AND MAINTAINING A LATERAL DISTANCE BETWEEN A FIRST VEHICLE AND A SECOND VEHICLE DURING AN OVERTAKING MANIPULATION

[0001] Die Erfindung betrifft Verfahren und eine Vorrichtung zur Ermittlung und Einhaltung eines Seitenabstandes eines ersten Fahrzeugs zu einem zweiten Fahrzeug beim Überholvorgang mit einer in Fahrtrichtung des ersten Fahrzeugs gerichteten Abstandsmesseinheit, einer in Fahrtrichtung des ersten Fahrzeugs gerichteten Kamera, einer Bildverarbeitungseinheit und einer Recheneinheit. [0001] The invention relates to methods and a device for determining and maintaining a lateral distance of a first vehicle from a second vehicle during an overtaking maneuver, with a distance measuring unit directed in the direction of travel of the first vehicle, a camera directed in the direction of travel of the first vehicle, an image processing unit and a computing unit.

[0002] Moderne Fahrzeuge weisen eine Vielzahl an Assistenzsystemen, wie Abstandsregelungssysteme, Spurwechselassistenzsysteme, Kollisionswarnungssysteme und/oder Spurhalteassistenten auf. Diese Systeme nutzen üblicherweise sowohl Radarmessungen als auch die Bilder einer Kamera, die über eine Bildverarbeitungseinheit ausgewertet werden können. [0002] Modern vehicles have a variety of assistance systems, such as distance control systems, lane change assistance systems, collision warning systems and/or lane keeping assistants. These systems usually use both radar measurements and the images from a camera, which can be evaluated via an image processing unit.

[0003] Es sind verschiedene Verfahren bekannt geworden, mit denen neben der Abstandsmessung mit einer Radareinheit, welche üblicherweise elektromagnetische Wellen aussendet und die von den vorausfahrenden Fahrzeugen reflektierten elektromagnetischen Wellen empfängt und in einer Recheneinheit über die detektierte Zeitverzögerung oder Frequenzverschiebung einen Abstand ermittelt, auch oder alternativ eine Abstandsmessung über eine Kamera durchgeführt wird. Am Einfachsten ist eine Abstandsmessung durch die Auswertung der Bilder einer Stereokamera, jedoch sind auch Verfahren bekannt geworden, mit denen ein Abstand auch mittels einer Monokamera zumindest geschätzt werden kann, indem die Brennweite der Kamera berücksichtigt wird. Auch können Breitenmessungen über Monokameras mittels Auswertung von aufeinanderfolgenden Bildsequenzen durchgeführt werden oder Breitenmessungen durch Identifizierung bekannter Größen im Bild, so dass eine Umrechnung erfolgen kann. Auch sind verschiedene Methoden zur Breitenmessung mittels Stereokameras bekannt, mit denen ein dreidimensionales Bild erschaffen wird, welches die berechneten Ausdehnungen der darin vorhandenen Körper oder Flächen enthält. [0003] Various methods have become known with which, in addition to measuring distance with a radar unit, which usually emits electromagnetic waves and receives the electromagnetic waves reflected by the vehicles ahead and determines a distance in a computing unit using the detected time delay or frequency shift, a distance measurement can also or alternatively be carried out using a camera. The simplest way to measure distance is by evaluating the images from a stereo camera, but methods have also become known with which a distance can also be at least estimated using a mono camera by taking the focal length of the camera into account. Width measurements can also be carried out using mono cameras by evaluating successive image sequences or width measurements by identifying known sizes in the image so that a conversion can be carried out. Various methods for measuring width using stereo cameras are also known, with which a three-dimensional image is created which contains the calculated dimensions of the bodies or surfaces present in it.

[0004] Zum Schutz anderer Verkehrsteilnehmer oder durch gesetzliche Änderungen kann es in Zukunft notwendig werden neben der reinen Abstandsmessung zu vorausfahrenden oder nachkommenden Fahrzeugen oder einem Nachweis eines Überschreitens einer Fahrbahnmarkierung auch konkret einen Seitenabstand zu Fahrzeugen zu ermitteln, welche überholt werden. Insbesondere wird es notwendig, auch die Fahrzeugarten zu unterschieden, also zwischen einem einspurigen Fahrzeug, wie einem Fahrrad und einem zweispurigen Fahrzeug wie einem Automobil unterscheiden zu können, da je nach Fahrzeugart unterschiedliche Mindestseitenabstände erforderlich sind, die auch abhängig davon sind, ob das Fahrzeug sich im Innern einer geschlossenen Ortschaft oder außerhalb einer geschlossenen Ortschaft befindet. [0004] In order to protect other road users or due to changes in the law, it may be necessary in the future to determine a specific lateral distance to vehicles being overtaken, in addition to simply measuring the distance to vehicles driving ahead or following behind or to prove that a lane marking has been crossed. In particular, it will be necessary to differentiate between vehicle types, i.e. to be able to distinguish between a single-track vehicle such as a bicycle and a two-track vehicle such as a car, since different minimum lateral distances are required depending on the type of vehicle, which also depend on whether the vehicle is inside or outside a built-up area.

[0005] Eine entsprechende Ermittlung von vorhandenen Seitenabständen ist bei ausschließlicher Nutzung von nach vorne gerichteten Messeinheiten bislang nicht bekannt. Insbesondere ist es nicht bekannt, ermittelte Seitenabstände zu verifizieren, um mit einer hohen Sicherheit einen entsprechenden Abstand einhalten zu können. Dies kann für Fahrer von Fahrzeuge hilfreich sein, ist jedoch gerade für autonome Fahrzeuge unerlässlich, um die Straßenverkehrsordnung zuverlässig zu erfüllen. [0005] A corresponding determination of existing lateral distances using only forward-facing measuring units is not yet known. In particular, it is not known how to verify determined lateral distances in order to be able to maintain an appropriate distance with a high degree of certainty. This can be helpful for vehicle drivers, but is essential for autonomous vehicles in particular in order to reliably comply with road traffic regulations.

[0006] Es stellt sich daher die Aufgabe, ein Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes eines ersten Fahrzeugs zu einem zweiten Fahrzeug beim Überholvorgang zur Verfügung zu stellen, mit dem einerseits ein Seitenabstand zuverlässig mit einer hohen Genauigkeit ermittelt und möglichst vorausgesagt werden kann und andererseits, insbesondere für autonome Fahrzeuge, die ermittelten Werte von nach vorne gerichteten Messeinheiten verifizieren kann, um Fehler bei der Messung und daraus folgend bei der Steuerung eines autonomen Fahrzeugs auszuschließen. [0006] The object is therefore to provide a method for determining and maintaining a lateral distance of a first vehicle from a second vehicle during an overtaking maneuver, with which on the one hand a lateral distance can be reliably determined with a high degree of accuracy and, if possible, predicted and on the other hand, in particular for autonomous vehicles, the determined values of forward-facing measuring units can be verified in order to exclude errors in the measurement and, consequently, in the control of an autonomous vehicle.

[0007] Diese Aufgabe wird durch ein Verfahren zur Ermittlung und Einhaltung eines Seitenab[0007] This task is solved by a method for determining and maintaining a side distance

SS N 8 N SS N 8 N

N hes AT 527 121 B1 2024-11-15 N hes AT 527 121 B1 2024-11-15

standes eines ersten Fahrzeugs zu einem zweiten Fahrzeug beim Überholvorgang mit den Merkmalen des Hauptanspruchs 1 gelöst. position of a first vehicle to a second vehicle during overtaking is solved with the features of the main claim 1.

[0008] Dabei ist das erste Fahrzeug üblicherweise ein zweispuriges Fahrzeug, insbesondere ein Automobil, ein Lastkraftwagen, ein Bus oder ein anderes Sonderfahrzeug, während das zweite Fahrzeug ein ein- oder zweispuriges Fahrzeug sein kann. Hierzu zählen somit insbesondere Fahrräder, Motorräder, Scooter aber auch Baumaschinen oder Busse. Der Überholvorgang wird insbesondere als potentiell möglicher Uberholvorgang angesehen und startet somit, sobald ein vorausfahrendes Fahrzeug wahrgenommen wird. Alternativ kann der Vorgang auch mit dem Setzen eines Blinkers des Fahrzeugs gestartet werden oder durchlaufend im Hintergrund ausgeführt werden. [0008] The first vehicle is usually a two-lane vehicle, in particular a car, a truck, a bus or another special vehicle, while the second vehicle can be a one- or two-lane vehicle. This includes in particular bicycles, motorcycles, scooters but also construction machinery or buses. The overtaking process is particularly viewed as a potentially possible overtaking process and thus starts as soon as a vehicle ahead is detected. Alternatively, the process can also be started by setting the vehicle's indicator or can be carried out continuously in the background.

[0009] Zur Durchführung des Verfahrens weist das erste Fahrzeug eine zumindest in Fahrtrichtung des ersten Fahrzeugs gerichtete Abstandsmesseinheit auf, über die entsprechend vorausfahrende Fahrzeuge wahrgenommen werden können. Zusätzlich weist das erste Fahrzeug eine in Fahrtrichtung des ersten Fahrzeugs gerichtete Kamera auf, über die kontinuierlich Bilddaten aus dem vorausliegenden Raum aufgenommen und verarbeitet werden können. Es kann sich hierbei um verschiedene Arten von Kameras, wie Monokameras, Stereokameras, Lichtfeld-Kameras usw. handeln, welche es ermöglichen, die digitalen Daten des jeweils aufgenommenen Bildes in einer Bildverarbeitungseinheit zu verarbeiten und auszuwerten. Des Weiteren weist das Fahrzeug eine Recheneinheit auf, um aus den gewonnenen Daten Abstände, Längen, Breiten und ähnliches berechnen zu können. Selbstverständlich muss es sich bei der Bildverarbeitungseinheit und der Recheneinheit nicht um zwei getrennte Einheiten handeln, sondern diese können auch in einer Einheit zusammengefasst werden. Die Recheneinheit ist mit der Bildbearbeitungseinheit und der Abstandsmesseinheit zum Datenaustausch verbunden. Erfindungsgemäß wird über die Abstandsmesseinheit ein kürzester Abstand des ersten Fahrzeugs zum vorausfahrenden zweiten Fahrzeug kontinuierlich oder zyklisch gemessen. Beim UÜberholvorgang ist dieser IstAbstand und damit die kürzeste Verbindung zwischen der Abstandsmesseinheit und dem vorausfahrendem Fahrzeug üblicherweise die linke Kante der Rückseite des vorausfahrenden Fahrzeugs beziehungsweise vor dem UÜberholvorgang die Rückfront des Fahrzeugs. Uber die Kamera wird kontinuierlich ein Bild des zweiten Fahrzeugs aufgezeichnet und in der Bildverarbeitungseinheit zyklisch, beispielsweise 10 mal pro Sekunde aus den Bildern Bilddaten bestimmt. Diese Bilddaten werden an die Recheneinheit übertragen, in der aus den Bilddaten und dem ermittelten Ist-Abstand ein aktueller Ist-Versatz einer zur Straßenmitte weisenden Seitenfläche des zweiten Fahrzeugs zur Kameraachse ermittelt wird. Aus diesem ermittelten Ist-Versatz wird in der Recheneinheit ein Ist-Seitenabstand berechnet. Hierzu sind verschiedene Bildauswertungsverfahren bekannt. Zur Berechnung kann hier beispielsweise die Brennweite der Kamera genutzt werden, um den Versatz des vorausfahrenden zweiten Fahrzeugs von dem auf dem Bild vorhandenen Versatz auf den realen Versatz umzurechnen. Des Weiteren können hierzu aufeinanderfolgende Bildsequenzen genutzt werden oder bekannte Verfahren, wie das Computer-Stereovisionsverfahren zur Auswertung der Bilder einer Stereokamera mit CCD-Sensor genutzt werden. [0009] To carry out the method, the first vehicle has a distance measuring unit directed at least in the direction of travel of the first vehicle, via which vehicles driving ahead can be detected. In addition, the first vehicle has a camera directed in the direction of travel of the first vehicle, via which image data from the area ahead can be continuously recorded and processed. These can be different types of cameras, such as mono cameras, stereo cameras, light field cameras, etc., which make it possible to process and evaluate the digital data of the image recorded in an image processing unit. The vehicle also has a computing unit in order to be able to calculate distances, lengths, widths and the like from the data obtained. Of course, the image processing unit and the computing unit do not have to be two separate units, but can also be combined in one unit. The computing unit is connected to the image processing unit and the distance measuring unit for data exchange. According to the invention, the distance measuring unit continuously or cyclically measures the shortest distance between the first vehicle and the second vehicle driving ahead. When overtaking, this actual distance and thus the shortest connection between the distance measuring unit and the vehicle driving ahead is usually the left edge of the rear of the vehicle driving ahead or, before the overtaking, the rear of the vehicle. An image of the second vehicle is continuously recorded via the camera and image data is determined from the images in the image processing unit cyclically, for example 10 times per second. This image data is transferred to the computing unit, in which a current actual offset of a side surface of the second vehicle facing the middle of the road from the camera axis is determined from the image data and the determined actual distance. An actual lateral distance is calculated in the computing unit from this determined actual offset. Various image evaluation methods are known for this. For example, the focal length of the camera can be used for the calculation to convert the offset of the second vehicle driving ahead from the offset shown in the image to the actual offset. Furthermore, consecutive image sequences can be used for this purpose or known methods such as the computer stereo vision method for evaluating the images from a stereo camera with a CCD sensor.

[0010] Entsprechend dient bei der erfindungsgemäßen Vorrichtung die Bildverarbeitungseinheit zur Ermittlung von Bilddaten, und die Recheneinheit ist zum Empfangen der Bilddaten mit der Bildverarbeitungseinheit verbunden und dient zur Berechnung eines Ist- Versatzes einer am weitesten zur Straßenmitte weisenden Seitenfläche des zweiten Fahrzeugs zur Kameraachse aus den Bilddaten und dem über die Abstandsmesseinheit ermittelten Ist-Abstand und eines Ist- Seitenabstandes aus dem ermittelten Ist-Versatz dient. [0010] Accordingly, in the device according to the invention, the image processing unit serves to determine image data, and the computing unit is connected to the image processing unit for receiving the image data and serves to calculate an actual offset of a side surface of the second vehicle facing furthest towards the middle of the road to the camera axis from the image data and the actual distance determined via the distance measuring unit and an actual side distance from the determined actual offset.

[0011] Vorzugsweise werden in der Recheneinheit die ermittelten Ist-Seitenabstände mit hinterlegten Soll-Seitenabständen verglichen. Entsprechend kann entweder einem Fahrer die Einhaltung eines zusätzlichen Abstandes empfohlen werden oder bei einem autonomen Fahrzeug diese Differenz zur Korrektur der Lage des ersten Fahrzeugs genutzt werden. [0011] Preferably, the actual lateral distances determined are compared with stored target lateral distances in the computing unit. Accordingly, a driver can either be recommended to maintain an additional distance or, in the case of an autonomous vehicle, this difference can be used to correct the position of the first vehicle.

[0012] Vorzugsweise wird aus den kontinuierlich aufgezeichneten Bilddaten der Bildverarbeitungseinheit in der Recheneinheit ein Winkel zwischen der Kameraachse und einer zur Straßenmitte weisenden Seitenfläche des zweiten Fahrzeugs berechnet und daraus kontinuierlich in der [0012] Preferably, an angle between the camera axis and a side surface of the second vehicle facing the middle of the road is calculated from the continuously recorded image data of the image processing unit in the computing unit and continuously calculated from this in the

A ches AT 527 121 B1 2024-11-15 A ches AT 527 121 B1 2024-11-15

8 NN 8 NN

Recheneinheit der Ist-Seitenabstand berechnet, indem der mittels der Abstandsmesseinheit bestimmte Ist-Abstand mit dem Sinus des berechneten Winkels multipliziert wird und ein seitlicher Abstand der Kamera von einer zum Straßenrand weisenden Seite des ersten Fahrzeugs subtrahiert wird. Dabei ist davon auszugehen, dass die Genauigkeit des über die Bilddaten berechneten Winkels relativ hoch ist und so auch der ermittelte Ist-Seitenabstand unter Verwendung des ebenfalls ein hohe Genauigkeit aufweisenden, mit der Abstandsmesseinheit ermittelten Ist- Abstands, eine hohe Genauigkeit aufweist. The computing unit calculates the actual lateral distance by multiplying the actual distance determined by the distance measuring unit by the sine of the calculated angle and subtracting a lateral distance of the camera from a side of the first vehicle facing the edge of the road. It can be assumed that the accuracy of the angle calculated using the image data is relatively high and that the actual lateral distance determined using the actual distance determined with the distance measuring unit, which also has a high level of accuracy, is also highly accurate.

[0013] In einer hierzu weiterführenden Ausführungsform wird zur Bestimmung des Winkels eine Stereokamera oder eine Lichtfeldkamera verwendet. Uber diese beiden Kameras kann auf bekannte Weise mit guter Genauigkeit der Winkel der Kameraachse zum vorausfahrenden Fahrzeug bestimmt werden. Hierbei wird selbstverständlich der Winkel zur Mittelachse zwischen den beiden Kameras berechnet und damit zur Fahrzeugmitte, wenn beide Kameras mit gleichem Versatz zur Fahrzeugmitte angeordnet sind. [0013] In a further embodiment, a stereo camera or a light field camera is used to determine the angle. Using these two cameras, the angle of the camera axis to the vehicle in front can be determined in a known manner with good accuracy. Of course, the angle to the central axis between the two cameras and thus to the center of the vehicle is calculated if both cameras are arranged with the same offset from the center of the vehicle.

[0014] Eine ähnliche Form zur Bestimmung des Winkels kann mittels einer Monokamera und optischen Umlenkmitteln erreicht werden. Durch die optischen Umlenkmittel können über die Monokamera ebenfalls zwei Bilder unterschiedlicher Perspektive aufgenommen und vergleichen werden und daraufhin in gleicher Wese wie bei einer Stereokamera hieraus Abstände und Winkel berechnet werden. [0014] A similar method for determining the angle can be achieved using a mono camera and optical deflection means. The optical deflection means can also be used to record and compare two images from different perspectives using the mono camera and then calculate distances and angles in the same way as with a stereo camera.

[0015] Auch kann zur Bestimmung des Winkels lediglich eine Monokamera sowie die Brennweite dieser Kamera verwendet werden. Über die Brennweite der Monokamera ist es dann möglich die Längen des Bildes bei bekannter Pixelanzahl und Auflösung in reale Längen umzurechnen. Insbesondere der Winkel zur Kameraachse kann auf diese Weise mit hoher Genauigkeit bestimmt werden. [0015] To determine the angle, only a mono camera and the focal length of this camera can be used. Using the focal length of the mono camera, it is then possible to convert the lengths of the image into real lengths if the number of pixels and resolution are known. In particular, the angle to the camera axis can be determined with high accuracy in this way.

[0016] Besonders bevorzugt ist es, wenn die Abstandmesseinheit eine Radareinheit ist. Mit einer Radareinheit kann mit hoher Genauigkeit der Abstand zum vorausfahrenden Fahrzeug bestimmt werden. [0016] It is particularly preferred if the distance measuring unit is a radar unit. With a radar unit, the distance to the vehicle ahead can be determined with high accuracy.

[0017] In einer alternativen Ausführung ist die Abstandmesseinheit die Kamera, welche auch zur Winkelbestimmung genutzt wird. Insbesondere mit einer Stereokamera lässt sich in bekannter Weise auch der Abstand zum vorausfahrenden Fahrzeug bestimmen. Dies erfolgt, indem durch die unterschiedlichen entstehenden Perspektiven der Stereokamera zum vorausfahrenden zweiten Fahrzeug in der Bildverarbeitungseinheit beispielsweise durch Computer-Stereo-Vision ein dreidimensionales Bild erzeugt wird, welches es ermöglicht, Abstände zu berechnen. [0017] In an alternative embodiment, the distance measuring unit is the camera, which is also used to determine the angle. In particular, the distance to the vehicle in front can be determined in a known manner using a stereo camera. This is done by generating a three-dimensional image in the image processing unit using the different perspectives created by the stereo camera to the second vehicle in front, for example by computer stereo vision, which makes it possible to calculate distances.

[0018] Bei der Verwendung einer Monokamera ist es auch möglich, aus zwei aufeinander folgenden Bildern anhand des Größenunterschieds eines Objekts auf dem Bild, dessen Größe bekannt ist, den Abstand zum zweiten Fahrzeug zu berechnen. Als Bezugsgröße kann hier beispielsweise die Größe eines Nummernschildes oder dergleichen verwendet werden. In diesem Fall kann somit sowohl der Abstand als auch der Winkel lediglich über die Kamera bestimmt werden. [0018] When using a mono camera, it is also possible to calculate the distance to the second vehicle from two consecutive images based on the difference in size of an object in the image whose size is known. The size of a license plate or the like can be used as a reference size here, for example. In this case, both the distance and the angle can be determined using the camera alone.

[0019] Besonders bevorzugt ist es, wenn aus den Daten der Bildverarbeitungseinheit in der Recheneinheit ein zweiter Ist-Abstand zum zweiten Fahrzeug berechnet und mit dem mittels der Radareinheit bestimmten ersten Ist-Abstand zu einem identischen Zeitpunkt verglichen und verifiziert wird. Auf diese Weise können Fehler bei der Berechnung des Abstandes und daraus folgend auch des Winkels und damit des Ist- Seitenabstandes vermieden werden. [0019] It is particularly preferred if a second actual distance to the second vehicle is calculated from the data of the image processing unit in the computing unit and compared and verified with the first actual distance determined by means of the radar unit at an identical point in time. In this way, errors in the calculation of the distance and consequently also of the angle and thus of the actual lateral distance can be avoided.

[0020] Hierzu kann insbesondere bei gleichen ermittelten Ist-Abständen aus der Bildverarbeitungseinheit und der Radareinheit auf eine korrekte Messung geschlossen werden und diese zur Berechnung des Ist-Seitenabstands verwendet werden. Eine solche Verifikation ist vor allem für autonom fahrende Fahrzeuge essentiell, um Fehler bei der automatischen Lenkung, die zu Unfällen oder Gefährdungen, insbesondere von überholten Fahrradfahrern führen könnten, zu verhindern. [0020] For this purpose, it can be concluded that the measurement is correct, particularly if the actual distances determined from the image processing unit and the radar unit are the same, and this can be used to calculate the actual lateral distance. Such verification is essential, especially for autonomous vehicles, in order to prevent errors in automatic steering that could lead to accidents or hazards, especially for cyclists who are overtaken.

[0021] In einer bevorzugten Ausführung der Erfindung wird der berechnete Ist- Seitenabstand zum zweiten Fahrzeug im ersten Fahrzeug angezeigt. Entsprechend kann ein Fahrer, falls er erkennt, dass der angezeigte Ist- Seitenabstand unzureichend ist, korrigierend eingreifen. [0021] In a preferred embodiment of the invention, the calculated actual lateral distance to the second vehicle is displayed in the first vehicle. Accordingly, if a driver recognizes that the displayed actual lateral distance is insufficient, he can intervene to correct the situation.

A ches AT 527 121 B1 2024-11-15 A ches AT 527 121 B1 2024-11-15

8 NN 8 NN

[0022] In einer alternativen bevorzugten Ausführung des Verfahrens werden die Bilder einer Monokamera verwendet und in der Bildverarbeitungseinheit wird aus Bilddaten ein Versatz der zur Straßenmitte weisenden Seitenfläche des zweiten Fahrzeugs zur Kameraachse am Bild gemessen und in der Recheneinheit mit Referenzbildern aus einem Kennfeld verglichen, in dem für unterschiedliche Abständen die Ist-Versätze zu den ermittelten Seitenversätzen am Bild hinterlegt sind, und aus diesem Vergleich wird der Ist-Versatz A(t) bestimmt. Auf diese Weise wird die notwendige Rechenleistung minimiert und dennoch festgestellt, ob ein ausreichender Seitenabstand vorliegt. Zum Lernen dieser Referenzbilder können beispielsweise auch neuronale Netze genutzt werden. [0022] In an alternative preferred embodiment of the method, the images of a mono camera are used and in the image processing unit an offset of the side surface of the second vehicle facing the middle of the road to the camera axis is measured on the image from image data and compared in the computing unit with reference images from a map in which the actual offsets to the determined lateral offsets on the image are stored for different distances, and the actual offset A(t) is determined from this comparison. In this way, the necessary computing power is minimized and it is still determined whether there is a sufficient lateral distance. Neural networks, for example, can also be used to learn these reference images.

[0023] Dabei kann die ermittelte Differenz als skalierte Abweichung im ersten Fahrzeug angezeigt oder verarbeitet werden. So kann eine positive Abweichung einen ausreichenden Abstand bestätigen, während eine negative Anzeige darstellt, dass ein zusätzlicher Abstand notwendig ist. Ein Fahrer eines überholenden Fahrzeugs kann entsprechend auf eine solche Anzeige reagieren, während ein autonomes Fahrzeug bis zum Erreichen einer Null-Abweichung entsprechend gesteuert werden kann, ohne konkrete Maße lernen zu müssen. [0023] The difference determined can be displayed or processed as a scaled deviation in the first vehicle. A positive deviation can confirm a sufficient distance, while a negative indication shows that an additional distance is necessary. A driver of an overtaking vehicle can react accordingly to such an indication, while an autonomous vehicle can be controlled accordingly until a zero deviation is reached, without having to learn specific measurements.

[0024] Des Weiteren ist es vorteilhaft, wenn aus den Daten der Bildverarbeitungseinheit über die Recheneinheit das zweite Fahrzeug als einspuriges oder zweispuriges Fahrzeug identifiziert wird. Dies ist insbesondere durch eine einfache Breitenmessung oder durch Objekterkennung, beispielsweise über ein neuronales Netz möglich. In der Recheneinheit können entsprechende von der Straßenverkehrsordnung festgelegte Daten hinterlegt werden, die sich gegebenenfalls für zu überholende Zweiräder oder vierrädrige Fahrzeuge unterscheiden können. So wird sichergestellt, dass nicht nur ein absoluter Soll-Seitenabstand mit Sicherheit eingehalten wird, sondern dass dieser auch in Abhängigkeit des zu überholenden Fahrzeugs angepasst werden kann. [0024] Furthermore, it is advantageous if the second vehicle is identified as a single-lane or two-lane vehicle from the data of the image processing unit via the computing unit. This is possible in particular by a simple width measurement or by object recognition, for example via a neural network. The computing unit can store corresponding data specified by the road traffic regulations, which may differ for two-wheelers or four-wheelers to be overtaken. This ensures that not only is an absolute target lateral distance maintained with certainty, but that this can also be adjusted depending on the vehicle to be overtaken.

[0025] Des Weiteren wird vorzugsweise über ein Navigationsgerät oder eine Verkehrsschilderkennung darauf geschlossen, ob sich das erste Fahrzeug und das zweite Fahrzeug innerhalb oder außerhalb einer geschlossenen Ortschaft befinden. Auch diese Information wird zur Einstellung des Soll-Seitenabstandes genutzt, da außerhalb geschossener Ortschaften und damit auch höherer zu erwartender Geschwindigkeiten ein anderer Seitenabstand gesetzlich vorgeschrieben ist. Selbstverständlich kann dieser Mindestseitenabstand auch in Abhängigkeit der Geschwindigkeit des überholenden Fahrzeugs festgelegt werden. Die verschiedenen Soll-Seitenabstände werden entsprechend in der Recheneinheit für die verschiedenen Fahrzeugtypen und in Abhängigkeit der GPS- oder Navigationsdaten hinterlegt und beim Vergleich mit dem berechneten IstSeitenabstand berücksichtigt. [0025] Furthermore, it is preferably determined via a navigation device or traffic sign recognition whether the first vehicle and the second vehicle are inside or outside a built-up area. This information is also used to set the target lateral distance, since outside built-up areas and therefore also where higher speeds are to be expected, a different lateral distance is legally required. Of course, this minimum lateral distance can also be set depending on the speed of the overtaking vehicle. The various target lateral distances are stored accordingly in the computing unit for the various vehicle types and depending on the GPS or navigation data and are taken into account when comparing with the calculated actual lateral distance.

[0026] Besonders bevorzugt ist es, wenn die ermittelten Ist-Seitenabstände über die Zeit gespeichert und extrapoliert werden, um einen voraussichtlichen Ist-Seitenabstand für den Moment eines Erreichens des zweiten Fahrzeugs vorherzusagen. So wird ein dynamisches System geschaffen, welches es ermöglicht, in Abhängigkeit des Frontabstandes allmählich den beim eigentlichen Uberholvorgang erforderlichen Seitenabstand zu erreichen und somit zur Trajektorieplanung bei automatischen Fahrzeugen genutzt zu werden. [0026] It is particularly preferred if the determined actual lateral distances are stored over time and extrapolated in order to predict an expected actual lateral distance for the moment of reaching the second vehicle. This creates a dynamic system which makes it possible to gradually achieve the lateral distance required for the actual overtaking process depending on the front distance and can thus be used for trajectory planning in automatic vehicles.

[0027] Des Weiteren sind in einer hierzu weiterführenden Ausführungsform in der Recheneinheit Soll-Seitenabstände in Abhängigkeit des über die Radareinheit ermittelten Abstands für einspurige und zweispurige Fahrzeuge hinterlegt, so dass, falls der vorhergesagte zu erwartende IstSeitenabstand geringer ist als der zulässige Soll-Seitenabstand ein Warnsignal an einen Fahrzeugführer des ersten Fahrzeugs ausgegeben wird oder das Fahrzeug selbstständig korrigierend durch Erhöhung des Ist- Seitenabstands oder durch Bremsen eingreift. Es wird somit kontinuierlich der Überholvorgang bereits überwacht, bevor das überholende erste Fahrzeug ausschert. Über die gesamte Dauer des damit eingeleiteten Uberholvorgans können dann die erforderlichen Daten ermittelt und verglichen werden, um einen sanften Überholvorgang sicher zu stellen. [0027] Furthermore, in a further embodiment, target lateral distances are stored in the computing unit depending on the distance determined by the radar unit for single-lane and two-lane vehicles, so that if the predicted expected actual lateral distance is less than the permissible target lateral distance, a warning signal is issued to a driver of the first vehicle or the vehicle intervenes independently to correct the situation by increasing the actual lateral distance or by braking. The overtaking process is thus continuously monitored before the first overtaking vehicle pulls out. The necessary data can then be determined and compared over the entire duration of the overtaking process initiated in order to ensure a smooth overtaking process.

[0028] Bei der Korrektur oder der Ausgabe des Warnsignals an den Fahrer kann vorteilhafterweise auch die momentane Geschwindigkeit des Fahrzeugs berücksichtigt werden, so dass bei höheren Geschwindigkeiten der UÜberholvorgang bei größerem Abstand eingeleitet werden kann. Dies bedeutet auch, dass die Differenzgeschwindigkeit zwischen dem ersten Fahrzeug und dem [0028] When correcting or issuing the warning signal to the driver, the current speed of the vehicle can also be taken into account, so that at higher speeds the overtaking process can be initiated at a greater distance. This also means that the difference in speed between the first vehicle and the

A ches AT 527 121 B1 2024-11-15 A ches AT 527 121 B1 2024-11-15

8 NN 8 NN

zweiten Fahrzeug berücksichtigt wird, welche entscheidend für den zeitlichen Verlauf und die optimale Fahrlinie bis zum Erreichen des zweiten Fahrzeugs und damit des dort erforderlichen Ist- Seitenabstandes ist. second vehicle is taken into account, which is decisive for the time course and the optimal driving line until the second vehicle is reached and thus the actual lateral distance required there.

[0029] Es wird somit ein Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes eines ersten Fahrzeugs zu einem zweiten Fahrzeug beim UÜberholvorgang vorgeschlagen, mit dem für unterschiedliche Fahrzeugtypen, Geschwindigkeiten und Aufenthaltsorten ein Einhalten eines beim UÜberholen erforderlichen Sicherheits-Seitenabstandes sichergestellt wird. Die bei der Berechnung erhaltenen Daten werden verifiziert, um Fehler bei der Ermittlung des Seitenabstandes auszuschließen. Durch die Vorausberechnung eines zu erwartenden Seitenabstandes bei Erreichen des vorfahrenden Fahrzeugs kann der Fahrer oder die automatische Steuerung des Fahrzeugs rechtzeitig eingreifen, um ein sanftes Uberholmanöver sicherzustellen. [0029] A method is therefore proposed for determining and maintaining a lateral distance between a first vehicle and a second vehicle during an overtaking maneuver, which ensures that a safety lateral distance required during overtaking is maintained for different vehicle types, speeds and locations. The data obtained during the calculation are verified in order to exclude errors in determining the lateral distance. By calculating in advance an expected lateral distance when reaching the vehicle in front, the driver or the automatic control of the vehicle can intervene in good time to ensure a smooth overtaking maneuver.

[0030] Ein Ausführungsbeispiel des erfindungsgemäßen Verfahrens wird im Folgenden anhand der Figuren beschrieben. [0030] An embodiment of the method according to the invention is described below with reference to the figures.

[0031] Die Figur 1 zeigt eine Prinzipskizze in Draufsicht, in der die zu ermittelnden Abstände und Winkel eingetragen sind. [0031] Figure 1 shows a schematic diagram in plan view, in which the distances and angles to be determined are entered.

[0032] In der Figur 1 ist ein erstes Fahrzeug 10 dargestellt, welches eine Breite B aufweist. Es handelt sich um ein zweispuriges Fahrzeug in Form eines PKWs. In Fahrtrichtung vor diesem ersten Fahrzeug 10 befindet sich ein zweites Fahrzeug 12 in Form eines Fahrrades. Will nun der Fahrer des Fahrzeugs 10 das zweite Fahrzeug 12 überholen, so hat er während des Überholens einen Soll-Seitenabstand nach den gesetzlichen Vorgaben einzuhalten, der sowohl von seiner eigenen Geschwindigkeit als auch von seinem Aufenthaltsort, insbesondere ob er sich innerhalb oder außerhalb einer geschlossenen Ortschaft befindet, sowie von der Art des vorausfahrenden zweiten Fahrzeugs 12 abhängig ist. [0032] Figure 1 shows a first vehicle 10 which has a width B. It is a two-lane vehicle in the form of a car. In the direction of travel in front of this first vehicle 10 is a second vehicle 12 in the form of a bicycle. If the driver of the vehicle 10 now wants to overtake the second vehicle 12, he must maintain a target lateral distance in accordance with the legal requirements during the overtaking, which depends both on his own speed and on his location, in particular whether he is inside or outside a built-up area, as well as on the type of second vehicle 12 driving ahead.

[0033] Hierzu weist das erste Fahrzeug 10 eine in Fahrtrichtung beziehungsweise gerade nach vorne gerichtete Abstandsmesseinheit 14 auf, die mit einer Recheneinheit 15 verbunden ist und einen Abstand E(t) zum zweiten Fahrzeug 12 kontinuierlich misst. Dieser Abstand E(t) wird über die Zeit ermittelt und in der Recheneinheit 15 gespeichert. [0033] For this purpose, the first vehicle 10 has a distance measuring unit 14 directed in the direction of travel or straight forward, which is connected to a computing unit 15 and continuously measures a distance E(t) to the second vehicle 12. This distance E(t) is determined over time and stored in the computing unit 15.

[0034] Des Weiteren ist im ersten Fahrzeug 10 eine digitale Kamera 16 angeordnet, deren Kameraachse X ebenfalls gerade nach vorne und somit in Fahrtrichtung weist und die als Stereokamera 16.1, Lichtfeldkamera oder Monokamera 16.2 ausgebildet sein kann und mit einer Bildverarbeitungseinheit 18 verbunden ist, die ebenfalls eine Datenverbindung zur Recheneinheit 15 aufweist. [0034] Furthermore, a digital camera 16 is arranged in the first vehicle 10, the camera axis X of which also points straight forward and thus in the direction of travel and which can be designed as a stereo camera 16.1, light field camera or mono camera 16.2 and is connected to an image processing unit 18, which also has a data connection to the computing unit 15.

[0035] Bei der Verwendung einer Stereokamera 16.1 kann durch die unterschiedliche entstehende Perspektive der Stereokamera 16.1 zum vorausfahrenden zweiten Fahrzeug 12 in der Bildverarbeitungseinheit 18 beispielsweise durch Computer-Stereo-Vision ein dreidimensionales Bild erzeugt werden, welches es auch ermöglicht, Größen, Längen und somit Abstände zu berechnen. Somit kann mithilfe der Stereokamera 16.1 ein Abstand E‘(t) in der Bildverarbeitungseinheit 18 ermittelt werden. Zusätzlich wird es durch die vorhandenen Bilddaten auch möglich, mit guter Genauigkeit einen Ist-Versatz A(t) einer am weitesten zur Straßenmitte weisenden Seitenfläche Z des vorausfahrenden Fahrzeugs 12 zur Kameraachse X aus den vorhandenen Bilddaten zu ermitteln, welche üblicherweise nach vorne, also in Fahrtrichtung weist. Aus diesem IstVersatz A(t) kann auch ein Ist- Seitenabstand S(t) zum zweiten Fahrzeug 12 berechnet werden. Dieser Ist-Seitenabstand S(t) wird über den Winkel a(t) zwischen der Kameraachse X, in diesem Fall der Achse, welche zentral zwischen den beiden Blenden der Stereokamera 16.1 angeordnet ist, und dem zweiten Fahrzeug 12 aus den Bilddaten in der Bildverarbeitungseinheit 18 bestimmt. [0035] When using a stereo camera 16.1, the different perspective of the stereo camera 16.1 to the second vehicle 12 driving ahead can be used in the image processing unit 18 to generate a three-dimensional image, for example by computer stereo vision, which also makes it possible to calculate sizes, lengths and thus distances. A distance E'(t) can thus be determined in the image processing unit 18 using the stereo camera 16.1. In addition, the available image data also make it possible to determine with good accuracy an actual offset A(t) of a side surface Z of the vehicle 12 driving ahead that faces furthest towards the middle of the road to the camera axis X from the available image data, which usually faces forwards, i.e. in the direction of travel. An actual lateral distance S(t) to the second vehicle 12 can also be calculated from this actual offset A(t). This actual lateral distance S(t) is determined from the image data in the image processing unit 18 via the angle a(t) between the camera axis X, in this case the axis which is arranged centrally between the two apertures of the stereo camera 16.1, and the second vehicle 12.

[0036] Alternativ kann zur Berechnung des Ist-Seitenabstands S(t) auch eine Monokamera 16.2 verwendet werden. Die Abstände E‘(t) und die Ist- Seitenabstände S(t) können hierbei entweder über bekannte Schätzalgorithmen ermittelt werden oder über die Brennweite f und den darüber zu bestimmenden Winkel a berechnet werden, der über die Brennweite f recht genau zu bestimmen ist. Nichtsdestotrotz sind diese Schätzungen üblicherweise nicht so genau wie der über eine Stereokamera oder Lichtfeldkamera ermittelte Abstand. [0036] Alternatively, a mono camera 16.2 can also be used to calculate the actual lateral distance S(t). The distances E'(t) and the actual lateral distances S(t) can either be determined using known estimation algorithms or calculated using the focal length f and the angle a to be determined using this, which can be determined quite precisely using the focal length f. Nevertheless, these estimates are usually not as accurate as the distance determined using a stereo camera or light field camera.

[0037] In der einfachsten Form des erfindungsgemäßen Verfahrens dient die Kamera 16 somit sowohl zur Bestimmung eines Winkels a(t) als auch des Abstandes E(t), indem E‘(t) gleich E(t) gesetzt wird und somit als Abstandsmesseinheit 14. Auch können verschiedene Kameras verwendet werden, über die eine Verifizierung der Abstandsmessung durchgeführt werden kann, in dem die ermittelten Werte E(t) und E‘(t) in der Recheneinheit 15 miteinander verglichen werden. [0037] In the simplest form of the method according to the invention, the camera 16 thus serves both to determine an angle a(t) and the distance E(t) by setting E'(t) equal to E(t) and thus as a distance measuring unit 14. Various cameras can also be used, via which a verification of the distance measurement can be carried out by comparing the determined values E(t) and E'(t) in the computing unit 15.

[0038] Alternativ wird zur Bestimmung des Abstandes E{(t) in bekannter Weise als Abstandsmesseinheit 14 eine Radareinheit verwendet, welche in der Figur 1 die gleiche Sichtachse X aufweist, wie die Kamera 16. Die Werte dieser Radareinheit können entweder alleine zur Bestimmung des Abstandes E(t) genutzt werden, da diese üblicherweise sehr genau sind, oder sie können zusätzlich zu den über die Bilddaten der Kamera 16 ermittelten Werte für den Abstand E‘(t) zu dessen Verifizierung genutzt werden. [0038] Alternatively, to determine the distance E{(t) in a known manner, a radar unit is used as the distance measuring unit 14, which in Figure 1 has the same line of sight X as the camera 16. The values of this radar unit can either be used alone to determine the distance E(t), since they are usually very accurate, or they can be used in addition to the values for the distance E'(t) determined via the image data of the camera 16 to verify it.

[0039] Selbstverständlich erfassen die Abstandsmesseinheit 14 und auch die Kamera 16 immer alle im erfassten Bereich vorhandenen Objekte O, so dass für die Messung der Kamera 16 und für die Messung der Radareinheit 14 eine Vielzahl von Daten über die Zeit (E(t), E‘(t), a(t), O()), S(t)) ermittelt und gespeichert werden kann. Die hierzu verwendeten Daten werden dabei zyklisch durch die nachfolgenden Messungen erneuert. Dabei werden in der Bildverarbeitungseinheit 18 oder der Recheneinheit 15 auch die Objekte O1, O2 usw. identifiziert, also einem Fahrzeugtyp und beispielsweise einer Fahrtrichtung zugeordnet. So kann durch die vorhandenen Ansichten der Kamera 16 beispielsweise aufgrund der Breite des Fahrzeugs 12 in der Recheneinheit 15 oder der Bildverarbeitungseinheit 18 identifiziert werden, ob es sich um ein einspuriges oder ein zweispuriges Fahrzeug 12 handelt und über die Daten der Radareinheit 14 sowie der eigenen Geschwindigkeit auch ermittelt werden, in welche Richtung dieses erfasste Objekt O sich bewegt, also ob es sich um ein entgegenkommendes oder in gleicher Richtung fahrendes Fahrzeug 12 handelt. Die Bildverarbeitungseinheit 18 kann aber auch noch zusätzliche Identifikationsparameter vergeben, so dass eine Liste der erkannten Objekte der Art [(0'1, E’'1, a1, Typ1), (0’'2, E'2, a2, Typ2),....)] entsteht. [0039] Of course, the distance measuring unit 14 and also the camera 16 always record all objects O present in the recorded area, so that a large number of data over time (E(t), E'(t), a(t), O()), S(t)) can be determined and stored for the measurement of the camera 16 and for the measurement of the radar unit 14. The data used for this purpose are cyclically updated by the subsequent measurements. In the process, the objects O1, O2, etc. are also identified in the image processing unit 18 or the computing unit 15, i.e. assigned to a vehicle type and, for example, a direction of travel. For example, the available views of the camera 16 can be used in the computing unit 15 or the image processing unit 18 to identify whether the vehicle 12 is a single-lane or a two-lane vehicle based on the width of the vehicle 12, and the data from the radar unit 14 and the vehicle's own speed can also be used to determine in which direction this detected object O is moving, i.e. whether it is an oncoming vehicle 12 or a vehicle 12 traveling in the same direction. The image processing unit 18 can also assign additional identification parameters, so that a list of the detected objects of the type [(0'1, E’’1, a1, Type1), (0’’2, E’2, a2, Type2),....)] is created.

[0040] Bei der Abstands- und Winkelbestimmung zu einem vorausfahrenden Fahrradfahrer als zweites Fahrzeug 12 ist bei der Verwendung einer Radareinheit als Abstandsmesseinheit 14 bei diesem Vergleich zu berücksichtigen, dass der Winkel a(t) aus der Bildverarbeitungseinheit 18 und auch der Abstand E(t) aus der Radarmessung zum gleichen Punkt gerichtet sind. Wird eine 3D-Radarmessung verwendet, kann der Abstand tatsächlich zur am weitesten zur Straßenmitte weisenden Seitenfläche Z des Fahrrades gemessen werden, welche üblicherweise durch den linken Lenkergriff gebildet wird. Somit entspricht die am weitesten zur Straßenmitte weisende Seitenfläche Z der Kamera 16 auch dem der Radareinheit 14. Bei einer 2D-Radareinheit kann es jedoch notwendig sein, die Lage des Punktes entweder bei der Bildauswertung oder bei der Abstandsbestimmung der Radareinheit 14 zu korrigieren. Dies liegt daran, dass die 2D-Radareinheit 14 üblicherweise einen kürzesten Abstand identifiziert. Entsprechend ist der Bezugspunkt der Kamera 16 im Bild der am weitesten zur Straßenmitte gerichteten Seitenfläche Z des zweiten Fahrzeugs 12, der bei der Berechnung benutzt wird, während bei der Radarmessung der hintere Bereich des Fahrzeugs 12 identifiziert wird. Bei vorausfahrenden zweispurigen Fahrzeugen 12 stimmt dies üblicherweise etwa überein, während beim Fahrrad als zweites Fahrzeug 12 durch die Radarmessung der Abstandsmesseinheit 14 ein Abstand zum nächstliegenden, zum ersten Fahrzeug 10 weisenden Bereich ermittelt wird, beispielsweise zum Rücklicht oder Hinterreifen, der jedoch für die Kamera 16 im Bild weiter rechts erscheint als beispielsweise der nach links ragende Lenkerteil des Fahrrades. Entsprechend muss entweder eine Identifizierung des zweiten Fahrzeugs 12 als Fahrrad erfolgen und in der Bildverarbeitungseinheit 18 und der Recheneinheit 15 der hintere Teil des Fahrrades identifiziert werden und die Messung des Winkels am Bild dann auch zu dieser Position durchgeführt werden, um die Abstände E(t) und E‘(t) vergleichen zu können, oder es muss der Abstand der Radarmessung entsprechend korrigiert werden, beispielsweise durch Addition eines üblichen Abstandes zwischen dem Hinterteil des Fahrrades und dem Lenker. Zur Berechnung des korrekten Ist-Seitenabstandes S(t) muss im ersten Fall eine übliche Breitendifferenz zwischen dem Mittelteil des Fahrrades und dem links überstehenden Teil berücksichtigt und aufaddiert werden. [0040] When determining the distance and angle to a cyclist riding ahead as a second vehicle 12, when using a radar unit as a distance measuring unit 14, it must be taken into account in this comparison that the angle a(t) from the image processing unit 18 and also the distance E(t) from the radar measurement are directed to the same point. If a 3D radar measurement is used, the distance can actually be measured to the side surface Z of the bicycle that faces furthest towards the center of the road, which is usually formed by the left handlebar grip. Thus, the side surface Z of the camera 16 that faces furthest towards the center of the road also corresponds to that of the radar unit 14. With a 2D radar unit, however, it may be necessary to correct the position of the point either during image evaluation or when determining the distance by the radar unit 14. This is because the 2D radar unit 14 usually identifies a shortest distance. Accordingly, the reference point of the camera 16 in the image is the side surface Z of the second vehicle 12 that is furthest towards the middle of the road, which is used in the calculation, while the radar measurement identifies the rear area of the vehicle 12. For two-lane vehicles 12 driving ahead, this is usually approximately the same, while for a bicycle as the second vehicle 12, the radar measurement of the distance measuring unit 14 determines a distance to the nearest area pointing towards the first vehicle 10, for example to the tail light or rear tire, which, however, appears further to the right in the image for the camera 16 than, for example, the handlebar part of the bicycle that protrudes to the left. Accordingly, either the second vehicle 12 must be identified as a bicycle and the rear part of the bicycle must be identified in the image processing unit 18 and the computing unit 15 and the angle measurement on the image must then also be carried out at this position in order to be able to compare the distances E(t) and E'(t), or the distance of the radar measurement must be corrected accordingly, for example by adding a usual distance between the rear part of the bicycle and the handlebars. In order to calculate the correct actual lateral distance S(t), in the first case a usual width difference between the middle part of the bicycle and the part protruding on the left must be taken into account and added up.

[0041] Wird eine Verifizierung der Abstandsmessungen durchgeführt, werden für die Berechnung des Ist-Seitenabstandes S(t) dann beispielsweise lediglich die Daten der Abstandsmessungen verwendet, bei denen eine Differenz zwischen E(t) und E‘(t) unter einem Schwellenwert von beispielweise 5% von E(t) liegt. Ist dies der Fall kann die vermutlich ungenauere Messung E'’(t) durch die genauere Messung E(t) ersetzt werden und es ergeben sich die Objekteinträge (0'1, E1, a1, Typ1) für das zweite Fahrzeug 12. [0041] If a verification of the distance measurements is carried out, then for example only the data of the distance measurements are used for calculating the actual lateral distance S(t) in which a difference between E(t) and E'(t) is below a threshold value of, for example, 5% of E(t). If this is the case, the presumably less accurate measurement E''(t) can be replaced by the more accurate measurement E(t) and the object entries (0'1, E1, a1, Type1) for the second vehicle 12 are obtained.

[0042] Unabhängig von einer vorgenommenen Verifizierung kann im Folgenden in der Recheneinheit 15 für jedes relevante Objekt aus E(t) und a(t) und der Fahrzeug-Geometrie der zugehö6rige Ist-Seitenabstand S aus St(t) = E(t) * sin (a(t)) - B/2 errechnet werden, wobei B/2 den Abstand der Kamera zur rechten Außenseite des Fahrzeugs darstellt. Im Falle der 2D-Radarmessung muss noch die halbe Breite b/2 des Fahrrades subtrahiert werden. Wie oben bereits beschrieben wurde, ist hier darauf zu achten, dass E(t) und der Winkel a(t) zum gleichen Bezugspunkt weisen. Dies bedeutet, dass bei einem Fahrrad die halbe Breite des Fahrrades (b/2) zu subtrahieren ist, wenn der Bezugspunkt am hinteren Teil des Fahrrades liegt. Bei der Verwendung der 3D-Radarsensoren kann direkt der Abstand zur linken Außenseite des Fahrrades, also insbesondere dem linken Teil des Lenkers oder der Hand des Radfahrers durchgeführt werden, so dass die Bildauswertung und die Radarauswertung den gleichen Punkt betreffen, wodurch der Winkel a direkt am Bild bestimmt werden, so dass auf weitere Abzüge bei der Seitenabstandsberechnung verzichtet werden. [0042] Irrespective of any verification carried out, the associated actual lateral distance S can subsequently be calculated in the computing unit 15 for each relevant object from E(t) and a(t) and the vehicle geometry from St(t) = E(t) * sin (a(t)) - B/2, where B/2 represents the distance of the camera to the right-hand outside of the vehicle. In the case of 2D radar measurement, half the width b/2 of the bicycle must also be subtracted. As already described above, it is important to ensure that E(t) and the angle a(t) point to the same reference point. This means that for a bicycle, half the width of the bicycle (b/2) must be subtracted if the reference point is at the rear of the bicycle. When using the 3D radar sensors, the distance to the left outside of the bicycle, in particular the left part of the handlebars or the cyclist's hand, can be determined directly, so that the image evaluation and the radar evaluation refer to the same point, whereby the angle a is determined directly on the image, so that further deductions in the lateral distance calculation are dispensed with.

[0043] Sowohl die ermittelten kürzesten Abstände E(t), die sich beim Überholen üblicherweise ändern und kontinuierlich beispielsweise 10 mal pro Sekunde erfasst werden, als auch die Berechnung des Ist-Seitenabstands S(t) wird zyklisch durchgeführt. Während des UÜberholvorgangs ändern sich diese Daten aufgrund der sich ändernden Abstände E(t), S(t) durch Lenkbewegungen und unterschiedliche Geschwindigkeiten. Es ergibt sich somit ein Verlauf S(t), der es auch erlaubt, eine kontinuierlich aktualisierte Vorhersage des Ist-Seitenabstands S(t), wenn das Fahrzeug 10 und das Fahrzeug 12 auf gleicher Höhe sind, zu berechnen. Dies kann beispielsweise durch Extrapolation erfolgen. [0043] Both the determined shortest distances E(t), which usually change when overtaking and are continuously recorded, for example, 10 times per second, and the calculation of the actual lateral distance S(t) are carried out cyclically. During the overtaking process, these data change due to the changing distances E(t), S(t) due to steering movements and different speeds. This results in a curve S(t) that also allows a continuously updated prediction of the actual lateral distance S(t) to be calculated when the vehicle 10 and the vehicle 12 are at the same height. This can be done, for example, by extrapolation.

[0044] Somit können Fahrer beispielsweise durch eine Anzeige eines momentanen Ist-Seitenabstands oder des bei Erreichen des Fahrzeugs 12 zu erwartenden Ist-Seitenabstands kontinuierlich informiert werden, wenn dieser geringer ist als ein hinterlegter vorgeschriebener Soll-Seitenabstand Ssoi(t) und entsprechend korrigierend reagieren, falls der Soll-Seitenabstand gemäß Straßenverkehrsordnung nicht eingehalten wird. Für autonome Fahrzeuge kann auf diese Weise auch ein gleichmäßiger Uberholvorgang mit sicheren Abständen automatisiert berechnet werden. Dabei kann zusätzlich durch Positionsmessung mittels des Navigationsgerätes oder durch vorhandene Schildererkennung berücksichtigt werden, ob sich die Fahrzeuge 10, 12 innerhalb oder außerhalb einer geschlossenen Ortschaft bewegen, so dass auch abhängig von der Position der Fahrzeuge der Seitenabstand korrekt eingestellt werden kann. [0044] Drivers can thus be continuously informed, for example by displaying a current actual lateral distance or the actual lateral distance to be expected when reaching the vehicle 12, if this is less than a stored, prescribed target lateral distance Ssoi(t) and react accordingly and correctively if the target lateral distance according to the road traffic regulations is not maintained. For autonomous vehicles, a uniform overtaking maneuver with safe distances can also be calculated automatically in this way. In addition, position measurement using the navigation device or existing sign recognition can take into account whether the vehicles 10, 12 are moving inside or outside a built-up area, so that the lateral distance can also be set correctly depending on the position of the vehicles.

[0045] Mit dem beschriebenen Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes eines ersten Fahrzeugs zu einem zweiten Fahrzeug beim Uberholvorgang kann sichergestellt werden, dass für verschiedene Fahrzeugtypen ein vorgeschriebener Sicherheitsabstand richtig berechnet und verifiziert werden kann. [0045] The described method for determining and maintaining a lateral distance of a first vehicle from a second vehicle during an overtaking maneuver can ensure that a prescribed safety distance can be correctly calculated and verified for different vehicle types.

[0046] Es sollte deutlich sein, dass das beanspruchte Verfahren auf unterschiedliche Weise durchgeführt werden kann. So kann entweder lediglich eine Kamera verwendet werden, um die Abstände und Winkel und daraus folgend den Seitenabstand zu bestimmen oder mehrere Kameras verwendet werden, wodurch eine Verifizierung des berechneten Abstandes möglich ist. Alternativ kann zur Abstandsmessung eine Radareinheit verwendet werden, deren Messwerte entweder direkt zur Berechnung des Seitenabstandes als Abstand genutzt werden oder die genutzt werden, den ermittelten Abstand zu verifizieren, da eine Radarmessung sehr genau ist. Insbesondere bei der Verwendung einer Monokamera, deren Werte bei der Bestimmung des Abstandes üblicherweise weniger genau sind, da es sich um Schätzungen handelt, ist es empfehlenswert, eine Radareinheit als Abstandsmesseinheit zu verwenden, um eine höhere Genauigkeit zu erzielen. [0046] It should be clear that the claimed method can be carried out in different ways. For example, either just one camera can be used to determine the distances and angles and consequently the lateral distance, or several cameras can be used, which makes it possible to verify the calculated distance. Alternatively, a radar unit can be used to measure the distance, the measured values of which can either be used directly to calculate the lateral distance as a distance or can be used to verify the determined distance, since a radar measurement is very accurate. In particular, when using a mono camera, whose values are usually less accurate when determining the distance because they are estimates, it is recommended to use a radar unit as a distance measuring unit in order to achieve greater accuracy.

Claims (1)

Patentansprüche patent claims 1. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang mit einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Abstandsmesseinheit (14), einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Kamera (16), einer Bildverarbeitungseinheit (18) und einer Recheneinheit (15), dadurch gekennzeichnet, dass über die Abstandsmesseinheit (14) ein Ist-Abstand E(t) des ersten Fahrzeugs (10) zum zweiten Fahrzeug (12) kontinuierlich oder zyklisch gemessen wird, über die Kamera (16) kontinuierlich ein Bild des zweiten Fahrzeugs (12) aufgezeichnet wird und in der Bildverarbeitungseinheit (18) zyklisch Bilddaten ermittelt und an die Recheneinheit übertragen werden und in der Recheneinheit (15) mit dem ermittelten Ist-Abstand E(t) und den ermittelten Bilddaten ein aktueller Ist-Versatz A(t) einer am weitesten zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) zur Kameraachse (X) ermittelt wird und aus diesem Ist-Versatz A(t) in der Recheneinheit (15) ein Ist-Seitenabstand S(t) berechnet wird. 1. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver, with a distance measuring unit (14) directed in the direction of travel of the first vehicle (10), a camera (16) directed in the direction of travel of the first vehicle (10), an image processing unit (18) and a computing unit (15), characterized in that an actual distance E(t) of the first vehicle (10) to the second vehicle (12) is measured continuously or cyclically via the distance measuring unit (14), an image of the second vehicle (12) is continuously recorded via the camera (16) and image data is cyclically determined in the image processing unit (18) and transmitted to the computing unit, and in the computing unit (15) with the determined actual distance E(t) and the determined image data a current actual offset A(t) of a side surface (Z) of the first vehicle (10) facing furthest towards the center of the road is determined. second vehicle (12) to the camera axis (X) is determined and from this actual offset A(t) an actual lateral distance S(t) is calculated in the computing unit (15). 2, Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Uberholvorgang nach Anspruch 1, dadurch gekennzeichnet, dass in der Recheneinheit (15) die ermittelten Ist-Seitenabstände S(t) mit hinterlegten Soll-Seitenabständen Ssoı verglichen werden. 2, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to claim 1, characterized in that in the computing unit (15) the determined actual lateral distances S(t) are compared with stored target lateral distances Ssoı. 3. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass aus den kontinuierlich aufgezeichneten Bilddaten der Bildverarbeitungseinheit (18) in der Recheneinheit (15) ein Winkel a(t) zwischen der Kameraachse (X) und der zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) berechnet wird und daraus kontinuierlich in der Recheneinheit (15) der Ist- Seitenabstand S(t) berechnet wird, indem der mittels der Abstandsmesseinheit (14) bestimmte Ist-Abstand E(t) der zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) mit dem Sinus des berechneten Winkels aft) multipliziert wird und ein seitlicher Abstand (B) der Kamera (16) von einer zum Straßenrand weisenden Seite des ersten Fahrzeugs (10) subtrahiert wird. 3. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 1 or 2, characterized in that an angle a(t) between the camera axis (X) and the side surface (Z) of the second vehicle (12) facing the middle of the road is calculated from the continuously recorded image data of the image processing unit (18) in the computing unit (15), and the actual lateral distance S(t) is continuously calculated from this in the computing unit (15) by multiplying the actual distance E(t) of the side surface (Z) of the second vehicle (12) facing the middle of the road, determined by means of the distance measuring unit (14), by the sine of the calculated angle aft) and subtracting a lateral distance (B) of the camera (16) from a side of the first vehicle (10) facing the edge of the road. 4. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 3, dadurch gekennzeichnet, dass zur Bestimmung des Winkels a(t) eine Stereokamera (16.1) oder eine Lichtfeldkamera verwendet wird. 4. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 3, characterized in that a stereo camera (16.1) or a light field camera is used to determine the angle a(t). 5. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Uberholvorgang nach Anspruch 3, dadurch gekennzeichnet, dass zur Bestimmung des Winkels a(t) eine Monokamera (16.2) und optische Umlenkmittel verwendet werden. 5. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to claim 3, characterized in that a mono camera (16.2) and optical deflection means are used to determine the angle a(t). 6. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach Anspruch 3, dadurch gekennzeichnet, dass zur Bestimmung des Winkels a(t) eine Monokamera (16.2) und die Brennweite (f) der Kamera (16) verwendet werden. 6. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to claim 3, characterized in that a mono camera (16.2) and the focal length (f) of the camera (16) are used to determine the angle a(t). 7. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, 7. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of the preceding claims, 10. 10th 11. 11th 12. 12th 13. 13th 14. 14th 15. 15th AT 527 121 B1 2024-11-15 AT 527 121 B1 2024-11-15 dadurch gekennzeichnet, dass die Abstandmesseinheit (14) eine Radareinheit ist. characterized in that the distance measuring unit (14) is a radar unit. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Uberholvorgang nach einem der Ansprüche 1 bis 7, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of claims 1 to 7, dadurch gekennzeichnet, dass characterized in that die Abstandmesseinheit (14) die Kamera (16) ist, welche auch zur Winkelbestimmung genutzt wird. the distance measuring unit (14) is the camera (16), which is also used to determine the angle. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 8, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 8, dadurch gekennzeichnet, dass characterized in that aus zwei aufeinander folgenden Bildern der Monokamera (16.1) anhand des Größenunterschieds eines Objekts (O) auf dem Bild, dessen Größe bekannt ist, der Abstand E‘(t) zum zweiten Fahrzeug (12) berechnet wird. from two consecutive images of the mono camera (16.1), the distance E'(t) to the second vehicle (12) is calculated based on the size difference of an object (O) in the image whose size is known. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 7 und 8, dadurch gekennzeichnet, dass Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to claims 7 and 8, characterized in that aus den Daten der Bildverarbeitungseinheit (18) in der Recheneinheit (15) ein zweiter IstAbstand E*(t) zum zweiten Fahrzeug (12) berechnet und mit dem mittels der Radareinheit (14) bestimmten ersten Ist-Abstand E(t) zu einem identischen Zeitpunkt (t) verglichen und verifiziert wird. a second actual distance E*(t) to the second vehicle (12) is calculated from the data of the image processing unit (18) in the computing unit (15) and is compared and verified with the first actual distance E(t) determined by means of the radar unit (14) at an identical point in time (t). Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 10, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 10, dadurch gekennzeichnet, dass characterized in that bei gleichen ermittelten Ist-Abständen E{(t), E‘(t) aus der Bildverarbeitungseinheit (18) und der Radareinheit (14) auf eine korrekte Messung geschlossen wird und diese zur Berechnung des Ist- Seitenabstands S(t) verwendet wird. if the actual distances E{(t), E‘(t) are the same, a correct measurement is concluded from the image processing unit (18) and the radar unit (14) and this is used to calculate the actual lateral distance S(t). Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of the preceding claims, dadurch gekennzeichnet, dass characterized in that der berechnete Ist-Seitenabstand S(t) zum zweiten Fahrzeug (12) im ersten Fahrzeug (10) angezeigt wird. the calculated actual lateral distance S(t) to the second vehicle (12) is displayed in the first vehicle (10). Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach Anspruch 1, Method for determining and maintaining a lateral distance of a first vehicle (10) to a second vehicle (12) during overtaking according to claim 1, dadurch gekennzeichnet, dass characterized in that die Bilder einer Monokamera (16.2) verwendet werden und in der Bildverarbeitungseinheit (18) aus Bilddaten ein Versatz der zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) zur Kameraachse (X) am Bild gemessen wird und in der Recheneinheit (15) mit Referenzbildern aus einem Kennfeld, in dem für unterschiedliche Abständen E(t) die IstVersätze zu den ermittelten Seitenversätzen am Bild hinterlegt sind, verglichen wird, und aus diesem Vergleich der Ist-Versatz A(t) bestimmt wird. the images of a mono camera (16.2) are used and in the image processing unit (18) an offset of the side surface (Z) of the second vehicle (12) facing the middle of the road to the camera axis (X) is measured on the image from image data and is compared in the computing unit (15) with reference images from a map in which the actual offsets to the determined side offsets on the image are stored for different distances E(t), and the actual offset A(t) is determined from this comparison. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 13, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 13, dadurch gekennzeichnet, dass characterized in that die ermittelte Differenz als skalierte Abweichung im ersten Fahrzeug (10) angezeigt oder verarbeitet wird. the determined difference is displayed or processed as a scaled deviation in the first vehicle (10). Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of the preceding claims, dadurch gekennzeichnet, dass characterized in that aus den Daten der Bildverarbeitungseinheit (18) über die Recheneinheit (15) das zweite Fahrzeug (12) als einspuriges oder zweispuriges Fahrzeug identifiziert wird. the second vehicle (12) is identified as a single-lane or two-lane vehicle from the data of the image processing unit (18) via the computing unit (15). 16. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass über ein Navigationsgerät oder eine Verkehrsschilderkennung darauf geschlossen wird, ob sich das erste Fahrzeug (10) und das zweite Fahrzeug (12) innerhalb oder außerhalb einer geschlossenen Ortschaft befinden. 16. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) from a second vehicle (12) during an overtaking maneuver according to one of the preceding claims, characterized in that a navigation device or traffic sign recognition is used to determine whether the first vehicle (10) and the second vehicle (12) are located inside or outside a built-up area. 17. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die ermittelten Ist-Seitenabstände S(t) über die Zeit gespeichert und extrapoliert werden, um einen voraussichtlichen Ist-Seitenabstand S(t) für den Moment eines Erreichens des zweiten Fahrzeugs (12) vorherzusagen. 17. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to one of the preceding claims, characterized in that the determined actual lateral distances S(t) are stored over time and extrapolated in order to predict a probable actual lateral distance S(t) for the moment of reaching the second vehicle (12). 18. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach Anspruch 17, dadurch gekennzeichnet, dass in der Recheneinheit (15) Soll-Seitenabstände Ssoa für einspurige und zweispurige Fahrzeuge (12) hinterlegt sind, so dass, falls der vorhergesagte zu erwartende Ist-Seitenabstand S(t) geringer ist als der zulässige Soll-Seitenabstand Ss ein Warnsignal an einen Fahrzeugführer des ersten Fahrzeugs (10) ausgegeben wird oder das erste Fahrzeug (10) selbstständig korrigierend durch Erhöhung des Ist- Seitenabstands S(t) oder durch Bremsen eingreift. 18. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during an overtaking maneuver according to claim 17, characterized in that target lateral distances Ssoa for single-lane and two-lane vehicles (12) are stored in the computing unit (15), so that if the predicted expected actual lateral distance S(t) is less than the permissible target lateral distance Ss, a warning signal is issued to a driver of the first vehicle (10) or the first vehicle (10) intervenes independently to correct the situation by increasing the actual lateral distance S(t) or by braking. 19. Verfahren zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim Überholvorgang nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass bei der Korrektur oder dem Warnsignal die Geschwindigkeit des ersten Fahrzeugs (10) berücksichtigt wird. 19. Method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of the preceding claims, characterized in that the speed of the first vehicle (10) is taken into account in the correction or warning signal. 20. Vorrichtung zur Durchführung des Verfahrens zur Ermittlung und Einhaltung eines Seitenabstandes S(t) eines ersten Fahrzeugs (10) zu einem zweiten Fahrzeug (12) beim UÜberholvorgang nach einem der vorhergehenden Ansprüche, mit einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Abstandsmesseinheit (14), einer in Fahrtrichtung des ersten Fahrzeugs (10) gerichteten Kamera (16), einer Bildverarbeitungseinheit (18) und einer Recheneinheit (15), dadurch gekennzeichnet, dass die Abstandsmesseinheit (14) zur Bestimmung eines Ist-Abstands E(t) des ersten Fahrzeugs (10) zum zweiten Fahrzeug (12) dient, die Kamera (16) zur kontinuierlichen Aufzeichnung eines Bildes des zweiten Fahrzeugs (12) dient, _ die Bildverarbeitungseinheit (18) zur Ermittlung und Übertragung von Bilddaten dient, und die Recheneinheit (15) zum Empfangen der Bilddaten mit der Bildverarbeitungseinheit verbunden ist und zur Berechnung eines Ist-Versatzes A(t) einer am weitesten zur Straßenmitte weisenden Seitenfläche (Z) des zweiten Fahrzeugs (12) zur Kameraachse (X) aus den Bilddaten und dem über die Abstandsmesseinheit ermittelten Ist- Abstand E(t) und zur Berechnung eines Ist- Seitenabstandes S(t) aus dem ermittelten Ist-Versatz A(t) dient. 20. Device for carrying out the method for determining and maintaining a lateral distance S(t) of a first vehicle (10) to a second vehicle (12) during overtaking according to one of the preceding claims, with a distance measuring unit (14) directed in the direction of travel of the first vehicle (10), a camera (16) directed in the direction of travel of the first vehicle (10), an image processing unit (18) and a computing unit (15), characterized in that the distance measuring unit (14) is used to determine an actual distance E(t) of the first vehicle (10) to the second vehicle (12), the camera (16) is used to continuously record an image of the second vehicle (12), the image processing unit (18) is used to determine and transmit image data, and the computing unit (15) is connected to the image processing unit for receiving the image data and for calculating an actual offset A(t) of a side surface (Z) facing furthest towards the center of the road. of the second vehicle (12) to the camera axis (X) from the image data and the actual distance E(t) determined via the distance measuring unit and for calculating an actual lateral distance S(t) from the determined actual offset A(t). Hierzu 1 Blatt Zeichnungen 1 sheet of drawings
ATA50510/2023A 2023-06-28 2023-06-28 Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking AT527121B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
ATA50510/2023A AT527121B1 (en) 2023-06-28 2023-06-28 Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking
PCT/AT2024/060249 WO2025000007A1 (en) 2023-06-28 2024-06-26 Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during an overtaking manoeuvre

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
ATA50510/2023A AT527121B1 (en) 2023-06-28 2023-06-28 Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking

Publications (2)

Publication Number Publication Date
AT527121B1 true AT527121B1 (en) 2024-11-15
AT527121A4 AT527121A4 (en) 2024-11-15

Family

ID=91969283

Family Applications (1)

Application Number Title Priority Date Filing Date
ATA50510/2023A AT527121B1 (en) 2023-06-28 2023-06-28 Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking

Country Status (2)

Country Link
AT (1) AT527121B1 (en)
WO (1) WO2025000007A1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018214962A1 (en) * 2018-09-04 2020-03-05 Robert Bosch Gmbh Method and device for securing an overtaking process of a vehicle hitting a bicycle
WO2022233676A1 (en) * 2021-05-04 2022-11-10 Continental Autonomous Mobility Germany GmbH Method of measuring vehicle driver's behaviour towards cyclists

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2391556T3 (en) * 2002-05-03 2012-11-27 Donnelly Corporation Object detection system for vehicles
NL2016753B1 (en) * 2016-05-10 2017-11-16 Daf Trucks Nv Platooning method for application in heavy trucks
DE102016224913A1 (en) * 2016-12-14 2018-06-14 Robert Bosch Gmbh Method for automatically setting the speed of a motorcycle
DE102021001176A1 (en) * 2021-03-05 2021-05-20 Daimler Ag Method for the detection of an impending head-on collision between two vehicles

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018214962A1 (en) * 2018-09-04 2020-03-05 Robert Bosch Gmbh Method and device for securing an overtaking process of a vehicle hitting a bicycle
WO2022233676A1 (en) * 2021-05-04 2022-11-10 Continental Autonomous Mobility Germany GmbH Method of measuring vehicle driver's behaviour towards cyclists

Also Published As

Publication number Publication date
AT527121A4 (en) 2024-11-15
WO2025000007A1 (en) 2025-01-02

Similar Documents

Publication Publication Date Title
DE102017126452B4 (en) Vehicle control system
EP2068173B1 (en) Method for measuring cross movements in a driver assist system
DE112015005377B4 (en) VEHICLE TRAVEL CONTROL DEVICE AND VEHICLE TRAVEL CONTROL METHOD
EP2814014B1 (en) Method for coordinating the operation of motor vehicles
EP2183140B1 (en) Method and device for supporting the process of leaving a parking space of motor vehicles
EP3084466B1 (en) Method for detecting a mark applied to an underlying surface, driver assistance device and motor vehicle
DE102013101618B4 (en) Vehicle-based tracking control device
DE102017100633B4 (en) PREVENTION SAFETY DEVICE FOR CHANGING THE PRICE OF A SMALL VEHICLE
DE102014009059B4 (en) Side-rear alarm system for vehicles and alarm control method for this
DE10258167B4 (en) Procedure for a vehicle
DE102020202163B4 (en) Method and device for detecting objects and/or structures in the vicinity of a vehicle
EP3281831A1 (en) Control system and control method for determining a likelihood of a lane change by a preceding vehicle
DE102009017431A1 (en) Driving assistance system for vehicles
DE102020103503B4 (en) ADAPTIVE CONTROL OF AUTOMATIC LANE CHANGE IN THE VEHICLE
WO2008019907A1 (en) Method and apparatus for driver assistance through the production of lane information for supporting or replacing lane information from a video-based lane information device
DE102009012917A1 (en) Obstacle detection device for vehicles
DE19745231A1 (en) Automatic anti collision warning system for road vehicles
DE102018213262A1 (en) Method for operating a motor vehicle, in particular a motorcycle, computer program
DE102013200398A1 (en) Method for warning against collision of motor vehicle, involves outputting warning signals to possible road users in front end of motor vehicle based on determined collision danger, where signals are immediately perceptible for human senses
WO2017125369A1 (en) Method for detecting traffic lanes on a roadway on the basis of a frequency distribution of distance values, control device, driver assistance system, and motor vehicle
DE112017007932T5 (en) VEHICLE CONTROL DEVICE
DE112013004443B4 (en) parking assistance device
DE102012009822A1 (en) Method for determining description size of local traffic with respect to e.g. passenger car, involves transmitting traffic parameter from vehicle to service transmitter, to determine description size of traffic with respect to vehicle
AT527121B1 (en) Method and device for determining and maintaining a lateral distance of a first vehicle to a second vehicle during overtaking
DE102004035571B4 (en) Device and method for vehicle position determination by means of locating on a traffic route network