[go: up one dir, main page]

DE102022106203A1 - Method and arrangement for monitoring the attention of an occupant in a vehicle - Google Patents

Method and arrangement for monitoring the attention of an occupant in a vehicle Download PDF

Info

Publication number
DE102022106203A1
DE102022106203A1 DE102022106203.1A DE102022106203A DE102022106203A1 DE 102022106203 A1 DE102022106203 A1 DE 102022106203A1 DE 102022106203 A DE102022106203 A DE 102022106203A DE 102022106203 A1 DE102022106203 A1 DE 102022106203A1
Authority
DE
Germany
Prior art keywords
signal
occupant
eye position
determined
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022106203.1A
Other languages
German (de)
Inventor
Markus Klippstein
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SiOptica GmbH
Original Assignee
SiOptica GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SiOptica GmbH filed Critical SiOptica GmbH
Priority to DE102022106203.1A priority Critical patent/DE102022106203A1/en
Publication of DE102022106203A1 publication Critical patent/DE102022106203A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Human Computer Interaction (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug, bei welchem die Augenstellung eines Insassen (1) ermittelt wird, die ermittelte Augenstellung des Insassen (1) mit einem vorgebbaren Sollwertbereich verglichen wird, Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen (1) vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden: i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der jeweils die Augenstellung des Insassen (1) ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet; und/oder ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ... während der die Augenstellung des Insassen (1) bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie iii. Nicht-Setzen des Signals S in allen anderen Fällen; Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist. Die Erfindung umfasst auch eine entsprechende Anordnung.The invention relates to a method for monitoring the attention of an occupant in a vehicle, in which the eye position of an occupant (1) is determined, the determined eye position of the occupant (1) is compared with a predefinable target value range, times t1, t2, ... , during which the determined eye position of the occupant (1) deviates from the setpoint range, can be evaluated as follows to set or not set a signal S: i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable time period tg, during which the eye position of the occupant (1) was determined, exceeds a first predeterminable threshold value TR; and/or ii. Setting the signal S when the currently determined time t1, t2, ... during which the eye position of the occupant (1) already deviates from the setpoint range exceeds a second predeterminable threshold value TA, and iii. Not setting the signal S in all other cases; Triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set and/or at least for the duration during which the signal S is set. The invention also includes a corresponding arrangement.

Description

Gebiet der ErfindungField of invention

Die Erfindung bezieht sich auf die Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug und entsprechende Gegenmaßnahmen.The invention relates to monitoring the attention of an occupant in a vehicle and corresponding countermeasures.

Stand der TechnikState of the art

Die Ablenkung von Fahrern während der Fahrt gilt als eine der häufigsten Ursachen für Verkehrsunfälle.Driver distraction while driving is considered one of the most common causes of traffic accidents.

In der DE 10 2009 046 451 A1 wird ein Verfahren und ein Gerät zur Erfassung einer Blickzuwendung auf einen Anordnungsbereich einer Infotainment-Einrichtung eines Fahrzeuges beschrieben. Nachteilig hierbei ist, dass ausschließlich der Blick auf die Infotainment-Einrichtung überprüft, nicht aber allgemein die Ablenkung des Fahrers vom Straßenverkehr ermittelt wird. Diese kann beispielsweise insbesondere durch sogenannte „BYD“-Geräte (d.h., „Bring your own device“, also nicht fest verbaute, ins Fahrzeug mobil eingebracht Geräte) bestehen, welche z.B. auf dem Schoß des Beifahrers liegen können.In the DE 10 2009 046 451 A1 A method and a device for detecting a gaze directed at an arrangement area of an infotainment device of a vehicle are described. The disadvantage here is that only the view of the infotainment device is checked, but the driver's distraction from road traffic is not generally determined. This can, for example, consist in particular of so-called “BYD” devices (ie, “Bring your own device”, i.e. devices that are not permanently installed and are brought into the vehicle on a mobile basis), which can, for example, lie on the lap of the passenger.

Die DE 20 2017 105 761 U1 beschreibt eine automatische Schrittsteuerung der Interaktion eines Fahrers mit Inhalten. Dabei werden verschiedene Aufmerksamkeitsniveaus aus Benutzereingaben ermittelt, so dass das Computergerät die Benutzeroberfläche als Reaktion auf die Feststellung sperrt, wenn innerhalb eines Zeitraums kein Hinweis auf eine zweite Nutzereingabe empfangen wurde, das Aufmerksamkeitspufferniveau anzupassen.The DE 20 2017 105 761 U1 describes an automatic step control of a driver's interaction with content. Different attention levels are determined from user input so that the computing device locks the user interface in response to the determination that if no indication of a second user input has been received within a period of time, the attention buffer level is adjusted.

In der DE 11 2015 005 433 T5 werden Insassenüberwachungssysteme und - verfahren offenbart. Hiermit werden jedoch lediglich Überwachungsdaten generiert und die eigentliche Ablenkung des Fahrers wird nicht aktiv behindert.In the DE 11 2015 005 433 T5 Occupant monitoring systems and methods are disclosed. However, this only generates monitoring data and does not actively hinder the actual distraction of the driver.

Schließlich beschreibt die US 2012/0215403 A1 ein Verfahren zur Überwachung eines Fahrzeugführers. Dabei wird die Augen- oder Gesichtsposition eines Fahrers überwacht. Insofern er auf ein fest verbautes Objekt im Inneren des Fahrzeuges schaut, wird die Funktionsweise des besagten Objektes geändert. Auch dieses Verfahren versagt hinsichtlich der Ermittlung der allgemeinen Ablenkung des Fahrers vom Straßenverkehr. Eine solche Ablenkung kann beispielsweise wiederum durch sogenannte „BYD“-Geräte bestehen, welche z.B. auf dem Schoß des Beifahrers liegen können.Finally describes the US 2012/0215403 A1 a method for monitoring a vehicle driver. The position of a driver's eyes or face is monitored. If he looks at a permanently installed object inside the vehicle, the functionality of the object in question is changed. This method also fails to determine the driver's general distraction from traffic. Such distraction can, for example, be caused by so-called “BYD” devices, which can lie on the passenger's lap, for example.

Den vorgenannten Verfahren und Anordnungen ist der Nachteil gemein, dass sie nicht die Ablenkung des Fahrers durch nachträglich ins Fahrzeug eingebrachte Objekte detektieren und somit die Nutzung dieser auch nicht sanktionieren können.The above-mentioned methods and arrangements have the disadvantage in common that they do not detect the distraction of the driver by objects subsequently introduced into the vehicle and therefore cannot sanction the use of these.

Beschreibung der ErfindungDescription of the invention

Es ist daher Aufgabe der Erfindung, Verfahren und Anordnung aufzuzeigen, die eine Detektion von Ablenkung des Fahrers eines Fahrzeugs, einschließlich durch nicht im Fahrzeug fest verbaute Gerätschaften, welche Fahrzeugnutzer mit in das Fahrzeug bringen können, gewährleisten. Es sollen ferner Maßnahmen mindestens zur indirekten Verminderung der Ablenkung des Fahrers, unabhängig vom ihn ablenkenden Gerät, möglich sein. Schließlich soll die besagte Detektion ohne aktive Eingaben oder Interaktionen des Fahrers durchführbar sein.It is therefore the object of the invention to demonstrate methods and arrangements that ensure detection of distraction of the driver of a vehicle, including by equipment that is not permanently installed in the vehicle and which vehicle users can bring into the vehicle. Furthermore, measures should be possible to at least indirectly reduce driver distraction, regardless of the device distracting him. Ultimately, said detection should be able to be carried out without active input or interaction from the driver.

Diese Aufgabe wird erfindungsgemäß gelöst von einem Verfahren zur Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug, bei welchem

  • - die Augenstellung eines Insassen (insbesondere des Fahrers) ermittelt wird,
  • - die ermittelte Augenstellung des Insassen mit einem vorgebbaren Sollwertbereich verglichen wird,
  • - Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden:
    1. i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der jeweils die Augenstellung des Insassen ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet, und/oder
    2. ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie
    3. iii. Nicht-Setzen des Signals S in allen anderen Fällen.
  • - Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist.
This object is achieved according to the invention by a method for monitoring the attention of an occupant in a vehicle, in which
  • - the eye position of an occupant (especially the driver) is determined,
  • - the determined eye position of the occupant is compared with a predeterminable target value range,
  • - Times t1, t2, ..., during which the determined eye position of the occupant deviates from the setpoint range, are evaluated as follows to set or not set a signal S:
    1. i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable period of time tg, during which the occupant's eye position was determined, exceeds a first predeterminable threshold value TR, and / or
    2. ii. Setting the signal S when the currently determined time t1, t2, ..., during which the occupant's eye position already deviates from the setpoint range, exceeds a second predeterminable threshold value TA, and
    3. iii. Not setting the signal S in all other cases.
  • - Triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set and/or at least for the duration during which the signal S is set.

Bei dem Fahrzeug kann es sich um einen Personenkraftwagen, einen Lastkraftwagen, ein Luftfahrzeug, ein Raumfahrzeug oder ein Wasserfahrzeug handeln.The vehicle may be a passenger car, a truck, an aircraft, a spacecraft or a watercraft.

Zunächst ist festzuhalten, dass das Verfahren auch lediglich einen der vorgenannten Schritte i. oder ii. beinhalten kann. In jedem Falle ist aber dazu auch Schritt iii. beinhaltet.First of all, it should be noted that the process only involves one of the aforementioned steps i. or ii. can include. In any case, this also includes step iii. contains.

Die detektierte Augenstellung eines Insassen soll allgemein die Augenstellung und bei Bedarf auch die Augenposition des Insassen beinhalten, so dass die Blickrichtung des Insassen daraus eindeutig identifiziert werden kann.The detected eye position of an occupant should generally include the eye position and, if necessary, the eye position of the occupant, so that the occupant's viewing direction can be clearly identified from this.

Bei dem vorgebbaren Sollwertbereich für die Augenstellung des Insassen, insbesondere des Fahrers, kann es sich um eine geometrische Vorgabe handeln, wohin die Augen des Insassen, i.d.R. also des Fahrers, schauen sollen, also wie die Augenstellung sein muss, wenn der Fahrer aufmerksam das Verkehrsgeschehen verfolgt.The predeterminable setpoint range for the eye position of the occupant, in particular the driver, can be a geometric specification as to where the eyes of the occupant, usually the driver, should look, i.e. what the eye position must be when the driver pays attention to the traffic situation tracked.

Der besagte Sollwertbereich kann in verschiedenen Arten von Koordinaten bzw. Daten festgelegt werden. So könnte zum einen die Augenstellung dann im Sollwert sein, wenn Sie den Blick durch eines der Fenster im Fahrzeug und auf den Rückspiegel bedeutet. Umgekehrt sollte der Blick ins Interieur des Fahrzeuges vorzugsweise nicht Teil des Sollwertbereiches sein. Dann nämlich wird durch die Erfindung auch sichergestellt, dass sich der Fahrer nicht ohne Warnung von Standardgeräten wie etwa dem Radio oder durch die Einstellung der Lüftung ablenken lässt, weil die entsprechenden Nutzungszeiten durch das Verfahren erkannt und ggf. geahndet werden.The setpoint range in question can be defined in different types of coordinates or data. On the one hand, the eye position could be in the target value if it means looking through one of the windows in the vehicle and at the rearview mirror. Conversely, the view of the interior of the vehicle should preferably not be part of the target value range. The invention then also ensures that the driver is not distracted without warning by standard devices such as the radio or by adjusting the ventilation, because the corresponding usage times are recognized by the method and, if necessary, punished.

Der besagte Sollwertbereich kann durch entsprechende Winkel oder Augenpositions- und Augenstellungskoordinaten in einer Datenbank hinterlegt sein. Hierbei ist es möglich, dass für verschiedene detektierte Augenpositionen, die bzgl. der z-Koordinate im Fahrzeug (Höhe) in Verbindung mit der Sitzhöhenposition eine Indikation über die Körpergröße des Fahrers erlauben, unterschiedliche Sollwertteilbereiche für unterschiedliche Körpergrößen des Fahrers hinterlegt sind.The setpoint range in question can be stored in a database using corresponding angles or eye position and eye position coordinates. It is possible here for different target value subranges for different body sizes of the driver to be stored for different detected eye positions, which allow an indication of the driver's body size with regard to the z coordinate in the vehicle (height) in conjunction with the seat height position.

Der erste vorgebbare Schwellwert TR ist in der Regel ein Relativwert, der bevorzugt größer als Null und kleiner als 1 ist und in Verbindung mit der vorgebbaren Zeitspanne tg festgelegt wird. Der Wert TR gibt an, ab welchem relativen (kumulierten) Zeitanteil verschiedener Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen vom Sollwertbereich abweicht, also mithin, während der der Fahrer insgesamt innerhalb einer Zeitspanne tg visuell abgelenkt wurde, das Signal S gesetzt wird.The first predeterminable threshold value TR is generally a relative value that is preferably greater than zero and less than 1 and is determined in conjunction with the predeterminable time period tg. The value TR indicates the relative (cumulative) time proportion of different times t1, t2, ... during which the determined eye position of the occupant deviates from the target value range, i.e. during which the driver was visually distracted overall within a period of time tg, the signal S is set.

Die Zeitspanne tg dient als Referenzzeitraum, innerhalb dessen die kumulierte Zeit der Ablenkung einen bestimmten relativen Wert, der durch den Schwellwert TR beschrieben wird, nicht übersteigen darf, ohne das Signal S, welches zu Konsequenzen führt, zu setzen. Die Zeitspanne tg wird dabei bevorzugt immer von der aktuellen Zeit rückwärts betrachtet. Sollte seit Beginn der Verfahrensausführung die Zeitspanne tg noch nicht verstrichen sein, so wird bevorzugt im Schritt i. in keinem Falle das Signal S gesetzt, weil die Aussage dann nicht konklusiv ist.The time period tg serves as a reference period within which the cumulative time of deflection may not exceed a certain relative value, which is described by the threshold value TR, without setting the signal S, which leads to consequences. The time period tg is preferably always viewed backwards from the current time. If the time period tg has not yet elapsed since the start of the method execution, it is preferred in step i. In no case is the signal S set because the statement is then not conclusive.

Der Wert TR kann beispielsweise zwischen 0,1 und 0,25 liegen, was einer maximal erlaubten kumulierten Ablenkungszeit des Fahrers von 10% bis 25% innerhalb einer Zeitspanne tg entspricht. Je geringer der Wert TR ist, umso frühzeitiger wird der Fahrer für ablenkende Blicke gerügt. Ein Wert von TR größer als 0,25 ist jedoch auch denkbar.The value TR can, for example, be between 0.1 and 0.25, which corresponds to a maximum permitted cumulative driver distraction time of 10% to 25% within a period of time tg. The lower the TR value, the sooner the driver will be reprimanded for distracting looks. However, a value of TR greater than 0.25 is also conceivable.

Beim Wert tg kann es sich beispielsweise um 10, 20, 30 oder 60 Sekunden handeln. Andere Werte sind möglich. Je größer der Wert ist, umso größer ist jedoch die Gefahr, dass einzelne zeitliche Episoden längerer abgelenkter Blicke unerkannt bleiben, weswegen in der Regel der Schritt ii. des in Rede stehenden Verfahrens wichtig ist, der dies vermeidet.For example, the value tg can be 10, 20, 30 or 60 seconds. Other values are possible. However, the larger the value, the greater the risk that individual temporal episodes of longer distracted gaze remain undetected, which is why step ii is usually carried out. of the procedure in question, which avoids this.

Bei fortschreitender Zeit können die jeweils ermittelten Zeiten t1, t2, t3 usw. jeweils um die Zeitspanne tg rückwirkend vom aktuellen Zeitpunkt verfahrensgemäß bewertet werden.As time progresses, the determined times t1, t2, t3, etc. can each be evaluated retroactively from the current point in time by the time period tg.

Überdies kann die Zeitspanne tg und/oder der Schwellwert TR über die Zeit variieren. Beispielsweise ist es denkbar, während einer ersten Phase des Fahrens, etwa die ersten 20 oder 30 Minuten, eine kleinere Zeitspanne tg von weniger als 30 Sekunden festzulegen, hernach jedoch eine größere Zeitspanne von mehr als 30 Sekunden. Dies trägt dem Umstand Rechnung, dass der Fahrer sich an die Fahraufgabe gewöhnt und somit im Laufe der Zeit größere Ablenkungszeiten erlaubt sein können. Insbesondere kann aber auch der Schwellwert TR variierbar sein. Hier könnten beispielsweise die Umwelt- und/oder Sichtverhältnisse ein wesentlicher Triggerpunkt sein: Während etwa bei trockener Fahrbahn und Tageslicht TR>0,2 festgelegt werden kann, sollte die erlaubte kumulierte Ablenkungszeit bei nasser Fahrbahn und/oder Nachtlichtverhältnissen geringer sein, was durch einen niedrigeren Wert von TR <0,2, bevorzugt TR<0,15, besonders bevorzugt TR<0,1, ausgedrückt werden kann.Furthermore, the time period tg and/or the threshold value TR can vary over time. For example, it is conceivable to set a smaller time period tg of less than 30 seconds during a first phase of driving, such as the first 20 or 30 minutes, but then a larger time period of more than 30 seconds. This takes into account the fact that the driver gets used to the driving task and therefore longer periods of distraction may be allowed over time. In particular, the threshold value TR can also be variable. Here, for example, the environmental and/or visibility conditions could be a key trigger point: While TR>0.2 can be set for dry roads and daylight conditions, the permitted cumulative distraction time should be lower for wet roads and/or night light conditions, which is achieved by a lower Value of TR <0.2, preferably TR <0.15, particularly preferably TR <0.1, can be expressed.

Andere Werte als die vorbeschriebenen sind ausdrücklich möglich.Values other than those described above are expressly possible.

Auch ist es möglich, dass der Wert von TR ansteigt, wenn der Fahrer eine gute Fahrleistung zeigt, d.h. beispielsweise, wenn die Spurhaltung und/oder rechtzeitige Bremsleistung, welche über entsprechende Mittel ausgewertet wird, gut ist.It is also possible for the value of TR to increase if the driver shows good driving performance, i.e. for example if the lane keeping and/or timely braking performance, which is evaluated using appropriate means, is good.

Schließlich ist es auch möglich, den Wert TR fahrerbezogen über die Fahrzeugelektronik festzulegen. Hierzu wird der Fahrer beispielsweise anhand von sogenannten Face-Recognition-Algorithmen erkannt, die mindestens einmal antrainiert worden sind. Andere Identifizierungsmöglichkeiten können ebenfalls zum Einsatz kommen, etwa personalisierte Funkschlüssel oder eine Fingerabdruckerkennung. Interessante Eigenschaften des Fahrers zur Festlegung von TR können beispielsweise die Dauer der bisherigen Lebensfahrpraxis, korrigiertes Sehvermögen, Alter und/oder ggf. auch eine Bewertung der Fahrqualität über die Zeit durch die Elektronik des Fahrzeuges selbst sein.Finally, it is also possible to set the TR value for the driver via the vehicle electronics. For this purpose, the driver is recognized, for example, using so-called face recognition algorithms that have been trained at least once. Other identification options can also be used, such as personalized radio keys or fingerprint recognition. Interesting characteristics of the driver for determining TR can be, for example, the length of previous life driving experience, corrected vision, age and/or possibly also an assessment of the driving quality over time by the electronics of the vehicle itself.

So ist es etwa denkbar, dass Fahranfänger einen kleinen Wert TR von kleiner gleich 0,15 zugeordnet bekommen, während Fahrer mit mindestens 2 Jahren Fahrpraxis einen Wert 0,2 <= TR <= 0,25 erhalten. Es ist auch denkbar, Fahrern in einer bestimmten Altersgruppe wieder einen kleineren Wert als 0,2 zuzuordnen.For example, it is conceivable that novice drivers are assigned a small TR value of less than or equal to 0.15, while drivers with at least 2 years of driving experience receive a value of 0.2 <= TR <= 0.25. It is also conceivable to assign a value lower than 0.2 to drivers in a certain age group.

Mehrere vorgenannte Variationen vom Wert TR, etwa die Personalisierung und die Abhängigkeit von Umwelt- und/oder Sichtverhältnissen, können ggf. auch kombiniert werden, wie die folgende beispielhafte Tabelle 1 zeigt: Fahrer Lichtverhältnisse Umweltverhältnisse Maximaler Wert für TR Fahranfänger Tag (gut) Trocken 0,15 Fahranfänger Tag (gut) Nässe 0,1 Fahranfänger Nacht (schlecht) Trocken 0,12 Fahranfänger Nacht (schlecht) Nässe 0,08 Erfahrener Fahrer Tag (gut) Trocken 0,25 Erfahrener Fahrer Tag (gut) Nässe 0,2 Erfahrener Fahrer Nacht (schlecht) Trocken 0,22 Erfahrener Fahrer Nacht (schlecht) Nässe 0,15 Several aforementioned variations of the value TR, such as personalization and the dependence on environmental and/or visibility conditions, can also be combined if necessary, as the following exemplary Table 1 shows: driver Lighting conditions Environmental conditions Maximum value for TR Novice driver day (good) Dry 0.15 Novice driver day (good) wetness 0.1 Novice driver night (bad) Dry 0.12 Novice driver night (bad) wetness 0.08 Experienced driver day (good) Dry 0.25 Experienced driver day (good) wetness 0.2 Experienced driver night (bad) Dry 0.22 Experienced driver night (bad) wetness 0.15

Für den Schritt ii. ist der zweite vorgebbare Schwellwert TA von Belang. Dieser legt -wenn der Schritt ii. ausgeführt wird- fest, wie lange der Fahrer maximal von seinem vorgebbaren Sollwertbereich für die Augenstellung einmalig wegschauen kann, ehe das Signal S, welches die oben genannten Aktionen auslöst, gesetzt wird. Aus diesem Grund sollte der zweite Schwellwert TA in der Regel nur wenige Sekunden wie etwa 3 Sekunden, bevorzugt jedoch nur 2 Sekunden betragen. Andere Werte sind dennoch möglich.For step ii. the second predeterminable threshold value TA is relevant. This sets - if step ii. is carried out - determines the maximum amount of time the driver can look away from his predetermined target value range for the eye position before the signal S, which triggers the above-mentioned actions, is set. For this reason, the second threshold value TA should generally only be a few seconds, such as 3 seconds, but preferably only 2 seconds. Other values are still possible.

Überdies kann der Schwellwert TA über die Zeit variieren, und/oder wie oben für den Wert TR bzw. die Zeitspanne tg beschrieben, von anderen Faktoren abhängig verändert werden.Furthermore, the threshold value TA can vary over time and/or, as described above for the value TR or the time period tg, can be changed depending on other factors.

Schließlich ist es in einer Erweiterung der Schritte i. und/oder ii. möglich, die Abweichung vom Sollwertbereich der Augenstellung zu quantifizieren und damit das Maß der Ablenkung des Fahrers zu gewichten. Mit anderen Worten: Je stärker die tatsächliche Augenstellung vom vorgegebenen Sollwertbereich abweicht, umso stärker fällt der entsprechende Zeitraum ins Gewicht. Die Motivation dahinter ist unter anderem, dass bei besonders starker Abweichung der Kopf des Fahrers länger braucht, um wieder in die normale Blickrichtung überführt zu werden. Überdies nimmt der Fahrer bei besonders starker Abweichung, etwa wenn der Fahrer sich nach hinten umdreht, auch nicht mehr wenigstens teilweise im Augenwinkel das Verkehrsgeschehen wahr.Finally, it is in an extension of steps i. and/or ii. possible to quantify the deviation from the target value range of the eye position and thus weight the extent of the driver's distraction. In other words: the more the actual eye position deviates from the specified target value range, the more significant the corresponding period of time becomes. The motivation behind this is, among other things, that if the deviation is particularly severe, the driver's head takes longer to return to the normal line of sight. In addition, in the event of a particularly strong deviation, for example when the driver turns backwards, the driver is no longer at least partially aware of the traffic situation out of the corner of his eye.

Mathematisch können dazu in den Schritten i. und/oder ii. die Zeiten t1, t2, ... mit einem einheitenlosen Faktor multipliziert werden, der beispielsweise 1 beträgt, wenn die Abweichung vom Sollwertbereich der Augenstellung mittelgroß ist. Sollte die Abweichung vom Sollwertbereich der Augenstellung jedoch groß sein, kann der Faktor größer 1 sein, etwa 1.5 oder 2 oder noch größer.Mathematically, this can be done in steps i. and/or ii. the times t1, t2, ... are multiplied by a unitless factor, which is, for example, 1 if the deviation from the target value range of the eye position is medium. However, if the deviation from the target value range of the eye position is large, the factor can be greater than 1, such as 1.5 or 2 or even greater.

Eine mittelgroße Abweichung vom Sollwertbereich der Augenstellung liegt dann vor, wenn der Fahrer mutmaßlich noch einen Teil des Gesichtsfeldes auf das Verkehrsgeschehen gerichtet hält. Ist dies nicht mehr der Fall, d.h. im Gesichtsfeld ist keinerlei Verkehrsgeschehen mehr wahrnehmbar, so liegt eine große Abweichung vor.A medium-sized deviation from the target value range of the eye position occurs when the driver presumably still has part of his field of vision focused on the traffic. If this is no longer the case, i.e. no traffic is visible in the field of vision, then there is a large deviation.

Weiterhin wird, wenn ein optisches oder akustisches Signal oder regelungstechnischer Schritt ausgelöst wurde, dieses Signal bzw. dieser Schritt rückgängig gemacht, sobald das Signal S nicht mehr gesetzt ist, oder bevorzugt erst nach einer gewissen Übergangszeit, nach der das Signal S durchgehend nicht mehr gesetzt ist. Diese Übergangszeit kann wenige (z.B. zwei) Sekunden oder aber einige Sekunden (z.B. fünf oder zehn) betragen, um einen Erziehungseffekt auf den Fahrer auszuüben, sich nicht ablenken zu lassen.Furthermore, if an optical or acoustic signal or control step has been triggered, this signal or step is reversed as soon as the signal S is no longer set, or preferably only after a certain transition time, after which the signal S is no longer set is. This transition time can be a few (e.g. two) seconds or a few seconds (e.g. five or ten) in order to have an educational effect on the driver not to be distracted.

Selbstredend funktioniert die Erfindung selbstverständlich auch invers bezüglich des Setzens des Signals S. Das heißt, das Signal S wird nur in allen vordefinierten anderen Fällen des Schrittes iii. gesetzt. Beim Triggern gemäß den Schritten i. und/oder ii. würde das Signal S nicht gesetzt werden. Das Auslösen der genannten Aktivitäten folgt dann, wenn das Signal S nicht gesetzt ist, ansonsten bleiben die Aktivitäten bei gesetztem Signal S aus.Of course, the invention also works inversely with respect to the setting of the signal S. This means that the signal S is only activated in all predefined other cases of step iii. set. When triggering according to steps i. and/or ii. the signal S would not be set. The activities mentioned are triggered when the signal S is not set, otherwise the activities do not occur when the signal S is set.

Bevorzugt werden die Verfahrensschritte des erfindungsgemäßen Verfahrens wiederkehrend durchgeführt.The process steps of the process according to the invention are preferably carried out repeatedly.

Vorteilhaft wird die Augenstellung eines Insassen, insbesondere des Fahrers, mittels einer Kamera und einer elektronischen Bildauswertungseinheit ermittelt wird. Die Kamera kann auf das sichtbare und/oder das infrarote Spektrum reagieren. Auch andere Wellenlängenbereiche sind möglich.The eye position of an occupant, in particular the driver, is advantageously determined using a camera and an electronic image evaluation unit. The camera can respond to the visible and/or infrared spectrum. Other wavelength ranges are also possible.

Alternativ ist es denkbar, per Ultraschall die Augenstellung zu ermitteln.Alternatively, it is conceivable to use ultrasound to determine the eye position.

Außerdem kann die Augenstellung indirekt ermittelt werden: Dazu bedient man sich mindestens zweier im Fahrzeug verteilter Mikrofone. Eine elektronische Auswerteeinheit bewertet dann aus dem Tonsignal, ob der Fahrer in Richtung Beifahrer oder z.B. Richtung der Rückbank spricht und/oder atmet, was auch eine Abweichung der Augenstellung vom Sollwertbereich, wenngleich indirekt, suffizient nachweist.In addition, the position of the eyes can be determined indirectly: To do this, at least two microphones are used distributed throughout the vehicle. An electronic evaluation unit then evaluates from the sound signal whether the driver speaks and/or breathes in the direction of the front passenger or, for example, in the direction of the back seat, which also sufficiently detects a deviation of the eye position from the target value range, albeit indirectly.

Selbstredend kann die Augenstellung auch noch anders ermittelt werden.Of course, the position of the eyes can also be determined in another way.

Eine weitere Ausgestaltung sieht vor, dass das Auslösen einer optischen Darstellung mindestens die Einblendung eines Textes und/oder Symboles im Blickfeld des betreffenden Insassen umfasst. Hierzu könnte etwa ein Head-Up-Display auf der Windschutzscheibe an geeigneter Stelle einen Text einblenden, wie etwa „Lassen Sie sich nicht ablenken!“ oder „Schauen Sie auf das Verkehrsgeschehen!“.A further embodiment provides that triggering a visual display includes at least the display of a text and/or symbol in the field of vision of the occupant in question. For this purpose, a head-up display on the windshield could show text at a suitable location, such as “Don’t be distracted!” or “Look at the traffic!”

Alternativ oder zusätzlich ist es möglich, dass ein Muster an mindestens eine Stelle der mutmaßlichen Sichtlinie des Fahrers bei Ablenkung projiziert wird, und zwar zur Störung der Wahrnehmung des ablenkenden Objektes. Hierzu kann oben im Fahrzeug, insbesondere im sogenannten Himmel, ein steuerbarer Projektor eingebaut sein. Bei dem besagten projizierten Muster kann es sich beispielsweise um ein rotes oder andersfarbiges Schachbrettmuster handeln. Zusätzlich kann dieses im Sekundentakt die Felder des Schachbrettmusters alternieren.Alternatively or additionally, it is possible for a pattern to be projected onto at least one point in the driver's presumed line of sight in the event of distraction, in order to disrupt the perception of the distracting object. For this purpose, a controllable projector can be installed at the top of the vehicle, especially in the so-called sky. The projected pattern in question can be, for example, a red or another colored checkerboard pattern. In addition, this can alternate the fields of the checkerboard pattern every second.

Weiterhin kann das Auslösen eines akustischen Signals mindestens eine Ansage und/oder einen Warnton umfasst. Als Ansage kommt etwa in Frage „Achten Sie auf den Verkehr!“ oder „Lassen Sie sich nicht ablenken!“. Bei dem Warnton kann es sich beispielsweise um ein leicht wahrnehmbares Geräusch (Alarmton) oder einen Jingle handeln.Furthermore, triggering an acoustic signal can include at least one announcement and/or a warning tone. Examples of possible announcements include “Pay attention to the traffic!” or “Don’t get distracted!” The warning tone can be, for example, an easily perceptible noise (alarm tone) or a jingle.

Die Ansage bzw. der Warnton können in der Lautstärke an die Motordrehzahl angepasst werden, d.h. je lauter der Motor ist, desto lauter ist auch die Ansage bzw. der Warnton.The volume of the announcement or warning tone can be adjusted to the engine speed, i.e. the louder the engine is, the louder the announcement or warning tone is.

Das Auslösen eines regelungstechnischen Schrittes umfasst vorteilhaft mindestens das Abschalten oder zumindest das funktionale Einschränken eines Entertainment-Moduls (z.B. des Radios, von Bluetooth übertragener Musik, eines dargestellten Videos etc.). Das Setzen des Signals S führt hier also dazu, dass das Entertainment-Modul weniger, bevorzugt sogar keine, ablenkungsfähige Audio- und/oder Video-Inhalte (mehr) darbietet.Triggering a control step advantageously includes at least switching off or at least functionally restricting an entertainment module (e.g. the radio, music transmitted via Bluetooth, a displayed video, etc.). Setting the signal S here results in the entertainment module presenting less, preferably no, distracting audio and/or video content (more).

Zwar betrifft letzteres nicht direkt ein mitgebrachtes Gerät („BYD-Gerät“), jedoch wird ein erzieherischer Effekt auf den Fahrer angewandt: Allgemeine Ablenkung, welche das erfindungsgemäße Verfahren detektiert, führt auch zur Einschränkung der Nutzung von sonst dauerhaft während der Fahrt erlaubten Dingen wie z.B. des Radios oder einer Musikwiedergabe.Although the latter does not directly affect a device brought with you (“BYD device”), it does have an educational effect on the driver: general distraction, which the method according to the invention detects, also leads to the restriction of the use of things that are otherwise permanently permitted while driving, such as e.g. the radio or music playback.

Außerdem kann das Auslösen eines regelungstechnischen Schrittes zusätzlich oder alternativ das Reduzieren der Geschwindigkeit des Fahrzeuges bedeuten. Dies ist besonders bei Automatikgetrieben gut umsetzbar. Aber auch im Falle einer Handschaltung kann etwa die maximal abrufbare Drehzahl des Motors begrenzt werden.In addition, triggering a control step can additionally or alternatively mean reducing the speed of the vehicle. This is particularly easy to implement with automatic transmissions. But even in the case of a manual transmission, the maximum available speed of the engine can be limited.

Die Aufgabe der Erfindung wird auch gelöst von einer Anordnung zur Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug, umfassend im Fahrzeug

  • - Mittel zur Ermittlung der Augenstellung eines Insassen (bevorzugt des Fahrers),
  • - elektronische Mittel zum Vergleich der ermittelten Augenstellung des Insassen mit einem vorgebbaren Sollwertbereich, wobei in diesen elektronischen Mitteln Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden:
    • i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der die Augenstellung des Insassen ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet, und/oder
    • ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie
    • iii. Nicht-Setzen des Signals S in allen anderen Fällen.
  • - Mittel zum Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald in den elektronischen Mitteln das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist.
The object of the invention is also achieved by an arrangement for monitoring the attention of an occupant in a vehicle, comprising in the vehicle
  • - Means for determining the eye position of an occupant (preferably the driver),
  • - Electronic means for comparing the determined eye position of the occupant with a predeterminable setpoint range, with these electronic means having times t1, t2, ... during which the determined eye position of the occupant deviates from the setpoint range, as follows for setting or not setting a signal S are evaluated:
    • i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable period of time tg, during which the occupant's eye position was determined, exceeds a first predeterminable threshold value TR, and / or
    • ii. Setting the signal S when the currently determined time t1, t2, ..., during which the occupant's eye position already deviates from the setpoint range, exceeds a second predeterminable threshold value TA, and
    • iii. Not setting the signal S in all other cases.
  • - Means for triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set in the electronic means and/or at least for the duration during which the signal S is set.

Wenn ein optisches oder akustisches Signal oder regelungstechnischer Schritt ausgelöst wurde, so wird dieses Signal bzw. dieser Schritt rückgängig gemacht, sobald das Signal S nicht mehr gesetzt ist, oder bevorzugt erst nach einer gewissen Übergangszeit, nach der das Signal S durchgehend nicht mehr gesetzt ist. Diese Übergangszeit kann wenige (z.B. zwei) Sekunden oder aber einige Sekunden (z.B. fünf oder zehn) betragen, um einen Erziehungseffekt auf den Fahrer auszuüben, sich nicht ablenken zu lassen.If an optical or acoustic signal or control step has been triggered, this signal or step is reversed as soon as the signal S is no longer set, or preferably only after a certain transition time, after which the signal S is no longer set . This transition time can be a few (e.g. two) seconds or a few seconds (e.g. five or ten) in order to have an educational effect on the driver not to be distracted.

Die besagten elektronischen Mittel zum Vergleich und die besagten Mittel zur Auslösung können miteinander gekoppelt, oder identisch, d.h. in einem gemeinsamen elektronischen Modul integriert, sein.Said electronic means for comparison and said means for triggering can be coupled to one another, or identical, i.e. integrated in a common electronic module.

Die Mittel zur Ermittlung der Augenstellung eines Insassen, insbesondere des Fahrers, umfassen beispielsweise mindestens eine Kamera und eine damit gekoppelte elektronische Bildauswertungseinheit. Die Kamera kann auf das sichtbare und/oder das infrarote Spektrum reagieren. Auch andere Wellenlängenbereiche sind möglich.The means for determining the eye position of an occupant, in particular the driver, include, for example, at least one camera and an electronic image evaluation unit coupled thereto. The camera can respond to the visible and/or infrared spectrum. Other wavelength ranges are also possible.

In einer weiteren Ausgestaltungsvariante sind die Mittel zum Auslösen eines regelungstechnischen Schrittes mit einem Entertainment-Modul (z.B. dem Radio, dem Bluetooth-Modul zum Übertragen von Musik, einem Video-Modul im Center-Information-Display etc.) gekoppelt. Bei gesetztem Signal S senden die Mittel zum Auslösen ein Steuersignal an besagtes Entertainment-Modul, welches das Abschalten oder zumindest funktionale Einschränken des Entertainment-Modules zur Folge hat.In a further embodiment variant, the means for triggering a control step are coupled to an entertainment module (e.g. the radio, the Bluetooth module for transmitting music, a video module in the center information display, etc.). When signal S is set, the means for triggering send a control signal to said entertainment module, which results in the entertainment module being switched off or at least functionally restricted.

Das Setzen des Signals S führt hier also dazu, dass das Entertainment-Modul weniger, bevorzugt sogar keine, ablenkungsfähige Audio- und/oder Video-Inhalte (mehr) darbietet. Zwar betrifft letzteres nicht direkt ein mitgebrachtes Gerät („BYD-Gerät“), jedoch wird ein erzieherischer Effekt auf den Fahrer angewandt: Allgemeine Ablenkung, welche die Anordnung detektiert, führt auch zur Einschränkung der Nutzung von sonst dauerhaft während der Fahrt erlaubten Dingen wie z.B. des Radios oder einer Musikwiedergabe.Setting the signal S here results in the entertainment module presenting less, preferably no, distracting audio and/or video content (more). Although the latter does not directly affect a device brought with you (“BYD device”), it does have an educational effect on the driver: general distraction, which the arrangement detects, also leads to the restriction of the use of things that are otherwise permanently permitted while driving, such as e.g. the radio or music playback.

Außerdem können die Mittel zum Auslösen eines regelungstechnischen Schrittes mit der Fahrzeugelektronik gekoppelt sein und bei gesetztem Signal S ein Steuersignal an besagte Fahrzeugelektronik senden, welches eine Reduktion der Geschwindigkeit des Fahrzeuges zur Folge hat. Dies ist besonders bei Automatikgetrieben gut umsetzbar. Aber auch im Falle einer Handschaltung kann etwa die maximal abrufbare Drehzahl des Motors begrenzt werden.In addition, the means for triggering a control step can be coupled to the vehicle electronics and, when signal S is set, send a control signal to said vehicle electronics, which results in a reduction in the speed of the vehicle. This is particularly easy to implement with automatic transmissions. But even in the case of a manual transmission, the maximum available speed of the engine can be limited.

Ansonsten gelten für die erfindungsgemäße Anordnung die weiter oben dargestellten Erklärungen und Ausgestaltungen in analoger Weise. Diese werden hier aus Redundanzgründen nicht wiederholt.Otherwise, the explanations and refinements presented above apply in an analogous manner to the arrangement according to the invention. These are not repeated here for reasons of redundancy.

Grundsätzlich bleibt die Leistungsfähigkeit der Erfindung erhalten, wenn die vorbeschriebenen Parameter in bestimmten Grenzen variiert werden.In principle, the performance of the invention is maintained if the parameters described above are varied within certain limits.

Es versteht sich, dass die vorstehend genannten und die nachstehend noch zu erläuternden Merkmale nicht nur in den angegebenen Kombinationen, sondern auch in anderen Kombinationen oder in Alleinstellung einsetzbar sind, ohne den Rahmen der vorliegenden Erfindung zu verlassen.It is understood that the features mentioned above and those to be explained below can be used not only in the combinations specified, but also in other combinations or alone, without departing from the scope of the present invention.

Die Erfindung wird im Folgenden anhand von Zeichnungen, die auch erfindungswesentliche Merkmale zeigen, näher erläutert. Es zeigt

  • 1 eine schematische Darstellung eines Fahrers in einem Fahrzeug,
  • 2 ein erstes Diagramm zur Illustration verschiedener Zeiten t1, t2, ... im Zusammenhang mit Schritt i.,
  • 3 ein zweites Diagramm zur Illustration verschiedener Zeiten t1, t2, . im Zusammenhang mit Schritt i., sowie
  • 4 ein Diagramm zur Illustration verschiedener Zeiten t1, t2, ... im Zusammenhang mit Schritt ii.
The invention is explained in more detail below with reference to drawings, which also show features essential to the invention. It shows
  • 1 a schematic representation of a driver in a vehicle,
  • 2 a first diagram to illustrate different times t1, t2, ... in connection with step i.,
  • 3 a second diagram to illustrate different times t1, t2, . related to step i., as well
  • 4 a diagram illustrating various times t1, t2, ... related to step ii.

Die folgende Beschreibung anhand der Zeichnungen 1 bis 4 bezieht sich das ein Verfahren zur Überwachung der Aufmerksamkeit eines Insassen 1 in einem Fahrzeug, bei welchem

  • - die Augenstellung eines Insassen 1 (insbesondere des Fahrers) ermittelt wird,
  • - die ermittelte Augenstellung des Insassen 1 mit einem vorgebbaren Sollwertbereich verglichen wird,
  • - Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen 1 vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden:
    1. i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der jeweils die Augenstellung des Insassen 1 ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet, und/oder
    2. ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen 1 bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie
    3. iii. Nicht-Setzen des Signals S in allen anderen Fällen,
  • - Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist.
The following description based on the drawings 1 until 4 This refers to a method for monitoring the attention of an occupant 1 in a vehicle, in which
  • - the eye position of an occupant 1 (in particular the driver) is determined,
  • - the determined eye position of the occupant 1 is compared with a predeterminable target value range,
  • - Times t1, t2, ..., during which the determined eye position of occupant 1 deviates from the setpoint range, are evaluated as follows to set or not set a signal S:
    1. i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable period of time tg, during which the eye position of the occupant 1 was determined, exceeds a first predeterminable threshold value TR, and / or
    2. ii. Setting the signal S when the currently determined time t1, t2, ..., during which the eye position of the occupant 1 already deviates from the setpoint range, exceeds a second predeterminable threshold value TA, and
    3. iii. Not setting the signal S in all other cases,
  • - Triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set and/or at least for the duration during which the signal S is set.

Die 1 zeigt eine schematische Darstellung eines Fahrers 1 in einem Fahrzeug sowie eine geometrische Vorgabe 2, wohin die Augen des Insassen 1, also des Fahrers 1, für die optimale Verfolgung des Verkehrsgeschehens schauen sollen.The 1 shows a schematic representation of a driver 1 in a vehicle and a geometric specification 2 where the eyes of the occupant 1, i.e. the driver 1, should look for optimal tracking of traffic events.

Eine solche geometrische Vorgabe 2 ist übertragbar in den vorgebbaren Sollwertbereich für die Augenstellung des Insassen.Such a geometric specification 2 can be transferred to the predeterminable target value range for the occupant's eye position.

Der besagte Sollwertbereich kann in verschiedenen Arten von Koordinaten bzw. Daten festgelegt werden. So könnte zum einen die Augenstellung dann im Sollwert sein, wenn Sie den Blick durch eines der Fenster des Fahrzeuges, oder ggf. nur der Frontscheibe, und auf den Rückspiegel bedeutet. Umgekehrt sollte der Blick ins Interieur des Fahrzeuges vorzugsweise nicht Teil des Sollwertbereiches sein. Dann nämlich wird durch die Erfindung auch sichergestellt, dass sich der Fahrer 1 nicht ohne Warnung von Standardgeräten wie etwa dem Radio oder durch die Benutzung der Lüftungseinstellungsschalter ablenken lässt, weil die entsprechenden Nutzungszeiten durch das Verfahren erkannt und ggf. geahndet werden.The setpoint range in question can be defined in different types of coordinates or data. On the one hand, the eye position could be in the target value if you look through one of the windows of the vehicle, or possibly only the windshield, and at the rear view mirror. Conversely, the view of the interior of the vehicle should preferably not be part of the target value range. The invention then also ensures that the driver 1 is not distracted without warning by standard devices such as the radio or by using the ventilation setting switches, because the corresponding usage times are recognized by the method and, if necessary, punished.

In 2 ist ein erstes Diagramm und in 3 ein zweites Diagramm zur Illustration verschiedener Zeiten t1, t2, ... im Zusammenhang mit Schritt i. dargestellt.In 2 is a first diagram and in 3 a second diagram illustrating different times t1, t2, ... related to step i. shown.

Beispielhaft sei hier TR zu 0,35 gewählt. Die Zeitspanne tg (in 2 und 3 in relativen Einheiten gezeigt) betrage z.B. 30 Sekunden. Jede der Zeiten t1, t2, t3 und t4, während derer die ermittelte Augenstellung des Insassen 1 vom Sollwertbereich abweicht, sei 3 Sekunden lang. Zeiten, während derer die ermittelte Augenstellung des Insassen 1 vom Sollwertbereich nicht abweichen, sind nicht extra gekennzeichnet und entsprechen den zu den Zeiten t1 bis t4 komplementären Zeitabschnitten.As an example, TR is chosen to be 0.35. The time period tg (in 2 and 3 shown in relative units) is e.g. 30 seconds. Each of the times t1, t2, t3 and t4, during which the determined eye position of the occupant 1 deviates from the target value range, is 3 seconds long. Times during which the determined eye position of the occupant 1 does not deviate from the setpoint range are not specifically marked and correspond to the time periods complementary to times t1 to t4.

Da in der in 2 betrachteten ersten Zeitspanne tg die Zeit t4 nicht enthalten ist, summieren sich die Zeiten t1+t2+t3 auf 9 Sekunden. Das entspricht einem relativen Anteil an der Zeitspanne tg von 9s / 30s = 0,3 < 0,35. Somit erfüllen die Umstände gemäß 2 nicht die Voraussetzung, um im verfahrensgemäßen Schritt i. das Signal S zu setzen, denn das Setzen des Signals S wird nur dann ausgeführt, wenn die Summe aller Zeiten t1, t2, ... dividiert durch die Zeitspanne tg, während der jeweils die Augenstellung des Insassen ermittelt wurde, den Schwellwert TR überschreitet.There in the in 2 If the time t4 is not included in the first time period tg considered, the times t1+t2+t3 add up to 9 seconds. This corresponds to a relative proportion of the time period tg of 9s / 30s = 0.3 < 0.35. Thus, the circumstances meet 2 not the prerequisite for procedural step i. to set the signal S, because the setting of the signal S is only carried out if the sum of all times t1, t2, ... divided by the time period tg, during which the occupant's eye position was determined, exceeds the threshold value TR.

Demgegenüber ist in den Verhältnissen gemäß in 3 während einer retrospektiv 3 Sekunden später betrachteten Zeitspanne tg die Zeit t4 auch enthalten, so dass sich die Zeiten t1+t2+t3+t4 auf 12 Sekunden summieren. Das entspricht einem relativen Anteil an der Zeitspanne tg von 12s / 30s = 0,4 > 0,35. Dieses Mal erfüllen daher die Umstände gemäß 3 die Voraussetzung, um im verfahrensgemäßen Schritt i. das Signal S zu setzen, denn das Setzen des Signals S wird dann ausgeführt, wenn die Summe aller Zeiten t1, t2, ... dividiert durch die Zeitspanne tg, während der jeweils die Augenstellung des Insassen ermittelt wurde, den Schwellwert TR überschreitet.In contrast, in the circumstances according to in 3 During a time period tg viewed retrospectively 3 seconds later, the time t4 is also included, so that the times t1+t2+t3+t4 add up to 12 seconds. This corresponds to a relative share of the time period tg of 12s / 30s = 0.4 > 0.35. This time the circumstances are fulfilling 3 the prerequisite for procedural step i. to set the signal S, because the setting of the signal S is carried out when the sum of all times t1, t2, ... divided by the time period tg, during which the occupant's eye position was determined, exceeds the threshold value TR.

Mit fortschreitender Zeit können die jeweils ermittelten Zeiten t1, t2, t3 usw. jeweils um die Zeitspanne tg rückwirkend vom aktuellen Zeitpunkt verfahrensgemäß im Schritt i. bewertet werden.As time progresses, the respectively determined times t1, t2, t3, etc. can be retroactively increased by the time period tg from the current point in time according to the procedure in step i. be rated.

Weiterhin zeigt 4 ein Diagramm zur Illustration verschiedener Zeiten t1, t2, ... im Zusammenhang mit Schritt ii. Hierbei sei TA beispielhaft zu 3 Sekunden gewählt. Es gilt ferner beispielhaft t1=2s, t2=6s und t3=1,5s.Continues to show 4 a diagram illustrating various times t1, t2, ... related to step ii. Here, TA is chosen as 3 seconds as an example. For example, t1=2s, t2=6s and t3=1.5s also apply.

Der Schritt ii. beinhaltet wie vorstehend beschrieben das Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen 1 bereits vom Sollwertbereich abweicht, den zweiten Schwellwert TA überschreitet.The step ii. As described above, includes setting the signal S when the currently determined time t1, t2, ..., during which the eye position of the occupant 1 already deviates from the setpoint range, exceeds the second threshold value TA.

Dies ist hier nur für die Zeit t2 der Fall. Während innerhalb der Zeiträume t1 und t3 das Signal S im Schritt ii. nicht gesetzt wird, wird es bereits nach Überschreiten von 3 Sekunden der Zeit t2 gesetzt. Nach Ablauf der 6 Sekunden der Zeit t2 wird das Signal S wieder nicht gesetzt.This is only the case here for time t2. While within the periods t1 and t3 the signal S in step ii. is not set, it is set after 3 seconds of time t2 have been exceeded. After the 6 seconds of time t2 have elapsed, the signal S is not set again.

Unabhängig davon, innerhalb welchen Schrittes (i. und/oder ii.) das Signal S gesetzt wurde, erfolgt dann das Auslösen der mindestens einen optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist bzw. bleibt.Regardless of which step (i. and/or ii.) the signal S was set, the at least one optical representation and/or an acoustic signal and/or a control step is triggered as soon as the signal S is set and /or at least for the duration during which the signal S is or remains set.

Weiterhin wird, wenn ein optisches oder akustisches Signal oder regelungstechnischer Schritt ausgelöst wurde, dieses Signal bzw. dieser Schritt rückgängig gemacht, sobald das Signal S nicht mehr gesetzt ist, oder bevorzugt erst nach einer gewissen Übergangszeit, nach der das Signal S durchgehend nicht mehr gesetzt ist. Diese Übergangszeit kann wenige (z.B. zwei) Sekunden oder aber einige Sekunden (z.B. fünf oder zehn) betragen, um einen Erziehungseffekt auf den Fahrer 1 auszuüben, sich nicht ablenken zu lassen.Furthermore, if an optical or acoustic signal or control step has been triggered, this signal or step is reversed as soon as the signal S is no longer set, or preferably only after a certain transition time, after which the signal S is no longer set is. This transition time can be a few (for example two) seconds or a few seconds (for example five or ten) in order to have an educational effect on the driver 1 not to be distracted.

Es ist festzuhalten, dass das Verfahren auch lediglich einen der vorgenannten Schritte i. oder ii. beinhalten kann. In jedem Falle ist aber dazu auch der Schritt iii. beinhaltet.It should be noted that the process only involves one of the aforementioned steps i. or ii. can include. In any case, step iii is also necessary. contains.

Bevorzugt werden alle Verfahrensschritte des Verfahrens wiederkehrend durchgeführt.All process steps of the process are preferably carried out repeatedly.

Bei dem Fahrzeug kann es sich um einen Personenkraftwagen, einen Lastkraftwagen, ein Luftfahrzeug, ein Raumfahrzeug oder ein Wasserfahrzeug handeln.The vehicle may be a passenger car, a truck, an aircraft, a spacecraft or a watercraft.

Vorteilhaft wird die Augenstellung eines Insassen 1, insbesondere des Fahrers 1, mittels einer Kamera und einer elektronischen Bildauswertungseinheit ermittelt wird. Die Kamera kann auf das sichtbare und/oder das infrarote Spektrum reagieren. Auch andere Wellenlängenbereiche sind möglich.The eye position of an occupant 1, in particular the driver 1, is advantageously determined by means of a camera and an electronic image evaluation unit. The camera can respond to the visible and/or infrared spectrum. Other wavelength ranges are also possible.

Eine weitere Ausgestaltung sieht vor, dass das Auslösen einer optischen Darstellung mindestens die Einblendung eines Textes und/oder Symboles im Blickfeld des betreffenden Insassen 1 umfasst. Hierzu könnte etwa ein Head-Up-Display auf der Windschutzscheibe an geeigneter Stelle einen Text einblenden, wie etwa „Lassen Sie sich nicht ablenken!“.A further embodiment provides that triggering a visual display includes at least the display of a text and/or symbol in the field of vision of the occupant 1 in question. For this purpose, a head-up display on the windshield could show text at a suitable location, such as “Don’t be distracted!”

Weiterhin kann das Auslösen eines akustischen Signals mindestens eine Ansage und/oder einen Warnton umfasst.Furthermore, triggering an acoustic signal can include at least one announcement and/or a warning tone.

Das Auslösen eines regelungstechnischen Schrittes umfasst in weiteren Ausgestaltungen vorteilhaft mindestens das Abschalten oder zumindest das funktionale Einschränken eines Entertainment-Moduls (z.B. des Radios, von Bluetooth übertragener Musik, eines dargestellten Videos etc.). Das Setzen des Signals S führt hier also dazu, dass das Entertainment-Modul weniger, bevorzugt sogar keine, ablenkungsfähige Audio- und/oder Video-Inhalte (mehr) darbietet.In further embodiments, triggering a control step advantageously includes at least switching off or at least functionally restricting an entertainment module (e.g. the radio, music transmitted by Bluetooth, a displayed video, etc.). Setting the signal S here results in the entertainment module presenting less, preferably no, distracting audio and/or video content (more).

Zwar betrifft letzteres nicht direkt ein mitgebrachtes Gerät („BYD-Gerät“), jedoch wird ein erzieherischer Effekt auf den Fahrer 1 angewandt: Allgemeine Ablenkung, welche das Verfahren detektiert, führt auch zur Einschränkung der Nutzung von sonst dauerhaft während der Fahrt erlaubten Dingen wie z.B. des Radios oder einer Musikwiedergabe.Although the latter does not directly affect a device brought with you (“BYD device”), an educational effect is applied to the driver 1: General distraction, which the procedure detects, also leads to the restriction of the use of things that are otherwise permanently permitted while driving, such as e.g. the radio or music playback.

Die vorn beschriebene Anordnung zur Überwachung der Aufmerksamkeit eines Insassen 1 in einem Fahrzeug kann analog zum vorbeschriebenen Verfahren anhand der Zeichnungen 1 bis 4 erläutert werden. Aus Redundanzgründen wird diese Erläuterung hier nicht wiederholt.The arrangement described above for monitoring the attention of an occupant 1 in a vehicle can be done analogously to the method described above using the drawings 1 until 4 be explained. For reasons of redundancy, this explanation is not repeated here.

Die vorstehend beschriebenen Verfahren und Anordnungen lösen die gestellte Aufgabe: Es wurden ein Verfahren und eine Anordnung beschrieben, die eine Detektion von Ablenkung des Fahrers eines Fahrzeugs, einschließlich durch nicht im Fahrzeug fest verbaute Gerätschaften, welche Fahrzeugnutzer mit in das Fahrzeug bringen können, gewährleisten. Es sind ferner Maßnahmen mindestens zur indirekten Verminderung der Ablenkung des Fahrers, unabhängig vom ihn ablenkenden Gerät, möglich. Außerdem ist die besagte Detektion ohne aktive Eingaben oder Interaktionen des Fahrers durchführbar.The methods and arrangements described above solve the task: A method and an arrangement have been described which ensure detection of distraction of the driver of a vehicle, including by equipment that is not permanently installed in the vehicle and which vehicle users can bring into the vehicle. Measures are also possible to at least indirectly reduce the driver's distraction, regardless of the device distracting him. In addition, said detection can be carried out without active input or interaction from the driver.

Die vorangehend beschriebene Erfindung kann vorteilhaft in Fahrzeugen verwendet werden, um jedwede Art visueller Ablenkung des Fahrers zu detektieren und zu sanktionieren. Dies bietet einen hilfreichen Beitrag zur allgemeinen Erhöhung der Verkehrssicherheit.The invention described above can be advantageously used in vehicles to detect and sanction any type of visual distraction of the driver. This offers a helpful contribution to generally increasing road safety.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 102009046451 A1 [0003]DE 102009046451 A1 [0003]
  • DE 202017105761 U1 [0004]DE 202017105761 U1 [0004]
  • DE 112015005433 T5 [0005]DE 112015005433 T5 [0005]
  • US 2012/0215403 A1 [0006]US 2012/0215403 A1 [0006]

Claims (10)

Verfahren zur Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug, bei welchem - die Augenstellung eines Insassen (1) ermittelt wird, - die ermittelte Augenstellung des Insassen (1) mit einem vorgebbaren Sollwertbereich verglichen wird, - Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen (1) vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden: i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der jeweils die Augenstellung des Insassen (1) ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet, und/oder ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen (1) bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie iii. Nicht-Setzen des Signals S in allen anderen Fällen, - Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist.Method for monitoring the attention of an occupant in a vehicle, in which - the eye position of an occupant (1) is determined, - the determined eye position of the occupant (1) is compared with a predeterminable target value range, - Times t1, t2, ..., during which the determined eye position of the occupant (1) deviates from the setpoint range, are evaluated as follows to set or not set a signal S: i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable period of time tg, during which the eye position of the occupant (1) was determined, exceeds a first predeterminable threshold value TR, and / or ii. Setting the signal S when the currently determined time t1, t2, ..., during which the eye position of the occupant (1) already deviates from the setpoint range, exceeds a second predeterminable threshold value TA, and iii. Not setting the signal S in all other cases, - Triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set and/or at least for the duration during which the signal S is set. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Verfahrensschritte wiederkehrend durchgeführt werden.Procedure according to Claim 1 , characterized in that the process steps are carried out repeatedly. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Augenstellung eines Insassen (1) mittels einer Kamera und einer Bildauswertungseinheit ermittelt wird.Method according to one of the preceding claims, characterized in that the eye position of an occupant (1) is determined by means of a camera and an image evaluation unit. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das Auslösen einer optischen Darstellung mindestens die Einblendung eines Textes und/oder Symboles im Blickfeld des betreffenden Insassen (1) umfasst.Method according to one of the preceding claims, characterized in that triggering an optical representation includes at least the display of a text and/or symbol in the field of vision of the occupant (1) in question. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das Auslösen eines akustischen Signals mindestens eine Ansage und/oder einen Warnton umfasst.Method according to one of the preceding claims, characterized in that triggering an acoustic signal comprises at least one announcement and/or a warning tone. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das Auslösen eines regelungstechnischen Schrittes mindestens das Abschalten eines Entertainment-Moduls und/oder das Reduzieren der Geschwindigkeit des Fahrzeuges umfasst.Method according to one of the preceding claims, characterized in that triggering a control step includes at least switching off an entertainment module and/or reducing the speed of the vehicle. Anordnung zur Überwachung der Aufmerksamkeit eines Insassen in einem Fahrzeug, umfassend im Fahrzeug - Mittel zur Ermittlung der Augenstellung eines Insassen (1), - elektronische Mittel zum Vergleich der ermittelten Augenstellung des Insassen (1) mit einem vorgebbaren Sollwertbereich, wobei in diesen elektronischen Mitteln Zeiten t1, t2, ..., während derer die ermittelte Augenstellung des Insassen (1) vom Sollwertbereich abweicht, wie folgt zum Setzen oder Nicht-Setzen eines Signals S ausgewertet werden: i. Setzen des Signals S, wenn die Summe aller Zeiten t1, t2, ... dividiert durch eine vorgebbare Zeitspanne tg, während der die Augenstellung des Insassen (1) ermittelt wurde, einen ersten vorgebbaren Schwellwert TR überschreitet, und/oder ii. Setzen des Signals S, wenn die jeweils aktuell ermittelte Zeit t1, t2, ..., während der die Augenstellung des Insassen (1) bereits vom Sollwertbereich abweicht, einen zweiten vorgebbaren Schwellwert TA überschreitet, sowie iii. Nicht-Setzen des Signals S in allen anderen Fällen, - Mittel zum Auslösen mindestens einer optischen Darstellung und/oder eines akustischen Signals und/oder eines regelungstechnischen Schrittes, sobald in den elektronischen Mitteln das Signal S gesetzt wird und/oder mindestens während der Dauer, während der das Signal S gesetzt ist.Arrangement for monitoring the attention of an occupant in a vehicle, comprising in the vehicle - Means for determining the eye position of an occupant (1), - Electronic means for comparing the determined eye position of the occupant (1) with a predeterminable setpoint range, with these electronic means times t1, t2, ... during which the determined eye position of the occupant (1) deviates from the setpoint range, as follows for setting or not setting a signal S: i. Setting the signal S when the sum of all times t1, t2, ... divided by a predeterminable time period tg, during which the eye position of the occupant (1) was determined, exceeds a first predeterminable threshold value TR, and / or ii. Setting the signal S when the currently determined time t1, t2, ..., during which the eye position of the occupant (1) already deviates from the setpoint range, exceeds a second predeterminable threshold value TA, and iii. Not setting the signal S in all other cases, - Means for triggering at least one visual representation and/or an acoustic signal and/or a control step as soon as the signal S is set in the electronic means and/or at least for the duration during which the signal S is set. Anordnung nach Anspruch 7, dadurch gekennzeichnet, dass die Mittel zur Ermittlung der Augenstellung eines Insassen (1) mindestens eine Kamera und eine damit gekoppelte Bildauswertungseinheit umfassen.Arrangement according to Claim 7 , characterized in that the means for determining the eye position of an occupant (1) comprise at least one camera and an image evaluation unit coupled to it. Anordnung nach einem der Ansprüche 7 oder 8, dadurch gekennzeichnet, dass die Mittel zum Auslösen eines regelungstechnischen Schrittes mit einem Entertainment-Modul gekoppelt sind und bei gesetztem Signal S ein Steuersignal an besagtes Entertainment-Modul senden, welches das Abschalten des Entertainment-Modules zur Folge hat.Arrangement according to one of the Claims 7 or 8th , characterized in that the means for triggering a control step are coupled to an entertainment module and at law tem signal S send a control signal to said entertainment module, which results in the entertainment module being switched off. Anordnung nach einem der Ansprüche 7 bis 9, dadurch gekennzeichnet, dass die Mittel zum Auslösen eines regelungstechnischen Schrittes mit der Fahrzeugelektronik gekoppelt sind und bei gesetztem Signal S ein Steuersignal an besagte Fahrzeugelektronik senden, welches eine Reduktion der Geschwindigkeit des Fahrzeuges zur Folge hat.Arrangement according to one of the Claims 7 until 9 , characterized in that the means for triggering a control step are coupled to the vehicle electronics and, when signal S is set, send a control signal to said vehicle electronics, which results in a reduction in the speed of the vehicle.
DE102022106203.1A 2022-03-16 2022-03-16 Method and arrangement for monitoring the attention of an occupant in a vehicle Pending DE102022106203A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102022106203.1A DE102022106203A1 (en) 2022-03-16 2022-03-16 Method and arrangement for monitoring the attention of an occupant in a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102022106203.1A DE102022106203A1 (en) 2022-03-16 2022-03-16 Method and arrangement for monitoring the attention of an occupant in a vehicle

Publications (1)

Publication Number Publication Date
DE102022106203A1 true DE102022106203A1 (en) 2023-09-21

Family

ID=87849639

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022106203.1A Pending DE102022106203A1 (en) 2022-03-16 2022-03-16 Method and arrangement for monitoring the attention of an occupant in a vehicle

Country Status (1)

Country Link
DE (1) DE102022106203A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102023129029A1 (en) 2023-10-23 2025-04-24 Bayerische Motoren Werke Aktiengesellschaft Driver monitoring system for a vehicle and method for driver monitoring

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10153987A1 (en) 2001-11-06 2003-05-28 Daimler Chrysler Ag Information system in a vehicle
DE102009046451A1 (en) 2009-11-06 2011-05-12 Robert Bosch Gmbh Method for detecting vision attention to assembly area of e.g. infotainment device of motor vehicle, involves outputting signal via interface when viewing direction of occupant is directed to area so as to detect vision attention to area
US20120215403A1 (en) 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
DE102014006668A1 (en) 2014-05-07 2014-10-30 Daimler Ag Method for assisting a driver while driving a vehicle
DE102014011264A1 (en) 2014-07-28 2016-01-28 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Method for calculating a return time
DE102015001686A1 (en) 2015-02-07 2016-08-11 Daimler Ag Method and device for detecting a driver's responsiveness in automated driving
DE112015005433T5 (en) 2014-12-30 2017-08-31 Tk Holdings Inc. Occupant surveillance systems and procedures
DE202017105761U1 (en) 2016-10-20 2018-03-19 Google LLC (n.d.Ges.d. Staates Delaware) Automatic step control of driver interaction with content
DE102018125939A1 (en) 2018-10-18 2020-04-23 Bayerische Motoren Werke Aktiengesellschaft Method and control unit for transferring a driving task to a driver of a vehicle
DE102019009062A1 (en) 2019-12-23 2020-08-27 Daimler Ag Method for operating an at least partially automated motor vehicle and a computer program product

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10153987A1 (en) 2001-11-06 2003-05-28 Daimler Chrysler Ag Information system in a vehicle
DE102009046451A1 (en) 2009-11-06 2011-05-12 Robert Bosch Gmbh Method for detecting vision attention to assembly area of e.g. infotainment device of motor vehicle, involves outputting signal via interface when viewing direction of occupant is directed to area so as to detect vision attention to area
US20120215403A1 (en) 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
DE102014006668A1 (en) 2014-05-07 2014-10-30 Daimler Ag Method for assisting a driver while driving a vehicle
DE102014011264A1 (en) 2014-07-28 2016-01-28 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Method for calculating a return time
DE112015005433T5 (en) 2014-12-30 2017-08-31 Tk Holdings Inc. Occupant surveillance systems and procedures
DE102015001686A1 (en) 2015-02-07 2016-08-11 Daimler Ag Method and device for detecting a driver's responsiveness in automated driving
DE202017105761U1 (en) 2016-10-20 2018-03-19 Google LLC (n.d.Ges.d. Staates Delaware) Automatic step control of driver interaction with content
DE102018125939A1 (en) 2018-10-18 2020-04-23 Bayerische Motoren Werke Aktiengesellschaft Method and control unit for transferring a driving task to a driver of a vehicle
DE102019009062A1 (en) 2019-12-23 2020-08-27 Daimler Ag Method for operating an at least partially automated motor vehicle and a computer program product

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102023129029A1 (en) 2023-10-23 2025-04-24 Bayerische Motoren Werke Aktiengesellschaft Driver monitoring system for a vehicle and method for driver monitoring

Similar Documents

Publication Publication Date Title
EP1182089B1 (en) Vehicle driver warning procedure
EP1230106B1 (en) Automotive assistance device for a vehicle
DE102015201456B4 (en) Method and system for issuing a warning message in a vehicle
DE102019201407A1 (en) Method and device for controlling a driver&#39;s attention
DE102010002119A1 (en) Exterior image surveillance system and vehicle with same
DE102018211261A1 (en) Method for operating a display device and display system for a motor vehicle worn on the head by a vehicle occupant of a motor vehicle
DE102013221654A1 (en) Tire Track test monitoring
DE102015206209A1 (en) Method for determining a measure of the attention of a driver and device for monitoring the attention of a driver
DE102017202257B4 (en) Display device for a motor vehicle, motor vehicle and method for the individual setting of a display
DE102013222584A1 (en) Optical playback and recognition system in a vehicle
DE102022106203A1 (en) Method and arrangement for monitoring the attention of an occupant in a vehicle
DE112017007854T5 (en) Automated driving system and method for stimulating a driver
DE102018213363A1 (en) Determination of setting parameters for an adjustable component of a motor vehicle
DE102023110625A1 (en) SYSTEM AND METHOD FOR GENERATING, MONITORING AND CORRECTING A WARNING TO AN OCCUPANT OF A VEHICLE
DE60317668T2 (en) Method and device for estimating the load of a driver
DE102019008898A1 (en) Method for detecting the surroundings of a vehicle, device for carrying out such a method, and vehicle with such a device
DE102021215029B4 (en) Procedures for exchanging information between vehicles
DE102019118183A1 (en) Information system and process
DE102023106367A1 (en) OCCUPANT CONDITION MONITORING DEVICE
DE102018216511A1 (en) Method for estimating the driver&#39;s attention of a vehicle
DE102018203951A1 (en) Method for representing an environmental region of a motor vehicle of a vehicle convoy, and driver assistance system
DE102016225399A1 (en) Evaluation of the attention of road users
DE102018127471A1 (en) Method and system for warning a driver of a vehicle
DE102020214908A1 (en) Method and device for monitoring the viewing direction of a driver when driving a motor vehicle
DE102019110364A1 (en) Method for assisting a driver in driving the vehicle by activating a lane departure warning system as a function of the direction in which the driver is looking and an assistance system

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication