[go: up one dir, main page]

DE102020208203A1 - Method for monitoring a vehicle interior of a vehicle - Google Patents

Method for monitoring a vehicle interior of a vehicle Download PDF

Info

Publication number
DE102020208203A1
DE102020208203A1 DE102020208203.0A DE102020208203A DE102020208203A1 DE 102020208203 A1 DE102020208203 A1 DE 102020208203A1 DE 102020208203 A DE102020208203 A DE 102020208203A DE 102020208203 A1 DE102020208203 A1 DE 102020208203A1
Authority
DE
Germany
Prior art keywords
vehicle
vehicle occupant
status data
occupant
sensors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102020208203.0A
Other languages
German (de)
Inventor
Alexander Djordjevic
Elise Castelaz
Frieder Kloepfer
Henning Hoepfner
Klaus Hammer
Tobias Meilinger
Eli Davis
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102020208203.0A priority Critical patent/DE102020208203A1/en
Priority to CN202110736171.0A priority patent/CN113879228A/en
Publication of DE102020208203A1 publication Critical patent/DE102020208203A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512Passenger detection systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20Means to switch the anti-theft system on or off
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B23/00Alarms responsive to unspecified undesired or abnormal conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Vorgeschlagen wird ein Verfahren (60) zum Überwachen eines Fahrzeuginnenraumes (26) eines Fahrzeugs (20) mit den folgenden Schritten:Identifizieren und Beobachten eines Fahrzeuginsassen (24) in dem Fahrzeuginnenraum (26) mittels einer Beobachtungsvorrichtung (22),Ermitteln eines abstrahierten Modells (82) des Fahrzeuginsassen (24) basierend auf den Daten der Beobachtungsvorrichtung (22),Beobachten des Fahrzeuginnenraums (26) mittels der Beobachtungsvorrichtung (22) und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren und Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen (24) und/oder des Fahrzeuginnenraumes (26),Verknüpfen des einen oder der mehreren Zustandsdaten mit dem abstrahierten Model (82) des Fahrzeuginsassen (24), sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model (82) des Fahrzeuginsassen (24) einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden,Darstellen des abstrahierten Modells (82) des Fahrzeuginsassen (24) und das eine oder die mehreren mit dem abstrahierten Model (82) des Fahrzeuginsassen (24) verknüpften Zustandsdaten mittels einer Anzeigevorrichtung (40).A method (60) for monitoring a vehicle interior (26) of a vehicle (20) is proposed, having the following steps: identifying and observing a vehicle occupant (24) in the vehicle interior (26) using an observation device (22), determining an abstract model ( 82) the vehicle occupant (24) based on the data from the monitoring device (22), observing the vehicle interior (26) using the monitoring device (22) and/or using one or more sensors arranged in the vehicle and determining one or more status data of the vehicle occupant ( 24) and/or the vehicle interior (26), associating the one or more status data with the abstract model (82) of the vehicle occupant (24) such that the one or more status data are related to the abstract model (82) of the vehicle occupant ( 24) be assigned to a local location at which the ascertained status data are observed and/or ascertained,D displaying the abstract model (82) of the vehicle occupant (24) and the one or more status data linked to the abstract model (82) of the vehicle occupant (24) by means of a display device (40).

Description

Stand der TechnikState of the art

Die Erfindung betrifft ein Verfahren zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs nach Gattung des unabhängigen Anspruchs. Weiterhin ist auch eine Vorrichtung zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs Gegenstand der vorliegenden Erfindung.The invention relates to a method for monitoring a vehicle interior of a vehicle according to the preamble of the independent claim. The present invention also relates to a device for monitoring a vehicle interior of a vehicle.

Aus der DE 10 2014 214 352 A1 ist eine Verfahren und Anordnung zum Betreiben eines Insassenbeobachtungssystems bekannt.From the DE 10 2014 214 352 A1 a method and arrangement for operating an occupant observation system is known.

Offenbarung der ErfindungDisclosure of the invention

Vorgeschlagen wird ein Verfahren zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs mit den folgenden Schritten:

  • Identifizieren und Beobachten eines Fahrzeuginsassen in dem Fahrzeuginnenraum mittels einer Beobachtungsvorrichtung,
  • Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung,
  • Beobachten des Fahrzeuginnenraums mittels der Beobachtungsvorrichtung und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren und Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes,
  • Verknüpfen des einen oder der mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden,
  • Darstellen des abstrahierten Modells des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten mittels einer Anzeigevorrichtung.
A method is proposed for monitoring the interior of a vehicle with the following steps:
  • Identifying and observing a vehicle occupant in the vehicle interior by means of an observation device,
  • Determination of an abstracted model of the vehicle occupant based on the data from the observation device,
  • Observing the vehicle interior by means of the observation device and / or by means of one or more sensors arranged in the vehicle and determining one or more status data of the vehicle occupants and / or the vehicle interior,
  • Linking the one or more status data with the abstracted model of the vehicle occupant, so that the one or more status data in relation to the abstracted model of the vehicle occupant are assigned to a local point at which the determined status data are observed and / or determined,
  • Representation of the abstracted model of the vehicle occupant and the one or more status data linked to the abstracted model of the vehicle occupant by means of a display device.

Die Beobachtungsvorrichtung kann auch als Beobachtungssystem und/oder als Insassenbeobachtungssystem bezeichnet werden. Die Beobachtungsvorrichtung kann beispielsweise ausgebildet sein, einen Fahrzeuginsassen zu beobachten, zum Beispiel eine Körperhaltung, eine Blickrichtung und/oder eine Position eines Körpers, eines Kopfes bzw. eines Gesichts bzw. von Augen des Fahrzeuginsassen, insbesondere eines Fahrers oder eines Beifahrers, oder einen Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen zu erfassen. Ferner kann beispielsweise eine Identität eines Fahrzeuginsassen erfasst werden. Eine Anzeigevorrichtung kann als eine in dem Fahrzeug verbaute Anzeigevorrichtung, zum Beispiel als ein Display ausgebildet sein oder als mobile Anzeigevorrichtung, zum Beispiel als Smartphone oder Tablet. Beobachten des Fahrzeuginnenraums mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren kann in diesem Zusammenhang auch als Überwachen des Fahrzeuginnenraums mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren verstanden werden.The observation device can also be referred to as an observation system and / or as an occupant observation system. The observation device can be designed, for example, to observe a vehicle occupant, for example a posture, a line of sight and / or a position of a body, a head or a face or eyes of the vehicle occupant, in particular a driver or a passenger, or a state of drowsiness and / or to record other vital signs of the vehicle occupant. Furthermore, for example, an identity of a vehicle occupant can be recorded. A display device can be designed as a display device installed in the vehicle, for example as a display, or as a mobile display device, for example as a smartphone or tablet. Observing the vehicle interior by means of one or more sensors arranged in the vehicle can also be understood in this context as monitoring the vehicle interior by means of one or more sensors arranged in the vehicle.

Der Vorteil der vorliegenden Erfindung liegt darin, dass dem Fahrzeuginsassen ein digitales, repräsentatives Abbild seiner aktuellen Körperhaltung als abstrahiertes Modell sowie im Fahrzeug erfasste und ausgewertete Daten bzw. Informationen auf einem Display sichtbar dargestellt werden können. Hierdurch kann einem Fahrzeuginsassen transparent gemacht werden, welche Daten im Moment durch Sensoren im Fahrzeug analysiert und aufgezeichnet werden. Vorzugsweise kann das Vertrauen in das Überwachungssystem, insbesondere der Sensoren und/oder der Beobachtungsvorrichtung, und somit insbesondere in das Gesamtsystem gesteigert werden, wodurch insbesondere Ängste bezüglich der Überwachung des Fahrzeuginsassen abgebaut werden können. Hierdurch kann vorteilhafterweise die Akzeptanz des Beobachtungssystems und der Überwachung durch das Beobachtungssystem erhöht werden. Durch eine abstrahierte Darstellung des Fahrzeuginsassen, insbesondere eine generalisierte Darstellung des Fahrzeuginsassen, kann beispielsweise das Gefühl der Überwachung für den Fahrzeuginsassen reduziert werden. Beispielsweise kann als abstrahiertes Modell der Fahrzeuginsasse bzw. der menschliche Körper aus verschiedenen Grundkörpern, beispielsweise Ellipsoiden zusammengesetzt dargestellt werden. Hierdurch kann der Fahrzeuginsasse insbesondere als Mensch erkannt werden, wobei die Identität jedoch nicht auf dem Display erkennbar ist.The advantage of the present invention is that the vehicle occupant can be shown a digital, representative image of his or her current body posture as an abstract model, as well as data or information recorded and evaluated in the vehicle, visibly on a display. This allows a vehicle occupant to see which data is currently being analyzed and recorded by sensors in the vehicle. The trust in the monitoring system, in particular the sensors and / or the observation device, and thus in particular in the overall system can preferably be increased, whereby fears regarding the monitoring of the vehicle occupant in particular can be reduced. This can advantageously increase the acceptance of the observation system and the monitoring by the observation system. An abstract representation of the vehicle occupant, in particular a generalized representation of the vehicle occupant, can, for example, reduce the feeling of being monitored for the vehicle occupant. For example, the vehicle occupant or the human body can be represented as an abstract model composed of various base bodies, for example ellipsoids. As a result, the vehicle occupant can in particular be recognized as a person, although the identity cannot be recognized on the display.

Ein weiterer Vorteil der vorliegenden Erfindung ist, dass mittels der Verknüpfung des abstrahierten Modells und Zustandsdaten analysiert werden kann, an welcher Stelle welche Zustandsdaten in den Fahrzeuginnenraum gemessen werden. Beispielsweise kann hierdurch eine Situation im Fahrzeuginnenraum analysiert werden. Beispielsweise kann der Zustand des Fahrzeuginsassen, zum Beispiel der Gesundheitszustand, überwacht werden. Weiterhin kann überwacht werden, ob ein Fahrzeuginsasse in einem Fahrzeug raucht, ob dieser das Fahrzeug verschmutzt, oder ob eine bedrohliche Situation in einem Fahrzeug, beispielsweise durch Gewalt, herrscht. Gegebenenfalls können hierdurch weitere Maßnahmen eingeleitet werden.A further advantage of the present invention is that by means of the linking of the abstracted model and status data it can be analyzed at which point which status data is measured in the vehicle interior. For example, a situation in the vehicle interior can be analyzed in this way. For example, the condition of the vehicle occupant, for example the state of health, can be monitored. It is also possible to monitor whether a vehicle occupant smokes in a vehicle, whether he or she is contaminating the vehicle, or whether there is a threatening situation in a vehicle, for example due to violence. If necessary, further measures can be initiated as a result.

In einer vorteilhaften Ausführung kann die Beobachtungsvorrichtung eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden.In an advantageous embodiment, the observation device can comprise a camera and / or one or more sensors for observing the vehicle occupant. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably.

In einer Weiterentwicklung kann der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts. Hierdurch kann sicher und/oder zuverlässig identifiziert werden, ob sich ein Fahrzeuginsasse auf einem Fahrzeugsitz befindet. Weiterhin kann durch die Drucksensoren eine Gewichtsverlagerung und somit eine Körperhaltung des Fahrzeuginsassen gemessen und/oder ermittelt werden.In a further development, the one or more sensors can be designed as one or more pressure sensors in a vehicle seat for measuring a weight on the vehicle seat. This makes it possible to identify safely and / or reliably whether a vehicle occupant is on a vehicle seat. Furthermore, a weight shift and thus a posture of the vehicle occupant can be measured and / or determined by means of the pressure sensors.

Vorzugsweise können der in dem Fahrzeug angeordneten eine oder mehrere Sensoren als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden. Mittels des Sicherheitsgurtsensors können insbesondere die Vitalwerte eines Fahrzeuginsassen beobachtet werden, zum Beispiel der Puls des Fahrzeuginsassen. Mittels des Temperatursensors kann beispielsweise eine Körpertemperatur des Fahrzeuginsassen oder eine Temperatur des Fahrzeuginnenraums gemessen werden. Mittels Geruchssensors kann beispielsweise ein Geruch in dem Fahrzeug Innenraum identifiziert werden, wodurch beispielsweise Rauch, zum Beispiel Zigarettenrauch, und/oder eine Verschmutzung in dem Fahrzeuginnenraum identifiziert werden können. Mittels des Mikrofons können Geräusche in dem Fahrzeuginnenraum identifiziert werden. Vorzugsweise kann hierdurch eine Stimmung bzw. Atmosphäre in dem Fahrzeuginsassen, beispielsweise durch die Tonlage der identifizierten Stimmen in dem Fahrzeuginnenraum, ermittelt werden, wodurch zum Beispiel ein sicherheitskritischer Zustand in dem Fahrzeuginnenraum erkannt werden kann. In einer beispielhaften Ausgestaltung können der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. Hierdurch lässt sich der Fahrzeuginnenraum bzw. Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachten bzw. ermitteln.The one or more sensors arranged in the vehicle can preferably be designed as a seat belt sensor, a temperature sensor, an odor sensor, a microphone and / or an ultrasonic sensor. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably. In particular, the vital signs of a vehicle occupant can be observed by means of the seat belt sensor, for example the pulse of the vehicle occupant. For example, a body temperature of the vehicle occupant or a temperature of the vehicle interior can be measured by means of the temperature sensor. For example, an odor in the vehicle interior can be identified by means of an odor sensor, as a result of which, for example, smoke, for example cigarette smoke, and / or contamination in the vehicle interior can be identified. Noises in the vehicle interior can be identified by means of the microphone. A mood or atmosphere in the vehicle occupant can thereby preferably be determined, for example through the pitch of the identified voices in the vehicle interior, whereby, for example, a safety-critical state in the vehicle interior can be recognized. In an exemplary embodiment, the one or more status data of the vehicle interior can be information on a temperature, an odor, a volume, a safety-critical status and / or a pollution. In this way, the vehicle interior or the state of the vehicle occupant can be safely and / or reliably observed or determined.

In einer Weiterentwicklung kann in dem Schritt des Ermittelns des einen oder der mehreren Zustandsdaten des Fahrzeuginsassen mindestens ein physiologischer Parameter des Fahrzeuginsassen ermittelt werden. Vorzugsweise kann hierdurch ein Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachtet bzw. ermittelt werden. Mittels der Ermittlung der physiologischen Parameter des Fahrzeuginsassen können beispielsweise Vitalparameter des Fahrzeuginsassen überwacht werden.In a further development, at least one physiological parameter of the vehicle occupant can be determined in the step of determining the one or more status data of the vehicle occupant. In this way, a state of the vehicle occupant can preferably be safely and / or reliably observed or determined. By determining the physiological parameters of the vehicle occupant, vital parameters of the vehicle occupant can be monitored, for example.

In einer beispielhaften Ausführung kann das abstrahierte Model des Fahrzeuginsassen mittels eines Abstrahierungsalgorithmus ermittelt werden. Hierdurch kann eine sichere und oder zuverlässige Ermittlung des abstrahierten Modells des Fahrzeuginsassen ermöglicht werden, was insbesondere eine sichere und/oder zuverlässige Darstellung des abstrahierten Modells auf einer Anzeigevorrichtung ermöglicht.In an exemplary embodiment, the abstracted model of the vehicle occupant can be determined by means of an abstraction algorithm. This enables a safe and or reliable determination of the abstracted model of the vehicle occupant, which in particular enables a safe and / or reliable representation of the abstracted model on a display device.

Weiterhin vorgeschlagen wird eine Vorrichtung zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs, wobei die Vorrichtung eine Beobachtungsvorrichtung zum Identifizieren und Beobachten eines Fahrzeuginsassen in dem Fahrzeuginnenraum und zum Beobachten des Fahrzeuginnenraums umfasst und wobei die Vorrichtung einen oder mehrere in dem Fahrzeug angeordneten Sensoren zum Beobachten des Fahrzeuginnenraumes umfasst. Weiterhin umfasst die Vorrichtung eine Recheneinheit zum Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung und zum Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes, wobei der eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen verknüpfbar sind, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden. Ferner umfasst die Vorrichtung eine Anzeigevorrichtung zum Darstellen des abstrahierten Modells des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten.Furthermore, a device is proposed for monitoring a vehicle interior of a vehicle, wherein the device comprises an observation device for identifying and observing a vehicle occupant in the vehicle interior and for observing the vehicle interior and wherein the device comprises one or more sensors arranged in the vehicle for observing the vehicle interior. Furthermore, the device comprises a computing unit for determining an abstracted model of the vehicle occupant based on the data of the observation device and for determining one or more status data of the vehicle occupant and / or the vehicle interior, wherein the one or more status data can be linked to the abstracted model of the vehicle occupant, so that the one or more status data can be assigned to a local point in relation to the abstracted model of the vehicle occupant, at which the determined status data are observed and / or determined. Furthermore, the device comprises a display device for displaying the abstracted model of the vehicle occupant and the one or more status data linked to the abstracted model of the vehicle occupant.

Die Beobachtungsvorrichtung kann beispielsweise ausgebildet sein einen Fahrzeuginsassen zu beobachten, zum Beispiel eine Körperhaltung, eine Blickrichtung und/oder eine Position eines Körpers, eines Kopfes des Fahrzeuginsassen oder einen Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen zu erfassen. Ferner kann beispielsweise eine Identität eines Fahrzeuginsassen erfasst werden.The observation device can for example be designed to observe a vehicle occupant, for example to record a posture, a line of sight and / or a position of a body, a head of the vehicle occupant or a state of drowsiness and / or other vital signs of the vehicle occupant. Furthermore, for example, an identity of a vehicle occupant can be recorded.

Vorzugsweise kann mittels der vorliegenden Erfindung dem Fahrzeuginsassen ein digitales, repräsentatives Abbild seiner aktuellen Körperhaltung als abstrahiertes Modell sowie im Fahrzeug erfasste und ausgewertete Daten bzw. Informationen auf einem Display sichtbar dargestellt werden können, wodurch für einen Fahrzeuginsassen transparent bzw. ersichtlich ist, welche Daten im Moment durch Sensoren im Fahrzeug analysiert und aufgezeichnet werden. Vorzugsweise kann das Vertrauen in das Überwachungssystem und somit die Akzeptanz, insbesondere der Sensoren und/oder der Beobachtungsvorrichtung, und somit insbesondere in das Gesamtsystem gesteigert werden. Weiterhin kann beispielsweise der Zustand des Fahrzeuginsassen, zum Beispiel der Gesundheitszustand, überwacht werden. Ferner kann überwacht werden, ob ein Fahrzeuginsasse in einem Fahrzeug raucht, ob dieser das Fahrzeug verschmutzt, oder ob eine bedrohliche Situation in einem Fahrzeug, beispielsweise durch Gewalt, herrscht.By means of the present invention, the vehicle occupant can preferably be shown a digital, representative image of his or her current body posture as an abstract model, as well as data or information recorded and evaluated in the vehicle, on a display NEN, which makes it transparent or visible for a vehicle occupant which data is currently being analyzed and recorded by sensors in the vehicle. The trust in the monitoring system and thus the acceptance, in particular of the sensors and / or the observation device, and thus in particular in the overall system, can preferably be increased. Furthermore, for example, the condition of the vehicle occupant, for example the state of health, can be monitored. In addition, it can be monitored whether a vehicle occupant smokes in a vehicle, whether he is contaminating the vehicle, or whether there is a threatening situation in a vehicle, for example due to violence.

In einer Weiterentwicklung kann die Beobachtungsvorrichtung eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden.In a further development, the observation device can comprise a camera and / or one or more sensors for observing the vehicle occupant. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably.

In einer Weiterentwicklung kann der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts. Hierdurch kann sicher und/oder zuverlässig identifiziert werden, ob sich ein Fahrzeuginsasse auf einem Fahrzeugsitz befindet. Weiterhin kann durch die Drucksensoren eine Gewichtsverlagerung und somit eine Körperhaltung des Fahrzeuginsassen gemessen und/oder ermittelt werden.In a further development, the one or more sensors can be designed as one or more pressure sensors in a vehicle seat for measuring a weight on the vehicle seat. This makes it possible to identify safely and / or reliably whether a vehicle occupant is on a vehicle seat. Furthermore, a weight shift and thus a posture of the vehicle occupant can be measured and / or determined by means of the pressure sensors.

In einer beispielhaften Ausgestaltung kann der in dem Fahrzeug angeordnete einen oder die mehreren Sensoren als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden. Beispielsweise können der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. Hierdurch lässt sich der Fahrzeuginnenraum bzw. Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachten bzw. ermitteln.In an exemplary embodiment, the one or more sensors arranged in the vehicle can be designed as a seat belt sensor, a temperature sensor, an odor sensor, a microphone and / or an ultrasonic sensor. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably. For example, the one or more status data of the vehicle interior can be information on a temperature, an odor, a volume, a safety-critical status and / or a pollution. In this way, the vehicle interior or the state of the vehicle occupant can be safely and / or reliably observed or determined.

FigurenlisteFigure list

Ausführungsbeispiele der Erfindung sind in den Zeichnungen dargestellt und in den nachfolgenden Beschreibungen näher erläutert. Für die in den verschiedenen Figuren dargestellten und ähnlich wirkenden Elemente werden gleiche Bezugszeichen verwendet, wobei auf eine wiederholte Beschreibung der Elemente verzichtet wird. Es zeigen:

  • 1 eine schematische Darstellung eines Fahrzeugs mit einer Vorrichtung zum Beobachten eines Fahrzeuginsassen;
  • 2 eine schematische Darstellung eines Fahrzeugs mit einer Anzeigeeinheit;
  • 3 eine schematische Darstellung eines Fahrzeugs mit einer Anzeigeeinheit;
  • 4 eine schematische Darstellung eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 5 eine schematische Darstellung eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 6 ein Blockschaltbild einer Vorrichtung gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 7 eine schematische Darstellung einer Anzeigevorrichtung gemäß einem Ausführungsbeispiel der vorliegenden Erfindung.
Embodiments of the invention are shown in the drawings and explained in more detail in the following descriptions. The same reference numerals are used for the elements shown in the various figures and having a similar effect, a repeated description of the elements being dispensed with. Show it:
  • 1 a schematic representation of a vehicle with a device for observing a vehicle occupant;
  • 2 a schematic representation of a vehicle with a display unit;
  • 3 a schematic representation of a vehicle with a display unit;
  • 4th a schematic representation of a vehicle according to an embodiment of the present invention;
  • 5 a schematic representation of a method according to an embodiment of the present invention;
  • 6th a block diagram of a device according to an embodiment of the present invention;
  • 7th a schematic representation of a display device according to an embodiment of the present invention.

Ausführungsformen der Erfindung:Embodiments of the invention:

1 zeigt eine schematische Darstellung eines Fahrzeugs 20, beispielsweise eines Kraftfahrzeugs, beispielsweise eines Autos, mit einer Beobachtungsvorrichtung 22 zum Beobachten eines Fahrzeuginsassen 24. Das Fahrzeug 20 weist insbesondere einen Innenraum 26 bzw. Fahrzeuginnenraum 26 auf, wobei in dem Innenraum 26 insbesondere ein oder mehrere Sitze 28 für einen oder mehrere Fahrzeuginsassen 24 angeordnet sein können. Die Beobachtungsvorrichtung 22 kann insbesondere auch zum Beobachten des Fahrzeuginnenraums 20 ausgebildet sein. Die Beobachtungsvorrichtung 22 kann beispielsweise ausgebildet sein eine Körperhaltung, eine Blickrichtung und/oder die Position des Körpers, des Kopfes bzw. des Gesichts bzw. der Augen des Fahrzeuginsassen 24, insbesondere eines Fahrers 24 oder eines Beifahrers, oder den Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen 24 zu erfassen. Ferner kann beispielsweise eine Identität des Fahrzeuginsassen 24 erfasst werden. 1 shows a schematic representation of a vehicle 20, for example a motor vehicle, for example a car, with an observation device 22 for observing a vehicle occupant 24. The vehicle 20 has in particular an interior 26 or vehicle interior 26, wherein in the interior 26 in particular one or more seats 28 can be arranged for one or more vehicle occupants 24. The observation device 22 can in particular also be designed to observe the vehicle interior 20. The observation device 22 can be designed, for example, a body posture, a line of sight and / or the position of the body, the head or the face or the eyes of the vehicle occupant 24, in particular a driver 24 or a passenger, or the state of fatigue and / or other vital signs of the vehicle occupant 24 to be detected. Furthermore, for example, an identity of the vehicle occupant 24 can be recorded.

Zum Beobachten des Fahrzeuginsassen 24 weist die Beobachtungsvorrichtung 22 eine Aufnahmeeinheit 32 auf. Weiterhin kann die Beobachtungsvorrichtung 22 eine Beleuchtungseinheit 30 zum Aussenden von Lichtstrahlen, zum Beispiel von Infrarotstrahlen, umfassen. Die Beobachtungsvorrichtung 22 kann insbesondere in einem Armaturenbrett 34 und/oder in einer Instrumententafel 34 des Fahrzeugs 20 angeordnet sein. In einer vorteilhaften Ausführung kann die Beobachtungsvorrichtung 22 insbesondere in einem Kombiinstrument in dem Armaturenbrett 34 angeordnet sein. Alternativ oder zusätzlich kann die Beobachtungsvorrichtung 22 auch an einer anderen Stelle in dem Innenraum 26 des Fahrzeugs 20 angeordnet sein, beispielsweise an einem Fahrzeugdach 38, an einem Rückspiegel oder an einer Säule des Fahrzeugs 20, zum Beispiel an der A-Säule und/oder der B-Säule.In order to observe the vehicle occupant 24, the observation device 22 has a recording unit 32. Furthermore, the observation device 22 can comprise a lighting unit 30 for emitting light rays, for example infrared rays. The observation device 22 can in particular be arranged in a dashboard 34 and / or in an instrument panel 34 of the vehicle 20. In an advantageous embodiment, the observation device 22 can, in particular, be in an instrument cluster in the dashboard be arranged ren board 34. Alternatively or additionally, the observation device 22 can also be arranged at another location in the interior 26 of the vehicle 20, for example on a vehicle roof 38, on a rearview mirror or on a pillar of the vehicle 20, for example on the A-pillar and / or the B-pillar.

Die Beleuchtungseinheit 30 kann insbesondere in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet sein, um den Fahrzeuginsassen 24 mit Lichtstrahlen, insbesondere Infrarotstrahlen, anzustrahlen. Mit anderen Worten können mittels der Beleuchtungseinheit 30 Lichtstrahlen in Richtung des Fahrzeuginsassen 24 ausgesendet werden. Die Beleuchtungseinheit 30 kann zum Beispiel als Leuchteinheit, Leuchtelement, Leuchtdiode, LED, OLED und/oder Laserdiode ausgebildet sein und/oder eine Leuchteinheit, ein Leuchtelement, eine Leuchtdiode, eine LED, OLED und/oder eine Laserdiode aufweisen. Die Aufnahmeeinheit 32 kann beispielsweise als Bildaufnahmeeinheit, zum Beispiel als Kamera ausgebildet sein, insbesondere als Infrarot-Kameramodul, wobei die Aufnahmeeinheit 32 in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet ist, um den Fahrzeuginsassen 24 des Fahrzeugs 20 visuell zu erfassen. Durch die Ausbildung als Infrarot-Kameramodul ist es möglich, die Beobachtung auch nachts durchzufuhren, ohne dass der Fahrzeuginsasse 24 hell angeleuchtet und dadurch geblendet werden würde.The lighting unit 30 can in particular be directed in the direction of the vehicle occupant 24 and thus in the direction of the vehicle seat 28 in order to illuminate the vehicle occupant 24 with light rays, in particular infrared rays. In other words, by means of the lighting unit 30, light beams can be emitted in the direction of the vehicle occupant 24. The lighting unit 30 can be designed, for example, as a light unit, light element, light emitting diode, LED, OLED and / or laser diode and / or have a light unit, a light element, a light emitting diode, an LED, OLED and / or a laser diode. The recording unit 32 can be designed, for example, as an image recording unit, for example as a camera, in particular as an infrared camera module, the recording unit 32 being directed in the direction of the vehicle occupant 24 and thus in the direction of the vehicle seat 28 in order to visually detect the vehicle occupant 24 of the vehicle 20 . The design as an infrared camera module makes it possible to carry out the observation even at night without the vehicle occupant 24 being brightly illuminated and thereby dazzled.

Weiterhin weist die Beobachtungsvorrichtung 22 eine Steuereinheit 36 bzw. eine Auswerteeinheit 36 bzw. eine Recheneinheit 36 auf zur Ansteuerung der Beleuchtungseinheit 30 und/oder der Aufnahmeeinheit 32 und/oder zur Verarbeitung der mittels der Aufnahmeeinheit 32 aufgenommenen Daten.Furthermore, the observation device 22 has a control unit 36 or an evaluation unit 36 or a computing unit 36 for controlling the lighting unit 30 and / or the recording unit 32 and / or for processing the data recorded by the recording unit 32.

2 zeigt eine schematische Darstellung einer Draufsicht eines Fahrzeugs 20, beispielsweise eines Kraftfahrzeugs, beispielsweise eines Autos, mit einer Anzeigevorrichtung 40 zum Anzeigen bzw. zum Darstellen einer Bilddarstellung für einen Fahrzeuginsassen 24. Das Fahrzeug 20 gemäß 2 kann gemäß dem Fahrzeug 20 gemäß 1 ausgebildet sein. 2 shows a schematic illustration of a top view of a vehicle 20, for example a motor vehicle, for example a car, with a display device 40 for displaying or for displaying an image for a vehicle occupant 24. The vehicle 20 according to FIG 2 can according to the vehicle 20 according to 1 be trained.

Die Anzeigevorrichtung 40 kann beispielsweise in einer Instrumententafel 34 bzw. in einem Armaturenbrett 34 eines Fahrzeugs 20 angeordnet sein. Alternativ oder zusätzlich kann die Anzeigevorrichtung 40 an einer anderen Stelle im Armaturenbrett 34 des Fahrzeugs 20 angeordnet sein und/oder an einer anderen Stelle im Fahrzeug 20, zum Beispiel in der Mittelkonsole und/oder an den Sitzen 28. Mittels der Anzeigevorrichtung 40 können Informationen bezüglich des Fahrzeugs 20 und/oder des Fahrzeuginnenraums 26, beispielsweise Fahrzeugzustandsinformationen bzw. Informationen über einen Fahrzeugmodus, wie beispielsweise eine Geschwindigkeit und/oder eine Drehzahl und/oder eine Temperatur und/oder eine Tankfüllung und/oder Navigationshinweise und/oder Informationen eines Fahrzeugentertainmentsystems und/oder eines Fahrzeugsicherheitssystems und/oder weitere Informationen, welche für den Betrieb eines Fahrzeugs und/oder zur Unterhaltung des Fahrzeuginsassen 24 verwendet werden können, angezeigt werden. In einer Weiterentwicklung kann die Anzeigevorrichtung 40 beispielsweise eine Anzeigefläche aufweisen oder als Anzeigefläche ausgebildet sein.The display device 40 can be arranged, for example, in an instrument panel 34 or in a dashboard 34 of a vehicle 20. Alternatively or additionally, the display device 40 can be arranged at another location in the dashboard 34 of the vehicle 20 and / or at another location in the vehicle 20, for example in the center console and / or on the seats 28 of the vehicle 20 and / or the vehicle interior 26, for example vehicle status information or information about a vehicle mode, such as a speed and / or a rotational speed and / or a temperature and / or a tank filling and / or navigation instructions and / or information from a vehicle entertainment system and / or a vehicle safety system and / or further information which can be used for the operation of a vehicle and / or for the entertainment of the vehicle occupant 24 can be displayed. In a further development, the display device 40 can, for example, have a display area or be designed as a display area.

Die Anzeigevorrichtung 40 ist derart in dem Fahrzeug 20 angeordnet, dass ein Fahrzeuginsasse 24 die mittels der Anzeigevorrichtung 40 dargestellten Informationen betrachten kann. Ein Fahrzeuginsasse 24 kann insbesondere ein Betrachter der Anzeigevorrichtung 40, zum Beispiel ein Fahrer und/oder ein Beifahrer, des Fahrzeugs 20 sein.The display device 40 is arranged in the vehicle 20 in such a way that a vehicle occupant 24 can view the information displayed by means of the display device 40. A vehicle occupant 24 can in particular be a viewer of the display device 40, for example a driver and / or a passenger, of the vehicle 20.

3 zeigt eine schematische Darstellung eines Ausschnitts eines Fahrzeugs 20 von einer Seite mit einer Anzeigevorrichtung 40. Das Fahrzeug 20 gemäß 3 kann gemäß dem Fahrzeug 20 gemäß 2 ausgeführt sein. Die Anzeigevorrichtung 40 gemäß 3 kann insbesondere gemäß der Anzeigevorrichtung 40 gemäß 2 ausgeführt sein und gemäß 2 in dem Fahrzeug 20 angeordnet sein. 3 FIG. 11 shows a schematic representation of a section of a vehicle 20 from one side with a display device 40. The vehicle 20 according to FIG 3 can according to the vehicle 20 according to 2 be executed. The display device 40 according to 3 can in particular according to the display device 40 according to FIG 2 be executed and according to 2 be arranged in the vehicle 20.

4 zeigt eine schematische Darstellung eines Fahrzeugs 20 mit einer Vorrichtung 42 zum Überwachen eines Fahrzeuginnenraumes 26 des Fahrzeugs 20. Das Fahrzeug 20 gemäß 2 kann gemäß dem Fahrzeug 20 gemäß 1 und/oder 2 und/oder 3 ausgebildet sein und somit eine Beobachtungsvorrichtung 22 zum Identifizieren und Beobachten eines Fahrzeuginsassen 24 und/oder zum Beobachten des Fahrzeuginnenraums 26 und eine Anzeigevorrichtung aufweisen. In einer Weiterentwicklung dann das Fahrzeug 20 mehrere Beobachtungsvorrichtungen 22 zum Beobachten aufweisen, die insbesondere an verschiedenen Stellen in dem Fahrzeuginnenraum 26 angeordnet sein können. Die Vorrichtung 42 zum Überwachen eines Fahrzeuginnenraumes 26 des Fahrzeugs 20 kann insbesondere zur Durchführung eines Verfahren zum Überwachen eines Fahrzeuginnenraumes 26 eines Fahrzeugs 20 eingerichtet sein. 4th shows a schematic representation of a vehicle 20 with a device 42 for monitoring a vehicle interior 26 of the vehicle 20. The vehicle 20 according to FIG 2 can according to the vehicle 20 according to 1 and or 2 and or 3 be designed and thus have an observation device 22 for identifying and observing a vehicle occupant 24 and / or for observing the vehicle interior 26 and a display device. In a further development, the vehicle 20 then has a plurality of observation devices 22 for observation, which in particular can be arranged at different locations in the vehicle interior 26. The device 42 for monitoring a vehicle interior 26 of the vehicle 20 can in particular be set up to carry out a method for monitoring a vehicle interior 26 of a vehicle 20.

Die Beobachtungsvorrichtung 22 kann eine Kamera 32 und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen 24 umfassen. Der eine oder mehrere Sensoren können zum Beispiel als ein oder mehrere Drucksensoren 46 in dem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz 28 lastenden Gewichts. Beispielsweise kann mittels des einen oder mehrere Drucksensoren 46 ein Fahrzeuginsasse 24 durch das auf dem Fahrzeugsitz 28 lastende Gewicht des Fahrzeuginsassen 24 erkannt werden. Sind mehrere Drucksensoren 46 in dem Fahrzeugsitz 28 angeordnet und insbesondere über die Fläche des Fahrzeugsitzes 28 verteilt, kann eine Gewichtsverlagerung des Fahrzeuginsassen 24 erkannt werden, wodurch eine Körperhaltung des Fahrzeuginsassen 24 ermittelt werden kann.The observation device 22 can comprise a camera 32 and / or one or more sensors for observing the vehicle occupant 24. The one or more sensors can be embodied, for example, as one or more pressure sensors 46 in the vehicle seat for measuring a weight on the vehicle seat 28. For example, by means of the one or more pressure sensors 46, a vehicle occupant 24 can be recognized by the weight of the vehicle occupant 24 resting on the vehicle seat 28. If a plurality of pressure sensors 46 are arranged in the vehicle seat 28 and, in particular, are distributed over the surface of the vehicle seat 28, a shift in weight of the vehicle occupant 24 can be detected, as a result of which a posture of the vehicle occupant 24 can be determined.

Weiterhin umfasst die Vorrichtung 42 einen oder mehrere in dem Fahrzeug 20 angeordnete Sensoren zum Beobachten des Fahrzeuginnenraumes 26. Der in dem Fahrzeug 20 angeordnete Sensor kann beispielsweise als Aufnahmeeinheit 32 gemäß der Aufnahmeeinheit 32 der Beobachtungsvorrichtung 22 gemäß 1 ausgebildet sein. Weiterhin kann der mindestens eine Sensor 32 ein im Fahrzeug verbauter Sensor 32 zur Insassenüberwachung sein. Beispielsweise kann der Sensor 32 eine Kamera sein.Furthermore, the device 42 comprises one or more sensors arranged in the vehicle 20 for observing the vehicle interior 26. The sensor arranged in the vehicle 20 can be used, for example, as a recording unit 32 according to the recording unit 32 of the observation device 22 according to 1 be trained. Furthermore, the at least one sensor 32 can be a sensor 32 installed in the vehicle for occupant monitoring. For example, the sensor 32 can be a camera.

Weiterhin kann der in dem Fahrzeug 20 angeordnet Sensor als ein Sicherheitsgurtsensor 47 ausgebildet sein. Mittels des Sicherheitsgurtsensors kann beispielsweise identifiziert werden, ob ein Fahrzeuginsasse 24 angeschnallt ist. Ist ein Fahrzeuginsasse 24 nicht angeschnallt, so kann über eine Anzeigevorrichtung in dem Fahrzeug 20 eine Warnung ausgegeben werden. In bzw. an dem Sicherheitsgurt kann beispielsweise ein weiterer Sensor angeordnet sein, mittels welchem ein physiologischer Parameter des Fahrzeuginsassen 24 ermittelt werden kann. Mittels des physiologischen Parameters kann beispielsweise ein Zustand des Fahrzeuginsassen 24 ermittelt werden. Hierfür können insbesondere mittels der physiologischen Parameter die Vitalwerte bzw. Vitalparameter des Fahrzeuginsassen 24 überwacht werden. Der physiologische Parameter kann beispielsweise eine Herzfrequenz, eine Atemfrequenz, ein Blutdruck, eine Körpertemperatur oder ein Muskeltonus des Fahrzeuginsassen 24 sein. Beispielsweise kann anhand der physiologischen Parameter auch ein Gemütszustand des Fahrzeuginsassen ermittelt werden. Befindet sich ein Fahrzeuginsasse 24 beispielsweise in einem aggressiven Gemütszustand so ist beispielsweise die Atemfrequenz und der Blutdruck sowie die Herzfrequenz erhöht, wobei die Muskeln des Fahrzeuginsassen 24 in einem aggressiven Zustand angespannt sind. Ist der Fahrzeuginsasse 24 allerdings in einem ruhigen und entspannten Zustand, so hat diese eine geringere Herzfrequenz, Atemfrequenz oder einen geringeren Blutdruck, wobei die Muskeln des Fahrzeuginsassen 24 entspannt sind.Furthermore, the sensor arranged in the vehicle 20 can be designed as a seat belt sensor 47. The seat belt sensor can be used, for example, to identify whether a vehicle occupant 24 is buckled up. If a vehicle occupant 24 is not buckled up, a warning can be output via a display device in vehicle 20. In or on the seat belt, for example, a further sensor can be arranged, by means of which a physiological parameter of the vehicle occupant 24 can be determined. For example, a state of the vehicle occupant 24 can be determined by means of the physiological parameter. For this purpose, the vital signs or vital parameters of the vehicle occupant 24 can be monitored in particular by means of the physiological parameters. The physiological parameter can be, for example, a heart rate, a breathing rate, a blood pressure, a body temperature or a muscle tone of the vehicle occupant 24. For example, a state of mind of the vehicle occupant can also be determined on the basis of the physiological parameters. If a vehicle occupant 24 is in an aggressive state of mind, for example, the respiratory rate and the blood pressure as well as the heart rate are increased, the muscles of the vehicle occupant 24 being tense in an aggressive state. If, however, the vehicle occupant 24 is in a calm and relaxed state, this has a lower heart rate, breathing frequency or a lower blood pressure, the muscles of the vehicle occupant 24 being relaxed.

Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnetes Sensor als ein Mikrofon 44 ausgebildet sein. Mittels des Mikrofons 44 können beispielsweise Geräusche in dem Fahrzeuginnenraum 26 des Fahrzeugs 20 ermittelt werden. Beispielsweise kann ermittelt werden, ob Fahrzeuginsassen 24 miteinander kommunizieren und/oder ob eine sicherheitskritische Situation vorliegt, was beispielsweise durch eine erhöhte Lautstärke bei einer Unterhaltung von Fahrzeuginsassen 24 identifiziert werden kann.Additionally or alternatively, the sensor arranged in the vehicle 20 can be designed as a microphone 44. For example, noises in the vehicle interior 26 of the vehicle 20 can be determined by means of the microphone 44. For example, it can be determined whether vehicle occupants 24 are communicating with one another and / or whether a safety-critical situation is present, which can be identified, for example, by an increased volume when vehicle occupants 24 are talking.

Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnete Sensor als ein Temperatursensor 48, beispielsweise als ein Oberflächen-Temperatursensor 48 ausgebildet sein. Mittels des Temperatursensors 48 kann eine Temperatur in dem Fahrzeug 20 und/oder eine Temperatur des Fahrzeuginsassen 24 gemessen werden. Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnet Sensor als ein Geruchssensor 50 ausgebildet sein. Hierdurch kann beispielsweise ermittelt werden, ob in dem Fahrzeug 20 eine Verschmutzung und somit eine unangenehme Geruchsbildung vorliegt. Weiterhin kann ermittelt werden, ob ein Fahrzeuginsasse 24 in dem Fahrzeug 20 raucht. Bei Identifikation einer Verschmutzung in dem Fahrzeug 20 können gegebenenfalls weitere Maßnahmen eingeleitet werden. Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnet Sensor als ein Ultraschallsensor ausgebildet sein.Additionally or alternatively, the sensor arranged in the vehicle 20 can be designed as a temperature sensor 48, for example as a surface temperature sensor 48. A temperature in the vehicle 20 and / or a temperature of the vehicle occupant 24 can be measured by means of the temperature sensor 48. Additionally or alternatively, the sensor arranged in the vehicle 20 can be designed as an odor sensor 50. In this way it can be determined, for example, whether there is soiling in the vehicle 20 and thus an unpleasant smell. Furthermore, it can be determined whether a vehicle occupant 24 smokes in the vehicle 20. If soiling is identified in the vehicle 20, further measures can optionally be initiated. Additionally or alternatively, the sensor arranged in the vehicle 20 can be designed as an ultrasonic sensor.

Ferner umfasst die Vorrichtung 42 eine Recheneinheit 52 zum Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung 22 und zum Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen 24 und/oder des Fahrzeuginnenraumes 26, wobei der eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen 24 verknüpfbar sind, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen 24 einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden.The device 42 further comprises a computing unit 52 for determining an abstracted model of the vehicle occupant based on the data of the observation device 22 and for determining one or more status data of the vehicle occupant 24 and / or the vehicle interior 26, the one or more status data with the abstracted model of the vehicle occupant 24 can be linked so that the one or more status data in relation to the abstracted model of the vehicle occupant 24 can be assigned to a local point at which the determined status data are observed and / or determined.

Weiterhin umfasst die Vorrichtung 42 eine Anzeigevorrichtung, wobei die Anzeigevorrichtung gemäß der Anzeigevorrichtung gemäß 3 ausgebildet sein kann, zum Darstellen des abstrahierten Modells des Fahrzeuginsassen 24 und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen 24 verknüpften Zustandsdaten.Furthermore, the device 42 comprises a display device, wherein the display device according to the display device according to FIG 3 can be designed to display the abstracted model of the vehicle occupant 24 and the one or more state data linked to the abstracted model of the vehicle occupant 24.

5 zeigt ein Verfahren 60 zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs. Das Verfahren 60 kann beispielsweise auf einer Vorrichtung gemäß der Vorrichtung gemäß 4 ausgeführt werden. 5 FIG. 6 shows a method 60 for monitoring a vehicle interior of a vehicle. The method 60 can for example be carried out on a device according to the device according to FIG 4th are executed.

In einem ersten Schritt 62 des Verfahrens 60 wird ein Fahrzeuginsasse in dem Fahrzeuginnenraum mittels einer Beobachtungsvorrichtung identifiziert und beobachtet. Die Beobachtungsvorrichtung kann vorteilhafterweise eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Der eine oder mehrere Sensoren können beispielsweise als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts.In a first step 62 of method 60, a vehicle occupant is in the vehicle interior identified and observed space by means of an observation device. The observation device can advantageously comprise a camera and / or one or more sensors for observing the vehicle occupant. The one or more sensors can be designed, for example, as one or more pressure sensors in a vehicle seat for measuring a weight on the vehicle seat.

In einem zweiten Schritt 64 des Verfahrens 60 wird ein abstrahiertes Model des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung ermittelt, insbesondere mittels einer Recheneinheit. Das abstrahierte Model des Fahrzeuginsassen kann insbesondere mittels eines Abstrahierungsalgorithmus ermittelt werden. Hier empfängt die Recheneinheit die Daten der Beobachtungsvorrichtung und berechnet mittels eines Abstrahierungsalgorithmus ein abstrahiertes Modell des Fahrzeuginsassen.In a second step 64 of the method 60, an abstract model of the vehicle occupant is determined based on the data from the observation device, in particular by means of a computing unit. The abstracted model of the vehicle occupant can in particular be determined by means of an abstraction algorithm. Here the processing unit receives the data from the observation device and uses an abstraction algorithm to calculate an abstracted model of the vehicle occupant.

In einem dritten Schritt 66 des Verfahrens 60 wird der Fahrzeuginnenraum mittels der Beobachtungsvorrichtung und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren beobachtet und ein oder mehrere Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes ermittelt. Die in dem Fahrzeug angeordneten eine oder mehreren Sensoren kann beispielsweise als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes können insbesondere Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. In einer Weiterentwicklung kann in dem Schritt des Ermittelns des einen oder der mehreren Zustandsdaten des Fahrzeuginsassen mindestens ein physiologischer Parameter des Fahrzeuginsassen ermittelt werden, wobei mittels der Ermittlung der physiologischen Parameter des Fahrzeuginsassen Vitalparameter des Fahrzeuginsassen überwacht werden. In einer Weiterentwicklung kann anhand der physiologischen Parameter und somit der Zustandsdaten des Fahrzeuginsassen Gemütszustand des Fahrzeuginsassen ermittelt werden.In a third step 66 of method 60, the vehicle interior is observed by means of the observation device and / or by means of one or more sensors arranged in the vehicle and one or more status data of the vehicle occupant and / or the vehicle interior is determined. The one or more sensors arranged in the vehicle can be designed, for example, as a seat belt sensor, a temperature sensor, an odor sensor, a microphone and / or an ultrasonic sensor. The one or more status data of the vehicle interior can in particular be information on a temperature, an odor, a volume, a safety-critical condition and / or a pollution. In a further development, in the step of determining the one or more status data of the vehicle occupant, at least one physiological parameter of the vehicle occupant can be determined, with vital parameters of the vehicle occupant being monitored by determining the physiological parameters of the vehicle occupant. In a further development, the state of mind of the vehicle occupant can be determined on the basis of the physiological parameters and thus the status data of the vehicle occupant.

In einem vierten Schritt 68 des Verfahrens 60 wird das eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen verknüpft, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden. Die Verknüpfung kann insbesondere mittels der Recheneinheit ausgeführt werden.In a fourth step 68 of the method 60, the one or more status data is linked to the abstracted model of the vehicle occupant, so that the one or more status data in relation to the abstracted model of the vehicle occupant is assigned to a local point at which the determined status data is observed and / or determined. The link can in particular be carried out by means of the computing unit.

In einem fünften Schritt 70 des Verfahrens 60 wird das abstrahierte Model des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten mittels einer Anzeigevorrichtung dargestellt.In a fifth step 70 of the method 60, the abstracted model of the vehicle occupant and the one or more status data linked to the abstracted model of the vehicle occupant are displayed by means of a display device.

6 zeigt ein Blockschaltbild einer Vorrichtung 42 zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Die Vorrichtung 42 kann gemäß der Vorrichtung 42 gemäß 4 ausgebildet sein, wobei auf bzw. mittels der Vorrichtung 42 ein Verfahren gemäß dem Verfahren gemäß 5 ausführbar ist. 6th shows a block diagram of a device 42 for monitoring a vehicle interior of a vehicle according to an exemplary embodiment of the present invention. The device 42 can according to the device 42 according to FIG 4th be formed, wherein on or by means of the device 42 a method according to the method according to 5 is executable.

Mittels der Beobachtungsvorrichtung 22 wird ein Fahrzeuginsasse in einem Fahrzeuginnenraum identifiziert und beobachtet. Die Identifikation des Fahrzeuginsassen 24 kann auch mittels der Drucksensoren 46 erfolgen. Die mittels der Beobachtungsvorrichtung 22 und der Drucksensoren 46 aufgenommenen Daten werden an eine Recheneinheit 52 geleitet. Mittels eines oder mehreren in dem Fahrzeug angeordneten Sensoren 44, 46, 48, 50 wird der Fahrzeuginnenraum beobachtet, wobei die damit beobachteten und somit ermittelten Daten an die Recheneinheit 52 geleitet werden.A vehicle occupant in a vehicle interior is identified and observed by means of the observation device 22. The identification of the vehicle occupant 24 can also take place by means of the pressure sensors 46. The data recorded by means of the observation device 22 and the pressure sensors 46 are sent to a computing unit 52. The vehicle interior is observed by means of one or more sensors 44, 46, 48, 50 arranged in the vehicle, with the data observed and thus determined being passed to the computing unit 52.

Die Recheneinheit 52 ermittelt mittels der bzw. basierend auf den Daten der Beobachtungsvorrichtung 22 und/oder der Drucksensoren 46 ein abstrahiertes Model des Fahrzeuginsassen. Weiterhin ermittelt die Recheneinheit 52 mittels der bzw. basierend auf den Daten der Beobachtungsvorrichtung 22 und/oder der Drucksensoren 46 und/oder der in dem Fahrzeug angeordneten einen oder mehreren Sensoren 44, 46, 48, 50 ein oder mehrere Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes. Die Recheneinheit 52 verknüpft das eine oder die mehreren Zustandsdaten derart mit dem abstrahierten Model des Fahrzeuginsassen 24, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen 24 einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet bzw. gemessen werden. Mit anderen Worten werden die Zustandsdaten dem Bereich bezüglich des abstrahierten Modells zugeordnet, in welchem sie lokal in den Fahrzeuginnenraum gemessen werden. Die Informationen bezüglich des abstrahierten Modells und der damit verknüpften Zustandsdaten werden von der Recheneinheit 52 an eine Anzeigevorrichtung weitergeleitet, wobei die Anzeigevorrichtung das abstrahierte Model und die damit verknüpften Zustandsdaten, insbesondere für den Fahrzeuginsassen 24, sichtbar darstellt. Die Weiterleitung der Daten zur Darstellung des abstrahierten Modells mit den Zustandsdaten auf der Anzeigevorrichtung wird insbesondere mittels des Pfeils 72 dargestellt.The computing unit 52 determines an abstracted model of the vehicle occupant by means of or based on the data of the observation device 22 and / or the pressure sensors 46. Furthermore, the computing unit 52 determines one or more status data of the vehicle occupant and / or by means of or based on the data of the observation device 22 and / or the pressure sensors 46 and / or the one or more sensors 44, 46, 48, 50 arranged in the vehicle of the vehicle interior. The computing unit 52 links the one or more status data with the abstracted model of the vehicle occupant 24 in such a way that the one or more status data in relation to the abstracted model of the vehicle occupant 24 can be assigned to a local point at which the determined status data is observed or measured will. In other words, the status data are assigned to the area with regard to the abstracted model in which they are measured locally in the vehicle interior. The information relating to the abstracted model and the status data linked to it are forwarded by the computing unit 52 to a display device, the display device visibly displaying the abstracted model and the status data linked to it, in particular for the vehicle occupant 24. The forwarding of the data for the representation of the abstracted model with the status data on the The display device is shown in particular by means of the arrow 72.

Vorzugsweise kann der Fahrzeuginsasse 24 mit der Vorrichtung 42 interagieren, was insbesondere durch den Pfeil 74 dargestellt wird. Beispielsweise kann der Fahrzeuginsasse ein Bedienelement 76 bedienen, wodurch bestimmte Steuerungssignale an die Recheneinheit 52 weitergegeben werden.The vehicle occupant 24 can preferably interact with the device 42, which is shown in particular by the arrow 74. For example, the vehicle occupant can operate an operating element 76, as a result of which certain control signals are passed on to the computing unit 52.

Weiterhin kann der Fahrzeuginsasse 24 auf die Darstellung des abstrahierten Modells mit den Zugangsdaten reagieren, was insbesondere durch den Pfeil 78 und/oder durch den Pfeil 80 dargestellt wird. Hat der Fahrzeuginsasse 24 beispielsweise eine schiefe Körperhaltung so wird dem Fahrzeuginsassen 24 dies mittels des abstrahierten Modells auf der Anzeigevorrichtung 40 dargestellt. Der Fahrzeuginsasse kann dies erkennen und somit entsprechend seine Körperhaltung korrigieren.Furthermore, the vehicle occupant 24 can react to the representation of the abstracted model with the access data, which is represented in particular by the arrow 78 and / or by the arrow 80. If the vehicle occupant 24 has a crooked posture, for example, this is shown to the vehicle occupant 24 by means of the abstracted model on the display device 40. The vehicle occupant can recognize this and thus correct his or her posture accordingly.

Mit anderen Worten betrifft die Erfindung ein System zur Visualisierung der automatisch analysierten Passagierdaten, insbesondere Daten bezüglich des Fahrzeuginsassen und des Fahrzeuginnenraums. Ausgehend von Daten einer Kamera für den Innenraum und weiterer Sensoren, zum Beispiel Drucksensoren in den Sitzen des Fahrzeugs, wird die Köperhaltung und/oder die Position des Fahrzeuginsassen identifiziert und analysiert. Basierend auf diesen Daten wird in einer Recheneinheit ein digitales Menschenmodell bzw. ein abstrahiertes Modell des Fahrzeuginsassen errechnet, welches die Körperhaltung und die Person abstrahiert widerspiegelt. Dieses digitale Abbild kann dem Fahrzeuginsassen bzw. Passagier des Fahrzeugs über ein Display, insbesondere einer Anzeigevorrichtung 40, in dem Fahrzeug in Echtzeit angezeigt bzw. dargestellt werden.In other words, the invention relates to a system for visualizing the automatically analyzed passenger data, in particular data relating to the vehicle occupant and the vehicle interior. Based on data from a camera for the interior and further sensors, for example pressure sensors in the seats of the vehicle, the posture and / or the position of the vehicle occupant is identified and analyzed. Based on this data, a digital human model or an abstracted model of the vehicle occupant is calculated in a computing unit, which abstractly reflects the posture and the person. This digital image can be displayed or represented to the vehicle occupant or passenger of the vehicle via a display, in particular a display device 40, in the vehicle in real time.

Das Display kann entweder ein in das Fahrzeug integriertes Display sein oder auch ein Display eines mobilen Gerätes des Passagiers. Das Display kann somit wie ein Spiegel wirken und den Passagier dadurch in seinem Verhalten positiv beeinflussen. Durch die Spiegelung des Verhaltens können gegebenenfalls bereits unerwünschte Handlungen der Passagiere unterbunden werden. Unerwünschte Handlungen können zum Beispiel Aggressionen gegenüber anderen Passagieren, Vandalismus oder Verschmutzung im Fahrzeug sein.The display can either be a display integrated in the vehicle or a display on a mobile device of the passenger. The display can thus act like a mirror and thereby positively influence the passenger's behavior. By mirroring the behavior, undesired actions of the passengers can possibly already be prevented. Unwanted actions can be, for example, aggression towards other passengers, vandalism or soiling in the vehicle.

Weiterhin kann das digitale Abbild mit zusätzlichen Informationen, zum Beispiel mittels Symbolen, erweitert werden. Die zusätzlich dargestellten Informationen der Zustandsdaten stellen dabei die verschiedenen Aspekte der Überwachung, insbesondere der Beobachtung des Fahrzeuginnenraums und/oder des Fahrzeuginsassen, durch das Fahrzeug dar. Die dargestellten Informationen sind dabei nicht auf die Daten, welche durch die Innenraumkamera erfasst werden, limitiert. Stattdessen können die analysierten Daten von einer Vielzahl von Sensoren oder Systemen innerhalb und/oder außerhalb des Fahrzeuges dargestellt werden. Die Informationen, welche Daten durch das Fahrzeug erfasst und analysiert werden, werden durch die jeweiligen Sensoren an die Recheneinheit, welche das digitale Abbild berechnet, übermittelt.Furthermore, the digital image can be expanded with additional information, for example by means of symbols. The additionally displayed information of the status data represents the various aspects of the monitoring, in particular the observation of the vehicle interior and / or the vehicle occupant, by the vehicle. The information displayed is not limited to the data captured by the interior camera. Instead, the analyzed data can be displayed by a large number of sensors or systems inside and / or outside the vehicle. The information, which data is recorded and analyzed by the vehicle, is transmitted by the respective sensors to the computing unit, which calculates the digital image.

Bevorzugt werden die ausgewerteten Daten in dem Bereich des digitalen Abbildes dargestellt, in dem diese entstehen oder intuitiv mit diesem Bereich verknüpft sind. Wird zum Beispiel durch die Innenraumkamera der Gemütszustand des Passagiers analysiert, so sollte dies entsprechend im Kopfbereich des digitalen Abbildes dargestellt werden. Weitere darstellbare qualitative Daten wären zum Beispiel Audioaufzeichnungen im Fahrzeug, Eye-Tracking der Passagiere, Verhaltensbeobachtung der Passagiere, Sicherheitsgurt angelegt, OberflächenTemperatur-Sensor, Geruchssensor. In einer weiteren Ausprägung könnten auch quantitative Daten wie die ermittelte Körpertemperatur, Pulsfrequenz oder andere Messgrößen der Umgebung wie die Lufttemperatur, Luftgüte dargestellt werden. Diese Daten würden von anderen Sensoren erfasst und ermittelt und an die zentrale Recheneinheit übermittelt werden.The evaluated data are preferably displayed in the area of the digital image in which they arise or are intuitively linked to this area. If, for example, the passenger's state of mind is analyzed by the interior camera, this should be displayed accordingly in the head area of the digital image. Other representable qualitative data would be, for example, audio recordings in the vehicle, eye tracking of the passengers, observation of the behavior of the passengers, seat belts, surface temperature sensors, odor sensors. In a further embodiment, quantitative data such as the determined body temperature, pulse frequency or other measured variables of the environment such as air temperature and air quality could be displayed. This data would be recorded and determined by other sensors and transmitted to the central processing unit.

In einer weiteren Ausprägung könnte der Passagier über ein Bedienelement, eventuell das Touch-Display selbst, die Überwachung bestimmter Daten aktivieren oder deaktivieren.In a further embodiment, the passenger could activate or deactivate the monitoring of certain data via an operating element, possibly the touch display itself.

Eine Verwendung ist generell für Transportmittel, wie Fahrzeuge, Züge, Flugzeuge möglich.A use is generally possible for means of transport such as vehicles, trains, airplanes.

7 zeigt eine schematische Darstellung einer Anzeigevorrichtung 40 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Die Anzeigevorrichtung 40 gemäß 7 kann gemäß der Anzeigevorrichtung 40 gemäß 2 und/oder 3 ausgebildet und in einem Fahrzeug angeordnet sein. Die Anzeigevorrichtung 40 kann insbesondere Teil einer Vorrichtung zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs sein, wobei die Vorrichtung gemäß der Vorrichtung gemäß 4 und/oder gemäß 6 ausgebildet sein kann und gemäß 4 in einem Fahrzeug angeordnet sein kann. 7th shows a schematic illustration of a display device 40 according to an exemplary embodiment of the present invention. The display device 40 according to 7th can according to the display device 40 according to FIG 2 and or 3 be designed and arranged in a vehicle. The display device 40 can in particular be part of a device for monitoring a vehicle interior of a vehicle, the device according to the device according to FIG 4th and / or according to 6th can be designed and according to 4th can be arranged in a vehicle.

Auf der Anzeigevorrichtung wird das mittels der Recheneinheit ermittelte abstrahierte Model 82 des Fahrzeuginsassen dargestellt. Mit anderen Worten wird der Fahrzeuginsasse derart schematisch dargestellt, dass sein Körper schemenhaft erkennbar ist. Beispielsweise sind die Körperhaltung, insbesondere der Rumpf, die einzelnen Gliedmaßen und der Kopf, sichtbar, jedoch anonymisiert, sodass der Fahrzeuginsasse mittels des abstrahierten Modells nicht identifiziert werden kann.The abstract model 82 of the vehicle occupant determined by means of the computing unit is shown on the display device. In other words, the vehicle occupant is shown schematically in such a way that his body can be seen in outline. For example, the posture, especially the trunk, the individual limbs and the head, are visible, but anonymized, so that the Vehicle occupant cannot be identified by means of the abstracted model.

Weiterhin sind mit dem abstrahierten Model 82 die in dem Fahrzeuginnenraum ermittelten Zustandsdaten verknüpft. Vorzugsweise werden auf der Anzeigevorrichtung 40 die Zustandsdaten an dem Ort bzw. in dem Bereich dargestellt bzw. eingezeichnet, an dem sie in Bezug zu der Position des Fahrzeuginsassen, insbesondere des abstrahierten Modells 82 des Fahrzeuginsassen, in dem Fahrzeuginnenraum gemessen bzw. beobachtet werden. Somit wird beispielsweise das Zustandsdatum 84, welches die Blickrichtung des Fahrzeuginsassen betrifft, an der Stelle lokal auf der Anzeigevorrichtung 40 eingezeichnet, in der sich der Kopf des abstrahierten Modells 82 des Fahrzeuginsassen befindet. Weiterhin wird das Zustandsdatum 86 betreffend die Körperhaltung an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an der der Körper des Fahrzeuginsassen auf der Anzeigevorrichtung 40 dargestellt wird. Die Zustandsdaten 90, welches die Vitalparameter und somit die physiologischen Parameter des Fahrzeuginsassen betreffen, werden an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an welcher sich das Herz des abstrahierten Modells 82 des Fahrzeuginsassen befindet. Die Zustandsdaten 88 der Drucksensoren, werden an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an welcher sich der Sitz, auf welchem der Fahrzeuginsasse sitzt, befindet.Furthermore, the status data determined in the vehicle interior are linked to the abstracted model 82. The status data are preferably shown or drawn in on the display device 40 at the location or in the area at which they are measured or observed in relation to the position of the vehicle occupant, in particular the abstract model 82 of the vehicle occupant, in the vehicle interior. Thus, for example, the status data 84, which relates to the viewing direction of the vehicle occupant, is drawn locally on the display device 40 at the point in which the head of the abstracted model 82 of the vehicle occupant is located. Furthermore, the status data 86 relating to the body posture is displayed at the point on the display device 40 at which the body of the vehicle occupant is displayed on the display device 40. The status data 90, which relate to the vital parameters and thus the physiological parameters of the vehicle occupant, are displayed on the display device 40 at the point at which the heart of the abstracted model 82 of the vehicle occupant is located. The status data 88 of the pressure sensors are shown at the point on the display device 40 at which the seat on which the vehicle occupant is sitting is located.

Der Hinweis auf das Zustandsdatum 92 des Sicherheitsgurtsensors wird beispielsweise an der Stelle auf der Anzeigevorrichtung dargestellt, an der der Sicherheitsgurt mittels einer Schnalle geschlossen wird. Das Zustandsdatum 94 betreffend die Temperatur, welches mittels des Temperatursensors gemessen wird, wird in dieser vorteilhaften Ausführung an der Stelle bezüglich des abstrahierten Modells 82 des Fahrzeuginsassen dargestellt, an welchem der Temperatursensor im Fahrzeug angeordnet ist. Das Zustandsdaten 96 betreffend ein Geräusch, welches mittels eines Mikrofons gemessen wird, wird bezüglich des abstrahierten Modells 82 an der Stelle lokal dargestellt, an welcher ein Geräusch in den Fahrzeuginnenraum gemessen bzw. ermittelt wird. Beispielsweise kann ein Geräusch, zum Beispiel eine Stimme, auf dem Beifahrersitz lokalisiert werden, wodurch insbesondere das Zustandsdatum 96 betreffend das Geräusch auf Höhe des Beifahrersitzes in Bezug zu dem abstrahierten Model 82 des Fahrzeuginsassen dargestellt wird. Das Zustandsdatum 98 betreffend den Geruch in den Fahrzeuginnenraum, welche mittels des Geruchssensors gemessen wird, wird bezüglich des abstrahierten Modells 82 des Fahrzeuginsassen an der Stelle lokal auf der Anzeigevorrichtung 40 dargestellt, an welcher der Geruch in dem Fahrzeuginnenraum gemessen bzw. ermittelt wird.The reference to the status date 92 of the seat belt sensor is shown, for example, at the point on the display device at which the seat belt is closed by means of a buckle. The status data 94 relating to the temperature, which is measured by means of the temperature sensor, is shown in this advantageous embodiment at the point with respect to the abstracted model 82 of the vehicle occupant at which the temperature sensor is arranged in the vehicle. The status data 96 relating to a noise, which is measured by means of a microphone, is shown locally with respect to the abstracted model 82 at the point at which a noise in the vehicle interior is measured or determined. For example, a noise, for example a voice, can be localized in the passenger seat, whereby in particular the status data 96 relating to the noise at the height of the passenger seat is displayed in relation to the abstract model 82 of the vehicle occupant. The status data 98 relating to the odor in the vehicle interior, which is measured by means of the odor sensor, is displayed locally on the display device 40 with respect to the abstracted model 82 of the vehicle occupant at the point at which the odor in the vehicle interior is measured or determined.

Durch die so dargestellten Zustandsdaten in Verknüpfung mit dem abstrahierten Model 82 hat der Betrachter der Anzeigevorrichtung 40 einen Überblick über die in den Fahrzeuginnenraum gemessenen Daten bzw. die lokale Stelle, an welcher die Daten gemessen werden. Mit anderen Worten wird das abstrahierte Model 82 auf der Anzeigevorrichtung 40 dargestellt, wobei die Zustandsdaten in Bezug zu dem abstrahierten Model 82 in dem Bereich auf der Anzeigevorrichtung 40 dargestellt werden, an welchem diese in dem Fahrzeuginnenraum auch tatsächlich und lokal gemessen bzw. ermittelt werden.The status data thus represented in connection with the abstracted model 82 gives the viewer of the display device 40 an overview of the data measured in the vehicle interior or the local point at which the data are measured. In other words, the abstracted model 82 is displayed on the display device 40, the status data relating to the abstracted model 82 being displayed in the area on the display device 40 at which it is actually and locally measured or determined in the vehicle interior.

Die Zustandsdaten können beispielsweise als Symbol dargestellt werden und/oder als Wert, welcher mittels der Sensoren gemessen wird.The status data can be represented, for example, as a symbol and / or as a value which is measured by means of the sensors.

In einer Weiterentwicklung kann der Fahrzeuginsasse besondere auf der Anzeigevorrichtung 40, beispielsweise indem die Anzeigevorrichtung 40 als Touch-Display ausgeführt ist, Eingaben vornehmen. Beispielsweise kann der Fahrzeuginsasse einzelne Funktionen zur Messung der Zustandsdaten und somit die einzelnen Sensoren auswählen, insbesondere durch Antippen der einzelnen Zustandsdaten, um weitere Informationen bezüglich der gemessenen Zustandsdaten erhalten. In einer Weiterentwicklung kann der Fahrzeuginsasse die Messung der Zustandsdaten durch die Sensoren insbesondere abschalten und einschalten, beispielsweise durch auswählen bzw. Antippen der einem Zustandsdaten auf der Anzeigevorrichtung. Somit hat ein Fahrzeuginsasse insbesondere die Kontrolle über die Messung der Zustandsdaten in dem Fahrzeuginnenraum.In a further development, the vehicle occupant can make particular entries on the display device 40, for example in that the display device 40 is designed as a touch display. For example, the vehicle occupant can select individual functions for measuring the status data and thus the individual sensors, in particular by tapping on the individual status data, in order to obtain further information relating to the measured status data. In a further development, the vehicle occupant can in particular switch off and switch on the measurement of the status data by the sensors, for example by selecting or tapping one status data on the display device. Thus, a vehicle occupant has, in particular, control over the measurement of the status data in the vehicle interior.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

  • DE 102014214352 A1 [0002]DE 102014214352 A1 [0002]

Claims (12)

Verfahren (60) zum Überwachen eines Fahrzeuginnenraumes (26) eines Fahrzeugs (20) mit den folgenden Schritten: Identifizieren und Beobachten eines Fahrzeuginsassen (24) in dem Fahrzeuginnenraum (26) mittels einer Beobachtungsvorrichtung (22), Ermitteln eines abstrahierten Modells (82) des Fahrzeuginsassen (24) basierend auf den Daten der Beobachtungsvorrichtung (22), Beobachten des Fahrzeuginnenraums (26) mittels der Beobachtungsvorrichtung (22) und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren und Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen (24) und/oder des Fahrzeuginnenraumes (26), Verknüpfen des einen oder der mehreren Zustandsdaten mit dem abstrahierten Model (82) des Fahrzeuginsassen (24), sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model (82) des Fahrzeuginsassen (24) einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden, Darstellen des abstrahierten Modells (82) des Fahrzeuginsassen (24) und das eine oder die mehreren mit dem abstrahierten Model (82) des Fahrzeuginsassen (24) verknüpften Zustandsdaten mittels einer Anzeigevorrichtung (40).Method (60) for monitoring a vehicle interior (26) of a vehicle (20), comprising the following steps: Identifying and observing a vehicle occupant (24) in the vehicle interior (26) by means of an observation device (22), Determining an abstracted model (82) of the vehicle occupant (24) based on the data from the observation device (22), Observing the vehicle interior (26) by means of the observation device (22) and / or by means of one or more sensors arranged in the vehicle and determining one or more status data of the vehicle occupant (24) and / or the vehicle interior (26), Linking the one or more status data with the abstracted model (82) of the vehicle occupant (24), so that the one or more status data in relation to the abstracted model (82) of the vehicle occupant (24) are assigned to a local location at which the determined condition data are observed and / or determined, Displaying the abstracted model (82) of the vehicle occupant (24) and the one or more status data linked to the abstracted model (82) of the vehicle occupant (24) by means of a display device (40). Verfahren (60) nach einem der vorherigen Ansprüche, wobei die Beobachtungsvorrichtung (22) eine Kamera (32) und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen (24) umfasst.The method (60) according to any one of the preceding claims, wherein the observation device (22) comprises a camera (32) and / or one or more sensors for observing the vehicle occupant (24). Verfahren (60) nach Anspruch 2, wobei der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren (46) in einem Fahrzeugsitz ausgebildet sind zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts.Method (60) according to Claim 2 , wherein the one or more sensors are designed as one or more pressure sensors (46) in a vehicle seat for measuring a weight on the vehicle seat. Verfahren (60) nach einem der vorherigen Ansprüche, wobei der in dem Fahrzeug (20) angeordneten einen oder mehreren Sensoren als ein Sicherheitsgurtsensor (47), ein Temperatursensor (48), ein Geruchssensor (50), ein Mikrofon (44) und/oder ein Ultraschallsensor ausgebildet ist.The method (60) according to any one of the preceding claims, wherein the one or more sensors arranged in the vehicle (20) as a seat belt sensor (47), a temperature sensor (48), an odor sensor (50), a microphone (44) and / or an ultrasonic sensor is formed. Verfahren (60) nach einem der vorherigen Ansprüche, wobei der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes (26) Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sind.The method (60) according to any one of the preceding claims, wherein the one or more status data of the vehicle interior (26) is information on a temperature, an odor, a volume, a safety-critical condition and / or a pollution. Verfahren (60) nach einem der vorherigen Ansprüche, wobei im Schritt des Ermittelns des einen oder der mehreren Zustandsdaten des Fahrzeuginsassen (24) mindestens ein physiologischer Parameter des Fahrzeuginsassen (24) ermittelt wird.Method (60) according to one of the preceding claims, wherein in the step of determining the one or more status data of the vehicle occupant (24) at least one physiological parameter of the vehicle occupant (24) is determined. Verfahren (60) nach Anspruch 6, wobei mittels der Ermittlung der physiologischen Parameter des Fahrzeuginsassen (24) Vitalparameter des Fahrzeuginsassen (24) überwacht werden.Method (60) according to Claim 6 wherein the determination of the physiological parameters of the vehicle occupant (24) is used to monitor vital parameters of the vehicle occupant (24). Verfahren (60) nach einem der vorherigen Ansprüche, wobei das abstrahierte Model (82) des Fahrzeuginsassen (24) mittels eines Abstrahierungsalgorithmus ermittelt wird.Method (60) according to one of the preceding claims, wherein the abstracted model (82) of the vehicle occupant (24) is determined by means of an abstraction algorithm. Vorrichtung (42) zum Überwachen eines Fahrzeuginnenraumes (26) eines Fahrzeugs (20), wobei die Vorrichtung (42) eine Beobachtungsvorrichtung (22) zum Identifizieren und Beobachten eines Fahrzeuginsassen (24) in dem Fahrzeuginnenraum (26) und zum Beobachten des Fahrzeuginnenraums (26) umfasst, die Vorrichtung (42) einen oder mehrere in dem Fahrzeug (20) angeordneten Sensoren zum Beobachten des Fahrzeuginnenraumes umfasst und, die Vorrichtung (42) eine Recheneinheit (52) zum Ermitteln eines abstrahierten Modells (82) des Fahrzeuginsassen (24) basierend auf den Daten der Beobachtungsvorrichtung (22) und zum Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen (24) und/oder des Fahrzeuginnenraumes umfasst, wobei der eine oder die mehreren Zustandsdaten mit dem abstrahierten Model (82) des Fahrzeuginsassen (24) verknüpfbar sind, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model (82) des Fahrzeuginsassen (24) einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden, die Vorrichtung (42) eine Anzeigevorrichtung (40) zum Darstellen des abstrahierten Modells (82) des Fahrzeuginsassen (24) und das eine oder die mehreren mit dem abstrahierten Model (82) des Fahrzeuginsassen (24) verknüpften Zustandsdaten umfasst.Device (42) for monitoring a vehicle interior (26) of a vehicle (20), wherein the device (42) comprises an observation device (22) for identifying and observing a vehicle occupant (24) in the vehicle interior (26) and for observing the vehicle interior (26), the device (42) comprises one or more sensors arranged in the vehicle (20) for observing the vehicle interior and, the device (42) comprises a computing unit (52) for determining an abstract model (82) of the vehicle occupant (24) based on the data from the observation device (22) and for determining one or more status data of the vehicle occupant (24) and / or the vehicle interior , wherein the one or more status data can be linked to the abstracted model (82) of the vehicle occupant (24), so that the one or more status data can be assigned to a local location in relation to the abstracted model (82) of the vehicle occupant (24), on which the determined status data are observed and / or determined, the device (42) comprises a display device (40) for displaying the abstracted model (82) of the vehicle occupant (24) and the one or more status data linked to the abstracted model (82) of the vehicle occupant (24). Vorrichtung (42) nach Anspruch 9, wobei die Beobachtungsvorrichtung (22) eine Kamera (32) und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen (24) umfasst.Device (42) after Claim 9 , wherein the observation device (22) comprises a camera (32) and / or one or more sensors for observing the vehicle occupant (24). Vorrichtung (42) nach Anspruch 10, wobei der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren (46) in einem Fahrzeugsitz ausgebildet sind zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts.Device (42) after Claim 10 , wherein the one or more sensors are designed as one or more pressure sensors (46) in a vehicle seat for measuring a weight on the vehicle seat. Vorrichtung (42) nach einem der vorherigen Ansprüche 9 bis 11, wobei der in dem Fahrzeug (20) angeordneten einen oder mehreren Sensoren als ein Sicherheitsgurtsensor (47), ein Temperatursensor (48), ein Geruchssensor (50), ein Mikrofon (44) und/oder ein Ultraschallsensor ausgebildet ist.Device (42) according to one of the preceding Claims 9 until 11th , the one in the vehicle (20) arranged one or more sensors is designed as a seat belt sensor (47), a temperature sensor (48), an odor sensor (50), a microphone (44) and / or an ultrasonic sensor.
DE102020208203.0A 2020-07-01 2020-07-01 Method for monitoring a vehicle interior of a vehicle Pending DE102020208203A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102020208203.0A DE102020208203A1 (en) 2020-07-01 2020-07-01 Method for monitoring a vehicle interior of a vehicle
CN202110736171.0A CN113879228A (en) 2020-07-01 2021-06-30 Method for monitoring a vehicle interior of a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102020208203.0A DE102020208203A1 (en) 2020-07-01 2020-07-01 Method for monitoring a vehicle interior of a vehicle

Publications (1)

Publication Number Publication Date
DE102020208203A1 true DE102020208203A1 (en) 2022-01-05

Family

ID=79010736

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102020208203.0A Pending DE102020208203A1 (en) 2020-07-01 2020-07-01 Method for monitoring a vehicle interior of a vehicle

Country Status (2)

Country Link
CN (1) CN113879228A (en)
DE (1) DE102020208203A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102022108223A1 (en) 2022-04-06 2023-10-12 Audi Aktiengesellschaft Method for operating a motor vehicle, motor vehicle and computer program product
DE102023108570A1 (en) 2023-04-04 2024-10-10 Bayerische Motoren Werke Aktiengesellschaft Device and method for determining contamination of glass surfaces in a vehicle

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030181822A1 (en) 2002-02-19 2003-09-25 Volvo Technology Corporation System and method for monitoring and managing driver attention loads
DE102014214352A1 (en) 2014-07-23 2016-01-28 Robert Bosch Gmbh Method and arrangement for operating an occupant observation system
DE102014118958A1 (en) 2014-12-18 2016-06-23 Valeo Schalter Und Sensoren Gmbh Method for operating a driver assistance system of a motor vehicle in the transition from an autonomous to a manual driving mode, driver assistance system and motor vehicle
DE102015122600A1 (en) 2015-12-22 2017-06-22 Volkswagen Ag Method and system for acquiring personalization data for at least one device of a vehicle using a mobile device
DE102017201149A1 (en) 2017-01-25 2018-07-26 Audi Ag Control device and control method for a motor vehicle
DE102018217126A1 (en) 2018-10-08 2020-04-09 Audi Ag Method for displaying information on a display unit with a user-identifying avatar, and motor vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030181822A1 (en) 2002-02-19 2003-09-25 Volvo Technology Corporation System and method for monitoring and managing driver attention loads
DE102014214352A1 (en) 2014-07-23 2016-01-28 Robert Bosch Gmbh Method and arrangement for operating an occupant observation system
DE102014118958A1 (en) 2014-12-18 2016-06-23 Valeo Schalter Und Sensoren Gmbh Method for operating a driver assistance system of a motor vehicle in the transition from an autonomous to a manual driving mode, driver assistance system and motor vehicle
DE102015122600A1 (en) 2015-12-22 2017-06-22 Volkswagen Ag Method and system for acquiring personalization data for at least one device of a vehicle using a mobile device
DE102017201149A1 (en) 2017-01-25 2018-07-26 Audi Ag Control device and control method for a motor vehicle
DE102018217126A1 (en) 2018-10-08 2020-04-09 Audi Ag Method for displaying information on a display unit with a user-identifying avatar, and motor vehicle

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102022108223A1 (en) 2022-04-06 2023-10-12 Audi Aktiengesellschaft Method for operating a motor vehicle, motor vehicle and computer program product
DE102023108570A1 (en) 2023-04-04 2024-10-10 Bayerische Motoren Werke Aktiengesellschaft Device and method for determining contamination of glass surfaces in a vehicle

Also Published As

Publication number Publication date
CN113879228A (en) 2022-01-04

Similar Documents

Publication Publication Date Title
DE102018217692B4 (en) drowsiness detection system
DE60124937T2 (en) METHOD AND DEVICE FOR IMPROVING DRIVER BEHAVIOR IN A VEHICLE
DE102019200412A1 (en) Seating system with detection and stimulation of an occupant
DE102018204103B4 (en) Method and device for operating an assistance system in a motor vehicle
DE102019201695A1 (en) Biometric sensor fusion for classifying the condition of a vehicle occupant
CN109878527A (en) Divert one's attention sensing system
DE102007051543A1 (en) Vehicle component e.g. presentation device, parameter adjusting device, has detection device for detecting position and/or orientation of passenger head, where adjustment of parameter is carried out based on position and/or orientation
DE102015210430A1 (en) A method for recognizing a speech context for a voice control, a method for determining a voice control signal for a voice control and apparatus for carrying out the methods
DE10152852A1 (en) System for determining and influencing emotional state of motor vehicle driver, has emotion sensors, emotional state assessment device, device for stimulating driver with e.g. visual influences
DE102019204691A1 (en) Method and device for monitoring a driving-related state of health of occupants of an in particular autonomous vehicle
DE102020206642A1 (en) Method for assessing travel sickness in at least one passenger in a vehicle while the vehicle is moving, and an electronic travel sickness assessment system
DE102020208203A1 (en) Method for monitoring a vehicle interior of a vehicle
DE102020127613A1 (en) Device and method for generating a driver experience driving model by means of error monitoring
DE102019126396A1 (en) Determining a passenger's propensity for motion sickness in a vehicle
DE102015209902A1 (en) Method and device for controlling an interior lighting of a motor vehicle
DE102019220205A1 (en) Adaptive adjustment of an optical output to the eyesight
DE102020104354A1 (en) Method for determining a state of health of an occupant of a vehicle with regard to a motion sickness, determination system and vehicle
DE102020111427A1 (en) Personalized drowsiness warning
DE102019220119A1 (en) Method and device for resuscitation of a vehicle occupant
DE102019006586A1 (en) Method for operating a vehicle
DE102022127619A1 (en) Method and device for influencing a state of mind of a user of a means of transport and means of transport
DE102022210066A1 (en) Motor vehicle and method for detecting an attention indicator and/or a physiological indicator of a user
KR101883208B1 (en) A Smart garnish for door trim of vehicles
DE102017007211A1 (en) Method for optical information output in a vehicle
DE102019008318A1 (en) Method for controlling at least one driver assistance system

Legal Events

Date Code Title Description
R163 Identified publications notified