DE102020208203A1 - Method for monitoring a vehicle interior of a vehicle - Google Patents
Method for monitoring a vehicle interior of a vehicle Download PDFInfo
- Publication number
- DE102020208203A1 DE102020208203A1 DE102020208203.0A DE102020208203A DE102020208203A1 DE 102020208203 A1 DE102020208203 A1 DE 102020208203A1 DE 102020208203 A DE102020208203 A DE 102020208203A DE 102020208203 A1 DE102020208203 A1 DE 102020208203A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- vehicle occupant
- status data
- occupant
- sensors
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 238000012544 monitoring process Methods 0.000 title claims abstract description 22
- 238000012806 monitoring device Methods 0.000 abstract 2
- 238000011161 development Methods 0.000 description 10
- 210000003128 head Anatomy 0.000 description 6
- 230000006399 behavior Effects 0.000 description 3
- 230000036772 blood pressure Effects 0.000 description 3
- 230000036760 body temperature Effects 0.000 description 3
- 210000003205 muscle Anatomy 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 206010041349 Somnolence Diseases 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 239000000779 smoke Substances 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 206010016275 Fear Diseases 0.000 description 1
- 230000016571 aggressive behavior Effects 0.000 description 1
- 230000035565 breathing frequency Effects 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000036387 respiratory rate Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
- B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
- B60R21/01512—Passenger detection systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/20—Means to switch the anti-theft system on or off
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B23/00—Alarms responsive to unspecified undesired or abnormal conditions
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
Vorgeschlagen wird ein Verfahren (60) zum Überwachen eines Fahrzeuginnenraumes (26) eines Fahrzeugs (20) mit den folgenden Schritten:Identifizieren und Beobachten eines Fahrzeuginsassen (24) in dem Fahrzeuginnenraum (26) mittels einer Beobachtungsvorrichtung (22),Ermitteln eines abstrahierten Modells (82) des Fahrzeuginsassen (24) basierend auf den Daten der Beobachtungsvorrichtung (22),Beobachten des Fahrzeuginnenraums (26) mittels der Beobachtungsvorrichtung (22) und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren und Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen (24) und/oder des Fahrzeuginnenraumes (26),Verknüpfen des einen oder der mehreren Zustandsdaten mit dem abstrahierten Model (82) des Fahrzeuginsassen (24), sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model (82) des Fahrzeuginsassen (24) einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden,Darstellen des abstrahierten Modells (82) des Fahrzeuginsassen (24) und das eine oder die mehreren mit dem abstrahierten Model (82) des Fahrzeuginsassen (24) verknüpften Zustandsdaten mittels einer Anzeigevorrichtung (40).A method (60) for monitoring a vehicle interior (26) of a vehicle (20) is proposed, having the following steps: identifying and observing a vehicle occupant (24) in the vehicle interior (26) using an observation device (22), determining an abstract model ( 82) the vehicle occupant (24) based on the data from the monitoring device (22), observing the vehicle interior (26) using the monitoring device (22) and/or using one or more sensors arranged in the vehicle and determining one or more status data of the vehicle occupant ( 24) and/or the vehicle interior (26), associating the one or more status data with the abstract model (82) of the vehicle occupant (24) such that the one or more status data are related to the abstract model (82) of the vehicle occupant ( 24) be assigned to a local location at which the ascertained status data are observed and/or ascertained,D displaying the abstract model (82) of the vehicle occupant (24) and the one or more status data linked to the abstract model (82) of the vehicle occupant (24) by means of a display device (40).
Description
Stand der TechnikState of the art
Die Erfindung betrifft ein Verfahren zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs nach Gattung des unabhängigen Anspruchs. Weiterhin ist auch eine Vorrichtung zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs Gegenstand der vorliegenden Erfindung.The invention relates to a method for monitoring a vehicle interior of a vehicle according to the preamble of the independent claim. The present invention also relates to a device for monitoring a vehicle interior of a vehicle.
Aus der
Offenbarung der ErfindungDisclosure of the invention
Vorgeschlagen wird ein Verfahren zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs mit den folgenden Schritten:
- Identifizieren und Beobachten eines Fahrzeuginsassen in dem Fahrzeuginnenraum mittels einer Beobachtungsvorrichtung,
- Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung,
- Beobachten des Fahrzeuginnenraums mittels der Beobachtungsvorrichtung und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren und Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes,
- Verknüpfen des einen oder der mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden,
- Darstellen des abstrahierten Modells des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten mittels einer Anzeigevorrichtung.
- Identifying and observing a vehicle occupant in the vehicle interior by means of an observation device,
- Determination of an abstracted model of the vehicle occupant based on the data from the observation device,
- Observing the vehicle interior by means of the observation device and / or by means of one or more sensors arranged in the vehicle and determining one or more status data of the vehicle occupants and / or the vehicle interior,
- Linking the one or more status data with the abstracted model of the vehicle occupant, so that the one or more status data in relation to the abstracted model of the vehicle occupant are assigned to a local point at which the determined status data are observed and / or determined,
- Representation of the abstracted model of the vehicle occupant and the one or more status data linked to the abstracted model of the vehicle occupant by means of a display device.
Die Beobachtungsvorrichtung kann auch als Beobachtungssystem und/oder als Insassenbeobachtungssystem bezeichnet werden. Die Beobachtungsvorrichtung kann beispielsweise ausgebildet sein, einen Fahrzeuginsassen zu beobachten, zum Beispiel eine Körperhaltung, eine Blickrichtung und/oder eine Position eines Körpers, eines Kopfes bzw. eines Gesichts bzw. von Augen des Fahrzeuginsassen, insbesondere eines Fahrers oder eines Beifahrers, oder einen Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen zu erfassen. Ferner kann beispielsweise eine Identität eines Fahrzeuginsassen erfasst werden. Eine Anzeigevorrichtung kann als eine in dem Fahrzeug verbaute Anzeigevorrichtung, zum Beispiel als ein Display ausgebildet sein oder als mobile Anzeigevorrichtung, zum Beispiel als Smartphone oder Tablet. Beobachten des Fahrzeuginnenraums mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren kann in diesem Zusammenhang auch als Überwachen des Fahrzeuginnenraums mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren verstanden werden.The observation device can also be referred to as an observation system and / or as an occupant observation system. The observation device can be designed, for example, to observe a vehicle occupant, for example a posture, a line of sight and / or a position of a body, a head or a face or eyes of the vehicle occupant, in particular a driver or a passenger, or a state of drowsiness and / or to record other vital signs of the vehicle occupant. Furthermore, for example, an identity of a vehicle occupant can be recorded. A display device can be designed as a display device installed in the vehicle, for example as a display, or as a mobile display device, for example as a smartphone or tablet. Observing the vehicle interior by means of one or more sensors arranged in the vehicle can also be understood in this context as monitoring the vehicle interior by means of one or more sensors arranged in the vehicle.
Der Vorteil der vorliegenden Erfindung liegt darin, dass dem Fahrzeuginsassen ein digitales, repräsentatives Abbild seiner aktuellen Körperhaltung als abstrahiertes Modell sowie im Fahrzeug erfasste und ausgewertete Daten bzw. Informationen auf einem Display sichtbar dargestellt werden können. Hierdurch kann einem Fahrzeuginsassen transparent gemacht werden, welche Daten im Moment durch Sensoren im Fahrzeug analysiert und aufgezeichnet werden. Vorzugsweise kann das Vertrauen in das Überwachungssystem, insbesondere der Sensoren und/oder der Beobachtungsvorrichtung, und somit insbesondere in das Gesamtsystem gesteigert werden, wodurch insbesondere Ängste bezüglich der Überwachung des Fahrzeuginsassen abgebaut werden können. Hierdurch kann vorteilhafterweise die Akzeptanz des Beobachtungssystems und der Überwachung durch das Beobachtungssystem erhöht werden. Durch eine abstrahierte Darstellung des Fahrzeuginsassen, insbesondere eine generalisierte Darstellung des Fahrzeuginsassen, kann beispielsweise das Gefühl der Überwachung für den Fahrzeuginsassen reduziert werden. Beispielsweise kann als abstrahiertes Modell der Fahrzeuginsasse bzw. der menschliche Körper aus verschiedenen Grundkörpern, beispielsweise Ellipsoiden zusammengesetzt dargestellt werden. Hierdurch kann der Fahrzeuginsasse insbesondere als Mensch erkannt werden, wobei die Identität jedoch nicht auf dem Display erkennbar ist.The advantage of the present invention is that the vehicle occupant can be shown a digital, representative image of his or her current body posture as an abstract model, as well as data or information recorded and evaluated in the vehicle, visibly on a display. This allows a vehicle occupant to see which data is currently being analyzed and recorded by sensors in the vehicle. The trust in the monitoring system, in particular the sensors and / or the observation device, and thus in particular in the overall system can preferably be increased, whereby fears regarding the monitoring of the vehicle occupant in particular can be reduced. This can advantageously increase the acceptance of the observation system and the monitoring by the observation system. An abstract representation of the vehicle occupant, in particular a generalized representation of the vehicle occupant, can, for example, reduce the feeling of being monitored for the vehicle occupant. For example, the vehicle occupant or the human body can be represented as an abstract model composed of various base bodies, for example ellipsoids. As a result, the vehicle occupant can in particular be recognized as a person, although the identity cannot be recognized on the display.
Ein weiterer Vorteil der vorliegenden Erfindung ist, dass mittels der Verknüpfung des abstrahierten Modells und Zustandsdaten analysiert werden kann, an welcher Stelle welche Zustandsdaten in den Fahrzeuginnenraum gemessen werden. Beispielsweise kann hierdurch eine Situation im Fahrzeuginnenraum analysiert werden. Beispielsweise kann der Zustand des Fahrzeuginsassen, zum Beispiel der Gesundheitszustand, überwacht werden. Weiterhin kann überwacht werden, ob ein Fahrzeuginsasse in einem Fahrzeug raucht, ob dieser das Fahrzeug verschmutzt, oder ob eine bedrohliche Situation in einem Fahrzeug, beispielsweise durch Gewalt, herrscht. Gegebenenfalls können hierdurch weitere Maßnahmen eingeleitet werden.A further advantage of the present invention is that by means of the linking of the abstracted model and status data it can be analyzed at which point which status data is measured in the vehicle interior. For example, a situation in the vehicle interior can be analyzed in this way. For example, the condition of the vehicle occupant, for example the state of health, can be monitored. It is also possible to monitor whether a vehicle occupant smokes in a vehicle, whether he or she is contaminating the vehicle, or whether there is a threatening situation in a vehicle, for example due to violence. If necessary, further measures can be initiated as a result.
In einer vorteilhaften Ausführung kann die Beobachtungsvorrichtung eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden.In an advantageous embodiment, the observation device can comprise a camera and / or one or more sensors for observing the vehicle occupant. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably.
In einer Weiterentwicklung kann der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts. Hierdurch kann sicher und/oder zuverlässig identifiziert werden, ob sich ein Fahrzeuginsasse auf einem Fahrzeugsitz befindet. Weiterhin kann durch die Drucksensoren eine Gewichtsverlagerung und somit eine Körperhaltung des Fahrzeuginsassen gemessen und/oder ermittelt werden.In a further development, the one or more sensors can be designed as one or more pressure sensors in a vehicle seat for measuring a weight on the vehicle seat. This makes it possible to identify safely and / or reliably whether a vehicle occupant is on a vehicle seat. Furthermore, a weight shift and thus a posture of the vehicle occupant can be measured and / or determined by means of the pressure sensors.
Vorzugsweise können der in dem Fahrzeug angeordneten eine oder mehrere Sensoren als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden. Mittels des Sicherheitsgurtsensors können insbesondere die Vitalwerte eines Fahrzeuginsassen beobachtet werden, zum Beispiel der Puls des Fahrzeuginsassen. Mittels des Temperatursensors kann beispielsweise eine Körpertemperatur des Fahrzeuginsassen oder eine Temperatur des Fahrzeuginnenraums gemessen werden. Mittels Geruchssensors kann beispielsweise ein Geruch in dem Fahrzeug Innenraum identifiziert werden, wodurch beispielsweise Rauch, zum Beispiel Zigarettenrauch, und/oder eine Verschmutzung in dem Fahrzeuginnenraum identifiziert werden können. Mittels des Mikrofons können Geräusche in dem Fahrzeuginnenraum identifiziert werden. Vorzugsweise kann hierdurch eine Stimmung bzw. Atmosphäre in dem Fahrzeuginsassen, beispielsweise durch die Tonlage der identifizierten Stimmen in dem Fahrzeuginnenraum, ermittelt werden, wodurch zum Beispiel ein sicherheitskritischer Zustand in dem Fahrzeuginnenraum erkannt werden kann. In einer beispielhaften Ausgestaltung können der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. Hierdurch lässt sich der Fahrzeuginnenraum bzw. Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachten bzw. ermitteln.The one or more sensors arranged in the vehicle can preferably be designed as a seat belt sensor, a temperature sensor, an odor sensor, a microphone and / or an ultrasonic sensor. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably. In particular, the vital signs of a vehicle occupant can be observed by means of the seat belt sensor, for example the pulse of the vehicle occupant. For example, a body temperature of the vehicle occupant or a temperature of the vehicle interior can be measured by means of the temperature sensor. For example, an odor in the vehicle interior can be identified by means of an odor sensor, as a result of which, for example, smoke, for example cigarette smoke, and / or contamination in the vehicle interior can be identified. Noises in the vehicle interior can be identified by means of the microphone. A mood or atmosphere in the vehicle occupant can thereby preferably be determined, for example through the pitch of the identified voices in the vehicle interior, whereby, for example, a safety-critical state in the vehicle interior can be recognized. In an exemplary embodiment, the one or more status data of the vehicle interior can be information on a temperature, an odor, a volume, a safety-critical status and / or a pollution. In this way, the vehicle interior or the state of the vehicle occupant can be safely and / or reliably observed or determined.
In einer Weiterentwicklung kann in dem Schritt des Ermittelns des einen oder der mehreren Zustandsdaten des Fahrzeuginsassen mindestens ein physiologischer Parameter des Fahrzeuginsassen ermittelt werden. Vorzugsweise kann hierdurch ein Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachtet bzw. ermittelt werden. Mittels der Ermittlung der physiologischen Parameter des Fahrzeuginsassen können beispielsweise Vitalparameter des Fahrzeuginsassen überwacht werden.In a further development, at least one physiological parameter of the vehicle occupant can be determined in the step of determining the one or more status data of the vehicle occupant. In this way, a state of the vehicle occupant can preferably be safely and / or reliably observed or determined. By determining the physiological parameters of the vehicle occupant, vital parameters of the vehicle occupant can be monitored, for example.
In einer beispielhaften Ausführung kann das abstrahierte Model des Fahrzeuginsassen mittels eines Abstrahierungsalgorithmus ermittelt werden. Hierdurch kann eine sichere und oder zuverlässige Ermittlung des abstrahierten Modells des Fahrzeuginsassen ermöglicht werden, was insbesondere eine sichere und/oder zuverlässige Darstellung des abstrahierten Modells auf einer Anzeigevorrichtung ermöglicht.In an exemplary embodiment, the abstracted model of the vehicle occupant can be determined by means of an abstraction algorithm. This enables a safe and or reliable determination of the abstracted model of the vehicle occupant, which in particular enables a safe and / or reliable representation of the abstracted model on a display device.
Weiterhin vorgeschlagen wird eine Vorrichtung zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs, wobei die Vorrichtung eine Beobachtungsvorrichtung zum Identifizieren und Beobachten eines Fahrzeuginsassen in dem Fahrzeuginnenraum und zum Beobachten des Fahrzeuginnenraums umfasst und wobei die Vorrichtung einen oder mehrere in dem Fahrzeug angeordneten Sensoren zum Beobachten des Fahrzeuginnenraumes umfasst. Weiterhin umfasst die Vorrichtung eine Recheneinheit zum Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung und zum Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes, wobei der eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen verknüpfbar sind, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden. Ferner umfasst die Vorrichtung eine Anzeigevorrichtung zum Darstellen des abstrahierten Modells des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten.Furthermore, a device is proposed for monitoring a vehicle interior of a vehicle, wherein the device comprises an observation device for identifying and observing a vehicle occupant in the vehicle interior and for observing the vehicle interior and wherein the device comprises one or more sensors arranged in the vehicle for observing the vehicle interior. Furthermore, the device comprises a computing unit for determining an abstracted model of the vehicle occupant based on the data of the observation device and for determining one or more status data of the vehicle occupant and / or the vehicle interior, wherein the one or more status data can be linked to the abstracted model of the vehicle occupant, so that the one or more status data can be assigned to a local point in relation to the abstracted model of the vehicle occupant, at which the determined status data are observed and / or determined. Furthermore, the device comprises a display device for displaying the abstracted model of the vehicle occupant and the one or more status data linked to the abstracted model of the vehicle occupant.
Die Beobachtungsvorrichtung kann beispielsweise ausgebildet sein einen Fahrzeuginsassen zu beobachten, zum Beispiel eine Körperhaltung, eine Blickrichtung und/oder eine Position eines Körpers, eines Kopfes des Fahrzeuginsassen oder einen Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen zu erfassen. Ferner kann beispielsweise eine Identität eines Fahrzeuginsassen erfasst werden.The observation device can for example be designed to observe a vehicle occupant, for example to record a posture, a line of sight and / or a position of a body, a head of the vehicle occupant or a state of drowsiness and / or other vital signs of the vehicle occupant. Furthermore, for example, an identity of a vehicle occupant can be recorded.
Vorzugsweise kann mittels der vorliegenden Erfindung dem Fahrzeuginsassen ein digitales, repräsentatives Abbild seiner aktuellen Körperhaltung als abstrahiertes Modell sowie im Fahrzeug erfasste und ausgewertete Daten bzw. Informationen auf einem Display sichtbar dargestellt werden können, wodurch für einen Fahrzeuginsassen transparent bzw. ersichtlich ist, welche Daten im Moment durch Sensoren im Fahrzeug analysiert und aufgezeichnet werden. Vorzugsweise kann das Vertrauen in das Überwachungssystem und somit die Akzeptanz, insbesondere der Sensoren und/oder der Beobachtungsvorrichtung, und somit insbesondere in das Gesamtsystem gesteigert werden. Weiterhin kann beispielsweise der Zustand des Fahrzeuginsassen, zum Beispiel der Gesundheitszustand, überwacht werden. Ferner kann überwacht werden, ob ein Fahrzeuginsasse in einem Fahrzeug raucht, ob dieser das Fahrzeug verschmutzt, oder ob eine bedrohliche Situation in einem Fahrzeug, beispielsweise durch Gewalt, herrscht.By means of the present invention, the vehicle occupant can preferably be shown a digital, representative image of his or her current body posture as an abstract model, as well as data or information recorded and evaluated in the vehicle, on a display NEN, which makes it transparent or visible for a vehicle occupant which data is currently being analyzed and recorded by sensors in the vehicle. The trust in the monitoring system and thus the acceptance, in particular of the sensors and / or the observation device, and thus in particular in the overall system, can preferably be increased. Furthermore, for example, the condition of the vehicle occupant, for example the state of health, can be monitored. In addition, it can be monitored whether a vehicle occupant smokes in a vehicle, whether he is contaminating the vehicle, or whether there is a threatening situation in a vehicle, for example due to violence.
In einer Weiterentwicklung kann die Beobachtungsvorrichtung eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden.In a further development, the observation device can comprise a camera and / or one or more sensors for observing the vehicle occupant. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably.
In einer Weiterentwicklung kann der eine oder mehrere Sensoren als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts. Hierdurch kann sicher und/oder zuverlässig identifiziert werden, ob sich ein Fahrzeuginsasse auf einem Fahrzeugsitz befindet. Weiterhin kann durch die Drucksensoren eine Gewichtsverlagerung und somit eine Körperhaltung des Fahrzeuginsassen gemessen und/oder ermittelt werden.In a further development, the one or more sensors can be designed as one or more pressure sensors in a vehicle seat for measuring a weight on the vehicle seat. This makes it possible to identify safely and / or reliably whether a vehicle occupant is on a vehicle seat. Furthermore, a weight shift and thus a posture of the vehicle occupant can be measured and / or determined by means of the pressure sensors.
In einer beispielhaften Ausgestaltung kann der in dem Fahrzeug angeordnete einen oder die mehreren Sensoren als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Hierdurch können der Fahrzeuginsasse bzw. der Fahrzeuginnenraum sicher und/oder zuverlässig identifiziert und/oder beobachtet werden. Beispielsweise können der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. Hierdurch lässt sich der Fahrzeuginnenraum bzw. Zustand des Fahrzeuginsassen sicher und/oder zuverlässig beobachten bzw. ermitteln.In an exemplary embodiment, the one or more sensors arranged in the vehicle can be designed as a seat belt sensor, a temperature sensor, an odor sensor, a microphone and / or an ultrasonic sensor. In this way, the vehicle occupant or the vehicle interior can be identified and / or observed safely and / or reliably. For example, the one or more status data of the vehicle interior can be information on a temperature, an odor, a volume, a safety-critical status and / or a pollution. In this way, the vehicle interior or the state of the vehicle occupant can be safely and / or reliably observed or determined.
FigurenlisteFigure list
Ausführungsbeispiele der Erfindung sind in den Zeichnungen dargestellt und in den nachfolgenden Beschreibungen näher erläutert. Für die in den verschiedenen Figuren dargestellten und ähnlich wirkenden Elemente werden gleiche Bezugszeichen verwendet, wobei auf eine wiederholte Beschreibung der Elemente verzichtet wird. Es zeigen:
-
1 eine schematische Darstellung eines Fahrzeugs mit einer Vorrichtung zum Beobachten eines Fahrzeuginsassen; -
2 eine schematische Darstellung eines Fahrzeugs mit einer Anzeigeeinheit; -
3 eine schematische Darstellung eines Fahrzeugs mit einer Anzeigeeinheit; -
4 eine schematische Darstellung eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; -
5 eine schematische Darstellung eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; -
6 ein Blockschaltbild einer Vorrichtung gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; -
7 eine schematische Darstellung einer Anzeigevorrichtung gemäß einem Ausführungsbeispiel der vorliegenden Erfindung.
-
1 a schematic representation of a vehicle with a device for observing a vehicle occupant; -
2 a schematic representation of a vehicle with a display unit; -
3 a schematic representation of a vehicle with a display unit; -
4th a schematic representation of a vehicle according to an embodiment of the present invention; -
5 a schematic representation of a method according to an embodiment of the present invention; -
6th a block diagram of a device according to an embodiment of the present invention; -
7th a schematic representation of a display device according to an embodiment of the present invention.
Ausführungsformen der Erfindung:Embodiments of the invention:
Zum Beobachten des Fahrzeuginsassen 24 weist die Beobachtungsvorrichtung 22 eine Aufnahmeeinheit 32 auf. Weiterhin kann die Beobachtungsvorrichtung 22 eine Beleuchtungseinheit 30 zum Aussenden von Lichtstrahlen, zum Beispiel von Infrarotstrahlen, umfassen. Die Beobachtungsvorrichtung 22 kann insbesondere in einem Armaturenbrett 34 und/oder in einer Instrumententafel 34 des Fahrzeugs 20 angeordnet sein. In einer vorteilhaften Ausführung kann die Beobachtungsvorrichtung 22 insbesondere in einem Kombiinstrument in dem Armaturenbrett 34 angeordnet sein. Alternativ oder zusätzlich kann die Beobachtungsvorrichtung 22 auch an einer anderen Stelle in dem Innenraum 26 des Fahrzeugs 20 angeordnet sein, beispielsweise an einem Fahrzeugdach 38, an einem Rückspiegel oder an einer Säule des Fahrzeugs 20, zum Beispiel an der A-Säule und/oder der B-Säule.In order to observe the
Die Beleuchtungseinheit 30 kann insbesondere in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet sein, um den Fahrzeuginsassen 24 mit Lichtstrahlen, insbesondere Infrarotstrahlen, anzustrahlen. Mit anderen Worten können mittels der Beleuchtungseinheit 30 Lichtstrahlen in Richtung des Fahrzeuginsassen 24 ausgesendet werden. Die Beleuchtungseinheit 30 kann zum Beispiel als Leuchteinheit, Leuchtelement, Leuchtdiode, LED, OLED und/oder Laserdiode ausgebildet sein und/oder eine Leuchteinheit, ein Leuchtelement, eine Leuchtdiode, eine LED, OLED und/oder eine Laserdiode aufweisen. Die Aufnahmeeinheit 32 kann beispielsweise als Bildaufnahmeeinheit, zum Beispiel als Kamera ausgebildet sein, insbesondere als Infrarot-Kameramodul, wobei die Aufnahmeeinheit 32 in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet ist, um den Fahrzeuginsassen 24 des Fahrzeugs 20 visuell zu erfassen. Durch die Ausbildung als Infrarot-Kameramodul ist es möglich, die Beobachtung auch nachts durchzufuhren, ohne dass der Fahrzeuginsasse 24 hell angeleuchtet und dadurch geblendet werden würde.The
Weiterhin weist die Beobachtungsvorrichtung 22 eine Steuereinheit 36 bzw. eine Auswerteeinheit 36 bzw. eine Recheneinheit 36 auf zur Ansteuerung der Beleuchtungseinheit 30 und/oder der Aufnahmeeinheit 32 und/oder zur Verarbeitung der mittels der Aufnahmeeinheit 32 aufgenommenen Daten.Furthermore, the
Die Anzeigevorrichtung 40 kann beispielsweise in einer Instrumententafel 34 bzw. in einem Armaturenbrett 34 eines Fahrzeugs 20 angeordnet sein. Alternativ oder zusätzlich kann die Anzeigevorrichtung 40 an einer anderen Stelle im Armaturenbrett 34 des Fahrzeugs 20 angeordnet sein und/oder an einer anderen Stelle im Fahrzeug 20, zum Beispiel in der Mittelkonsole und/oder an den Sitzen 28. Mittels der Anzeigevorrichtung 40 können Informationen bezüglich des Fahrzeugs 20 und/oder des Fahrzeuginnenraums 26, beispielsweise Fahrzeugzustandsinformationen bzw. Informationen über einen Fahrzeugmodus, wie beispielsweise eine Geschwindigkeit und/oder eine Drehzahl und/oder eine Temperatur und/oder eine Tankfüllung und/oder Navigationshinweise und/oder Informationen eines Fahrzeugentertainmentsystems und/oder eines Fahrzeugsicherheitssystems und/oder weitere Informationen, welche für den Betrieb eines Fahrzeugs und/oder zur Unterhaltung des Fahrzeuginsassen 24 verwendet werden können, angezeigt werden. In einer Weiterentwicklung kann die Anzeigevorrichtung 40 beispielsweise eine Anzeigefläche aufweisen oder als Anzeigefläche ausgebildet sein.The
Die Anzeigevorrichtung 40 ist derart in dem Fahrzeug 20 angeordnet, dass ein Fahrzeuginsasse 24 die mittels der Anzeigevorrichtung 40 dargestellten Informationen betrachten kann. Ein Fahrzeuginsasse 24 kann insbesondere ein Betrachter der Anzeigevorrichtung 40, zum Beispiel ein Fahrer und/oder ein Beifahrer, des Fahrzeugs 20 sein.The
Die Beobachtungsvorrichtung 22 kann eine Kamera 32 und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen 24 umfassen. Der eine oder mehrere Sensoren können zum Beispiel als ein oder mehrere Drucksensoren 46 in dem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz 28 lastenden Gewichts. Beispielsweise kann mittels des einen oder mehrere Drucksensoren 46 ein Fahrzeuginsasse 24 durch das auf dem Fahrzeugsitz 28 lastende Gewicht des Fahrzeuginsassen 24 erkannt werden. Sind mehrere Drucksensoren 46 in dem Fahrzeugsitz 28 angeordnet und insbesondere über die Fläche des Fahrzeugsitzes 28 verteilt, kann eine Gewichtsverlagerung des Fahrzeuginsassen 24 erkannt werden, wodurch eine Körperhaltung des Fahrzeuginsassen 24 ermittelt werden kann.The
Weiterhin umfasst die Vorrichtung 42 einen oder mehrere in dem Fahrzeug 20 angeordnete Sensoren zum Beobachten des Fahrzeuginnenraumes 26. Der in dem Fahrzeug 20 angeordnete Sensor kann beispielsweise als Aufnahmeeinheit 32 gemäß der Aufnahmeeinheit 32 der Beobachtungsvorrichtung 22 gemäß
Weiterhin kann der in dem Fahrzeug 20 angeordnet Sensor als ein Sicherheitsgurtsensor 47 ausgebildet sein. Mittels des Sicherheitsgurtsensors kann beispielsweise identifiziert werden, ob ein Fahrzeuginsasse 24 angeschnallt ist. Ist ein Fahrzeuginsasse 24 nicht angeschnallt, so kann über eine Anzeigevorrichtung in dem Fahrzeug 20 eine Warnung ausgegeben werden. In bzw. an dem Sicherheitsgurt kann beispielsweise ein weiterer Sensor angeordnet sein, mittels welchem ein physiologischer Parameter des Fahrzeuginsassen 24 ermittelt werden kann. Mittels des physiologischen Parameters kann beispielsweise ein Zustand des Fahrzeuginsassen 24 ermittelt werden. Hierfür können insbesondere mittels der physiologischen Parameter die Vitalwerte bzw. Vitalparameter des Fahrzeuginsassen 24 überwacht werden. Der physiologische Parameter kann beispielsweise eine Herzfrequenz, eine Atemfrequenz, ein Blutdruck, eine Körpertemperatur oder ein Muskeltonus des Fahrzeuginsassen 24 sein. Beispielsweise kann anhand der physiologischen Parameter auch ein Gemütszustand des Fahrzeuginsassen ermittelt werden. Befindet sich ein Fahrzeuginsasse 24 beispielsweise in einem aggressiven Gemütszustand so ist beispielsweise die Atemfrequenz und der Blutdruck sowie die Herzfrequenz erhöht, wobei die Muskeln des Fahrzeuginsassen 24 in einem aggressiven Zustand angespannt sind. Ist der Fahrzeuginsasse 24 allerdings in einem ruhigen und entspannten Zustand, so hat diese eine geringere Herzfrequenz, Atemfrequenz oder einen geringeren Blutdruck, wobei die Muskeln des Fahrzeuginsassen 24 entspannt sind.Furthermore, the sensor arranged in the
Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnetes Sensor als ein Mikrofon 44 ausgebildet sein. Mittels des Mikrofons 44 können beispielsweise Geräusche in dem Fahrzeuginnenraum 26 des Fahrzeugs 20 ermittelt werden. Beispielsweise kann ermittelt werden, ob Fahrzeuginsassen 24 miteinander kommunizieren und/oder ob eine sicherheitskritische Situation vorliegt, was beispielsweise durch eine erhöhte Lautstärke bei einer Unterhaltung von Fahrzeuginsassen 24 identifiziert werden kann.Additionally or alternatively, the sensor arranged in the
Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnete Sensor als ein Temperatursensor 48, beispielsweise als ein Oberflächen-Temperatursensor 48 ausgebildet sein. Mittels des Temperatursensors 48 kann eine Temperatur in dem Fahrzeug 20 und/oder eine Temperatur des Fahrzeuginsassen 24 gemessen werden. Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnet Sensor als ein Geruchssensor 50 ausgebildet sein. Hierdurch kann beispielsweise ermittelt werden, ob in dem Fahrzeug 20 eine Verschmutzung und somit eine unangenehme Geruchsbildung vorliegt. Weiterhin kann ermittelt werden, ob ein Fahrzeuginsasse 24 in dem Fahrzeug 20 raucht. Bei Identifikation einer Verschmutzung in dem Fahrzeug 20 können gegebenenfalls weitere Maßnahmen eingeleitet werden. Zusätzlich oder alternativ kann der in dem Fahrzeug 20 angeordnet Sensor als ein Ultraschallsensor ausgebildet sein.Additionally or alternatively, the sensor arranged in the
Ferner umfasst die Vorrichtung 42 eine Recheneinheit 52 zum Ermitteln eines abstrahierten Modells des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung 22 und zum Ermitteln eines oder mehrerer Zustandsdaten des Fahrzeuginsassen 24 und/oder des Fahrzeuginnenraumes 26, wobei der eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen 24 verknüpfbar sind, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen 24 einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden.The
Weiterhin umfasst die Vorrichtung 42 eine Anzeigevorrichtung, wobei die Anzeigevorrichtung gemäß der Anzeigevorrichtung gemäß
In einem ersten Schritt 62 des Verfahrens 60 wird ein Fahrzeuginsasse in dem Fahrzeuginnenraum mittels einer Beobachtungsvorrichtung identifiziert und beobachtet. Die Beobachtungsvorrichtung kann vorteilhafterweise eine Kamera und/oder einen oder mehrere Sensoren zum Beobachten des Fahrzeuginsassen umfassen. Der eine oder mehrere Sensoren können beispielsweise als ein oder mehrere Drucksensoren in einem Fahrzeugsitz ausgebildet sein zum Messen eines auf dem Fahrzeugsitz lastenden Gewichts.In a
In einem zweiten Schritt 64 des Verfahrens 60 wird ein abstrahiertes Model des Fahrzeuginsassen basierend auf den Daten der Beobachtungsvorrichtung ermittelt, insbesondere mittels einer Recheneinheit. Das abstrahierte Model des Fahrzeuginsassen kann insbesondere mittels eines Abstrahierungsalgorithmus ermittelt werden. Hier empfängt die Recheneinheit die Daten der Beobachtungsvorrichtung und berechnet mittels eines Abstrahierungsalgorithmus ein abstrahiertes Modell des Fahrzeuginsassen.In a
In einem dritten Schritt 66 des Verfahrens 60 wird der Fahrzeuginnenraum mittels der Beobachtungsvorrichtung und/oder mittels einem oder mehreren in dem Fahrzeug angeordneten Sensoren beobachtet und ein oder mehrere Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes ermittelt. Die in dem Fahrzeug angeordneten eine oder mehreren Sensoren kann beispielsweise als ein Sicherheitsgurtsensor, ein Temperatursensor, ein Geruchssensor, ein Mikrofon und/oder ein Ultraschallsensor ausgebildet sein. Der eine oder die mehrerer Zustandsdaten des Fahrzeuginnenraumes können insbesondere Informationen einer Temperatur, eines Geruchs, einer Lautstärke, eines sicherheitskritischen Zustandes und/oder einer Verschmutzung sein. In einer Weiterentwicklung kann in dem Schritt des Ermittelns des einen oder der mehreren Zustandsdaten des Fahrzeuginsassen mindestens ein physiologischer Parameter des Fahrzeuginsassen ermittelt werden, wobei mittels der Ermittlung der physiologischen Parameter des Fahrzeuginsassen Vitalparameter des Fahrzeuginsassen überwacht werden. In einer Weiterentwicklung kann anhand der physiologischen Parameter und somit der Zustandsdaten des Fahrzeuginsassen Gemütszustand des Fahrzeuginsassen ermittelt werden.In a
In einem vierten Schritt 68 des Verfahrens 60 wird das eine oder die mehreren Zustandsdaten mit dem abstrahierten Model des Fahrzeuginsassen verknüpft, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen einer lokalen Stelle zugeordnet werden, an der die ermittelten Zustandsdaten beobachtet und/oder ermittelt werden. Die Verknüpfung kann insbesondere mittels der Recheneinheit ausgeführt werden.In a
In einem fünften Schritt 70 des Verfahrens 60 wird das abstrahierte Model des Fahrzeuginsassen und das eine oder die mehreren mit dem abstrahierten Model des Fahrzeuginsassen verknüpften Zustandsdaten mittels einer Anzeigevorrichtung dargestellt.In a
Mittels der Beobachtungsvorrichtung 22 wird ein Fahrzeuginsasse in einem Fahrzeuginnenraum identifiziert und beobachtet. Die Identifikation des Fahrzeuginsassen 24 kann auch mittels der Drucksensoren 46 erfolgen. Die mittels der Beobachtungsvorrichtung 22 und der Drucksensoren 46 aufgenommenen Daten werden an eine Recheneinheit 52 geleitet. Mittels eines oder mehreren in dem Fahrzeug angeordneten Sensoren 44, 46, 48, 50 wird der Fahrzeuginnenraum beobachtet, wobei die damit beobachteten und somit ermittelten Daten an die Recheneinheit 52 geleitet werden.A vehicle occupant in a vehicle interior is identified and observed by means of the
Die Recheneinheit 52 ermittelt mittels der bzw. basierend auf den Daten der Beobachtungsvorrichtung 22 und/oder der Drucksensoren 46 ein abstrahiertes Model des Fahrzeuginsassen. Weiterhin ermittelt die Recheneinheit 52 mittels der bzw. basierend auf den Daten der Beobachtungsvorrichtung 22 und/oder der Drucksensoren 46 und/oder der in dem Fahrzeug angeordneten einen oder mehreren Sensoren 44, 46, 48, 50 ein oder mehrere Zustandsdaten des Fahrzeuginsassen und/oder des Fahrzeuginnenraumes. Die Recheneinheit 52 verknüpft das eine oder die mehreren Zustandsdaten derart mit dem abstrahierten Model des Fahrzeuginsassen 24, sodass das eine oder die mehreren Zustandsdaten in Bezug zu dem abstrahierten Model des Fahrzeuginsassen 24 einer lokalen Stelle zuordenbar sind, an der die ermittelten Zustandsdaten beobachtet bzw. gemessen werden. Mit anderen Worten werden die Zustandsdaten dem Bereich bezüglich des abstrahierten Modells zugeordnet, in welchem sie lokal in den Fahrzeuginnenraum gemessen werden. Die Informationen bezüglich des abstrahierten Modells und der damit verknüpften Zustandsdaten werden von der Recheneinheit 52 an eine Anzeigevorrichtung weitergeleitet, wobei die Anzeigevorrichtung das abstrahierte Model und die damit verknüpften Zustandsdaten, insbesondere für den Fahrzeuginsassen 24, sichtbar darstellt. Die Weiterleitung der Daten zur Darstellung des abstrahierten Modells mit den Zustandsdaten auf der Anzeigevorrichtung wird insbesondere mittels des Pfeils 72 dargestellt.The
Vorzugsweise kann der Fahrzeuginsasse 24 mit der Vorrichtung 42 interagieren, was insbesondere durch den Pfeil 74 dargestellt wird. Beispielsweise kann der Fahrzeuginsasse ein Bedienelement 76 bedienen, wodurch bestimmte Steuerungssignale an die Recheneinheit 52 weitergegeben werden.The
Weiterhin kann der Fahrzeuginsasse 24 auf die Darstellung des abstrahierten Modells mit den Zugangsdaten reagieren, was insbesondere durch den Pfeil 78 und/oder durch den Pfeil 80 dargestellt wird. Hat der Fahrzeuginsasse 24 beispielsweise eine schiefe Körperhaltung so wird dem Fahrzeuginsassen 24 dies mittels des abstrahierten Modells auf der Anzeigevorrichtung 40 dargestellt. Der Fahrzeuginsasse kann dies erkennen und somit entsprechend seine Körperhaltung korrigieren.Furthermore, the
Mit anderen Worten betrifft die Erfindung ein System zur Visualisierung der automatisch analysierten Passagierdaten, insbesondere Daten bezüglich des Fahrzeuginsassen und des Fahrzeuginnenraums. Ausgehend von Daten einer Kamera für den Innenraum und weiterer Sensoren, zum Beispiel Drucksensoren in den Sitzen des Fahrzeugs, wird die Köperhaltung und/oder die Position des Fahrzeuginsassen identifiziert und analysiert. Basierend auf diesen Daten wird in einer Recheneinheit ein digitales Menschenmodell bzw. ein abstrahiertes Modell des Fahrzeuginsassen errechnet, welches die Körperhaltung und die Person abstrahiert widerspiegelt. Dieses digitale Abbild kann dem Fahrzeuginsassen bzw. Passagier des Fahrzeugs über ein Display, insbesondere einer Anzeigevorrichtung 40, in dem Fahrzeug in Echtzeit angezeigt bzw. dargestellt werden.In other words, the invention relates to a system for visualizing the automatically analyzed passenger data, in particular data relating to the vehicle occupant and the vehicle interior. Based on data from a camera for the interior and further sensors, for example pressure sensors in the seats of the vehicle, the posture and / or the position of the vehicle occupant is identified and analyzed. Based on this data, a digital human model or an abstracted model of the vehicle occupant is calculated in a computing unit, which abstractly reflects the posture and the person. This digital image can be displayed or represented to the vehicle occupant or passenger of the vehicle via a display, in particular a
Das Display kann entweder ein in das Fahrzeug integriertes Display sein oder auch ein Display eines mobilen Gerätes des Passagiers. Das Display kann somit wie ein Spiegel wirken und den Passagier dadurch in seinem Verhalten positiv beeinflussen. Durch die Spiegelung des Verhaltens können gegebenenfalls bereits unerwünschte Handlungen der Passagiere unterbunden werden. Unerwünschte Handlungen können zum Beispiel Aggressionen gegenüber anderen Passagieren, Vandalismus oder Verschmutzung im Fahrzeug sein.The display can either be a display integrated in the vehicle or a display on a mobile device of the passenger. The display can thus act like a mirror and thereby positively influence the passenger's behavior. By mirroring the behavior, undesired actions of the passengers can possibly already be prevented. Unwanted actions can be, for example, aggression towards other passengers, vandalism or soiling in the vehicle.
Weiterhin kann das digitale Abbild mit zusätzlichen Informationen, zum Beispiel mittels Symbolen, erweitert werden. Die zusätzlich dargestellten Informationen der Zustandsdaten stellen dabei die verschiedenen Aspekte der Überwachung, insbesondere der Beobachtung des Fahrzeuginnenraums und/oder des Fahrzeuginsassen, durch das Fahrzeug dar. Die dargestellten Informationen sind dabei nicht auf die Daten, welche durch die Innenraumkamera erfasst werden, limitiert. Stattdessen können die analysierten Daten von einer Vielzahl von Sensoren oder Systemen innerhalb und/oder außerhalb des Fahrzeuges dargestellt werden. Die Informationen, welche Daten durch das Fahrzeug erfasst und analysiert werden, werden durch die jeweiligen Sensoren an die Recheneinheit, welche das digitale Abbild berechnet, übermittelt.Furthermore, the digital image can be expanded with additional information, for example by means of symbols. The additionally displayed information of the status data represents the various aspects of the monitoring, in particular the observation of the vehicle interior and / or the vehicle occupant, by the vehicle. The information displayed is not limited to the data captured by the interior camera. Instead, the analyzed data can be displayed by a large number of sensors or systems inside and / or outside the vehicle. The information, which data is recorded and analyzed by the vehicle, is transmitted by the respective sensors to the computing unit, which calculates the digital image.
Bevorzugt werden die ausgewerteten Daten in dem Bereich des digitalen Abbildes dargestellt, in dem diese entstehen oder intuitiv mit diesem Bereich verknüpft sind. Wird zum Beispiel durch die Innenraumkamera der Gemütszustand des Passagiers analysiert, so sollte dies entsprechend im Kopfbereich des digitalen Abbildes dargestellt werden. Weitere darstellbare qualitative Daten wären zum Beispiel Audioaufzeichnungen im Fahrzeug, Eye-Tracking der Passagiere, Verhaltensbeobachtung der Passagiere, Sicherheitsgurt angelegt, OberflächenTemperatur-Sensor, Geruchssensor. In einer weiteren Ausprägung könnten auch quantitative Daten wie die ermittelte Körpertemperatur, Pulsfrequenz oder andere Messgrößen der Umgebung wie die Lufttemperatur, Luftgüte dargestellt werden. Diese Daten würden von anderen Sensoren erfasst und ermittelt und an die zentrale Recheneinheit übermittelt werden.The evaluated data are preferably displayed in the area of the digital image in which they arise or are intuitively linked to this area. If, for example, the passenger's state of mind is analyzed by the interior camera, this should be displayed accordingly in the head area of the digital image. Other representable qualitative data would be, for example, audio recordings in the vehicle, eye tracking of the passengers, observation of the behavior of the passengers, seat belts, surface temperature sensors, odor sensors. In a further embodiment, quantitative data such as the determined body temperature, pulse frequency or other measured variables of the environment such as air temperature and air quality could be displayed. This data would be recorded and determined by other sensors and transmitted to the central processing unit.
In einer weiteren Ausprägung könnte der Passagier über ein Bedienelement, eventuell das Touch-Display selbst, die Überwachung bestimmter Daten aktivieren oder deaktivieren.In a further embodiment, the passenger could activate or deactivate the monitoring of certain data via an operating element, possibly the touch display itself.
Eine Verwendung ist generell für Transportmittel, wie Fahrzeuge, Züge, Flugzeuge möglich.A use is generally possible for means of transport such as vehicles, trains, airplanes.
Auf der Anzeigevorrichtung wird das mittels der Recheneinheit ermittelte abstrahierte Model 82 des Fahrzeuginsassen dargestellt. Mit anderen Worten wird der Fahrzeuginsasse derart schematisch dargestellt, dass sein Körper schemenhaft erkennbar ist. Beispielsweise sind die Körperhaltung, insbesondere der Rumpf, die einzelnen Gliedmaßen und der Kopf, sichtbar, jedoch anonymisiert, sodass der Fahrzeuginsasse mittels des abstrahierten Modells nicht identifiziert werden kann.The
Weiterhin sind mit dem abstrahierten Model 82 die in dem Fahrzeuginnenraum ermittelten Zustandsdaten verknüpft. Vorzugsweise werden auf der Anzeigevorrichtung 40 die Zustandsdaten an dem Ort bzw. in dem Bereich dargestellt bzw. eingezeichnet, an dem sie in Bezug zu der Position des Fahrzeuginsassen, insbesondere des abstrahierten Modells 82 des Fahrzeuginsassen, in dem Fahrzeuginnenraum gemessen bzw. beobachtet werden. Somit wird beispielsweise das Zustandsdatum 84, welches die Blickrichtung des Fahrzeuginsassen betrifft, an der Stelle lokal auf der Anzeigevorrichtung 40 eingezeichnet, in der sich der Kopf des abstrahierten Modells 82 des Fahrzeuginsassen befindet. Weiterhin wird das Zustandsdatum 86 betreffend die Körperhaltung an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an der der Körper des Fahrzeuginsassen auf der Anzeigevorrichtung 40 dargestellt wird. Die Zustandsdaten 90, welches die Vitalparameter und somit die physiologischen Parameter des Fahrzeuginsassen betreffen, werden an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an welcher sich das Herz des abstrahierten Modells 82 des Fahrzeuginsassen befindet. Die Zustandsdaten 88 der Drucksensoren, werden an der Stelle auf der Anzeigevorrichtung 40 dargestellt, an welcher sich der Sitz, auf welchem der Fahrzeuginsasse sitzt, befindet.Furthermore, the status data determined in the vehicle interior are linked to the
Der Hinweis auf das Zustandsdatum 92 des Sicherheitsgurtsensors wird beispielsweise an der Stelle auf der Anzeigevorrichtung dargestellt, an der der Sicherheitsgurt mittels einer Schnalle geschlossen wird. Das Zustandsdatum 94 betreffend die Temperatur, welches mittels des Temperatursensors gemessen wird, wird in dieser vorteilhaften Ausführung an der Stelle bezüglich des abstrahierten Modells 82 des Fahrzeuginsassen dargestellt, an welchem der Temperatursensor im Fahrzeug angeordnet ist. Das Zustandsdaten 96 betreffend ein Geräusch, welches mittels eines Mikrofons gemessen wird, wird bezüglich des abstrahierten Modells 82 an der Stelle lokal dargestellt, an welcher ein Geräusch in den Fahrzeuginnenraum gemessen bzw. ermittelt wird. Beispielsweise kann ein Geräusch, zum Beispiel eine Stimme, auf dem Beifahrersitz lokalisiert werden, wodurch insbesondere das Zustandsdatum 96 betreffend das Geräusch auf Höhe des Beifahrersitzes in Bezug zu dem abstrahierten Model 82 des Fahrzeuginsassen dargestellt wird. Das Zustandsdatum 98 betreffend den Geruch in den Fahrzeuginnenraum, welche mittels des Geruchssensors gemessen wird, wird bezüglich des abstrahierten Modells 82 des Fahrzeuginsassen an der Stelle lokal auf der Anzeigevorrichtung 40 dargestellt, an welcher der Geruch in dem Fahrzeuginnenraum gemessen bzw. ermittelt wird.The reference to the
Durch die so dargestellten Zustandsdaten in Verknüpfung mit dem abstrahierten Model 82 hat der Betrachter der Anzeigevorrichtung 40 einen Überblick über die in den Fahrzeuginnenraum gemessenen Daten bzw. die lokale Stelle, an welcher die Daten gemessen werden. Mit anderen Worten wird das abstrahierte Model 82 auf der Anzeigevorrichtung 40 dargestellt, wobei die Zustandsdaten in Bezug zu dem abstrahierten Model 82 in dem Bereich auf der Anzeigevorrichtung 40 dargestellt werden, an welchem diese in dem Fahrzeuginnenraum auch tatsächlich und lokal gemessen bzw. ermittelt werden.The status data thus represented in connection with the
Die Zustandsdaten können beispielsweise als Symbol dargestellt werden und/oder als Wert, welcher mittels der Sensoren gemessen wird.The status data can be represented, for example, as a symbol and / or as a value which is measured by means of the sensors.
In einer Weiterentwicklung kann der Fahrzeuginsasse besondere auf der Anzeigevorrichtung 40, beispielsweise indem die Anzeigevorrichtung 40 als Touch-Display ausgeführt ist, Eingaben vornehmen. Beispielsweise kann der Fahrzeuginsasse einzelne Funktionen zur Messung der Zustandsdaten und somit die einzelnen Sensoren auswählen, insbesondere durch Antippen der einzelnen Zustandsdaten, um weitere Informationen bezüglich der gemessenen Zustandsdaten erhalten. In einer Weiterentwicklung kann der Fahrzeuginsasse die Messung der Zustandsdaten durch die Sensoren insbesondere abschalten und einschalten, beispielsweise durch auswählen bzw. Antippen der einem Zustandsdaten auf der Anzeigevorrichtung. Somit hat ein Fahrzeuginsasse insbesondere die Kontrolle über die Messung der Zustandsdaten in dem Fahrzeuginnenraum.In a further development, the vehicle occupant can make particular entries on the
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent literature cited
- DE 102014214352 A1 [0002]DE 102014214352 A1 [0002]
Claims (12)
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102020208203.0A DE102020208203A1 (en) | 2020-07-01 | 2020-07-01 | Method for monitoring a vehicle interior of a vehicle |
| CN202110736171.0A CN113879228A (en) | 2020-07-01 | 2021-06-30 | Method for monitoring a vehicle interior of a vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102020208203.0A DE102020208203A1 (en) | 2020-07-01 | 2020-07-01 | Method for monitoring a vehicle interior of a vehicle |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102020208203A1 true DE102020208203A1 (en) | 2022-01-05 |
Family
ID=79010736
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102020208203.0A Pending DE102020208203A1 (en) | 2020-07-01 | 2020-07-01 | Method for monitoring a vehicle interior of a vehicle |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113879228A (en) |
| DE (1) | DE102020208203A1 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102022108223A1 (en) | 2022-04-06 | 2023-10-12 | Audi Aktiengesellschaft | Method for operating a motor vehicle, motor vehicle and computer program product |
| DE102023108570A1 (en) | 2023-04-04 | 2024-10-10 | Bayerische Motoren Werke Aktiengesellschaft | Device and method for determining contamination of glass surfaces in a vehicle |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030181822A1 (en) | 2002-02-19 | 2003-09-25 | Volvo Technology Corporation | System and method for monitoring and managing driver attention loads |
| DE102014214352A1 (en) | 2014-07-23 | 2016-01-28 | Robert Bosch Gmbh | Method and arrangement for operating an occupant observation system |
| DE102014118958A1 (en) | 2014-12-18 | 2016-06-23 | Valeo Schalter Und Sensoren Gmbh | Method for operating a driver assistance system of a motor vehicle in the transition from an autonomous to a manual driving mode, driver assistance system and motor vehicle |
| DE102015122600A1 (en) | 2015-12-22 | 2017-06-22 | Volkswagen Ag | Method and system for acquiring personalization data for at least one device of a vehicle using a mobile device |
| DE102017201149A1 (en) | 2017-01-25 | 2018-07-26 | Audi Ag | Control device and control method for a motor vehicle |
| DE102018217126A1 (en) | 2018-10-08 | 2020-04-09 | Audi Ag | Method for displaying information on a display unit with a user-identifying avatar, and motor vehicle |
-
2020
- 2020-07-01 DE DE102020208203.0A patent/DE102020208203A1/en active Pending
-
2021
- 2021-06-30 CN CN202110736171.0A patent/CN113879228A/en active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030181822A1 (en) | 2002-02-19 | 2003-09-25 | Volvo Technology Corporation | System and method for monitoring and managing driver attention loads |
| DE102014214352A1 (en) | 2014-07-23 | 2016-01-28 | Robert Bosch Gmbh | Method and arrangement for operating an occupant observation system |
| DE102014118958A1 (en) | 2014-12-18 | 2016-06-23 | Valeo Schalter Und Sensoren Gmbh | Method for operating a driver assistance system of a motor vehicle in the transition from an autonomous to a manual driving mode, driver assistance system and motor vehicle |
| DE102015122600A1 (en) | 2015-12-22 | 2017-06-22 | Volkswagen Ag | Method and system for acquiring personalization data for at least one device of a vehicle using a mobile device |
| DE102017201149A1 (en) | 2017-01-25 | 2018-07-26 | Audi Ag | Control device and control method for a motor vehicle |
| DE102018217126A1 (en) | 2018-10-08 | 2020-04-09 | Audi Ag | Method for displaying information on a display unit with a user-identifying avatar, and motor vehicle |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102022108223A1 (en) | 2022-04-06 | 2023-10-12 | Audi Aktiengesellschaft | Method for operating a motor vehicle, motor vehicle and computer program product |
| DE102023108570A1 (en) | 2023-04-04 | 2024-10-10 | Bayerische Motoren Werke Aktiengesellschaft | Device and method for determining contamination of glass surfaces in a vehicle |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113879228A (en) | 2022-01-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102018217692B4 (en) | drowsiness detection system | |
| DE60124937T2 (en) | METHOD AND DEVICE FOR IMPROVING DRIVER BEHAVIOR IN A VEHICLE | |
| DE102019200412A1 (en) | Seating system with detection and stimulation of an occupant | |
| DE102018204103B4 (en) | Method and device for operating an assistance system in a motor vehicle | |
| DE102019201695A1 (en) | Biometric sensor fusion for classifying the condition of a vehicle occupant | |
| CN109878527A (en) | Divert one's attention sensing system | |
| DE102007051543A1 (en) | Vehicle component e.g. presentation device, parameter adjusting device, has detection device for detecting position and/or orientation of passenger head, where adjustment of parameter is carried out based on position and/or orientation | |
| DE102015210430A1 (en) | A method for recognizing a speech context for a voice control, a method for determining a voice control signal for a voice control and apparatus for carrying out the methods | |
| DE10152852A1 (en) | System for determining and influencing emotional state of motor vehicle driver, has emotion sensors, emotional state assessment device, device for stimulating driver with e.g. visual influences | |
| DE102019204691A1 (en) | Method and device for monitoring a driving-related state of health of occupants of an in particular autonomous vehicle | |
| DE102020206642A1 (en) | Method for assessing travel sickness in at least one passenger in a vehicle while the vehicle is moving, and an electronic travel sickness assessment system | |
| DE102020208203A1 (en) | Method for monitoring a vehicle interior of a vehicle | |
| DE102020127613A1 (en) | Device and method for generating a driver experience driving model by means of error monitoring | |
| DE102019126396A1 (en) | Determining a passenger's propensity for motion sickness in a vehicle | |
| DE102015209902A1 (en) | Method and device for controlling an interior lighting of a motor vehicle | |
| DE102019220205A1 (en) | Adaptive adjustment of an optical output to the eyesight | |
| DE102020104354A1 (en) | Method for determining a state of health of an occupant of a vehicle with regard to a motion sickness, determination system and vehicle | |
| DE102020111427A1 (en) | Personalized drowsiness warning | |
| DE102019220119A1 (en) | Method and device for resuscitation of a vehicle occupant | |
| DE102019006586A1 (en) | Method for operating a vehicle | |
| DE102022127619A1 (en) | Method and device for influencing a state of mind of a user of a means of transport and means of transport | |
| DE102022210066A1 (en) | Motor vehicle and method for detecting an attention indicator and/or a physiological indicator of a user | |
| KR101883208B1 (en) | A Smart garnish for door trim of vehicles | |
| DE102017007211A1 (en) | Method for optical information output in a vehicle | |
| DE102019008318A1 (en) | Method for controlling at least one driver assistance system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R163 | Identified publications notified |