DE102019130004A1

DE102019130004A1 - Emotionsassistent zur Emotionsdarstellung im Innenraum eines Fahrzeugs

Info

Publication number: DE102019130004A1
Application number: DE102019130004.5A
Authority: DE
Inventors: Michael Braun; Florian Weber
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2019-11-07
Filing date: 2019-11-07
Publication date: 2021-05-12

Abstract

Vorgeschlagen wird ein Emotionsassistent zur Emotionsdarstellung im Innenraum eines Fahrzeugs, mit mindestens einer Einrichtung zur Emotionserkennung mindestens eines Fahrzeuginsassen, die ferner dazu eingerichtet ist, basierend auf der Emotionserkennung einen Gemütszustand des mindestens eines Fahrzeuginsassen zu ermitteln, sowie mindestens einer Anzeigevorrichtung, die dazu eingerichtet ist, den jeweiligen ermittelten Gemütszustand des mindestens einen der Fahrzeuginsassen optisch mittels Emotionsanzeigemitteln darzustellen.

Description

Die Erfindung betrifft einen Emotionsassistenten zur Emotionsdarstellung im Innenraum eines Fahrzeugs.
Im aktuellen Stand der Technik sind bereits Prototypen für Benutzerschnittstellen, auch als User Interface bezeichnet, bekannt. Diese benutzen zur Personalisierung des Nutzererlebnisses Software, die den Zustand des Nutzers erkennt und darauf reagiert. Allerdings sind diese Erkennungen oft fehleranfällig und intransparent.
Im Mobilfunkbereich wird bereits an einem Sprachassistenten gearbeitet, welcher die Emotionen des Verwenders berücksichtigen soll. Die Emotionen sollen voraussichtlich über eine Analyse von Stimm-Intonation, Mimik und Verhaltensmustern erfolgen.
Im Fahrzeug sind bereits z.B. aus der DE102008038816A1 , der DE102012105285A1 oder der DE102015220237A1 Assistenzfunktionen bekannt, die Emotionen von Insassen erfassen und daraufhin einen Fahrassistenten aktivieren oder die Emotionen nach außerhalb des Fahrzeugs sichtbar machen können.
Allerdings sind die bisher bekannten sogenannten Emotionsassistenten noch verbesserungsbedürftig.
Deshalb ist es eine Aufgabe dieser Erfindung, einen Emotionsassistenten zur Emotionsdarstellung im Innenraum eines Fahrzeugs bereitzustellen. Diese Aufgabe wird erfindungsgemäß durch die Merkmale der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen sind Gegenstand der abhängigen Ansprüche.
Vorgeschlagen wird ein Emotionsassistent zur Emotionsdarstellung im Innenraum eines Fahrzeugs, mit mindestens einer Einrichtung zur Emotionserkennung mindestens eines Fahrzeuginsassen, die ferner dazu eingerichtet ist, basierend auf der Emotionserkennung einen Gemütszustand des mindestens eines Fahrzeuginsassen zu ermitteln, sowie mindestens einer Anzeigevorrichtung, die dazu eingerichtet ist, den jeweiligen ermittelten Gemütszustand des mindestens einen der Fahrzeuginsassen optisch mittels Emotionsanzeigemitteln darzustellen.
Durch eine optische Darstellung des aktuellen Gemütszustands des mindestens eines Fahrzeuginsassen im Innenraum des Fahrzeugs wird es den Fahrzeuginsassen ermöglicht, Entscheidungen einer automatisierten Einstellung von Fahrzeugparametern besser nachvollziehen zu können. Außerdem wird es dem Fahrer ermöglicht, auf die aktuelle Stimmung der Fahrzeuginsassen bei der Wahl von z.B. Musik, der abzufahrenden Strecke etc. einzugehen und damit z.B. deren Stimmung zu verbessern.
Des Weiteren ist vorgesehen, dass die Anzeigevorrichtung als zentrales Display und/oder individuelles Display für mindestens einen der Fahrzeuginsassen gebildet und angeordnet ist. Die Darstellung in einem bereits vorhandenen zentralen Display ermöglicht es, ohne oder mit geringem zusätzlichen Hardwareaufwand jedem gewünschten Fahrzeuginsassen darzustellen, welchen Gemütszustand das System erkannt hat und warum es bestimmte Entscheidungen bzgl. der Einstellung von Fahrzeugparametern getroffen hat.
Vorteilhaft ist vorgesehen, dass die Emotionsanzeigemittel an mindestens einem Rand an jedem der Displays vorgesehen sind. Vorteilhaft ist vorgesehen, dass die Emotionsanzeigemittel Teil des Displays sind oder als separate die Emotionsanzeigemittel am Rand des Displays angeordnet sind. Vorteilhaft ist vorgesehen, dass die Emotionsanzeigemittel eine abstrahierte Anzeige des Gemütszustands des mindestens einen der Fahrzeuginsassen bereitstellen.
Durch das Anordnen der Emotionsanzeigemittel an einem Rand bzw. Randbereich eines Displays kann die Information zum erkannten Gemütszustand subtil erfolgen, so dass sich die Fahrzeuginsassen vom System, d.h. dem Emotionsassistenten, nicht gestört oder bevormundet fühlen.
Vorteilhaft ist vorgesehen, dass ein als positiv ermittelter Gemütszustand in der Farbe Grün, ein als negativ ermittelter Gemütszustand in der Farbe Rot und ein als nicht erkannt oder nicht ermittelbarer Gemütszustand in einer von Rot und Grün verschiedenen Farbe dargestellt wird. Die Farben Grün und Rot sind in den meisten Kulturbereichen einem eher positiven (grün) bzw. eher negativen (rot) Gefühl zugeordnet und können deshalb als Voreinstellung des Systems vorgesehen sein. Grundsätzlich können die Farben auch individuell vom Fahrer oder Fahrzeuginsassen nach eigenen Vorlieben gewählt werden, sie sind also möglichst einstellbar. Vorteilhaft ist dies insbesondere bei Farbenblinden.
Des Weiteren ist vorgesehen, dass die Emotionsanzeigemittel als ein an einem vorgegebenen Bereich des Rand des Displays vorgesehener beleuchteter Balken Symbol je Fahrzeuginsasse vorgesehen sind. Alternativ ist vorgesehen, dass die Emotionsanzeigemittel als ein an einem vorgegebenen Bereich des Rand des Displays vorgesehenes Symbol je Fahrzeuginsasse vorgesehen sind. Durch Verwenden eines Symbols kann auch ein Farbenblinder ohne weitere Hilfsmittel den Gemütszustand erkennen. Auch können Symbole zusätzlich farblich gekennzeichnet werden, um die Aussagekraft zu verstärken.
Des Weiteren ist eine Auswahleinrichtung derart vorgesehen, dass jeder Fahrzeuginsasse die Bestimmung seiner Emotionen und Anzeige seines erfassten Gemütszustands erlauben oder verbieten kann. Somit ist der Datenschutz gewährleistet.
Des Weiteren ist vorgesehen, dass eine Einstellung von Fahrzeugparametern automatisiert basierend auf dem erfassten Gemütszustand mindestens eines der Fahrzeuginsassen erfolgt. Des Weiteren ist ein Sprachassistent im Fahrzeug vorgesehen, dessen Ansagen basierend auf erfassten Gemütszustand angepasst werden. Durch die optische Darstellung des Gemütszustands und das darauf basierende Anpassen von automatisierten Aktionen des Fahrzeugs an den erkannten Gemütszustand wird das Fahrgefühl des Fahrzeuginsassen verbessert und das Verständnis, warum eine Aktion durchgeführt wurde, erleichtert.
Weitere Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen der Erfindung, anhand der Figuren der Zeichnung, die erfindungsgemäße Einzelheiten zeigt, und aus den Ansprüchen. Die einzelnen Merkmale können je einzeln für sich oder zu mehreren in beliebiger Kombination bei einer Variante der Erfindung verwirklicht sein.
Bevorzugte Ausführungsformen der Erfindung werden nachfolgend anhand der beigefügten Zeichnung näher erläutert.

1 zeigt eine schematische Darstellung einer Anzeigevariante des Gemütszustands von Fahrzeuginsassen gemäß einer Ausführung der vorliegenden Erfindung.
2 zeigt eine schematische Darstellung wichtiger Komponenten des Emotionsassistenten gemäß einer Ausführung der vorliegenden Erfindung

In den nachfolgenden Figurenbeschreibungen sind gleiche Elemente bzw. Funktionen mit gleichen Bezugszeichen versehen.
Bei bisher bekannten Emotionsassistenten gibt es deutlichen Verbesserungsbedarf. Beispielsweise funktioniert die Zustandserkennung als Blackbox, so dass ein Nutzer, d.h. Fahrzeuginsasse 2, 3, nicht sehen kann, was das System erkennt. Entsprechend falsch zugeordnete proaktive Vorschläge oder Anpassungen können die Nutzer verwirren. Die Algorithmen zur Zustandserkennung sind noch sehr fehleranfällig, was auf die Dauer das Vertrauen negativ beeinflusst. Eine plakative Anzeige des Zustands wird von vielen Nutzern als bevormundend empfunden und bietet keinen offensichtlichen Mehrwert.
Das Grundkonzept der Erfindung ist, dass die Daten aus den Zustands- bzw. Emotionserkennungsalgorithmen der Einrichtung zur Emotionserkennung 20, 30 subtil im Innenraum an vorgegebenen Bereichen angezeigt werden. Die Fahrzeuginsassen 2, 3 können ihren privaten Zustand beobachten, und daraus Rückschlüsse über die Funktionsweise des Systems schließen. Außerdem kann sich der Fahrer den Zustand aller Fahrzeuginsassen 2, 3 anzeigen lassen und basierend darauf sein Fahrverhalten anpassen oder Musik wählen, ohne sich dabei zu den oder dem Fahrzeuginsassen 2, 3 umdrehen zu müssen und dabei den Blick von der Straße zu nehmen.
Nachfolgend wird das vorgeschlagene System, d.h. der Emotionsassistent, detailliert beschrieben. Grundvoraussetzung ist, dass Emotionen von mindestens einem Fahrzeuginsassen 2, 3 mittels mindestens einer Einrichtung zur Emotionserkennung 20, 30 erfasst werden. Die mindestens eine Einrichtung zur Emotionserkennung 20, 30 kann jeweils eine im Inneren des Fahrzeugs 100 vorgesehene Einrichtung zur Emotionserkennung 20 von im vorderen Bereich des Fahrzeugs 100 sitzenden Fahrzeuginsassen 2, also Fahrer und Beifahrer, und eine im Inneren des Fahrzeugs 100 vorgesehene Einrichtung zur Emotionserkennung 30 von im hinteren Bereich des Fahrzeugs 100 sitzenden Fahrzeuginsassen 3 sein. Wenn mehr als eine hinter dem vorderen Bereich befindliche Reihe mit Fahrzeuginsassen 2, 3 vorgesehen ist, z.B. bei einem mindestens sechssitzigen Fahrzeug 100, z.B. einem Van oder einem Personenbeförderungsmittel wie einem Bus, kann für jede Reihe eine separate Einrichtung zur Emotionserkennung vorgesehen sein. Das Prinzip bleibt dasselbe.
Zusätzlich oder alternativ kann die Einrichtung zur Emotionserkennung 20, 30 auch eine am Fahrzeuginsassen 2, 3 angeordnete Einrichtung sein, z.B. ein Armband, eine Smartwatch oder ein Mobiltelefon. Diese kann in Kommunikationsverbindung mit der als Teil des Emotionsassistenten gebildeten Einrichtung zur Emotionserkennung 20, 30 oder einem dieser Einrichtung zugeordneten Steuergerät stehen, welche die entsprechenden Auswertungen ausführt, um den Gemütszustand zu ermitteln.
Die Art der Erfassung von Emotionen der Fahrzeuginsassen 2, 3 kann dabei mit unterschiedlichen Mitteln erfolgen. Insbesondere wird deren Zustand basierend auf einer Auswertung einer optischen Aufnahme des Gesichts einzelner Fahrzeuginsassen 2, 3 erfasst, z.B. über eine Innenraumkamera oder eine Kamera im Mobiltelefon. Zusätzlich kann eine Emotionserkennung aus der Sprache und dem Tonfall erfolgen. Des Weiteren können Vitalparameter in die Bewertung einfließen, die über entsprechende Sensorik im Fahrzeug 100 berührungslos oder in Kontakt mit den oder dem Fahrzeuginsassen 2, 3 aufgenommen werden. Auch kann vorgesehen sein, dass ein Fahrzeuginsasse 2, 3 dem Emotionsassistenten seinen Gemütszustand mitteilt, z.B. über ein Touch-Display oder eine Sprachansage.
Unter dem Begriff Emotionen ist ein Gemütszustand einer Person, d.h. eines Fahrzeuginsassen 2, 3, zu verstehen, z.B. ob die Person gut gelaunt, entspannt, lustig traurig, verärgert, aggressiv, etc. ist, aber auch wie hoch die Erregung bzw. Aktivität (engl. Arousal) der Person ist, da eine zu hohe Aktivität ebenso nachteilig ist wie eine zu niedrige Aktivität.
Der Gemütszustand kann z.B. dem Fahrer dann subtil, z.B. als optische Darstellung mittels Emotionsanzeigemitteln 10-13, angezeigt werden. Die Emotionsanzeigemittel 10-13 können ein zentrales Display 1 im Innenraum des Fahrzeugs 1 sein, das im Blickfeld des Fahrers angeordnet ist, wie in 2 gezeigt. Alternativ oder zusätzlich kann jedem Fahrzeuginsassen 2, 3 der für ihn erkannte Gemütszustand auf einem individuellen Display 4 angezeigt werden, das im Blickfeld des jeweiligen Fahrzeuginsassen 2, 3 ist, wie ebenfalls in 2 gezeigt.
In einer Ausführung sind Balken als Emotionsanzeigemittel 10-13 am Rand des Displays 1 vorgesehen, welche jeweils den Gemütszustand mindestens einer im Fahrzeug 100 sitzenden Person anzeigen. Vorteilhaft sind die Balken als Leuchten gebildet, die unterschiedliche Farben anzeigen können. Die Balken sind entweder im Display 1 integriert, wie in 1 schematisch gezeigt, oder außerhalb des Displays 1 und daran als separate Leuchten vorgesehen.
Vorteilhaft ist ein Balken je Fahrzeuginsasse 2, 3 vorgesehen, wobei in 1 Balken 10 den Gemütszustand des Fahrers 2, Balken 11 den Gemütszustand des Beifahrers 2, Balken 12 den Gemütszustand des linken hinteren Fahrzeuginsassen 3 und Balken 13 den Gemütszustand des rechten hinteren Fahrzeuginsassen 3 anzeigt. Die Balken sind vorteilhaft so angeordnet, dass eine logische Zuordnung zwischen deren Position und dem zugehörigen Fahrzeuginsassen 2, 3 besteht, wie in 1 gezeigt.
Durch die Verwendung von farbigen Balken kann eine abstrakte, qualitative Darstellung des Gemütszustands einer Person erfolgen, der sofort für den Fahrer klar ist. Beispielsweise kann ein eher aggressiver oder verärgerter Zustand mit der Farbe Rot gekennzeichnet werden, wobei ein entspannter, lustiger oder gut gelaunter Zustand mit der Farbe Grün gekennzeichnet werden. Ein nicht erkannter oder nicht zuordenbarer Zustand kann beispielsweise mit der Farbe Weiß gekennzeichnet werden. Auch können andere oder weitere Farben verwendet werden.
Es kann ferner vorgesehen sein, dass die Verwendung der Farben vom Fahrer selbst bestimmt werden kann.
Die Länge der Balken ist so gewählt, dass sie gut für den Fahrer oder einen anderen Fahrzeuginsassen 2, 3 sichtbar sind, aber nicht die Sicht auf andere Anzeigen im Display 1 verdecken, behindern oder übertönen. In 1 nehmen die Balken 10 und 11 in etwa die Hälfte der Höhe des Displays 1 ein, während die Balken 12 und 13 jeweils in etwa ein Drittel der Breite des Display 1 einnehmen.
Anstelle von Balken können auch Symbole angezeigt werden, die z.B. der Fahrer eindeutig einem der Fahrzeuginsassen 2, 3 und dessen Gemütszustand zuordnen kann.
Ferner kann vorgesehen sein, dass jeder Fahrzeuginsasse 2, 3 der Bestimmung seiner Emotion und Anzeige für den Fahrer und/oder andere Fahrzeuginsassen 2, 3 zustimmt. Dies kann über eine entsprechende Auswahleinrichtung im Fahrzeug 100 sowohl haptisch als auch akustisch, optisch oder mittels Gestik erfolgen. Auch kann eine Einstellung für einen bereits bekannten Fahrzeuginsassen 2, 3 abgespeichert und bei Erkennen des Fahrzeuginsassen 2, 3 automatisiert eingestellt oder abgefragt werden, ob die Einstellung verwendet werden darf.
Der Vorteil an der Anzeige im Display 1 ist, dass der Fahrer von einer Übersicht über die Stimmung im Fahrzeug 100 profitiert, die er sonst aufgrund der Fahraufgabe womöglich nicht hätte.
Zusätzlich kann vorgesehen sein, dass eine Einstellung von Fahrzeugparametern wie Klimatisierung, Entertainment, Sitzposition etc. basierend auf dem erfassten Gemütszustand erfolgt. Auch kann ein empathischer Sprachassistent die Transparenz steigern, insbesondere wenn dargestellt wird, aufgrund welcher Daten seine Entscheidungen basieren. Auch kann die Ansage eines Sprachassistenten dem erfassten Gemütszustand angepasst werden, z.B. in der Lautstärke der Sprachansage, der Menge an Informationen und im Tonfall.
Durch den vorgeschlagenen Emotionsassistenten kann die Transparenz in der Personalisierung des Emotionsassistenten erhöht werden, womit sich auch das Vertrauen in den Emotionsassistenten erhöht. Außerdem hat der Fahrer einen Überblick über den Zustand der Fahrzeuginsassen 2, 3, ohne sich dabei vom Verkehr abwenden zu müssen. Auch kann gegebenenfalls ein positiver psychologischer Effekt durch Selbstreflexion basierend auf der abstrahierten Anzeige des Fremdbildes erzeugt werden.
Auch wenn häufig nur davon gesprochen wurde, dass der Fahrer Vorteile hat, wenn ihm der Gemütszustand anderer Fahrzeuginsassen 2, 3 optisch dargestellt wird, gilt dies auch für alle anderen Fahrzeuginsassen 2, 3, denen ihr Gemütszustand oder der eines oder mehrerer anderer Fahrzeuginsassen 2, 3 optisch angezeigt wird.
ZITATE ENTHALTEN IN DER BESCHREIBUNG
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
Zitierte Patentliteratur

DE 102008038816 A1 [0004]
DE 102012105285 A1 [0004]
DE 102015220237 A1 [0004]

Claims

Emotionsassistent zur Emotionsdarstellung im Innenraum eines Fahrzeugs (100), mit - mindestens einer Einrichtung (20, 30) zur Emotionserkennung mindestens eines Fahrzeuginsassen (2, 3), die ferner dazu eingerichtet ist, basierend auf der Emotionserkennung einen Gemütszustand des Fahrzeuginsassen (2, 3) zu ermitteln, sowie - mindestens einer Anzeigevorrichtung (1, 4), die dazu eingerichtet ist, den jeweiligen ermittelten Gemütszustand des mindestens einen der Fahrzeuginsassen optisch mittels Emotionsanzeigemitteln (10-13) darzustellen.
Emotionsassistent nach Anspruch 1, wobei die Anzeigevorrichtung (1, 4) als zentrales Display (1) und/oder individuelles Display (4) für mindestens einen der Fahrzeuginsassen (2, 3) gebildet und angeordnet ist.
Emotionsassistent nach einem der vorhergehenden Ansprüche, wobei die Emotionsanzeigemittel (10-13) an mindestens einem Rand an jedem der Displays (1, 4) vorgesehen sind.
Emotionsassistent nach Anspruch 3, wobei Emotionsanzeigemittel (10-13) Teil des Displays (1, 4) sind oder als separate die Emotionsanzeigemittel (10-13) am Rand des Displays (1, 4) angeordnet sind.
Emotionsassistent nach einem der vorhergehenden Ansprüche, wobei die Emotionsanzeigemittel (10-13) eine abstrahierte Anzeige des Gemütszustands des mindestens einen der Fahrzeuginsassen (2, 3) bereitstellen.
Emotionsassistent nach einem der vorhergehenden Ansprüche, wobei ein als positiv ermittelter Gemütszustand in der Farbe Grün, ein als negativ ermittelter Gemütszustand in der Farbe Rot und ein als nicht erkannt oder nicht ermittelbarer Gemütszustand in einer von Rot und Grün verschiedenen Farbe dargestellt wird.
Emotionsassistent nach einem der vorhergehenden Ansprüche, wobei die Emotionsanzeigemittel (10-13) als ein an einem vorgegebenen Bereich des Rand des Displays (1, 4) vorgesehener beleuchteter Balken Symbol je Fahrzeuginsasse (2, 3) vorgesehen sind, oder wobei die Emotionsanzeigemittel (10-13) als ein an einem vorgegebenen Bereich des Rand des Displays (1, 4) vorgesehenes Symbol je Fahrzeuginsasse (2, 3) vorgesehen sind.
Emotionsassistent nach einem der vorhergehenden Ansprüche, mit einer Auswahleinrichtung derart, dass jeder Fahrzeuginsasse (2, 3) die Bestimmung seiner Emotionen und Anzeige seines erfassten Gemütszustands erlauben oder verbieten kann.
Emotionsassistent nach einem der vorhergehenden Ansprüche, wobei eine Einstellung von Fahrzeugparametern automatisiert basierend auf dem erfassten Gemütszustand mindestens eines der Fahrzeuginsassen (2, 3) erfolgt.
Emotionsassistent nach einem der vorhergehenden Ansprüche mit einem Sprachassistenten, dessen Ansagen basierend auf erfassten Gemütszustand angepasst werden.