DE102012006966A1 - A method for triggering a vehicle function by gaze-controlled operation and motor vehicle - Google Patents
A method for triggering a vehicle function by gaze-controlled operation and motor vehicle Download PDFInfo
- Publication number
- DE102012006966A1 DE102012006966A1 DE102012006966A DE102012006966A DE102012006966A1 DE 102012006966 A1 DE102012006966 A1 DE 102012006966A1 DE 102012006966 A DE102012006966 A DE 102012006966A DE 102012006966 A DE102012006966 A DE 102012006966A DE 102012006966 A1 DE102012006966 A1 DE 102012006966A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- driver
- display
- control panel
- function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/22—Display screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
- B60K35/235—Head-up displays [HUD] with means for detecting the driver's gaze direction or eye points
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/148—Instrument input by voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
Description
Die Erfindung betrifft Verfahren zum Auslösen einer fahrzeugseitig ausführbaren Funktion mittels blickgesteuerten Bedienens durch einen Fahrer des Fahrzeugs sowie ein entsprechend zur Ausführung des Verfahrens ausgerüstetes Kraftfahrzeug.The invention relates to a method for triggering a vehicle-executable function by means of view-controlled operation by a driver of the vehicle and a vehicle equipped accordingly for carrying out the method.
Aktuelle Bedienkonzepte zum Auslösen von Funktionen eines Kraftfahrzeugs umfassen in erster Linie manuelle Bedienung, z. B. die Betätigung von Schaltern. So werden bislang fahrzeugseitige Funktionen durch Betätigen solcher herkömmlichen Stellelemente ausgelöst, die der Fahrer zunächst mit seinem Blick erfassen muss, ehe er seine Hand vom Lenkrad an das betreffende Stellelement bewegen und eine entsprechende Druck- oder Drehbewegung ausführen kann. Aus dem Infotainmentbereich z. B. der Navigation und der Telefonie ist ferner das Auslösen von Funktionen mittels Sprachsteuerung bekannt.Current operating concepts for triggering functions of a motor vehicle include primarily manual operation, eg. B. the operation of switches. So far vehicle-side functions are triggered by pressing such conventional control elements, which must first capture the driver with his gaze, before he can move his hand from the steering wheel to the relevant actuator and perform a corresponding pressure or rotational movement. From the infotainment z. As navigation and telephony is also the triggering of functions by voice control known.
Ein weiteres neueres Bedienkonzept zum Auslösen einer Fahrzeugfunktion beruht auf der Blickauswahl in Verbindung mit Displays, die Bedienfelder oder Symbole anzeigen, die mit bestimmten Fahrzeugfunktionen zusammenhängen. Dabei wird über ein Erfassungssystem mit Kameras die Blickrichtung des Fahrers auf das Display festgestellt und mit dieser Blickrichtung ein betrachtetes Bedienfeld auf dem Display bestimmt, so dass die zu diesem Bedienfeld gehörige Fahrzeugfunktion nach einer Bestätigung durch den Fahrer ausgelöst wird.Another recent operating concept for triggering a vehicle function is based on gaze selection in conjunction with displays displaying panels or icons associated with particular vehicle functions. In this case, the viewing direction of the driver is detected on the display via a detection system with cameras and determines a viewing panel on the display with this viewing direction, so that the vehicle function associated with this control panel is triggered after a confirmation by the driver.
So ist aus der
Ausgehend von diesem Stand der Technik ist es Aufgabe der vorliegenden Erfindung, das blickgesteuerte Bedienen eines Kraftfahrzeugs zum Auslösen einer Fahrzeugfunktion weiter zu verbessern.Based on this prior art, it is an object of the present invention to further improve the look-controlled operation of a motor vehicle for triggering a vehicle function.
Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Anspruchs 1 gellst. Weiterbildungen sind in den Unteransprüchen ausgeführt.This object is achieved by a method having the features of
Die Aufgabe der Schaffung eines Kraftfahrzeugs, mit dem das Verfahren ausgeführt werden kann, wird mit den Merkmalen des Anspruchs 10 gelöst.The object of creating a motor vehicle with which the method can be carried out is achieved with the features of claim 10.
Das erfindungsgemäße Verfahren zum Auslösen einer fahrzeugseitig ausführbaren Funktion durch das blickgesteuerte Bedienen durch einen Fahrer des Fahrzeugs umfasst in einer ersten erfindungsgemäßen Ausführungsform das Anzeigen eines oder mehrerer Bedienfelder für die fahrzeugseitig ausführbare Funktion(en) auf einer Anzeigefläche im Sichtbereich des Fahrers. Die Blickrichtung des Fahrers wird in Bezug zu dem Bedienfeld auf der Anzeigefläche durch eine Blickrichtungerfassungseinheit erfasst und durch eine Recheneinheit, die mit der Blickrichtungerfassungseinheit und der Anzeigefläche gekoppelt ist, ausgewertet, woraus das durch den Fahrer betrachtete Bedienfeld bestimmt wird. Solche Blickrichtungerfassungseinheiten sind bekannt und umfassen eine oder mehrere Kameras. Das Auslösen der zu dem bestimmten Bedienfeld gehörigen fahrzeugseitig ausführbaren Funktion erfolgt erfindungsgemäß benutzergesteuert.The inventive method for triggering a vehicle-side executable function by the gaze-controlled operation by a driver of the vehicle comprises in a first embodiment of the invention displaying one or more panels for the vehicle-side executable function (s) on a display surface in the field of vision of the driver. The driver's gaze direction is detected with respect to the operation panel on the display surface by a gaze detection unit and evaluated by a computing unit coupled to the gaze detection unit and the display surface, from which the operator's control panel is determined. Such viewing direction detection units are known and comprise one or more cameras. The triggering of belonging to the specific panel vehicle-executable function is carried out according to the invention user-controlled.
Die Erfindung gestattet vorteilhaft die Bedienung von Funktionen ohne Ablenkung durch Suchen von Stellelementen und manuelle Ausführung einer Betätigungsbewegung. Der manuelle Eingriff über eine Vielzahl diverser Schalter oder sonstiger manueller Bedieneinheiten wird reduziert. Dadurch kann auch der Verschleiß dieser Stellelemente reduziert werden.The invention advantageously allows the operation of functions without distraction by searching for actuators and manual execution of an actuating movement. The manual intervention via a variety of switches or other manual control units is reduced. As a result, the wear of these control elements can be reduced.
Das benutzergesteuerte Auslösen kann manuell, sprachlich und/oder zeitlich in Abhängigkeit einer Blickdauer des Fahrers nach Aufrechterhalten der Blickrichtung auf das bestimmte Bedienfeld für eine vorbestimmte Zeitdauer erfolgen.The user-controlled triggering can be done manually, verbally and / or temporally depending on a driver's gaze duration after maintaining the line of sight on the particular control panel for a predetermined period of time.
Das manuell gesteuerte Auslösen umfasst das Erkennen einer durch den Fahrer ausgeführten Geste mittels einer Gestenerkennungseinrichtung. Beispielsweise können die Kameras der Blickrichtungerfassungseinheit gegebenenfalls von der Gestenerkennungseinrichtung genutzt werden. Denkbar sind aber auch andere Sensorsysteme zur Gestenerkennung. Auch das Betätigen eines Stellelements ist als manuell gesteuertes Auslosen denkbar.The manually controlled triggering comprises the recognition of a gesture executed by the driver by means of a gesture recognition device. For example, the cameras of the viewing direction detection unit can optionally be used by the gesture recognition device. However, other sensor systems for gesture recognition are also conceivable. Also, the actuation of an actuating element is conceivable as a manually controlled Auslos.
Ferner kann vorgesehen sein, dass die Art der Benutzersteuerung zum Auslösen, ob manuell durch Stellelementbetätigung oder Gesten, sprachgesteuert oder zeitlich, in Abhängigkeit der Blickdauer gesteuert, vorab mittels Auslösefelder ausgewählt und eingestellt wird, die auf der Anzeigefläche angezeigt werden können. Generell kann das Layout der Anzeigefläche mit Bedienfeldern und Symbolen in vielerlei Hinsicht durch den Benutzer gestaltet und seinen Bedürfnissen angepasst werden. So kann er etwa die Symbole der Funktionen bevorzugt zur Anzeige bringen, die er am häufigsten nutzt, oder deren Auslösung schnell erfolgen soll.Furthermore, it can be provided that the type of user control for triggering, whether manually controlled by control element actuation or gestures, voice-controlled or time-dependent as a function of the viewing duration, is selected and adjusted in advance by means of triggering fields which can be displayed on the display surface. In general, the layout of the display area with panels and icons can in many ways be designed by the user and adapted to his needs. For example, he prefers the symbols of the functions to the Display that he uses most often, or whose release is to be done quickly.
Zusätzlich kann das Verfahren, bevor das benutzergesteuerte Auslösen der zu dem bestimmten Bedienfeld gehörigen fahrzeugseitig ausführbaren Funktion erfolgt, das Bestätigen des durch die Recheneinheit bestimmten Bedienfelds umfassen. Auch die Bestätigung des bestimmten Bedienfelds kann durch eine manuelle, sprachliche und/oder blickgesteuerte Benutzereingabe erfolgen. Für letztere kann beispielsweise ein separates Eingabefeld auf der Anzeigefläche vorgesehen sein, es kann aber auch eine von der zum Auslösen vorbestimmten Zeitdauer abweichende, beispielsweise kürzere Blickdauer vorgesehen sein.In addition, before the user-controlled triggering of the vehicle-side executable function associated with the particular control panel is performed, the method may include confirming the control panel designated by the computing unit. Also, the confirmation of the specific panel can be done by a manual, verbal and / or visual user input. For the latter, for example, a separate input field may be provided on the display surface, but it is also possible to provide a shorter, for example shorter, viewing duration than the time period predetermined for triggering.
Weitere Verfahrenschritte beziehen sich darauf, dass die Anzeigefläche im Sichtbereich des Fahrers zum Anzeigen des zumindest einen Bedienfelds für die fahrzeugseitig ausführbare Funktion erst nach Anforderung durch den Fahrer aktiviert wird, beispielsweise durch manuelle, sprachgesteuerte und/oder blickgesteuerte Eingabe. Auch hierfür kann eine zu definierende Bedienfläche für eine Blickrichtung definiert werden, die zur Aktivierung der Anzeigefläche führt.Further method steps relate to the fact that the display area in the field of vision of the driver for displaying the at least one control panel for the vehicle-executable function is activated only after request by the driver, for example by manual, voice-controlled and / or view-controlled input. For this purpose too, a control surface to be defined for a viewing direction can be defined, which leads to the activation of the display surface.
Das Deaktivieren der Anzeigefläche kann ebenfalls manuell durch Eingabe des Fahrers, sprachgesteuert, blickgesteuert erfolgen, alternativ oder zusätzlich kann aber auch eine zeitlich gesteuerte Deaktivierung der Anzeigefläche nach einer vorbestimmten Zeitdauer erfolgen, um die Ablenkung des Fahrers vom Verkehrsgeschehen zu vermeiden. Die vorbestimmte Zeitdauer, nach deren Ablauf die Anzeigefläche deaktiviert wird, kann gegebenenfalls in Abhängigkeit davon variieren, ob die Erfassungseinheit eine Blickrichtung auf die Anzeigefläche erfasst und damit eine blickgesteuerte Bedienung erfolgt. Wird die Anzeigefläche aktiviert, ohne dass weitere Ereignisse, wie das Betrachten der Anzeigefläche durch den Fahrer, folgen, kann die Deaktivierung schon früher erfolgen.The deactivation of the display surface can also be done manually by entering the driver, voice-controlled, view-controlled, alternatively or additionally, however, a timed deactivation of the display surface after a predetermined period of time to avoid distraction of the driver from the traffic. The predetermined period of time after which the display surface is deactivated, may optionally vary depending on whether the detection unit detects a viewing direction on the display surface and thus an eye-controlled operation. If the display area is activated without further events, such as the driver's viewing of the display area, the deactivation can take place earlier.
Die Anzeigefläche kann ein Display des Fahrzeugs sein, das sowohl ein Head-up-Display als auch ein herkömmliches Flüssigkristall-Display sein kann, das in dem Kombiinstrument des Fahrzeugs, beispielsweise der Mittelkonsole oder der Instrumententafel angeordnet ist.The display surface may be a display of the vehicle, which may be both a head-up display and a conventional liquid crystal display, which is arranged in the instrument cluster of the vehicle, such as the center console or the instrument panel.
Die blickgesteuert ausgewählten und erfindungsgemäß benutzergesteuert ausgelösten fahrzeugseitig ausführbaren Funktionen können eine Klimafunktion, eine Infotainmentfunktion und/oder eine Fahrerassistenzfunktion sein. Klimafunktionen umfassen beispielsweise Heizung, Kühlung, Lüftung und/oder Entfeuchtung. Unter Infotainmentfunktionen werden z. B. Navigation, Telefonie, Informations- und/oder Unterhaltungsmedien zusammengefasst. Eine Fahrerassistenzfunktion kann etwa ein Einfädelassistent, ein Abstandshalteassistent, ein Rückfahrassistent, ein Parkassistent, ein Spurhalteassistent und/oder ein Bremsassistent sein.The vision-controlled selected and inventively user-triggered triggered on the vehicle side executable functions may be a climate function, an infotainment function and / or a driver assistance function. Climate functions include, for example, heating, cooling, ventilation and / or dehumidification. Under infotainment functions z. As navigation, telephony, information and / or entertainment media summarized. A driver assistance function may be, for example, a threading assistant, a distance assistant, a reversing assistant, a parking assistant, a lane departure warning assistant and / or a brake assist.
Ferner kann vorgesehen sein, dass eine fahrzeugseitig ausführbare Funktion das Einspiegeln eines Head-up Displays umfasst, das dann in Abhängigkeit einer mit der Funktion zusammenhängenden Blickrichtung des Fahrers eingespiegelt wird. So kann etwa eine Anzeige des Einfädelassistenten in der Seitenscheibe schräg vorne eingespiegelt werden, während die Anzeige eines Abstandshalteassistenten in der Frontscheibe erfolgen kann.Furthermore, it can be provided that a function that can be executed on the vehicle comprises mirroring in a head-up display, which is then mirrored in dependence on a line of sight of the driver that is related to the function. Thus, for example, an indication of the threading assistant in the side window can be mirrored obliquely in front, while the display of a distance-maintaining assistant can take place in the windshield.
Ein erfindungsgemäßes Kraftfahrzeug, das zur Ausführung des Verfahrens geeignet ist, umfasst eine Anzeigefläche im Sichtbereich des Fahrers mit zumindest einem Bedienfeld für eine fahrzeugseitig ausführbare Funktion. Weiter weist das Kraftfahrzeug eine Einheit zur Erfassung einer Blickrichtung des Fahrers in Bezug zu dem Bedienfeld auf der Anzeigefläche sowie eine Recheneinheit zur Bestimmung eines durch den Fahrer betrachteten Bedienfelds durch Auswertung der erfassten Blickrichtung auf. Dazu ist die Recheneinheit mit der Erfassungseinheit und der Anzeigefläche gekoppelt und hat eine Fahrzeugschnittstelle zur Auslösung der fahrzeugseitig ausführbaren Funktion. Zum benutzergesteuerten Auslösen der zu dem mit der erfassten Blickrichtung bestimmten Bedienfeld gehörigen Fahrzeugaktion umfasst das Kraftfahrzeug ferner eine entsprechende Benutzereingabeeinheit, die eine manuelle, sprachliche und/oder in Abhängigkeit einer Blickdauer zeitlich gesteuerte Benutzereingabe gestattet. Gegebenenfalls kann das Kraftfahrzeug zur Durchführung des Verfahrens noch weitere Komponenten wie etwa eine Bestätigungseinrichtung zur Bestätigung des bestimmten Bedienfelds umfassen.An inventive motor vehicle, which is suitable for carrying out the method, comprises a display area in the field of vision of the driver with at least one control panel for a vehicle-executable function. Next, the motor vehicle has a unit for detecting a line of sight of the driver with respect to the control panel on the display surface and a computing unit for determining an operator controlled by the operator panel by evaluating the detected line of sight. For this purpose, the arithmetic unit is coupled to the detection unit and the display surface and has a vehicle interface for triggering the vehicle-side executable function. For the user-controlled triggering of the vehicle action associated with the control panel determined by the detected line of vision, the motor vehicle further comprises a corresponding user input unit which permits a user input that is manually, linguistically and / or dependent on a viewing duration. Optionally, the motor vehicle for carrying out the method may include further components such as a confirmation device for confirming the specific control panel.
Diese und weitere Vorteile werden durch die nachfolgende Beschreibung unter Bezug auf die begleitenden Figuren dargelegt. Der Bezug auf die Figuren in der Beschreibung dient der Unterstützung der Beschreibung und dem erleichterten Verständnis des Gegenstands. Die Figuren sind lediglich eine schematische Darstellung einer Ausführungsform der Erfindung.These and other advantages are set forth by the following description with reference to the accompanying figures. The reference to the figures in the description is to aid in the description and understanding of the subject matter. The figures are merely a schematic representation of an embodiment of the invention.
Dabei zeigen:Showing:
Die erfindungsgemäße Vorrichtung bezieht sich auf ein blickgesteuertes Bedienkonzept für Fahrzeugfunktionen. Erfindungsgemäß wird bei diesem Verfahren die ausgewählte Fahrzeugfunktion alternativ oder zusätzlich nach Bestätigen der dem ausgewählten Bedienfeld zugrunde liegenden Fahrzeugfunktion benutzergesteuert mittels einer Gestenbedienung, einer Sprachbedienung und/oder eines Aufrechterhaltens des Blicks des Fahrers auf das ausgewählte Anzeigeelement für eine vorbestimmte Zeitdauer ausgelöst.The device according to the invention relates to a view-controlled operating concept for Vehicle functions. According to the invention, in this method, the selected vehicle function is alternatively or additionally triggered user-controlled by means of a gesture operation, voice control and / or maintaining the driver's gaze on the selected display element for a predetermined period of time after confirming the vehicle function underlying the selected control panel.
In
Die Funktionsweise des Systems umfasst, dass das Display
Mit dem erfindungsgemäßen Verfahren kann auch durch ein auf der Anzeigefläche angezeigtes Menü geführt werden.With the method according to the invention can also be performed by a menu displayed on the display area.
Die Menüstruktur wird vorteilhaft so gewählt, dass Menüs und Untermenüs oder Teile davon aufgerufen werden können. Beispiele dafür sind im Menü „Klima” ein Untermenü „wärmer/kälter”, im Menü „Abstandsradar ein/aus” ein Untermenü „Abstand kürzer/länger” oder auch im Menü „Infotainment” ein Untermenü „CD/DVD/Radio/Navi” und dort gegebenenfalls wiederum weitere Untermenüs. Die benutzergesteuert auszulösende Funktion ist dann zunächst das Aufblättern des jeweiligen Untermenüs, ehe dort die Auswahl einer weiteren benutzergesteuert auszulesende Funktion blickgesteuert erfolgt.The menu structure is advantageously chosen so that menus and submenus or parts thereof can be called up. Examples are in the menu "Climate" a submenu "warmer / colder", in the menu "distance radar on / off" a submenu "distance shorter / longer" or in the menu "Infotainment" a submenu "CD / DVD / Radio / Navi" and there again, if necessary, further submenus. The user-controlled function is then initially the paging of the respective submenu, before there is the selection of another user-controlled function to be read-view.
Das Blickrichtungserfassungsmodul
Die Verarbeitung der Eingaben und Befehlsumsetzung zum Kraftfahrzeug erfolgt über einen Fahrzeugrechner
Zur Vermeidung einer Ablenkung durch die Grafik der Anzeigefläche, insbesondere, wenn diese durch ein Head-up-Display gebildet wird, wird das Display nur auf Anforderung aktiviert etwa durch manuellen Aufruf und/oder sprachgesteuert, gegebenenfalls auch durch Blickkontakt auf einen zu definierenden Hauptmenükontakt. Die Deaktivierung kann manuell, sprach-, blick- und/oder zeitlich gesteuert erfolgen. So kann dem sogenannten „Attentional Tunneling” vorgebeugt werden, einem Phänomen, bei dem die Aufmerksamkeit auf einen bestimmten Bereich fokussiert ist, wodurch andere Aufmerksamkeits- und Aufgabenbereiche vernachlässigt werden, was bei der Teilnahme im Straßenverkehr nachteilig ist.To avoid distraction by the graphics of the display area, in particular if this is formed by a head-up display, the display is activated only on request, for example by manual call and / or voice-controlled, possibly also by eye contact with a main menu to be defined. The deactivation can be done manually, language, view and / or time controlled. Thus, the so-called "Attentional Tunneling" can be prevented, a phenomenon in which the attention is focused on a particular area, thereby neglecting other areas of attention and duties, which is disadvantageous in the participation in road traffic.
Bei der Ausführung einer Funktion, die die Einspiegelung eines Head-up-Displays umfasst, ist zu beachten, dass die Head-up Displays stets in „Blickrichtung der Funktion” des Fahrers eingespiegelt werden, beispielsweise der Einfädelassistent in der Seitenscheibe schräg vorne, die Abstandshalteassistent in der Frontscheibe.When performing a function involving the incorporation of a head-up display, it is important to note that the head-up displays are always mirrored in the driver's "view of function", such as the front window insertion assist, the standby assistant in the windscreen.
Das System ist so aufgebaut, dass weitere Fahrzeugfunktionen wie z. B. eine Rückfahrkamera, Einfädelassistent, Parkassistent etc. bei Bedarf eingebunden werden können.The system is designed so that other vehicle functions such. As a reversing camera, threading assistant, parking assistant, etc. can be involved if necessary.
Geeignete Blickrichtungserfassungs- und Auswerteeinheiten sind bekannt und etwa von der Fa. Smart Eye AB, Schweden, erhältlich. Mit deren Augen- und Kopfbewegungserfassungsmodulen
Ein solches Modul umfasst meistens zumindest zwei Kameras, es können auch mehr beispielsweise bis zu acht Kameras eingesetzt werden. Um auch in der Nacht arbeiten zu können, können entsprechende IR-Beleuchtungssysteme und IR-Kameras vorgesehen sein.Such a module usually includes at least two cameras, it can also be more, for example, up to eight cameras are used. In order to work at night, appropriate IR lighting systems and IR cameras can be provided.
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- EP 1562102 A2 [0004, 0004] EP 1562102 A2 [0004, 0004]
Claims (10)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102012006966A DE102012006966A1 (en) | 2012-04-04 | 2012-04-04 | A method for triggering a vehicle function by gaze-controlled operation and motor vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102012006966A DE102012006966A1 (en) | 2012-04-04 | 2012-04-04 | A method for triggering a vehicle function by gaze-controlled operation and motor vehicle |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102012006966A1 true DE102012006966A1 (en) | 2012-11-08 |
Family
ID=47019718
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102012006966A Withdrawn DE102012006966A1 (en) | 2012-04-04 | 2012-04-04 | A method for triggering a vehicle function by gaze-controlled operation and motor vehicle |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102012006966A1 (en) |
Cited By (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014114428A1 (en) * | 2013-01-26 | 2014-07-31 | Audi Ag | Method and system for controlling, depending on the line of vision, a plurality of functional units, motor vehicle and mobile terminal having said system |
| DE102013008738A1 (en) | 2013-05-23 | 2014-11-27 | Audi Ag | Method for operating a locking system of a motor vehicle and locking system |
| DE102013010018B3 (en) * | 2013-06-14 | 2014-12-04 | Volkswagen Ag | Motor vehicle with a compartment for storing an object and method for operating a motor vehicle |
| DE102013015205B3 (en) * | 2013-09-13 | 2015-02-05 | Audi Ag | Method and system for operating a plurality of display devices of a motor vehicle and motor vehicle with a system for operating a plurality of display devices |
| WO2015036118A1 (en) * | 2013-09-13 | 2015-03-19 | Audi Ag | Method and system for operating at least one display device of a motor vehicle, and motor vehicle having a system for operating at least one display device |
| WO2015039746A1 (en) | 2013-09-20 | 2015-03-26 | Audi Ag | Method and system for operating at least one display device of a motor vehicle, and motor vehicle comprising a system for operating at least one display device |
| DE102013019191A1 (en) | 2013-11-15 | 2015-05-21 | Audi Ag | Method and device for operating at least one assistance system of a motor vehicle |
| DE102013021930A1 (en) * | 2013-12-20 | 2015-06-25 | Audi Ag | Motor vehicle with a safety system and method for operating a safety system of a motor vehicle |
| DE102013021814A1 (en) | 2013-12-20 | 2015-06-25 | Audi Ag | Control device with eyetracker |
| DE102013022035A1 (en) | 2013-12-20 | 2015-06-25 | Audi Ag | Motor vehicle operating device with graphical user interface |
| EP2891953A1 (en) * | 2014-01-03 | 2015-07-08 | Harman International Industries, Incorporated | Eye vergence detection on a display |
| WO2015124308A1 (en) * | 2014-02-22 | 2015-08-27 | Audi Ag | System having an adjustment device and method for automatically adjusting/switching said adjustment device for a head-up display device |
| DE102014014602A1 (en) * | 2014-10-07 | 2016-04-07 | Audi Ag | Method for operating a motor vehicle and motor vehicle |
| DE102014222752A1 (en) * | 2014-11-07 | 2016-05-12 | Bayerische Motoren Werke Aktiengesellschaft | Operation via head direction as a replacement for the viewing direction |
| DE102015212849A1 (en) | 2015-07-09 | 2017-01-12 | Volkswagen Aktiengesellschaft | User interface and method for operating a user interface |
| DE102015212850A1 (en) | 2015-07-09 | 2017-01-12 | Volkswagen Aktiengesellschaft | User interface and method for assisting a user in interacting with a user interface |
| DE102016120999A1 (en) * | 2016-11-03 | 2018-05-03 | Visteon Global Technologies, Inc. | User interface and method for inputting and outputting information in a vehicle |
| DE102016224246A1 (en) | 2016-12-06 | 2018-06-07 | Volkswagen Aktiengesellschaft | Method and apparatus for interacting with a graphical user interface |
| DE102017213177A1 (en) * | 2017-07-31 | 2019-01-31 | Audi Ag | Method for operating a screen of a motor vehicle and motor vehicle |
| WO2019025064A1 (en) * | 2017-07-29 | 2019-02-07 | Daimler Ag | METHOD FOR CARRYING OUT AN AUTONOMOUS DRIVING OPERATION OF A VEHICLE |
| CN111556281A (en) * | 2014-07-17 | 2020-08-18 | 原相科技股份有限公司 | Vehicle safety system and operation method thereof |
| DE102021114781A1 (en) | 2021-06-09 | 2022-12-15 | Bayerische Motoren Werke Aktiengesellschaft | Method for adjusting a vehicle function by a digital assistant of the vehicle, computer-readable medium, system, and vehicle |
| DE102021207639A1 (en) | 2021-07-16 | 2023-01-19 | Volkswagen Aktiengesellschaft | Method for operating a motor vehicle and motor vehicle |
| DE102022204365A1 (en) | 2022-05-03 | 2023-11-09 | Psa Automobiles Sa | Activation of a vehicle function offered by the vehicle |
| DE102023132152A1 (en) | 2023-11-17 | 2025-05-22 | Audi Aktiengesellschaft | Motor vehicle and method for operating a vehicle function of a motor vehicle |
| EP4517501A4 (en) * | 2022-05-14 | 2025-06-04 | Shenzhen Yinwang Intelligent Technologies Co., Ltd. | DISPLAY METHOD AND APPARATUS, AND VEHICLE |
| DE102024115255A1 (en) * | 2024-05-31 | 2025-12-04 | Audi Aktiengesellschaft | Method for providing a passenger screen display and control device |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1562102A2 (en) | 2004-02-06 | 2005-08-10 | Audi Ag | Motor vehicle including function actuation by eye tracking |
-
2012
- 2012-04-04 DE DE102012006966A patent/DE102012006966A1/en not_active Withdrawn
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1562102A2 (en) | 2004-02-06 | 2005-08-10 | Audi Ag | Motor vehicle including function actuation by eye tracking |
Cited By (48)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2014114428A1 (en) * | 2013-01-26 | 2014-07-31 | Audi Ag | Method and system for controlling, depending on the line of vision, a plurality of functional units, motor vehicle and mobile terminal having said system |
| DE102013008738A1 (en) | 2013-05-23 | 2014-11-27 | Audi Ag | Method for operating a locking system of a motor vehicle and locking system |
| DE102013010018B3 (en) * | 2013-06-14 | 2014-12-04 | Volkswagen Ag | Motor vehicle with a compartment for storing an object and method for operating a motor vehicle |
| DE102013015204B4 (en) * | 2013-09-13 | 2015-06-18 | Audi Ag | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device |
| WO2015036118A1 (en) * | 2013-09-13 | 2015-03-19 | Audi Ag | Method and system for operating at least one display device of a motor vehicle, and motor vehicle having a system for operating at least one display device |
| DE102013015204A1 (en) | 2013-09-13 | 2015-03-19 | Audi Ag | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device |
| US10248193B2 (en) | 2013-09-13 | 2019-04-02 | Audi Ag | Methods and system for operating a plurality of display devices of a motor vehicle, and motor vehicle having a system for operating a plurality of display devices |
| DE102013015205B3 (en) * | 2013-09-13 | 2015-02-05 | Audi Ag | Method and system for operating a plurality of display devices of a motor vehicle and motor vehicle with a system for operating a plurality of display devices |
| WO2015039746A1 (en) | 2013-09-20 | 2015-03-26 | Audi Ag | Method and system for operating at least one display device of a motor vehicle, and motor vehicle comprising a system for operating at least one display device |
| DE102013015634A1 (en) | 2013-09-20 | 2015-03-26 | Audi Ag | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device |
| CN105556427A (en) * | 2013-09-20 | 2016-05-04 | 奥迪股份公司 | Method and system for operating at least one display device of a motor vehicle, and motor vehicle comprising a system for operating at least one display device |
| DE102013015634B4 (en) * | 2013-09-20 | 2015-06-18 | Audi Ag | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device |
| US10162411B2 (en) | 2013-09-20 | 2018-12-25 | Audi Ag | Methods and system for operating at least one display device of a motor vehicle, and motor vehicle comprising a system for operating at least one display device |
| DE102013019191A1 (en) | 2013-11-15 | 2015-05-21 | Audi Ag | Method and device for operating at least one assistance system of a motor vehicle |
| DE102013019191B4 (en) * | 2013-11-15 | 2016-07-14 | Audi Ag | Method and device for operating at least one assistance system of a motor vehicle |
| DE102013021814A1 (en) | 2013-12-20 | 2015-06-25 | Audi Ag | Control device with eyetracker |
| DE102013021930B4 (en) | 2013-12-20 | 2018-10-31 | Audi Ag | Motor vehicle with a safety system and method for operating a safety system of a motor vehicle |
| DE102013022035B4 (en) * | 2013-12-20 | 2015-11-12 | Audi Ag | Motor vehicle operating device with graphical user interface, and motor vehicle and method |
| DE102013022035A1 (en) | 2013-12-20 | 2015-06-25 | Audi Ag | Motor vehicle operating device with graphical user interface |
| DE102013021930A1 (en) * | 2013-12-20 | 2015-06-25 | Audi Ag | Motor vehicle with a safety system and method for operating a safety system of a motor vehicle |
| JP2015130173A (en) * | 2014-01-03 | 2015-07-16 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Eye vergence detection on display |
| EP2891953A1 (en) * | 2014-01-03 | 2015-07-08 | Harman International Industries, Incorporated | Eye vergence detection on a display |
| US9952665B2 (en) | 2014-01-03 | 2018-04-24 | Harman International Industries, Incorporated | Eye vergence detection on a display |
| DE102014002493B4 (en) | 2014-02-22 | 2018-08-16 | Audi Ag | System with and method for automatically switching on / off a setting device for a head-up display device |
| CN106030465A (en) * | 2014-02-22 | 2016-10-12 | 奥迪股份公司 | System and method having and for automatically switching on/off an adjustment device for a heads-up display device |
| WO2015124308A1 (en) * | 2014-02-22 | 2015-08-27 | Audi Ag | System having an adjustment device and method for automatically adjusting/switching said adjustment device for a head-up display device |
| US9835861B2 (en) | 2014-02-22 | 2017-12-05 | Audi Ag | System having an adjustment device and method for automatically adjusting/switching the adjustment device for a head-up display device |
| CN106030465B (en) * | 2014-02-22 | 2017-12-08 | 奥迪股份公司 | System and method and vehicle for automatically engaging and/or switching an adjustment device to adjust window position of a head-up display device |
| CN111556281A (en) * | 2014-07-17 | 2020-08-18 | 原相科技股份有限公司 | Vehicle safety system and operation method thereof |
| CN111556281B (en) * | 2014-07-17 | 2021-09-24 | 原相科技股份有限公司 | Vehicle safety system and operation method thereof |
| DE102014014602A1 (en) * | 2014-10-07 | 2016-04-07 | Audi Ag | Method for operating a motor vehicle and motor vehicle |
| DE102014222752A1 (en) * | 2014-11-07 | 2016-05-12 | Bayerische Motoren Werke Aktiengesellschaft | Operation via head direction as a replacement for the viewing direction |
| DE102015212850A1 (en) | 2015-07-09 | 2017-01-12 | Volkswagen Aktiengesellschaft | User interface and method for assisting a user in interacting with a user interface |
| DE102015212849A1 (en) | 2015-07-09 | 2017-01-12 | Volkswagen Aktiengesellschaft | User interface and method for operating a user interface |
| DE102016120999B4 (en) | 2016-11-03 | 2018-06-14 | Visteon Global Technologies, Inc. | User interface and method for inputting and outputting information in a vehicle |
| DE102016120999A1 (en) * | 2016-11-03 | 2018-05-03 | Visteon Global Technologies, Inc. | User interface and method for inputting and outputting information in a vehicle |
| DE102016224246B4 (en) | 2016-12-06 | 2024-07-04 | Volkswagen Aktiengesellschaft | Method and device for interacting with a graphical user interface |
| DE102016224246A1 (en) | 2016-12-06 | 2018-06-07 | Volkswagen Aktiengesellschaft | Method and apparatus for interacting with a graphical user interface |
| US11181901B2 (en) | 2017-07-29 | 2021-11-23 | Daimler Ag | Method for executing an autonomous driving operation of a vehicle |
| WO2019025064A1 (en) * | 2017-07-29 | 2019-02-07 | Daimler Ag | METHOD FOR CARRYING OUT AN AUTONOMOUS DRIVING OPERATION OF A VEHICLE |
| US11383600B2 (en) | 2017-07-31 | 2022-07-12 | Audi Ag | Method for operating a monitor of a motor vehicle, and motor vehicle |
| DE102017213177A1 (en) * | 2017-07-31 | 2019-01-31 | Audi Ag | Method for operating a screen of a motor vehicle and motor vehicle |
| DE102021114781A1 (en) | 2021-06-09 | 2022-12-15 | Bayerische Motoren Werke Aktiengesellschaft | Method for adjusting a vehicle function by a digital assistant of the vehicle, computer-readable medium, system, and vehicle |
| DE102021207639A1 (en) | 2021-07-16 | 2023-01-19 | Volkswagen Aktiengesellschaft | Method for operating a motor vehicle and motor vehicle |
| DE102022204365A1 (en) | 2022-05-03 | 2023-11-09 | Psa Automobiles Sa | Activation of a vehicle function offered by the vehicle |
| EP4517501A4 (en) * | 2022-05-14 | 2025-06-04 | Shenzhen Yinwang Intelligent Technologies Co., Ltd. | DISPLAY METHOD AND APPARATUS, AND VEHICLE |
| DE102023132152A1 (en) | 2023-11-17 | 2025-05-22 | Audi Aktiengesellschaft | Motor vehicle and method for operating a vehicle function of a motor vehicle |
| DE102024115255A1 (en) * | 2024-05-31 | 2025-12-04 | Audi Aktiengesellschaft | Method for providing a passenger screen display and control device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102012006966A1 (en) | A method for triggering a vehicle function by gaze-controlled operation and motor vehicle | |
| DE102013011311B4 (en) | Method for operating an information system of a motor vehicle and information system for a motor vehicle | |
| DE102009034068A1 (en) | Operating device for a motor vehicle | |
| DE102009034069A1 (en) | Operating device for a motor vehicle | |
| DE102012214017A1 (en) | SYSTEM FOR PREVENTING THE RETROSPECT FOR USE WHILE DRIVING A VEHICLE | |
| EP3044650B1 (en) | Methods and system for operating a plurality of display devices of a motor vehicle and motor vehicle having a system for operating a plurality of display devices | |
| DE102013015634B4 (en) | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device | |
| DE102013217558A1 (en) | Method for controlling an information display device and device with an information display device | |
| EP3254172B1 (en) | Determination of a position of a non-vehicle object in a vehicle | |
| WO2017008868A1 (en) | Method and operator control system for operating at least one function in a vehicle | |
| EP2941685B1 (en) | Operating method and operating system in a vehicle | |
| DE102012218114A1 (en) | Method for aligning at least one rear-view mirror of a motor vehicle | |
| DE102017011498B4 (en) | Method for operating an assistance system and an assistance system for a motor vehicle | |
| DE102017209798A1 (en) | Method and device for operating a display system in a motor vehicle | |
| DE102013203653A1 (en) | Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen | |
| DE102013015204A1 (en) | Method and system for operating at least one display device of a motor vehicle and motor vehicles with a system for operating at least one display device | |
| WO2014111241A1 (en) | Method and system for controlling at least one functional unit, and motor vehicle and mobile terminal device having such a system | |
| DE102017206312A1 (en) | Support handling of an object located within a passenger compartment and motor vehicle | |
| EP2925552B1 (en) | Operating method and operating system in a road vehicle | |
| DE102004033480A1 (en) | Device for monitoring a vehicle operation | |
| DE102012005886B4 (en) | Method for operating an operating device of a motor vehicle | |
| DE102021201929A1 (en) | Recording of user inputs in a motor vehicle while determining whether the user input is permissible | |
| DE102013011531B4 (en) | Method for operating an assistance system of a motor vehicle and assistance system for a motor vehicle | |
| DE102016224235A1 (en) | Method and device for adapting the representation of image and / or operating elements on a graphical user interface | |
| DE102013019263B4 (en) | Method for operating an operating device and vehicle with an operating device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R230 | Request for early publication | ||
| R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee | ||
| R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |
Effective date: 20141101 |