DE102016006768A1

DE102016006768A1 - A method of operating a display system and display system

Info

Publication number: DE102016006768A1
Application number: DE102016006768.3A
Authority: DE
Inventors: Marcus Kühne
Original assignee: Audi AG
Current assignee: Audi AG
Priority date: 2016-06-02
Filing date: 2016-06-02
Publication date: 2017-12-07
Anticipated expiration: 2036-06-03
Also published as: DE102016006768B4

Abstract

Die Erfindung betrifft ein Verfahren zum Betreiben eines Anzeigesystems (10), bei welchem mittels einer von einer Person (20) aufgesetzten elektronischen Datenbrille (12) ein virtuelles Objekt (24) angezeigt wird, wobei mittels einer Blickerfassungseinrichtung (14) ein von der Person (20) fokussierter Fokussierungspunkt (28) am angezeigten virtuellen Objekt (24) erfasst und mittels einer von der elektronischen Datenbrille (12) verschiedenen Anzeigeeinrichtung (18) kenntlich gemacht wird. Die Erfindung betrifft des Weiteren ein Anzeigesystem (10) mit einer von einer Person (20) aufsetzbaren elektronischen Datenbrille (12) zum Anzeigen eines virtuellen Objekts (24).The invention relates to a method for operating a display system (10) in which a virtual object (24) is displayed by means of an electronic data goggles (12) put on by a person (20), wherein by means of a gaze detection device (14) one of the person ( 20) focused focus point (28) detected on the displayed virtual object (24) and by means of a different from the electronic data glasses (12) display device (18) is identified. The invention further relates to a display system (10) having an electronic data goggles (12) which can be placed by a person (20) for displaying a virtual object (24).

Description

Die Erfindung betrifft ein Verfahren zum Betreiben eines Anzeigesystems und ein Anzeigesystem der in den Oberbegriffen der unabhängigen Patentansprüche angegebenen Art.The invention relates to a method for operating a display system and a display system specified in the preamble of the independent claims.

Anzeigesysteme zum Anzeigen virtueller Objekte, wie beispielsweise virtuelle Kraftfahrzeuge, sind an sich bekannt. So zeigt die DE 10 2014 011 590 A1 ein Verfahren zum Betreiben eines Anzeigesystems, bei welchem mittels einer von einer Person aufgesetzten elektronischen Datenbrille in Form einer Virtual-Reality-Brille ein virtuelles Kraftfahrzeug angezeigt wird.Display systems for displaying virtual objects, such as virtual vehicles, are known per se. That's how it shows DE 10 2014 011 590 A1 a method for operating a display system, in which a virtual motor vehicle is displayed by means of a person put on electronic data glasses in the form of a virtual reality glasses.

Derartige Anzeigesysteme können insbesondere bei Verkaufsgesprächen auf vorteilhafte Weise eingesetzt werden, wobei beispielsweise ein potentieller Kunde mittels der elektronischen Datenbrille ein virtuelles Kraftfahrzeug angezeigt bekommt und konfigurieren kann. Üblicherweise wird ein derartiger Verkaufsprozess noch durch einen Händler begleitet. Eine besondere Herausforderung besteht in einer derartigen Konstellation für den Verkäufer insbesondere darin, möglichst gut auf den Träger der elektronischen Datenbrille und das von ihm wahrgenommene virtuelle Objekt einzugehen.Such display systems can be used in an advantageous manner, in particular during sales talks, wherein, for example, a potential customer can see and configure a virtual motor vehicle by means of the electronic data glasses. Usually, such a sales process is still accompanied by a dealer. A particular challenge in such a constellation for the seller is, in particular, to respond as well as possible to the wearer of the electronic data glasses and the virtual object he perceives.

Die US 2015/243078 A1 zeigt ein Verfahren und ein System zum sozialen Teilen von Inhalten eines Head-Mounted-Displays mit einem weiteren Bildschirm. Die mittels einer von einer Person getragenen Datenbrille dargestellte Szene wird dafür auf einem weiteren Bildschirm für eine andere Person einsehbar dargestellt.The US 2015/243078 A1 shows a method and a system for sharing content of a head-mounted display with another screen. The scene represented by means of a data goggles worn by a person is displayed on another screen for another person to view.

Die DE 10 2014 011 590 A1 zeigt ein Verfahren zum Betreiben eines Systems zur Darstellung einer virtuellen Realität. Die Darstellung eines angezeigten virtuellen Fahrzeugs wird in Abhängigkeit von einer erfassten Verschwenkposition eines Kopfes eines potentiellen Kunden angepasst.The DE 10 2014 011 590 A1 shows a method of operating a system for representing a virtual reality. The representation of a displayed virtual vehicle is adjusted in dependence on a detected pivot position of a potential customer's head.

Es ist die Aufgabe der vorliegenden Erfindung, ein Verfahren zum Betreiben eines Anzeigesystems sowie ein Anzeigesystem bereitzustellen, mittels welchen auf verbesserte Weise für eine Person ermöglicht wird, auf die von einem Träger einer elektronischen Datenbrille wahrgenommen Inhalte einzugehen.It is the object of the present invention to provide a method of operating a display system and a display system by means of which it is possible in an improved way for a person to respond to the contents perceived by a wearer of electronic data glasses.

Diese Aufgabe wird durch ein Verfahren zum Betreiben eines Anzeigesystems sowie durch ein Anzeigesystem mit den Merkmalen der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen mit zweckmäßigen und nicht trivialen Weiterbildungen der Erfindung sind in den abhängigen Ansprüchen angegeben.This object is achieved by a method for operating a display system and by a display system having the features of the independent patent claims. Advantageous embodiments with expedient and non-trivial developments of the invention are specified in the dependent claims.

Bei dem erfindungsgemäßen Verfahren zum Betreiben eines Anzeigesystems wird mittels einer von einer Person aufgesetzten elektronischen Datenbrille ein virtuelles Objekt angezeigt. Dabei ist es erfindungsgemäß vorgesehen, dass mittels einer Blickerfassungseinrichtung ein von der Person fokussierter Fokussierungspunkt am angezeigten virtuellen Objekt erfasst und mittels einer von der elektronischen Datenbrille verschiedenen Anzeigeeinrichtung kenntlich gemacht wird.In the method according to the invention for operating a display system, a virtual object is displayed by means of an electronic data goggle fitted by a person. In this case, it is provided according to the invention that a focus point focused on the person is detected on the displayed virtual object by means of a gaze detection device and made recognizable by means of a display device that is different from the electronic goggles.

Mit anderen Worten ist erfindungsgemäß also eine Art Echtzeit-Übertragung eines via Eye Tracking erhobenen bzw. erfassten Fokussierungspunkts an ein externes Ausgabemedium in Form der von der elektronischen Datenbrille verschiedenen Anzeigeeinrichtung vorgesehen. Der Erfindung liegt dabei die Erkenntnis zugrunde, dass in modernen Virtual-Reality-Setups neben der reinen Kopfausrichtung und Kopfposition eines Trägers einer elektronischen Datenbrille auch der Fokussierungspunkt der Augen des Virtual-Reality-Nutzers via Eye Tracking erfasst werden kann. Gerade in einer Verkaufsanwendung macht die erfindungsgemäße Lösung besonders Sinn, da eine den Verkaufsprozess begleitende Person, welche nicht die elektronische Datenbrille aufgesetzt hat, mittels der erfindungsgemäßen Lösung auf einfache Weise erkennen kann, welchen Teil des angezeigten virtuellen Objekts die Person, also der Träger der elektronischen Datenbrille, augenblicklich fokussiert.In other words, according to the invention, a kind of real-time transmission of a focusing point acquired or detected via eye tracking to an external output medium is thus provided in the form of the display device, which is different from the electronic data glasses. The invention is based on the finding that in modern virtual reality setups in addition to the pure head alignment and head position of a wearer of electronic data glasses and the focus of the eyes of the virtual reality user can be detected via eye tracking. Especially in a sales application, the solution according to the invention makes particularly sense, since a person accompanying the sales process, who has not put on the electronic data glasses, can easily recognize by means of the inventive solution, which part of the displayed virtual object the person, so the carrier of the electronic Smart glasses, instantly focused.

Bei dem erfindungsgemäßen Verfahren wird also zwischen zentralem Sehen und peripherem Sehen des Trägers der elektronischen Datenbrille unterschieden. Das zentrale Sehen entspricht der visuellen Wahrnehmung, die aus der Projektion von Lichtreizen auf die Fovea centralis, der Sehgrube, resultiert, und deckt einen Sehwinkel von ca. 2° ab. Der übrige Teil der Netzhaut, die Netzhautperipherie, entspricht dem Bereich, der für das periphere Sehen verantwortlich ist. Erfindungsgemäß ist es dabei vorgesehen, zu berücksichtigen, welcher Teil des angezeigten virtuellen Objekts durch das zentrale Sehen des Trägers der elektronischen Datenbrille erfasst, also fokussiert wird.In the method according to the invention, a distinction is thus made between central vision and peripheral vision of the wearer of the electronic data glasses. Central vision corresponds to the visual perception resulting from the projection of light stimuli on the fovea centralis, the visual cavity, and covers a visual angle of about 2 °. The remainder of the retina, the periphery of the retina, corresponds to the area responsible for peripheral vision. According to the invention, it is provided to take into account which part of the displayed virtual object is detected, ie focused, by the central vision of the wearer of the electronic data glasses.

Dadurch, dass der Fokussierungspunkt des Trägers der elektronischen Datenbrille erfasst und mittels der Anzeigeeinrichtung kenntlich gemacht wird, kann eine weitere Person, beispielsweise Verkaufspersonal oder dergleichen, eindeutig erkennen, welchen Teil des angezeigten virtuellen Objekts der Träger der elektronischen Datenbrille gerade fokussiert, sodass diese weitere Person gezielt auf diesen Point-of-Interest des Trägers der elektronischen Datenbrille eingehen kann. Beispielsweise kann sich bei der Anzeigeeinrichtung um einen PC-Monitor, einen Tablet Computer oder dergleichen handeln. Handelt es sich bei dem virtuellen Objekt beispielsweise um ein virtuelles Kraftfahrzeug, so kann die weitere Person anhand der Anzeigeeinrichtungen jederzeit gut erkennen, ob der Träger der elektronischen Datenbrille seinen Blick gerade beispielsweise auf eines der Räder des virtuellen Kraftfahrzeugs oder auch auf bestimmte andere Komponenten des virtuellen Kraftfahrzeugs gerichtet hat, sodass die weitere Person anhand dieser Information besonders gezielt auf die Wünsche des Trägers der elektronischen Datenbrille eingehen oder auch diese antizipieren kann, beispielsweise wenn das angezeigte virtuelle Kraftfahrzeug gemeinsam wunschgemäß konfiguriert werden soll. Durch die Echtzeitübertragung des Fokussierungspunkts auf die Anzeigeeinrichtung kann also eine Person, welche nicht die elektronische Datenbrille aufgesetzt hat, jederzeit gut sehen und nachverfolgen, wohin der Träger der elektronischen Datenbrille gerade genau auf das virtuelle Objekt blickt.Because the focus point of the wearer of the electronic data glasses is detected and identified by means of the display device, another person, for example sales staff or the like, can clearly identify which part of the displayed virtual object the wearer of the electronic data glasses is currently focusing, so that this additional person can specifically address this point-of-interest of the wearer of electronic data glasses. For example, the display device may be a PC monitor, a tablet computer or the like. Is this the virtual object For example, to a virtual motor vehicle, the other person can always see well using the display devices, whether the wearer of electronic goggles has his gaze just directed, for example, on one of the wheels of the virtual motor vehicle or on certain other components of the virtual motor vehicle, so that the other Person on the basis of this information can be particularly targeted to the wishes of the wearer of the electronic data glasses or even anticipate this, for example, if the displayed virtual motor vehicle is to be configured together as desired. By the real-time transmission of the focusing point to the display device, therefore, a person who has not put on the electronic data glasses can always see and track well, where the wearer of the electronic data glasses is looking exactly at the virtual object.

Eine vorteilhafte Ausführungsform und Erfindung sieht vor, dass mittels der Anzeigeeinrichtung ebenfalls das virtuelle Objekt angezeigt und erfasste Fokussierungspunkte in Form einer eingeblendeten Markierung am virtuellen Objekt kenntlich gemacht wird. Beispielsweise kann das ebenfalls mittels der Anzeigeeinrichtung angezeigte virtuelle Objekt an derjenigen Stelle etwas aufgehellt oder auch anderweitig optisch kenntlich gemacht werden, sodass eine weitere Person, also eine Person welche nicht die elektronische Datenbrille aufgesetzt hat, auf besonders einfache Weise anhand der Anzeigeeinrichtung erkennen kann, wohin der Träger der elektronischen Datenbrille gerade genau auf das virtuelle Objekt blickt.An advantageous embodiment and invention provides that by means of the display device also the virtual object is displayed and detected focus points in the form of a superimposed mark on the virtual object is identified. For example, the virtual object also displayed by means of the display device can be somewhat lightened at the point or otherwise optically marked, so that a further person, ie a person who has not put on the electronic data glasses, can recognize where, using the display device in a particularly simple manner the wearer of the electronic data glasses looks straight at the virtual object.

Eine weitere vorteilhafte Ausführungsform der Erfindung sieht vor, dass dem erfassten Fokussierungspunkt eine Komponente des angezeigten virtuellen Objekts zugeordnet wird. Handelt es sich bei dem virtuellen Objekt beispielsweise um ein virtuelles Kraftfahrzeug, so kann dieses ja ganz unterschiedlich große Komponenten aufweisen. Blickt der Träger der elektronischen Datenbrille beispielsweise auf eine Fahrzeugtür, unabhängig davon, wohin er genau auf die Fahrzeugtür blickt, kann die gesamte Fahrzeugtür beispielswiese ausgewählt werden. Gleichermaßen können auch andere Komponenten des virtuellen Kraftfahrzeugs dem jeweils erfassten Fokussierungspunkt zugeordnet werden.A further advantageous embodiment of the invention provides that the detected focus point is assigned a component of the displayed virtual object. If the virtual object is, for example, a virtual motor vehicle, then it can have components of very different sizes. For example, if the wearer of the electronic data goggles looks at a vehicle door, regardless of where he is looking directly at the vehicle door, the entire vehicle door can be selected. Likewise, other components of the virtual motor vehicle can be assigned to the respectively detected focus point.

In weiterer vorteilhafter Ausgestaltung der Erfindung ist es vorgesehen, dass der erfasste Fokussierungspunkt durch optische Hervorhebung der Komponente am mittels der Anzeigeeinrichtung angezeigten virtuellen Objekt kenntlich gemacht wird. Ein besonderer Vorteil der Zuordnung der Komponente zu dem erfassten Fokussierungspunkt besteht also darin, dass die betreffende Komponente in Abhängigkeit vom erfassten Fokussierungspunkt optisch hervorgehoben wird. Dadurch kann eine außenstehende Person, also gerade nicht der Träger der elektronischen Datenbrille, auf einfache Weise erkennen, wohin der Träger der elektronischen Datenbrille gerade auf dem virtuellen Objekt blickt.In a further advantageous embodiment of the invention, it is provided that the detected focus point is indicated by visual highlighting of the component at the virtual object displayed by means of the display device. A particular advantage of the assignment of the component to the detected focus point is therefore that the component in question is highlighted visually in dependence on the detected focus point. This allows an outsider, so just not the wearer of the electronic data goggles, easily recognize where the wearer of electronic goggles just looks on the virtual object.

In weiterer vorteilhafter Ausgestaltung der Erfindung ist es vorgesehen, dass ein Konfigurationsmenü für verschiedene auswählbare Ausstattungsoptionen für die Komponente mittels der elektronischen Datenbrille und/oder der Anzeigeeinrichtung angezeigt wird. Es ist also möglich, dass zudem der Träger der elektronischen Datenbrille das besagte Konfigurationsmenü eingeblendet bekommt, sodass er direkt erkennen kann, ob er verschiedene Ausstattungsoptionen für die betreffende Komponente, welche er gerade fokussiert, auswählen kann. Gleichermaßen oder alternativ es möglich, dass das Konfigurationsmenü für die Komponente mittels der Anzeigeeinrichtung angezeigt wird, sodass eine außenstehende Person, beispielsweise ein Verkäufer, auf einfache Weise erkennen kann, dass bestimmte Ausstattungsoptionen für die vom Träger der elektronischen Datenbrille fokussiert Komponente vorhanden sind, sodass der Verkäufer besonders gezielt auf etwaige Wünsche des Trägers der elektronischen Datenbrille eingehen kann oder ihn überhaupt darüber in Kenntnis setzen kann, dass er zwischen verschiedenen Ausstattungsoptionen wählen kann.In a further advantageous embodiment of the invention, it is provided that a configuration menu for various selectable equipment options for the component by means of the electronic data glasses and / or the display device is displayed. It is thus possible for the wearer of the electronic data glasses to also see the said configuration menu displayed so that he can directly recognize whether he can select different equipment options for the component in question which he is currently focusing on. Equally or alternatively it is possible that the configuration menu for the component is displayed by means of the display device, so that an outsider, for example a salesman, can easily recognize that certain equipment options are present for the component focused by the wearer of the electronic data glasses, so that the Seller can specifically respond to any wishes of the wearer of the electronic data glasses or even inform him that he can choose between different equipment options.

Gemäß einer weiteren vorteilhaften Ausführungsform der Erfindung es vorgesehen, dass Zusatzinformationen, insbesondere technische Daten, zur Komponente mittels der elektronischen Datenbrille und/oder der Anzeigeeinrichtung angezeigt werden. Mit anderen Worten ist es also vorzugsweise vorgesehen, dass in Abhängigkeit vom erfassten Fokussierungspunkt für die gerade fokussierte Komponente vorzugsweise automatisch Zusatzinformationen, insbesondere in Form von technischen Daten, für den Träger der elektronischen Datenbrille sichtbar und/oder mittels der Anzeigeeinrichtung für eine weitere außenstehende Person einsehbar, angezeigt werden. Das Ein- und Ausblenden sowohl der Zusatzinformation als auch des Konfigurationsmenüs kann mit einer gewissen Hysterese verknüpft sein. Das heißt., dass das Konfigurationsmenü und/oder die Zusatzinformationen noch eine Weile eingeblendet bleiben, selbst wenn der Träger der elektronischen Datenbrille seinen Fokussierungspunkt von der betreffenden Komponente bereits abgewendet haben sollte. Ferner kann es auch vorgesehen sein, dass das Konfigurationsmenü und die Zusatzinformationen solange eingeblendet bleiben, wie erfasst wird, dass der Fokussierungspunkt auf das eingeblendete Konfigurationsmenü und/oder die Zusatzinformationen, welche mittels der elektronischen Datenbrille angezeigt werden, gerichtet ist. Dadurch kann verhindert werden, dass das eingeblendete Konfigurationsmenü und/oder die Zusatzinformationen direkt wieder ausgeblendet werden, sobald der Träger der elektronischen Datenbrille seinen Blick, genauer sein Fokussierungspunkt, auf diese Elemente richtet. In diesem Zusammenhang kann es auch vorgesehen sein, dass mittels der Anzeigeeinrichtung optisch kenntlich gemacht wird, falls erfasst worden ist, dass der Fokussierungspunkt auf dem Konfigurationsmenü oder der elektronischen Datenbrille liegt, sodass eine außenstehende Person durch entsprechende Kenntlichmachung mittels der Anzeigeeinrichtung erkennen kann, dass der Träger der elektronischen Datenbrille gerade auf das Konfigurationsmenü oder auf die Zusatzinformationen blickt.According to a further advantageous embodiment of the invention, provision is made for additional information, in particular technical data, to be displayed on the component by means of the electronic data glasses and / or the display device. In other words, it is thus preferably provided that, depending on the detected focusing point for the currently focused component, additional information, in particular in the form of technical data, may be visible to the wearer of the electronic data goggles and / or viewed by the display device for another outside person , are displayed. The fade in and fade out of both the additional information and the configuration menu can be linked to a certain hysteresis. This means that the configuration menu and / or the additional information remain faded in for a while, even if the wearer of the electronic data glasses should have already averted his focussing point from the relevant component. Furthermore, provision may also be made for the configuration menu and the additional information to remain displayed as long as it is detected that the focussing point is directed to the displayed configuration menu and / or the additional information which is displayed by means of the electronic data glasses. This can prevent the displayed configuration menu and / or additional information from being hidden again directly. as soon as the wearer of the electronic goggles directs his gaze, more precisely his focus point, to these elements. In this context, it can also be provided that is optically identified by means of the display device, if it has been detected that the focus point is on the configuration menu or the electronic data glasses, so that an outsider can recognize by appropriate identification by means of the display device that the Carrier of electronic goggles just looks at the configuration menu or the additional information.

Das erfindungsgemäße Anzeigesystem umfasst eine von einer Person aufsetzbare elektronische Datenbrille zum Anzeigen eines virtuellen Objekts, wobei sich das erfindungsgemäße Anzeigesystem dadurch auszeichnet, dass es eine Blickerfassungseinrichtung aufweist, welche dazu ausgelegt ist, einen von der Person fokussierten Fokussierungspunkt am mittels der elektronischen Datenbrille angezeigten virtuellen Objekt zu erfassen. Ferner ist es erfindungsgemäß vorgesehen, dass das Anzeigesystem eine von der elektronischen Datenbrille verschiedene Anzeigeeinrichtung und eine Steuereinrichtung umfasst, welche dazu ausgelegt ist, die Anzeigeeinrichtung zum Kenntlichmachen des erfassten Fokussierungspunkts anzusteuern. Vorteilhafte Ausgestaltungen des erfindungsgemäßen Verfahrens sind als vorteilhafte Ausgestaltungen des erfindungsgemäßen Anzeigesystems anzusehen, wobei das Anzeigesystem insbesondere Mittel zur Durchführung der Verfahrensschritte aufweist.The display system according to the invention comprises an electronic data glasses to be displayed by a person for displaying a virtual object, wherein the display system according to the invention is characterized in that it has a gaze detection device which is adapted to a focussing focused on the person at the virtual object displayed by the electronic goggles capture. Furthermore, it is provided according to the invention that the display system comprises a display device different from the electronic data glasses and a control device which is designed to control the display device for identifying the detected focus point. Advantageous embodiments of the method according to the invention are to be regarded as advantageous embodiments of the display system according to the invention, wherein the display system has in particular means for performing the method steps.

Eine vorteilhafte Ausführungsform des Anzeigesystems sieht vor, dass die Blickerfassungseinrichtung in die elektronische Datenbrille integriert ist. Dadurch kann auf besonders zuverlässige Weise der Fokussierungspunkt des Trägers der elektronischen Datenbrille ermittelt werden.An advantageous embodiment of the display system provides that the gaze detection device is integrated into the electronic goggles. As a result, the focusing point of the wearer of the electronic data glasses can be determined in a particularly reliable manner.

Schließlich ist es gemäß einer weiteren vorteilhaften Ausführungsform der Erfindung vorgesehen, dass es sich bei der elektronischen Datenbrille um eine Virtual-Reality-Brille oder um eine Augmented-Reality-Brille handelt. Im ersteren Fall wird also der Träger von der Virtual-Reality-Brille vollständig von seiner Umgebung abgeschottet, wobei das virtuelle Objekt, beispielsweise ein virtuelles Kraftfahrzeug, zusätzlich auch innerhalb einer virtuellen Umgebung, wie beispielsweise einem virtuellen Showroom oder dergleichen, angezeigt werden kann. Bei einer Augmented-Reality-Brille ist es möglich, dass der Träger der Augmented-Reality-Brille das virtuelle Objekt, beispielsweise wiederum ein virtuelles Kraftfahrzeug, in die reale Umgebung eingeblendet bekommt. Dies bringt den Vorteil mit sich, dass der Träger der Augmented-Reality-Brille sich das virtuelle Objekt so anschauen kann, als ob es tatsächlich vor dem Träger der Augmented-Reality-Brille in der realen Umgebung stehen würde. Darüber hinaus es auch möglich, dass bei allen Ausführungsformen der Erfindung statt der elektronischen Datenbrille eine Augmented-Reality-Kontaktlinse oder auch zwei Augmented-Reality-Kontaktlinsen zum Einsatz kommen.Finally, according to a further advantageous embodiment of the invention, it is provided that the electronic data glasses are virtual reality glasses or augmented reality glasses. In the former case, therefore, the wearer is completely isolated from the environment by the virtual reality glasses, wherein the virtual object, for example a virtual motor vehicle, can additionally also be displayed within a virtual environment, such as a virtual showroom or the like. In the case of augmented reality glasses, it is possible for the wearer of the augmented reality glasses to see the virtual object, for example a virtual motor vehicle, in the real environment. This has the advantage that the wearer of the augmented reality goggles can look at the virtual object as if it were actually standing in front of the wearer of the augmented reality goggles in the real environment. In addition, it is also possible for all embodiments of the invention to use an augmented reality contact lens or even two augmented reality contact lenses instead of the electronic data glasses.

Weitere Vorteile, Merkmale und Einzelheiten Erfindung ergeben sich aus der nachfolgenden Beschreibung bevorzugter Ausführungsbeispiele sowie anhand der Zeichnung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen.Further advantages, features and details of the invention will become apparent from the following description of preferred embodiments and from the drawing. The features and feature combinations mentioned above in the description as well as the features and feature combinations mentioned below in the description of the figures and / or in the figures alone can be used not only in the respectively specified combination but also in other combinations or in isolation, without the scope of To leave invention.

Die Zeichnung zeigt in:The drawing shows in:

1 eine schematische Darstellung eines Anzeigesystems, welches eine elektronische Datenbrille zum Anzeigen eines virtuellen Objekts, eine Blickerfassungseinrichtung zur Erfassung eines Fokussierungspunkts eines Trägers der elektronischen Datenbrille und eine Anzeigeeinrichtung zum Kenntlichmachen des Fokussierungspunkts des Trägers der elektronischen Datenbrille umfasst; 1 a schematic representation of a display system comprising an electronic goggles for displaying a virtual object, a gaze detecting means for detecting a focus point of a wearer of the electronic goggles and a display device for identifying the focus point of the wearer of the electronic goggles;

2 eine schematische Darstellung einer Verkaufssituation, in welcher eine erste Person die elektronische Datenbrille aufgesetzt hat, wobei eine zweite Person auf die Anzeigeeinrichtung blickt; und in 2 a schematic representation of a sales situation in which a first person has put on the electronic data glasses, with a second person looking at the display device; and in

3 die Anzeigeeinrichtung, mittels welcher ein gleichermaßen mittels der elektronischen Datenbrille angezeigtes virtuelles Kraftfahrzeug angezeigt wird. 3 the display device, by means of which an equally displayed by means of the electronic goggles virtual motor vehicle is displayed.

In den Figuren werden gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.In the figures, identical or functionally identical elements are provided with the same reference numerals.

Ein Anzeigesystem 10 ist in einer schematischen Darstellung in 1 gezeigt. Das Anzeigesystem 10 umfasst eine elektronische Datenbrille 12, welche dazu ausgelegt ist, ein virtuelles Objekt anzuzeigen. Bei der elektronischen Datenbrille 12 kann es sich sowohl um eine Virtual-Reality-Brille als auch um eine Augmented-Reality-Brille handeln. In die elektronische Datenbrille 12 ist eine Blickerfassungseinrichtung 14 integriert, welche die Augenbewegungen eines Trägers der elektronischen Datenbrille erfassen und anhand dessen einen Fokussierungspunkt des Trägers der elektronischen Datenbrille ermitteln kann. Die Blickerfassungseinrichtung 14 kann also erfassen, wohin genau der Träger der elektronischen Datenbrille blickt, insbesondere welchen Punkt der Träger der elektronischen Datenbrille gerade mit seinen Augen fokussiert.A display system 10 is in a schematic representation in 1 shown. The display system 10 includes electronic data glasses 12 , which is designed to display a virtual object. With the electronic data glasses 12 it can be both a virtual reality glasses and an augmented reality glasses. In the electronic data glasses 12 is a gaze detection device 14 integrated, which detect the eye movements of a wearer of the electronic data glasses and can use this to determine a focus point of the wearer of the electronic data glasses. The eye-tracking device 14 So it is possible to grasp where exactly the carrier of the electronic Data goggles look, in particular, which point the wearer of the electronic goggles just focused with his eyes.

Das Anzeigesystem 10 umfasst des Weiteren eine Steuereinrichtung 16, welche vorzugsweise drahtlos mit der Blickerfassungseinrichtung 14 gekoppelt ist und somit Informationen im Hinblick auf den gerade mittels der Blickerfassungseinrichtung 14 ermittelten Fokussierungspunkt bereitgestellt bekommen kann. Die Steuereinrichtung 16 ist dazu ausgelegt, eine von der elektronischen Datenbrille 12 verschiedene Anzeigeeinrichtung 18 zum Kenntlichmachen des mittels der Blickerfassungseinrichtung 14 erfassten Fokussierungspunkts anzusteuern. Bei der Anzeigeeinrichtung 18 kann es sich im Wesentlichen um beliebige Anzeigeeinrichtungen, wie beispielsweise um einen PC-Monitor, einen Notebook-Monitor, einen Tablet Computer oder dergleichen handeln.The display system 10 further comprises a control device 16 , which preferably wirelessly with the gaze detection device 14 is coupled and thus information with regard to the just by means of the gaze detection device 14 determined focus point can be provided. The control device 16 is designed to be one of the electronic data glasses 12 different display device 18 for visualizing the means of the gaze detection device 14 to reach the selected focus point. In the display device 18 These may essentially be any display devices, such as a PC monitor, a notebook monitor, a tablet computer or the like.

In 2 sind ein Träger 20 der elektronischen Datenbrille 12 und eine weitere Person 22 in einer schematischen Darstellung gezeigt. Beispielsweise können die beiden Personen 20, 22 gerade ein Verkaufsgespräch im Hinblick auf ein bestimmtes Kraftfahrzeug führen, wobei der Träger 20 mittels der elektronischen Datenbrille 12 sein wunschgemäßes Fahrzeug angezeigt bekommt.In 2 are a carrier 20 the electronic data glasses 12 and another person 22 shown in a schematic representation. For example, the two persons 20 . 22 just lead a sales pitch with regard to a particular motor vehicle, the carrier 20 by means of electronic data glasses 12 his desired vehicle gets displayed.

In 3 ist die Anzeigeeinrichtung 18, auf welche die weitere Person 22 blicken kann, dargestellt. Wie zu erkennen, wird mittels der Anzeigeeinrichtung 18 ein virtuelles Kraftfahrzeug 24 angezeigt. Der Träger 20 der elektronischen Datenbrille 12 bekommt mittels dieser ebenfalls das virtuelle Kraftfahrzeug 24 angezeigt. Dies muss jedoch nicht zwangsläufig aus derselben Perspektive erfolgen, wie mittels der Anzeigeeinrichtung 18. Der Träger 20 der elektronischen Datenbrille 12 kann beispielsweise umhergehen und dadurch seine virtuelle Beobachtungsposition innerhalb einer angezeigten virtuellen Umgebung 26, innerhalb welcher das virtuelle Kraftfahrzeug 24 positioniert ist, verändern. Dadurch kann der Träger 20 der elektronischen Datenbrille 12 also durch Umhergehen oder auch beispielsweise durch Verschwenken seines Kopfs jeweils seine Perspektive auf das virtuelle Kraftfahrzeug 24 verändern.In 3 is the display device 18 to which the other person 22 can look. As can be seen, by means of the display device 18 a virtual motor vehicle 24 displayed. The carrier 20 the electronic data glasses 12 gets by this also the virtual motor vehicle 24 displayed. However, this does not necessarily have to be done from the same perspective as using the display device 18 , The carrier 20 the electronic data glasses 12 For example, it can move around and thereby its virtual viewing position within a displayed virtual environment 26 within which the virtual motor vehicle 24 is positioned, change. This allows the wearer 20 the electronic data glasses 12 So by walking around or even for example by pivoting his head each his perspective on the virtual motor vehicle 24 change.

Damit die Person 22 jederzeit erkennen kann, welche Komponenten des angezeigten virtuellen Kraftfahrzeugs 24 der Träger 20 der elektronischen Datenbrille 12 gerade fokussiert, wird permanent mittels der Blickerfassungseinrichtung 14, welche in die elektronische Datenbrille 12 integriert ist, ein jeweiliger Fokussierungspunkt 28 erfasst. Mit anderen Worten wird also mittels der Blickerfassungseinrichtung 14 fortlaufend erfasst, welche Teile, Punkte bzw. Bereiche des virtuellen Kraftfahrzeugs 24, welches mittels der elektronischen Datenbrille 12 angezeigt wird, der Träger 20 gerade mit seinen Augen fokussiert und welche Teile somit zwangsläufig von ihm nur peripher wahrgenommen werden.So the person 22 can always recognize which components of the displayed virtual motor vehicle 24 the carrier 20 the electronic data glasses 12 just focused, is permanently using the gaze detection device 14 which are in the electronic data glasses 12 is integrated, a respective focussing point 28 detected. In other words, therefore, by means of the gaze detection device 14 continuously detects which parts, points or areas of the virtual motor vehicle 24 , which by means of the electronic data glasses 12 is displayed, the carrier 20 just focused with his eyes and which parts are thus inevitably perceived by him only peripherally.

In der vorliegenden Darstellung in 3 ist der Fokussierungspunkt 28 schematisch angedeutet. Die Steuereinrichtung 16 steuert die Anzeigeeinrichtung 18 fortlaufend anhand des mittels der Blickerfassungseinrichtung 14 bereitgestellten Daten im Hinblick auf den Fokussierungspunkt 28 derart an, dass der Fokussierungspunkt 28 mittels der Anzeigeeinrichtung 18 immer kenntlich gemacht wird. Der erfasste Fokussierungspunkt 28 kann wie vorliegend angedeutet, beispielsweise in Form einer eingeblendeten Markierung am virtuellen Kraftfahrzeug 24 kenntlich gemacht werden. Der Träger 20 der elektronischen Datenbrille 12 hat also gerade die vordere rechte Felge des virtuellen Kraftfahrzeugs 24 fokussiert. Alternativ oder zusätzlich ist es auch möglich, dass dem erfassten Fokussierungspunkt 28 eine Komponente des angezeigten virtuellen Objekts 24 zugeordnet wird, im vorliegenden Fall wäre das also die rechte vordere Felge des virtuellen Kraftfahrzeugs 24. Dabei kann es vorgesehen sein, dass die gesamte Felge optisch hervorgehoben wird, beispielsweise indem ihre Farbgebung, ihre Helligkeit oder dergleichen etwas verändert dargestellt wird, sodass die weitere Person 22 auf der Anzeigeeinrichtung 18 gleich erkennen kann, welche Komponente des virtuellen Kraftfahrzeugs 24 der Träger 20 gerade fokussiert.In the present illustration in 3 is the focus point 28 indicated schematically. The control device 16 controls the display device 18 continuously using the means of the gaze detection device 14 provided data with regard to the focus point 28 such that the focus point 28 by means of the display device 18 is always identified. The detected focus point 28 may be as indicated, for example in the form of an inserted mark on the virtual motor vehicle 24 be identified. The carrier 20 the electronic data glasses 12 So just has the front right rim of the virtual motor vehicle 24 focused. Alternatively or additionally, it is also possible that the detected focus point 28 a component of the displayed virtual object 24 is assigned, in the present case, that would be the right front rim of the virtual motor vehicle 24 , It may be provided that the entire rim is highlighted visually, for example, by their color, brightness or the like is shown slightly changed, so that the other person 22 on the display device 18 can immediately recognize which component of the virtual motor vehicle 24 the carrier 20 just focused.

Die Zuordnung des erfassten Fokussierungspunkts 28 zu einer bestimmten Komponente des virtuellen Kraftfahrzeugs 24 bringt zudem den Vorteil mit sich, dass zusätzlich noch ein Konfigurationsmenü 30 mittels der Anzeigeeinrichtung 18 eingeblendet werden kann, mittels welchem verschiedene hier nicht dargestellte Ausstattungsoptionen für die betreffende Komponente, im vorliegenden Fall also für die rechte vordere Felge, eingeblendet werden. Die Person 22, bei welcher es sich beispielsweise um einen Verkäufer handelt, kann somit den Träger 20 gezielt darauf hinweisen, dass verschiedene Ausstattungsoptionen für die gerade fokussierte Komponente des virtuellen Kraftfahrzeugs 24 vorhanden sind. Darüber hinaus können beispielsweise auch automatisch hier nicht dargestellten Zusatzinformationen, insbesondere technische Daten, zur gerade fokussierten Komponente mittels der elektronischen Datenbrille 12 und/oder mittels der Anzeigeeinrichtung 18 eingeblendet werden. Darüber hinaus kann das Konfigurationsmenü 30 gleichermaßen auch noch mittels der elektronischen Datenbrille 12 eingeblendet werden.The assignment of the detected focus point 28 to a specific component of the virtual motor vehicle 24 also has the advantage of having an additional configuration menu 30 by means of the display device 18 can be displayed, by means of which various equipment options not shown here for the component in question, in the present case for the right front rim, are displayed. The person 22 , which is, for example, a seller, can thus the carrier 20 specifically indicate that various equipment options for the currently focused component of the virtual motor vehicle 24 available. In addition, for example, additional information not shown here automatically, in particular technical data, for the currently focused component by means of the electronic data glasses 12 and / or by means of the display device 18 to be displayed. In addition, the configuration menu 30 equally also by means of the electronic data glasses 12 to be displayed.

Die weitere Person 22 kann durch einen Blick auf die Anzeigeeinrichtung 18 also jederzeit erkennen, welchen Teil des virtuellen Kraftfahrzeugs 24 der Träger 20 gerade fokussiert, also auch welche Komponenten des virtuellen Kraftfahrzeugs 24 gerade von besonderem Interesse für den Träger 20 sind. Dadurch kann die Person 22 gezielt auf die jeweiligen Komponenten eingehen und dadurch beispielsweise ein Verkaufsgespräch oder einen Konfigurationsvorgang besonders effektiv und effizient leiten.The other person 22 can by looking at the display device 18 So at any time recognize which part of the virtual motor vehicle 24 the carrier 20 just focused, including which components of the virtual motor vehicle 24 just of particular interest to the wearer 20 are. This allows the person 22 specifically address the respective components and thus, for example, conduct a sales pitch or a configuration process particularly effectively and efficiently.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

DE 102014011590 A1 [0002, 0005]
US 2015/243078 A1 [0004]

Claims

Method for operating a display system ( 10 ), in which by one of a person ( 20 ) mounted electronic data glasses ( 12 ) a virtual object ( 24 ), characterized in that by means of a gaze detection device ( 14 ) one of the person ( 20 ) focused focus point ( 28 ) on the displayed virtual object ( 24 ) and by means of one of the electronic data 12 ) different display device ( 18 ).

Method according to claim 1, characterized in that by means of the display device ( 18 ) also the virtual object ( 24 ) and the detected focus point ( 28 ) in the form of an inserted marker on the virtual object ( 24 ).

Method according to claim 1 or 2, characterized in that the detected focusing point ( 28 ) a component of the displayed virtual object ( 24 ).

Method according to claim 3, characterized in that the detected focus point ( 28 ) by visual emphasis of the component on by means of the display device ( 18 ) displayed virtual object ( 24 ).

Method according to claim 3 or 4, characterized in that a configuration menu ( 30 ) for various selectable equipment options for the component using electronic data glasses ( 12 ) and / or the display device ( 18 ) is shown.

Method according to one of claims 3 to 5, characterized in that additional information, in particular technical data, to the component by means of the electronic data glasses ( 12 ) and / or the display device ( 18 ) are displayed.

Display system ( 10 ), with one by one person ( 20 ) attachable electronic data glasses ( 12 ) to display a virtual object ( 24 ), characterized by - a gaze detection device ( 14 ), which is designed to be one of the person ( 20 ) focused focus point ( 28 ) by means of electronic data glasses ( 12 ) displayed virtual object ( 24 ) capture; - one of the electronic data glasses ( 12 ) different display device ( 18 ); A control device ( 16 ), which is adapted to the display device ( 18 ) for identifying the detected focus point ( 28 ) head for.

Display system ( 10 ) according to claim 7, characterized in that the eye-detection device ( 14 ) into the electronic data glasses ( 12 ) is integrated.

Display system ( 10 ) according to claim 8 or 9, characterized in that it is in the electronic data glasses ( 12 ) are virtual reality glasses or augmented reality glasses.