DE102017215407A1 - Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle - Google Patents
Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle Download PDFInfo
- Publication number
- DE102017215407A1 DE102017215407A1 DE102017215407.1A DE102017215407A DE102017215407A1 DE 102017215407 A1 DE102017215407 A1 DE 102017215407A1 DE 102017215407 A DE102017215407 A DE 102017215407A DE 102017215407 A1 DE102017215407 A1 DE 102017215407A1
- Authority
- DE
- Germany
- Prior art keywords
- mobile user
- driver
- user device
- vehicle
- traffic situation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Abstract
Ein Verfahren zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs, umfasst:- Ermitteln eines Maßes an Aufmerksamkeit des Fahrers an einem mobilen Anwendergerät,- Ansteuerung einer Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem Maß der Aufmerksamkeit an dem mobilen Anwendergerät.A method for driving a mobile user device of a driver of a vehicle, comprising: determining a level of attention of the driver on a mobile user device, driving an output unit of the mobile user device depending on the level of attention at the mobile user device.
Description
Die Erfindung betrifft ein Verfahren, eine Vorrichtung sowie ein korrespondierendes Computerprogramm zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs, insbesondere bei einem zumindest teilweise automatisierten Fahren. Ferner gehört zum Umfang der Erfindung auch ein entsprechend eingerichtetes mobiles Anwendergerät.The invention relates to a method, a device and a corresponding computer program for controlling a mobile user device of a driver of a vehicle, in particular in an at least partially automated driving. Furthermore, the scope of the invention also includes a suitably equipped mobile user device.
In Zukunft werden Fahrzeuge immer stärker automatisiert betrieben, so dass sich ein Fahrer nicht immer auf das Fahrzeug oder auf die Fahrumgebung konzentrieren muss. Jedoch kann es durchaus notwendig sein, dass der Fahrer je nach Situation sich (auch sehr kurzfristig) wieder auf die Fahrumgebung konzentriert. Zugleich ist es der Wunsch der Insassen des automatisiert fahrenden Fahrzeugs die immer größere Entlastung von den Fahraufgaben für weitere Beschäftigungen zu nutzen.In the future, vehicles will be operated increasingly automated, so that a driver does not always have to concentrate on the vehicle or on the driving environment. However, depending on the situation, it may be necessary for the driver to focus on the driving environment (even at very short notice). At the same time it is the desire of the occupants of the automated moving vehicle to use the ever greater relief of the driving tasks for further employment.
Es ist Aufgabe der vorliegenden Erfindung, ein Verfahren und eine Vorrichtung umfassend ein mobiles Anwendergerät anzugeben, welche zu einer verbesserten Nutzbarkeit eines mobilen Anwendergeräts im Fahrzeug, insbesondere bei einem zumindest teilweise automatisierten Fahren, insbesondere vom Fahrer des Fahrzeugs, anzugeben. Ferner ist es die Aufgabe der Erfindung eine (zweckmäßige, gewünschte oder notwendige) Information an einen Fahrers des Fahrzeugs auszugeben, insbesondere im Zusammenhang mit einem zumindest teilweise automatisierten Fahren.It is an object of the present invention to provide a method and a device comprising a mobile user device, which provide improved usability of a mobile user device in the vehicle, in particular in an at least partially automated driving, in particular by the driver of the vehicle. Furthermore, it is the object of the invention to output a (expedient, desired or necessary) information to a driver of the vehicle, in particular in connection with an at least partially automated driving.
Die Aufgabe wird gelöst durch die Merkmale der unabhängigen Patentansprüche. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen gekennzeichnet.The object is solved by the features of the independent claims. Advantageous embodiments are characterized in the subclaims.
Die Erfindung zeichnet sich aus durch ein Verfahren zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs, insbesondere bei einem zumindest teilweise automatisierten Fahren. Die Erfindung zeichnet sich auch aus durch eine Vorrichtung, die dazu ausgebildet ist, das Verfahren durchzuführen. Das Verfahren umfasst ein Ermitteln eines Maßes an Aufmerksamkeit des Fahrers an einem mobilen Anwendergerät und eine Ansteuerung einer Ausgabeeinheit oder mehrerer Ausgabeeinheiten des mobilen Anwendergeräts abhängig von dem Maß der Aufmerksamkeit an dem mobilen Anwendergerät.The invention is characterized by a method for controlling a mobile user device of a driver of a vehicle, in particular in an at least partially automated driving. The invention is also characterized by a device which is designed to carry out the method. The method includes determining a level of driver attention to a mobile user device and driving one or more output devices of the mobile user device depending on the level of attention at the mobile user device.
Zumindest ein Maß an Aufmerksamkeit des Fahrers an einem mobilen Anwendergerät kann insbesondere kumuliert (etwa in Bezug auf alle wesentlichen Teile des mobilen Anwendergeräts) ermittelt werden. Bevorzugt umfasst das Verfahren ein Ermitteln eines Maßes an Aufmerksamkeit des Fahrers an zumindest einer (bestimmten) Ausgabeeinheit des mobilen Anwendergeräts und eine Ansteuerung einer Ausgabeeinheit, insbesondere der Ausgabeeinheit und/oder zumindest einer weiteren Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem Maß der Aufmerksamkeit des Fahrers an zumindest einer Ausgabeeinheit des mobilen Anwendergeräts.In particular, at least a degree of driver attention to a mobile user equipment may be determined cumulatively (such as with respect to all significant portions of the mobile user equipment). Preferably, the method comprises determining a degree of attention of the driver on at least one (specific) output unit of the mobile user device and driving an output unit, in particular the output unit and / or at least one further output unit of the mobile user device depending on the degree of attention of the driver at least one output unit of the mobile user device.
Mit anderen Worten kann eine kumulierte Aufmerksamkeit des Fahrers an der Nutzung, insbesondere Bedienung des mobilen Anwendergeräts und/oder die Aufmerksamkeit des Fahrers an einer bestimmten Ausgabeeinheit und/oder Eingabeeinheit des mobilen Anwendergeräts ermittelt und berücksichtigt werden. In other words, a cumulative attention of the driver to the use, in particular operation of the mobile user device and / or the attention of the driver to a particular output unit and / or input unit of the mobile user device can be determined and taken into account.
Dabei kann die Ansteuerung einer bestimmten Ausgabeeinheit oder mehrerer bestimmter Ausgabeeinheiten des mobilen Anwendergeräts abhängig von dem Maß der Aufmerksamkeit an einer bestimmten Ausgabeeinheit oder abhängig von der Verteilung der Aufmerksamkeit des Fahrers an zumindest zwei Ausgabeeinheiten des mobilen Anwendergerät erfolgen.In this case, the triggering of a specific output unit or of a plurality of specific output units of the mobile user device can take place depending on the degree of attention to a specific output unit or depending on the distribution of the driver's attention to at least two output units of the mobile user device.
Bevorzugt ist das Verfahren bei einem zumindest teilweise automatisierten Fahren bzw. abhängig von dem zumindest teilweise automatisierten Fahrbetrieb des Fahrzeugs ausführbar. Besonders bevorzugt wird das Verfahren abhängig von der Nutzung des mobilen Anwendergeräts durch den Fahrer des Fahrzeugs („am Steuer“) durchgeführt. Zu dem teilweise automatisierten Fahren bzw. dem entsprechenden Fahrbetrieb kann auch ein mit einem Fahrerassistenzsystem unterstütztes Fahren bzw. Fahrbetrieb gezählt werden.Preferably, the method is executable in an at least partially automated driving or as a function of the at least partially automated driving operation of the vehicle. The method is particularly preferably carried out by the driver of the vehicle ("at the wheel") depending on the use of the mobile user device. For the partially automated driving or the corresponding driving operation, a driving or driving operation supported by a driver assistance system can also be counted.
Das mobile Anwendergerät des Fahrers eines Fahrzeugs ist insbesondere ein im Fahrzeug (im Fahrbetrieb) mitgeführtes bzw. im Fahrzeug angebrachtes mobiles Anwendergerät. Insbesondere ist das mobile Anwendergeräts des Fahrers das von einem (bestimmten) Fahrer genutzte mobile Anwendergerät.The mobile user device of the driver of a vehicle is, in particular, a mobile user device carried in the vehicle (when driving) or mounted in the vehicle. In particular, the driver's mobile user device is the mobile user device used by a (particular) driver.
Bei dem Verfahren kann das Maß an Aufmerksamkeit beispielsweise abhängig davon ermittelt werden wie das mobile Anwendergerät genutzt, insbesondere bedient wird. Beispielsweise wenn ermittelt wird, dass die Bedienelemente des mobilen Anwendergeräts (oder mit diesem verbundene Bedienelemente), z.B. mit einer gewissen Häufigkeit bedient werden, dann kann eine erhöhte Aufmerksamkeit an dem mobilen Anwendergerät, insbesondere an einer Ausgabeeinheit und/oder Bedieneinheit des mobilen Anwendergeräts angenommen werden. Das mobile Anwendergerät des Fahrers kann als mobiles Anwendergerät des Fahrers gespeichert, registriert oder automatisch erkannt werden. Besonders bevorzugt wird dabei ermittelt, an welchen Teil des mobilen Anwendergeräts sich die Aufmerksamkeit des Fahrers richtet, z.B. ob er in eine Anzeigevorrichtung schaut, ob er an einem Lautsprecher zuhört und/oder ob er es in der Hand hält und/oder ob er eine bestimmte Eingabeeinheit z.B. Touchscreen, Testen, Gestenbedienung, etc. bedient. Beispielsweise kann dies mit einem oder mehreren Sensoren des mobilen Anwendergeräts ermittelt werden. Z.B. kann die Ausrichtung des Nutzerblicks auf die Anzeigevorrichtung des mobilen Anwendergeräts mit der zum Nutzer (in Falle des Verfahrens insbesondere zu dem Fahrer hin) ausgerichteten Kamera des mobilen Anwendergeräts erfasst werden. Dabei kann der Blick des Fahrers (hin zu dem mobilen Anwendergerät oder in eine abweichende Richtung, z.B. zu dem Außenraum des Fahrzeugs) berücksichtigt werden.In the method, the degree of attention can be determined, for example, depending on how the mobile user device is used, in particular operated. For example, if it is determined that the controls of the mobile user equipment (or associated controls), for example, be operated with a certain frequency, then increased attention to the mobile user equipment, in particular at an output unit and / or operating unit of the mobile user device can be assumed , The mobile user device of the driver can be stored, registered or automatically recognized as a mobile user device of the driver. It is particularly preferred to determine which part of the mobile user device is the driver's attention, for example, whether he is looking at a display device, whether he is listening to a speaker and / or holding it in his hand and / or if he has a specific input unit such as touch screen, testing, gesture operation, etc. served. For example, this can be determined with one or more sensors of the mobile user device. For example, the alignment of the user's view onto the display device of the mobile user device can be detected with the camera of the mobile user device oriented toward the user (in the case of the method, in particular towards the driver). In this case, the driver's gaze (towards the mobile user device or in a different direction, for example to the exterior of the vehicle) can be taken into account.
Ein Zuhören bzw. eine Annahme eines (intensiven) Zuhörens des Fahrers zu einem Inhalt aus einem mobilen Anwendergerät oder ein Sprechen des Fahrers kann z.B. mit der Sensorik des mobilen Anwendergeräts, z.B. an einem Touch-Screen-Muster, z.B. etwa Ohrdruckmuster und/oder Position oder Bewegungsmuster des mobilen Anwendergeräts im Raum ermittelt werden.Listening to a (intense) listening of the driver to a content from a mobile user equipment or speaking to the driver may e.g. with the sensors of the mobile user device, e.g. on a touch-screen pattern, e.g. about ear print pattern and / or position or movement pattern of the mobile user device to be determined in space.
Das Ermitteln des Maßes an Aufmerksamkeit des Fahrers kann dabei mit Mitteln des mobilen Anwendergeräts selbst erkannt werden. Es können Daten von einem oder mehreren Sensoren, beispielsweise der Kamera, des Fingerabdrucksensors und/oder Bedienelemente, beispielsweise der Tasten oder des Touchscreens des mobilen Anwendergeräts ausgewertet werden. Beispielsweise kann erkannt werden, dass der Fahrer einen Text (an dem Touch-Screen des mobilen Anwendergeräts) eingibt. Dabei kann ein wesentlich höheres Maß der Aufmerksamkeit angenommen werden, vergleichbar z.B. mit (lediglich) einer gelegentlichen Steuerung einer Lautstärketaste des mobilen Anwendergeräts.Determining the degree of attention of the driver can be detected by means of the mobile user device itself. Data from one or more sensors, for example the camera, the fingerprint sensor and / or operating elements, for example the keys or the touch screen of the mobile user device, can be evaluated. For example, it can be recognized that the driver inputs a text (on the touch screen of the mobile user device). A much higher level of attention can be assumed, comparable e.g. with (only) occasional control of a volume key of the mobile user device.
Dabei kann ermittelt werden, dass dieses eine ein gewisses Maß überschreitende Aufmerksamkeit des Fahrers beansprucht und/oder dass es eine ein gewisses Maß überschreitende Bedienaktivität aufweist. Dabei kann ein Maß für die Aufmerksamkeit des Fahrers aus einer Bedienaktivität, insbesondere aus dem Bedienablauf (Art, Frequenz, Sequenz aus mehreren Bedienhandlungen) ermittelt bzw. geschätzt werden.In this case, it can be determined that this requires a driver's attention which exceeds a certain extent and / or that it has a degree of operator activity exceeding a certain extent. In this case, a measure for the attention of the driver from an operating activity, in particular from the operating procedure (type, frequency, sequence of several operations) can be determined or estimated.
Insbesondere kann eine ein gewisses vorausbestimmtes Maß überschreitende Aufmerksamkeit des Fahrers an einem mobilen Anwendergerät (auch) mit Mitteln des Fahrzeugs ermittelt und berücksichtigt werden. Ein solches Maß der Aufmerksamkeit kann z.B. auch durch eine drahtlose Datenverbindung zu dem oder mit dem mobilen Anwendergerät überermittelt werden, wobei das mobile Anwendergerät daraufhin in der beschriebenen Weise angesteuert wird. Beispielsweise kann ein Maß der Aufmerksamkeit an dem mobilen Anwendergerät mittels zumindest eines Sensors des Fahrzeugs, z.B. einer Innenraumkamera ermittelt werden. Ferner kann auf eine, ein gewisses vorausbestimmtes Maß überschreitende Aufmerksamkeit an einem mobilen Anwendergerät geschlossen werden, wenn ermittelt wird, dass der Kontakt mit und/oder oder Reaktion des Fahrers in Bezug auf ein oder mehrere Bedienelemente des Fahrzeugs ein vorausbestimmtes Maß unterschreitet, verlangsamt ist.In particular, a driver's attention to a mobile user device exceeding a certain predetermined amount may also be determined and taken into account by means of the vehicle. Such a measure of attention may e.g. also be communicated to or with the mobile user device by a wireless data connection, wherein the mobile user device is then controlled in the manner described. For example, a measure of the attention at the mobile user equipment may be by means of at least one sensor of the vehicle, e.g. an interior camera can be determined. Further, attention may be drawn to a certain predetermined amount of attention at a mobile user equipment when it is determined that contact with and / or reaction of the driver with respect to one or more controls of the vehicle is less than a predetermined amount.
Die Aufmerksamkeit bzw. ein Maß für die besagte Aufmerksamkeit kann in der Erfindung als ein absolutes Maß, als ein relatives Maß oder als eine Verteilung der Aufmerksamkeit des Insassen, insbesondere des Fahrers ermittelt, insbesondere geschätzt werden. Dabei können auch statistische und/oder für die Person des Fahrers spezifische Daten und ein sogenanntes Expertenwissen berücksichtigt werden.The attention or a measure of the said attention can in particular be estimated in the invention as an absolute measure, as a relative measure or as a distribution of the attention of the occupant, in particular of the driver. In this case, statistical data and / or data specific to the driver and so-called expert knowledge can also be taken into account.
Alternativ oder zusätzlich kann im Verfahren ein Abgleich mehrerer Maße für Aufmerksamkeit des Fahrers ausgeführt werden, wobei die zumindest zwei Maße für die Aufmerksamkeit sich auf eine Fahrzeugumgebung, auf den Innenraum des Fahrzeugs und auf das mobile Anwendergerät beziehen, wobei zumindest ein Maß der Aufmerksamkeit mit Mitteln des Fahrzeugs ermittelt wird und zumindest ein Maß der Aufmerksamkeit mit Mitteln des mobilen Anwendergeräts ermittelt wird.Alternatively or additionally, in the method a comparison of several measures for driver attention may be carried out, wherein the at least two measures for the attention relate to a vehicle environment, to the interior of the vehicle and to the mobile user device, wherein at least one measure of attention with resources of the vehicle is determined and at least one measure of attention is determined by means of the mobile user device.
Insbesondere umfasst das Verfahren dabei die Überprüfung ob das mobile Anwendergerät mit dem Fahrzeug mitgeführt wird. Dies kann an der Drahtlosverbindung oder erfindungsgemäß an einer Korrelation der Koordinaten des Ortungssystems des Fahrzeugs und des mobilen Anwendergeräts erfolgen.In particular, the method comprises checking whether the mobile user device is carried along with the vehicle. This can be done at the wireless connection or according to the invention at a correlation of the coordinates of the positioning system of the vehicle and the mobile user device.
Gemäß einer optionalen Ausgestaltung umfasst das Verfahren zusätzlich:
- - Erfassung einer Verkehrssituation und/oder Ermitteln eines bestimmten Handlungsbedarfs des Fahrers des Fahrzeugs im Fahrbetrieb,
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von Verkehrssituation und/oder bestimmten Handlungsbedarfs.
- Detecting a traffic situation and / or determining a specific need for action of the driver of the vehicle while driving,
- - Control of the output unit of the mobile user device depending on the traffic situation and / or specific need for action.
Die Verkehrssituation und/oder der Handlungsbedarf kann mit Mitteln des mobilen Anwendergeräts und/oder mit Mitteln des Fahrzeugs erfasst bzw. ermittelt werden.The traffic situation and / or the need for action can be detected or determined by means of the mobile user device and / or by means of the vehicle.
Es kann somit zusätzlich eine von der erfassten Verkehrssituation und/oder von dem zumindest einem bestimmten Handlungsbedarf des Fahrers des Fahrzeugs abhängige Information an das mobile Anwendergerät bereitgestellt werden.It can thus additionally one of the detected traffic situation and / or of the at least one specific need for action of the driver Vehicle-dependent information to be provided to the mobile user device.
Die von der erfassten Verkehrssituation und/oder von dem zumindest einem bestimmten Handlungsbedarf des Fahrers des Fahrzeugs abhängige Information kann im Verfahren, insbesondere mit Mitteln des Fahrzeugs bzw. einer Fahrzeugeinheit, ermittelt werden abhängig von einem oder mehreren qualitativen und/oder quantitativen Parameter der erfassten, insbesondere interpretierten Verkehrssituation und/oder des Handlungsbedarfs.The information dependent on the detected traffic situation and / or on the at least one specific action requirement of the driver of the vehicle can be determined in the method, in particular by means of the vehicle or a vehicle unit, depending on one or more qualitative and / or quantitative parameters of the detected, especially interpreted traffic situation and / or the need for action.
Beispielsweise kann die Ausgabeeinheit des zumindest einen im Fahrzeug betriebenen mobilen Anwendergeräts, dabei derart angesteuert werden, dass zumindest ein bisher auszugebender Inhalt, z.B. Anzeige, Bildsequenz, z.B. ein Film, Audioinhalt verändert und/oder pausiert wird. Somit kann ein (für moderne Menschen nahezu instinktiver Trieb) die virtuellen Inhalte mit einer hohen Aufmerksamkeit zu verfolgen, zumindest zeitweise geschwächt werden.For example, the output unit of the at least one mobile user device operated in the vehicle can be controlled in such a way that at least one content to be output so far, e.g. Display, image sequence, e.g. a movie, audio content is changed and / or paused. Thus, a (for modern people almost instinctive drive) the virtual content with a high attention to pursue, at least temporarily weakened.
Bei dem bisher auszugebenden Inhalt kann es sich um einen weiteren, insbesondere vom Fahrzeug oder der Fahrt unabhängigen, mit Mitteln des mobilen Anwendergeräts generierten oder abgespielten, sozusagen „eigenen“ Inhalt, z.B. ein Computerspiel oder eine Bedienschnittstelle eines sozialen Netzwerks handeln. Der bisher auszugebende Inhalt ist insbesondere an sich vom Fahrzeug oder von der Fahrt im Fahrzeug unabhängig. Die Ausgabeeinheit des mobilen Anwendergeräts kann im Verfahren mehr oder minder unmittelbar oder mittelbar, z.B. durch Beeinflussung einer laufenden Anwendung oder des Betriebssystems des mobilen Anwendergeräts erfolgen. Insbesondere kann die Ansteuerung der Ausgabeeinheit mit einer hohen (weit überdurchschnittlichen) Priorität im Vergleich zu zumindest einem weiteren auszugebenen Inhalt erfolgen.The content to be output so far may be another, so to speak, "own" content, for example "own" content generated by the mobile user device, in particular independent of the vehicle or the journey. act a computer game or a user interface of a social network. The previously issued content is in particular independent of the vehicle or the ride in the vehicle. The output unit of the mobile user equipment may be more or less directly or indirectly, e.g. by influencing a running application or the operating system of the mobile user device. In particular, the control of the output unit can take place with a high (far above average) priority in comparison to at least one further content to be output.
Alternativ oder zusätzlich wird die Ausgabeeinheit des zumindest einen im Fahrzeug betriebenen Anwendergeräts derart angesteuert, dass mittels der Ausgabeeinheit eine (wiederum durch menschliche Wahrnehmung interpretierbare, bestimmte) Insasseninformation ausgegeben wird. Die Insasseninformation kann dabei hinsichtlich ihrer Inhalte, Ausgabeparameter, insbesondere einem Ausgabezeitpunkt bzw. Ausgabezeitintervall, etc. in einem vorausbestimmten Zusammenhang mit der erfassten Verkehrssituation und/oder mit dem ermittelten Handlungsbedarf stehen. Beispielsweise wird zumindest ein Inhalt, Ausgabeparameter, insbesondere ein Ausgabezeitpunkt bzw. Ausgabezeitintervall abhängig von einem oder mehreren Parametern der erfassten Verkehrssituation und/oder des Handlungsbedarfs bestimmt. Bevorzugt wird die Anzeige einer Insasseninformation mit einer höheren Priorität und/oder Wahrnehmbarkeit veranlasst als eine oder mehrere bisher am mobilen Anwendergerät ausgegebene Inhalte.Alternatively or additionally, the output unit of the at least one user device operated in the vehicle is actuated in such a way that by means of the output unit a passenger information (again interpretable by human perception) is output. In terms of their contents, output parameters, in particular an output time or output time interval, etc., the occupant information may be in a predetermined relationship with the detected traffic situation and / or with the determined need for action. For example, at least one content, output parameter, in particular an output time or output time interval is determined depending on one or more parameters of the detected traffic situation and / or the need for action. Preferably, the display of occupant information with a higher priority and / or perceptibility is initiated than one or more contents previously output at the mobile user device.
Bevorzugt kann die besagte Insasseninformation zumindest zeitweise und/oder zumindest teilweise zumindest einen bisher am mobilen Anwendergerät auszugebende Inhalte ersetzen. Beispielsweise wird durch die unmittelbare oder mittelbare Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts ein Verhältnis der Größen, Anzeigeflächen, Intensitäten eines bisher auszugebenden (vom Fahrzeug bzw. vom Fahren unabhängigen) Inhalts und einer (von der Verkehrssituation und/oder einem Handlungsbedarf in Bezug auf die Bedienung des Fahrzeugs abhängigen) Insasseninformation verändert, insbesondere angepasst.Preferably, the said occupant information can at least temporarily and / or at least partially replace at least one content that was previously output at the mobile user device. For example, by directly or indirectly driving the output unit of the mobile user equipment, a ratio of the sizes, display areas, contents of a content to be outputted (vehicle-independent) and a traffic situation and / or a need for action related to the operation the vehicle dependent) passenger information changed, in particular adapted.
Insbesondere wird das Verfahren derart ausgeführt, dass, ein Insasse, beispielsweise der Fahrer des Fahrzeugs bzw. ein Insasse am Fahrersitz, eine Insasseninformation betreffend die Verkehrssituation und/oder einen Handlungsbedarf, insbesondere in Bezug auf eine von dem Insassen zu leistenden Handlung, durch das besagte, insbesondere von ihm aktiv bediente, mobile Anwendergerät bekommt. Dies kann im Verfahren bevorzugt erfolgen noch während die Wahrnehmung und/oder Aufmerksamkeit des betreffenden Insassen im Wesentlichen auf das mobile Anwendergerät bzw. bestimmte weitere Inhalte am mobilen Anwendergerät konzentriert ist, z.B. während seine Wahrnehmungskanäle, z.B. Augen, gezieltes Hören, Spüren, etc. auf das mobile Anwendergerät konzentriert sind. Unter Anderem ergibt sich dabei der Vorteil einer sehr schnellen Übermittlung, einer bewussten Wahrnehmbarkeit, Auswertbarkeit der Insasseninformation oder eine entsprechende, passende Reaktion durch den betreffenden Insassen. Daraufhin kann der betreffende Insasse durch die entsprechende Veränderung der am mobilen Anwendergerät ausgegebenen Inhalte an dem von ihm genutzten mobilen Anwendergerät und/oder mit Hilfe der am mobilen Anwendergerät ausgegebenen Insasseninformation daraufhin in der realen Welt, z.B. in Bezug auf den aktuellen Fahrkontext der Fahrt, die reale Fahrzeugumgebung, etc., schnell und passend reagieren oder agieren.
Das Übermitteln der besagten Information zu der erfassten Verkehrssituation und/oder dem zumindest einem bestimmten Handlungsbedarf des Fahrers des Fahrzeugs zu dem mobilen Anwendergerät des Fahrers des Fahrzeugs kann dabei in Form eines vorausbestimmten Codes erfolgen. Dabei kann die erforderliche Datenrate etwa im Vergleich zu einer Übermittlung aller am mobilen Anwendergerät auszugebenden Insasseninformationen reduziert werden, bzw. die Übertragungsgeschwindigkeit erhöht werden.In particular, the method is carried out such that, an occupant, for example the driver of the vehicle or an occupant in the driver's seat, occupant information regarding the traffic situation and / or a need for action, in particular with respect to an action to be performed by the occupant, by the said , in particular actively serviced by him, gets mobile user device. This can preferably be done in the method while the perception and / or attention of the occupant concerned is essentially concentrated on the mobile user device or certain other contents on the mobile user device, eg during its perception channels, eg eyes, targeted hearing, sensing, etc. the mobile user device is concentrated. Among other things, there is the advantage of a very fast transmission, a conscious perceptibility, readability of the occupant information or a corresponding, appropriate response by the occupant concerned. Thereupon, the respective inmate can then, in the real world, for example in relation to the current driving context of the drive, by the corresponding change of the contents output at the mobile user device to the mobile user device used by him and / or with the aid of the occupant information output at the mobile user device Real vehicle environment, etc., respond quickly or appropriately or act.
The transmission of said information to the detected traffic situation and / or the at least one specific need for action of the driver of the vehicle to the mobile user device of the driver of the vehicle can take place in the form of a predetermined code. In this case, the required data rate can be reduced, for example, in comparison to a transmission of all the information to be output at the mobile user device, or the transmission speed can be increased.
Besonders bevorzugt erfolgt das Übermitteln der besagten Information mittels eines unmittelbaren drahtgebundenen oder drahtlosen Datenaustauschs. Bevorzugt erfolgt das Übermitteln der besagten Information mittels WLAN oder bevorzugt mittels einer sogenannten WPAN (= Wireless Personal Area Network) z.B. eines Nahfeld-Übertragungsverfahrens, z.B., Bluetooth oder dergleichen. Dabei kann eine sehr hohe Echtzeitfähigkeit des Verfahrens erreicht werden. Somit ergeben sich zahlreiche Vorteile etwa im Vergleich zu einem mittelbaren Datenaustausch, z.B. über mehrere dazwischenliegende Recheneinheiten. Beispielsweise kann die übermittelte Information Steuersignale zu einer unmittelbaren oder mittelbaren Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts umfassen.Particularly preferably, the transmission of said information takes place by means of an immediate wired or wireless data exchange. Preferably, the transmission of said information by means of WLAN or preferably by means of a so-called WPAN (= Wireless Personal Area Network), for example, a near-field transmission method, eg, Bluetooth or the like. In this case, a very high real-time capability of the method can be achieved. Thus, numerous advantages arise, for example, in comparison to an indirect data exchange, for example via a plurality of intermediate computing units. For example, the transmitted information may include control signals for direct or indirect control of the output unit of the mobile user device.
Ferner kann im Verfahren auch eine weitere (zweite) Information von dem zumindest einem mobilen Anwendergerät zu dem Fahrzeug bzw. zu der Fahrzeugeinheit übermittelt werden. Diese weitere Information kann (unter anderem) dafür kennzeichnend sein, welche Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts erfolgreich ausgeführt worden ist, z.B. hinsichtlich des Zeitpunkts der Veränderung eines bisherigen Inhalts und/oder der Ausgabe einer Insasseninformation an dem mobilen Anwendergerät. Auch kann eine weitere Information kennzeichnend sein für die Reaktion des betreffenden Fahrers auf die Ansteuerung der besagten zumindest einen Ausgabeeinheit des mobilen Anwendergeräts.Furthermore, in the method, further (second) information can also be transmitted from the at least one mobile user device to the vehicle or to the vehicle unit. This further information may be indicative (among other things) of what activation of the output unit of the mobile user equipment has been successfully carried out, e.g. regarding the timing of the change of a previous content and / or the output of occupant information on the mobile user equipment. Also, further information may be indicative of the driver's reaction to the driving of said at least one output unit of the mobile user equipment.
Beispielsweise kann zumindest eine Funktion des Fahrzeugs auf den Empfang der weiten Information (abhängig von dem Empfang der weiteren Information) angesteuert werden. Beispielsweise wird die zumindest eine Fahrzeugfunktion, insbesondere eine Funktion zum zumindest teilweise automatisierten Fahren, angesteuert werden abhängig davon, ob und wie der Fahrer auf die Ansteuerung der Ausgabeeinheit seines mobilen Anwendergeräts reagiert hat. Beispielsweise kann eine weitere Information von dem zumindest einem mobilen Anwendergerät zu dem Fahrzeug bzw. zu der Fahrzeugeinheit übermittelt werden, die kennzeichnend ist dafür, dass der Fahrer das Bedienen des Anwendergeräts unterbrochen hat und/oder die Wahrnehmung oder die Aufmerksamkeit von dem mobilen Anwendergerät oder von einem bestimmten Inhalt des mobilen Anwendergeräts abgewandt hat. Eine solche weitere Information kann beispielsweise mit Mitteln des mobilen Anwendergeräts ermittelt werden, z.B. mittels der Kamera des mobilen Anwendergeräts. Die übermittelte weitere Information kann im Bordnetzt des Fahrzeugs, z.B. zur Steuerung zumindest einer Fahrzeugfunktion bereitgestellt werden. Auf das Übermitteln der weiteren Information von den zumindest einem mobilen Anwendergerät zu dem Fahrzeug bzw. zu der Fahrzeugeinheit kann z.B. eine zumindest teilweise automatisierte Fahrzeugführung, insbesondere eine aktuell ausgeführte oder für die nahe Zukunft geplante Fahrzeugführungsaktion, z.B. ein Manöver, verändert werden, eine Entscheidung in Bezug auf zumindest eine (aktuelle) Beeinflussung der Führung des Fahrzeugs getroffen werden oder eine Sicherheitsmaßnahme, beispielsweise eine sogenannte Pre-Crash-Maßnahme im Fahrzeug veranlasst werden.For example, at least one function of the vehicle can be controlled to receive the wide information (depending on the receipt of the further information). For example, the at least one vehicle function, in particular a function for at least partially automated driving, will be controlled depending on whether and how the driver has reacted to the control of the output unit of his mobile user device. For example, further information can be transmitted from the at least one mobile user device to the vehicle or to the vehicle unit, which is indicative that the driver has interrupted the operation of the user device and / or the perception or attention of the mobile user device or of has turned away from a particular content of the mobile user device. Such further information can be determined, for example, by means of the mobile user device, e.g. by means of the camera of the mobile user device. The transmitted further information can be stored in the on-board network of the vehicle, e.g. be provided to control at least one vehicle function. Upon transmission of the further information from the at least one mobile user device to the vehicle or to the vehicle unit, e.g. an at least partially automated vehicle guidance, in particular a currently executed or planned for the near future vehicle guidance action, e.g. a maneuver, be changed, a decision with respect to at least one (current) influencing the leadership of the vehicle are taken or a safety measure, for example, a so-called pre-crash action in the vehicle be prompted.
Die Ausgabeeinheit ist hierbei insbesondere eine Anzeige, z.B. eine Bildschirmanzeige und/oder ein Aktor und/oder eine Audioausgabe und/oder eine mit einem Körper verbundene Einheit, wie ein Kopfhörer und/oder ein Hörgerät.The output unit here is in particular a display, e.g. a screen display and / or an actuator and / or an audio output and / or a unit connected to a body, such as a headphone and / or a hearing aid.
Besonders bevorzugt erfolgt die Ansteuerung derart, dass die Ansteuerung der Ausgabeeinheit eine bestimmte (konkrete) Information, insbesondere ein konkretes Merkmal zur Verkehrssituation und/oder zum bestimmten (konkreten) Aktionsbedarf des Fahrers repräsentiert.Particularly preferably, the control takes place in such a way that the control of the output unit represents a specific (concrete) information, in particular a concrete feature regarding the traffic situation and / or the specific (concrete) action requirement of the driver.
Bevorzugt kann das Verfahren bei einem oder mehreren im Innenraum des Fahrzeugs mitgeführten mobilen Anwendergeräten ausführbar sein. Besonders bevorzugt ist das Verfahren abhängig vom Erkennen zumindest eines mobilen Anwendergeräts und/oder abhängig von einer erkannten (aktiven) Nutzung des zumindest einen mobilen Anwendergeräts im Fahrzeug und/oder abhängig von dem Fahrbetrieb des Fahrzeugs ausgeführt. Das Verfahren kann abhängig vom Erkennen einer, insbesondere ein gewisses Maß übersteigenden, Nutzung eines mobilen Anwendergeräts im Fahrzeug und/oder vom Erkennen des Fahrbetriebs des Fahrzeugs, insbesondere abhängig vom einem einen bestimmten Grenzwert übersteigenden Parameter des Fahrbetriebs des Fahrzeugs ausgeführt.The method may preferably be executable in one or more mobile user devices carried in the interior of the vehicle. The method is particularly preferably implemented as a function of the recognition of at least one mobile user device and / or depending on a recognized (active) use of the at least one mobile user device in the vehicle and / or depending on the driving mode of the vehicle. The method may be executed depending on the recognition of a, in particular a degree exceeding, use of a mobile user device in the vehicle and / or recognizing the driving operation of the vehicle, in particular depending on a exceeding a certain limit parameter parameters of the driving operation of the vehicle.
Als die Verkehrssituation ist im Rahmen des vorliegenden Dokuments eine aktuelle oder in der nahen Zukunft von einigen Sekunden bevorstehende Verkehrssituation. Insbesondere ist als die Verkehrssituation eine Verkehrssituation in der unmittelbaren Umgebung des Fahrzeugs zu verstehen. Mit anderen Worten ist mit der Verkehrssituation eine für das Fahrzeug zum gegebenen Zeitintervall oder in der nahen Zukunft von einigen Sekunden (nahezu unmittelbar) wirksame Verkehrssituation gemeint. Insbesondere handelt es sich bei der Verkehrssituation um eine mit sensorischen Mitteln (Kamera, Radar, Lidar, Ultraschallsystem) erfasste Verkehrssituation. Alternativ oder zusätzlich kann die Verkehrssituation aufgefasst werden als eine Anordnung oder Anordnungsmuster und/oder Bewegungsparameter weiterer Objekte, z.B. Verkehrsteilnehmer in der unmittelbaren Umgebung des Fahrzeugs, z.B. in Relation zu dem Fahrzeug.The traffic situation in the context of this document is an up-to-date or, in the near future, a few seconds imminent traffic situation. In particular, the traffic situation is to be understood as a traffic situation in the immediate surroundings of the vehicle. In other words, the traffic situation means a traffic situation that is effective for the vehicle at the given time interval or in the near future of a few seconds (almost immediately). In particular, the traffic situation is a traffic situation recorded with sensory means (camera, radar, lidar, ultrasound system). Alternatively or additionally, the traffic situation may be understood as an arrangement or arrangement pattern and / or movement parameters of further objects, e.g. Road users in the immediate vicinity of the vehicle, e.g. in relation to the vehicle.
Die Verkehrssituation und/oder der Handlungsbedarf kann im Verfahren im Zusammenhang mit dem jeweiligen Fahrkontext, Art der Straße, innerorts, außerorts, Straßenanordnung, Verkehrszeichenanordnung, Verhalten zumindest eines weiteren Verkehrsteilnehmer erfasst oder ausgewertet werden.The traffic situation and / or the need for action in the procedure in connection with the respective driving context, type of road, urban, out of town, road layout, traffic sign arrangement, behavior of at least one other road users are recorded or evaluated.
Bevorzugt wird die Auswertung der Verkehrssituation zumindest teilweise mit Mitteln des Fahrzeugs ausgeführt. Dabei kann die (passend gestaltete und/oder eingerichtete) Sensorik des Fahrzeugs und insbesondere Mittel zumindest eines Fahrerassistenzsystems, eines Sicherheitssystems oder eines Systems zur Ausführung des zumindest teilweise automatisierten Fahrens genutzt werden. Alternativ oder ergänzend kann Auswertung der Verkehrssituation zumindest teilweise mit Mitteln des mobilen Anwendergeräts ausgeführt werden.Preferably, the evaluation of the traffic situation is carried out at least partially by means of the vehicle. In this case, the (suitably designed and / or configured) sensor system of the vehicle and in particular means of at least one driver assistance system, a safety system or a system for carrying out the at least partially automated driving can be used. Alternatively or additionally, evaluation of the traffic situation can be carried out at least partially by means of the mobile user device.
Durch das Verfahren wird somit erreicht, dass der Fahrer, der etwas in Bezug auf das Fahren tun soll und sich mit seiner Aufmerksamkeit überwiegend in der virtuellen Realität befindet, noch in der virtuellen Realität auf die (eingetretene oder noch kommende, vorausgesagte) reale Situation vorbereitet wird.The method thus achieves that the driver, who is to do something in relation to driving and whose attention is predominantly in the virtual reality, prepares in the virtual reality for the (actual or future, predicted) real situation becomes.
Bevorzugt kann im Verfahren eine zweckmäßige Insasseninformation, insbesondere zu einem zweckmäßig gewählten Zeitpunkt, insbesondere abhängig von einer vorausbestimmten Bedingung, an den Fahrer, innerhalb der seinerseits wahrgenommenen virtuellen Realität ausgegeben werden, die in einem (vorausbestimmten) Bezug zu der Verkehrssituation und/oder einem Handlungsbedarf, insbesondere einen fahrerischen Handlungsbedarf oder Handlungsbedarf in Bezug auf die ermittelte Verkehrssituation übermittelt werden.In the method, a suitable occupant information, in particular at a suitably selected point in time, in particular depending on a predefined condition, can be output to the driver within the virtual reality perceived in a (predefined) relation to the traffic situation and / or a need for action , In particular, a need for action or action to be taken in relation to the identified traffic situation.
In einem stark vereinfachten Beispiel bekommt der Fahrer eine ausgewählte Insasseninformation in Bezug auf die aktuelle oder unmittelbar bevorstehende Verkehrssituation oder einen (auf diese Verkehrssituation zugeschnittenen Handlungsbedarf), noch während seine Wahrnehmung, Konzentration z.B. sein Blick zu einem wesentlichen Anteil noch am mobilen Anwendergerät bzw. einen am mobilen Anwendergerät ausgegebenen Inhalt, z.B. in einer virtuellen Realität, ist.In a greatly simplified example, the driver gets selected occupant information regarding the current or imminent traffic situation or a need for action (tailored to this traffic situation), while still maintaining his or her perception, e.g. his view to a substantial extent still on the mobile user device or a content output at the mobile user device, e.g. in a virtual reality, is.
Der besagte Handlungsbedarf kann z.B. auch eine notwendige oder empfohlene Bedienhandlung zur Bedienung des Fahrzeugs seitens des Fahrers sein. Besonders bevorzugt bezieht sich der Handlungsbedarf bzw. die Insasseninformation die auf das Erfassen des Handlungsbedarf ausgegeben wird, auf eine bestimmte Fahraufgabe, beispielsweise eine Beeinflussung der Querführung, Längsführung, Manöverdurchführung des Fahrzeugs. Die Insasseninformation kann daher eine bestimmte, die Verkehrssituation und/oder den Handlungsbedarf kennzeichnende Information sein, die insbesondere an den bestimmten Fahrer gerichtet ist. Ferner kann die Insasseninformation eine mögliche bzw. drohende Konsequenz der Verkehrssituation und/oder eines Ausführens oder nicht Ausführens einer Handlung, z.B. einer bestimmten Bedienhandlung in Bezug auf das Fahrzeug oder einer fahrerischen Aufgabe kennzeichnen.The said action requirement may be e.g. It may also be a necessary or recommended operation for operating the vehicle by the driver. Particularly preferably, the need for action or the occupant information which is output on detecting the action requirement relates to a specific driving task, for example influencing the transverse guidance, longitudinal guidance, maneuver execution of the vehicle. The occupant information can therefore be a specific information characterizing the traffic situation and / or the need for action, which information is directed in particular to the particular driver. Further, the occupant information may have a possible or imminent consequence of the traffic situation and / or performing or not performing an action, e.g. a specific operator action in relation to the vehicle or a driving task.
Ferner kann die am mobilen Anwendergerät abhängig von der übermittelten Information ausgegebene Insasseninformation sich auf die Handlungen, insbesondere fahrerische Aufgaben oder Fahraktionen beziehen, die zum aktuellen Zeitintervall oder in Bezug auf die erfasste Verkehrssituation und/oder in Bezug auf den ermittelten Handlungsbedarf explizit nicht empfohlen bzw. zu vermeiden sind. Beispielsweise kann, wenn ermittelt wird, dass der Insasse am Fahrersitz aktiv ein mobiles Anwendergerät nutzt und währenddessen eine bestimmte Fahraktion, von Seiten des zumindest teilweise automatisiert, insbesondere hochautomatisiert, fahrenden Fahrzeugs geplant oder angefangen wurde, eine derartige Ansteuerung der Ausgabeeinheit erfolgen, dass eine kontraproduktive (möglicherweise instinktive oder erschreckte) Reaktion des Fahrers, z.B. ein Bremsen vermieden wird. Beispielsweise wenn eine Veränderung der zumindest Führung des Fahrzeugs beispielsweise ein Überholvorgang, Einfädelvorgang, ein Ausweichvorgang (z.B. wegen einer veränderten Verkehrssituation) teilweise automatisiert geplant veranlasst wird, kann eine bestimmte Insasseninformation am mobilen Anwendergerät des Fahrers ausgegeben werden. Die Insasseninformation kann dabei kennzeichnen, dass der Fahrer bestimmte Handlungen unterlassen sollte. Dabei kann die Insasseninformation auch den bestimmten Grund und/oder eine Konsequenz für zu den Handlungen kennzeichnen.Furthermore, the occupant information output on the mobile user device depending on the transmitted information may relate to the actions, in particular driving tasks or driving actions, which are explicitly not recommended for the current time interval or in relation to the detected traffic situation and / or with regard to the determined action requirement. to avoid. For example, if it is determined that the occupant is actively using a mobile user device at the driver's seat and during which a certain driving action has been planned or started by the at least partially automated, in particular highly automated, moving vehicle, such an activation of the output unit can take place as a counterproductive (possibly instinctive or frightened) Reaction of the driver, eg braking is avoided. For example, when a change in the at least guidance of the vehicle, for example, an overtaking operation, threading operation, an avoidance operation (e.g., due to a changed traffic situation) is made partially automated, certain occupant information may be output at the driver's mobile user equipment. The occupant information may indicate that the driver should refrain from certain actions. In this case, the occupant information can also identify the specific reason and / or a consequence for the actions.
Alternativ oder zusätzlich kann die besagte an das mobile Anwendergerät zu übermittelnde Information abhängig von einem technischen Zustand des Fahrzeugs ermittelt werden. Beispielsweise kann die zu übermittelnde Information abhängig von einem einen bestimmten Grenzwert unterschreitenden technischen Zustand des Fahrzeugs, insbesondere einem technischen Zustand eines oder mehreren Fahrzeugsysteme die ein sofortiges oder baldiges Handeln des Fahrers erfordert ermittelt und übermittelt werden. Daraufhin kann die zumindest eine Ausgabeeinheit des mobilen Anwendergeräts entsprechend angesteuert werden. Beispielsweise kann die besagte an das mobile Anwendergerät zu übermittelnde Information abhängig von einer mehr oder minder abrupter oder unerwarteten Verschlechterung des technischen Zustands des Fahrzeugs ermittelt werden. Beispielsweise kann am mobilen Anwendergerät eine Insasseninformation ausgegeben werden, die ein bestimmtes (zutreffendes) technisches Problem des Fahrzeugs und/oder einen bestimmten Handlungsbedarf, ggf. betreffend oder innerhalb der aktuellen Fahrt, im Zusammenhang mit dem technischen Zustand des Fahrzeugs kennzeichnet.Alternatively or additionally, the said information to be transmitted to the mobile user device can be determined depending on a technical condition of the vehicle. For example, the information to be transmitted can be determined and transmitted as a function of a technical condition of the vehicle that falls below a certain limit value, in particular a technical condition of one or more vehicle systems requiring immediate or prompt action by the driver. Then, the at least one output unit of the mobile user device can be controlled accordingly. For example, the said information to be transmitted to the mobile user device can be determined as a function of a more or less abrupt or unexpected deterioration in the technical condition of the vehicle. For example, occupant information can be output on the mobile user device that contains a specific (applicable) technical problem of the vehicle and / or a specific need for action, if applicable, or within the current one Driving, in connection with the technical condition of the vehicle.
Durch das Verfahren wird somit auch ein längeres Zurechtfinden und Orientieren in der realen Situation nach dem Abwenden der Wahrnehmung und/oder Aufmerksamkeit, z.B. des Blicks des Fahrers, von dem mobilen Anwendergerät, und/oder der typischerweise notwendige Augenakkommodation (auf eine reale) Fahrzeugumgebung und/oder Fahrzeuganzeigen erspart.Thus, by the method also a longer orientation and orientation in the real situation after averting the perception and / or attention, e.g. the driver's gaze, the mobile user device, and / or the typically required eye accommodation (on a real) vehicle environment and / or vehicle displays.
Es kann eine Insasseninformation an den Fahrer des Fahrzeugs, ausgegeben werden, die ihn bereits vor, während oder kurz nach der Übertragung seiner Wahrnehmung und/oder Aufmerksamkeit von dem mobilen Anwendergerät auf die reale Umgebung des Fahrzeugs dient.An occupant information may be output to the driver of the vehicle who is already serving him or her before, during, or shortly after the transmission of his or her perception and / or attention from the mobile user equipment to the real environment of the vehicle.
Da die besagte Übertragung der Wahrnehmung und/oder Aufmerksamkeit abhängig von zahlreichen Kriterien, z.B. Beleuchtungsunterschiede (zwischen dem Innenraum des Fahrzeug, Fahrzeugumgebung, Anzeige des mobilen Anwendergeräts), Komplexität des Fahrkontextes, störende Faktoren bis zu 5 Sekunden dauern kann, ergibt sich ein erheblicher Vorteil, dass die besagte, insbesondere bestimmte Insasseninformation während dieser Zeit bereits zur Verfügung steht bzw. dem Fahrer bereits bekannt ist.Since the said transmission of perception and / or attention depends on numerous criteria, e.g. Lighting differences (between the interior of the vehicle, vehicle environment, display of the mobile user device), complexity of the driving context, disruptive factors can take up to 5 seconds, there is a significant advantage that the said, in particular certain occupant information during this time is already available or The driver is already known.
Beispielsweise kann eine Insasseninformation an den Fahrer ausgegeben werden die für den Fahrer zumindest einen bestimmten Anhaltspunkt oder eine Tendenz für eine Entscheidung, Reaktion, eine fahrerische Handlung bietet, noch bevor seine Wahrnehmung und/oder Aufmerksamkeit hinreichend auf die Fahrzeugumgebung übertragen ist. Dabei kann die besagte Zeit von einigen Sekunden zweckmäßig genutzt werden und/oder eine Überraschung des Fahrers etwa mit einer von ihm nicht erwarteten Verkehrssituation oder durch eine zu treffende Handlungsentscheidung vermieden werden.For example, occupant information may be output to the driver that provides the driver with at least one particular clue or tendency for a decision, reaction, driver's action, even before his or her perception and / or attention is sufficiently transmitted to the vehicle environment. In this case, the said time of a few seconds can be used appropriately and / or a surprise of the driver can be avoided, for example with a traffic situation not expected by him or by an action decision to be taken.
Die an das mobile Anwendergerät (vom Fahrzeug oder von einer im Fahrzeug betriebenen Recheneinheit) übermittelnde Information kann im Verfahren derart ermittelt werden, dass diese in einem vorausbestimmten Zusammenhang mit der Verkehrssituation und/oder dem Handlungsbedarf steht.
Die übermittelte Information kann dabei abhängig zu den bestimmten, z.B. ausgewählten, z.B. einen oder mehrere bestimmte Schwellenwerte überschreitende Parameter der Verkehrssituation und/oder eines Handlungsbedarfs ermittelt werden. Beispielsweise kann abhängig von einer oder mehreren vorausbestimmten Bedingungen entschieden werden, dass eine Information zu oder abhängig von der Verkehrssituation und/oder dem Handlungsbedarf übermittelt wird. Auch kann ein Inhalt, ein Parameter der zu übermittelnden Information abhängig von einem oder mehreren Parametern der Verkehrssituation und/oder eines Handlungsbedarfs bestimmt werden.The information transmitted to the mobile user device (by the vehicle or by a vehicle-operated computing unit) can be determined in the method such that it is in a predetermined relationship with the traffic situation and / or the need for action.
The transmitted information can be determined depending on the particular, eg selected, eg one or more specific thresholds exceeding parameters of the traffic situation and / or a need for action. For example, it can be decided depending on one or more predetermined conditions that information is transmitted to or depending on the traffic situation and / or the need for action. Also, a content, a parameter of the information to be transmitted can be determined depending on one or more parameters of the traffic situation and / or a need for action.
Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren auch:
- - Erkennen, dass die Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers ein zweckmäßiges Maß unterschreitet, und
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von der erfassten Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers.
- Recognizing that the driver's attention to a driving task and / or driving activity of the driver is below a reasonable level, and
- - Driving the output unit of the mobile user device depending on the detected attention of the driver with respect to a driving task and / or driving activity of the driver.
Dabei kann die Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe mit an sich bekannten Mitteln, beispielsweise mittels der Erfassung seiner Kopfposition, Blickrichtung, Fahrerzustandserkennung, insbesondere mit Mitteln des Fahrzeugs erfolgen.In this case, the driver's attention with respect to a driving task can be made by means known per se, for example by means of the detection of his head position, viewing direction, driver status recognition, in particular by means of the vehicle.
Als die Fahraktivität des Fahrers ist auch eine (hinreichende, insbesondere zu einer hinreichend guten Fahrweise) Wahrnehmung einer (aktuellen oder anstehenden) Fahraufgabe durch den Fahrer zu verstehen.The driving activity of the driver is also a (sufficient, in particular to a sufficiently good driving style) perception of a (current or upcoming) driving task by the driver to understand.
Die Fahraktivität des Fahrers kann dabei mittels einer Auswertung der Betätigung der Steuerelemente des Fahrzeugs, insbesondere für die Längsführung und/oder Querführung des Fahrzeugs ausgeführt werden. Beispielsweise kann die Fahraktivität des Fahrers abhängig von dem haptischen Kontakt mit einem Pedal des Fahrzeugs und/oder einem Lenker des Fahrzeugs ermittelt werden.The driving activity of the driver can be carried out by means of an evaluation of the actuation of the control elements of the vehicle, in particular for the longitudinal guidance and / or transverse guidance of the vehicle. For example, the driving activity of the driver can be determined depending on the haptic contact with a pedal of the vehicle and / or a handlebar of the vehicle.
Besonders bevorzugt kann die Fahraktivität des Fahrers abhängig von dem Maß des haptischen Kontakts an einem betreffenden Bedienelement ermittelt, insbesondere geschätzt werden. Das Maß des haptischen Kontakts kann wiederum mit einem Hands-On-Sensor, einem Hands-Off-Sensor, mittels einer Drucksensitiven Matte im Lenkrad des Fahrzeugs oder mit einer Innenraumkamera des Fahrzeugs ermittelt werden.Particularly preferably, the driver's driving activity can be determined, in particular estimated, depending on the degree of haptic contact on a relevant operating element. The degree of haptic contact can in turn be determined with a hands-on sensor, a hands-off sensor, by means of a pressure-sensitive mat in the steering wheel of the vehicle or with an interior camera of the vehicle.
Besonders bevorzugt wird die, insbesondere mit Mitteln des Fahrzeugs erfasste Fahraktivität in Bezug auf die aktuelle fahrerische Aufgabe oder die aktuelle Fahrsituation bewertet. Dabei kann das „zweckmäßige Maß“ als eine auf das Fahrkontext und/oder Fahrsituation und/oder einen aktuellen Automatisierungsgrad bezogene Größe ermittelt.Particularly preferably, the driving activity detected, in particular with means of the vehicle, is evaluated in relation to the current driving task or the current driving situation. In this case, the "expedient measure" can be determined as a quantity related to the driving context and / or driving situation and / or a current degree of automation.
Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren:
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers an seinem mobilen Anwendergerät, insbesondere, dass ein mobiles Anwendergerät des Fahrers bedient wird,
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers,
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers in Bezug auf eine weitere Beschäftigung, insbesondere eine Kommunikation mit einer Person, und daraufhin:
- - Entscheidung über die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts.
- - Determining a measure of the driver's attention at his mobile user equipment, in particular that a driver's mobile user equipment is being operated,
- Determining a measure of the driver's attention with respect to a driver's driving task and / or driving activity,
- - Determine a measure of the driver's attention with regard to further employment, in particular communication with a person, and thereupon:
- - Decision on the control of the output unit of the mobile user device.
Besonders bevorzugt werden dabei zumindest zwei von drei der oben genannten Aspekte der Fahreraufmerksamkeit ermittelt und berücksichtigt.At least two of three of the above-mentioned aspects of driver attention are particularly preferably determined and taken into account.
Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren:
- - Erkennen eines vorliegenden Anwendungsfalls des mobilen Anwendergeräts, und/oder zumindest eines durch die Nutzung des mobilen Anwendergeräts beanspruchten Wahrnehmungskanals des Fahrers und daraufhin,
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem erkannten Anwendungsfall des mobilen Anwendergeräts und/oder des ermittelte beanspruchten Wahrnehmungskanals des Fahrers.
- Detecting a present application case of the mobile user device, and / or at least one perception channel of the driver claimed by the use of the mobile user device, and then
- - Controlling the output unit of the mobile user device depending on the detected application of the mobile user device and / or the determined claimed perception channel of the driver.
Wird beispielsweise das mobile Anwendergerät in der Hand gehalten und damit telefoniert, kann eine erste Ansteuerung, beispielsweise eine Vibration und/oder Soundausgabe, insbesondere umfassend eine Ansage erfolgen.If, for example, the mobile user device is held in the hand and thus telephoned, a first activation, for example a vibration and / or sound output, in particular comprising an announcement, can take place.
Wird beispielsweise das mobile Anwendergerät am Bildschirm bedient, z.B. ein Spiel gespielt oder eine Karte betrachtet, kann eine zweite Ansteuerung, beispielsweise eine Veränderung und/oder Erzeugen einer Anzeige am mobilen Anwendergerät erfolgen.For example, if the mobile user device is being operated on the screen, e.g. played a game or viewed a map, a second control, such as a change and / or generating a display on the mobile user device can be done.
Der Anwendungsfall des mobilen Anwendergeräts kann in zwei oder mehrere unterschiedliche Klassen klassifiziert werden. Diese Klassen können sich dabei nach den dabei besonders beanspruchten Wahrnehmungskanälen des Fahrers unterscheiden. Diese Klassen können sich auch nach der benötigten, beanspruchten oder nicht beanspruchten Wahrnehmung und/oder Aufmerksamkeit, benötigtem Blick, Zuhören, haptischem Kontakt oder haptischer Bedienung unterscheiden. Dabei kann die Ansteuerung der zumindest einer Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem erkannten Anwendungsfall oder der erkannten Klasse des Anwendungsfalls variiert werden.The use case of the mobile user device can be classified into two or more different classes. These classes may differ according to the driver's particularly stressed perception channels. These classes may also differ in the required, claimed or unclaimed perception and / or attention, gaze, listening, haptic contact, or haptic operation. In this case, the activation of the at least one output unit of the mobile user device can be varied depending on the detected application or the recognized class of the application.
Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren ein Erkennen, zumindest eines bestimmten Wahrnehmungskanals des Fahrers der durch das mobile Anwendergerät beansprucht wird, und insbesondere der Intensität in der zumindest ein Wahrnehmungskanal beansprucht wird und daraufhin eine Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem erkannten Wahrnehmungskanal, und insbesondere abhängig von der erkannten Intensität. Beispielsweise kann die Intensität in der ein Wahrnehmungskanal, insbesondere ein bestimmter Wahrnehmungskanal des Fahrers beansprucht wird, als ein (zumindest grobes) Maß, z.B. 2-8 Stufen ermittelt oder geschätzt und zweckmäßig berücksichtigt werden.According to a further optional refinement, the method comprises recognizing at least one specific perception channel of the driver claimed by the mobile user device, and in particular the intensity in which at least one perception channel is claimed, and then activating the output unit of the mobile user device depending on the detected perception channel , and in particular depending on the detected intensity. For example, the intensity in which a perceptual channel, in particular a particular perceptual channel of the driver is claimed, may be taken as an (at least coarse) measure, e.g. 2-8 levels are determined or estimated and appropriately taken into account.
Beispielsweise kann die Beanspruchung (aktuelle Nutzung, Aufmerksamkeit, Reizüberflutung) an einem oder zwei Wahrnehmungskanälen des Fahrers im Zusammenhang mit der Nutzung des mobilen Anwendergeräts erkannt werden. Abhängig von der erkannten Information kann eine oder zwei Ansteuerungen der zumindest Ausgabeeinheit des mobilen Anwendergeräts welche die zumindest zwei betreffenden Wahrnehmungskanäle des Fahrers betrifft.For example, the stress (current usage, attention, sensory overload) on one or two driver perception channels may be detected in connection with the use of the mobile user equipment. Depending on the detected information, one or two actuations of the at least output unit of the mobile user device which concerns the at least two relevant perception channels of the driver.
Bevorzugt kann abhängig von dem Input und/oder Output des mobilen Anwendergeräts, insbesondere auch von ausgewerteten Inhalten erkannt werden, welcher der Wahrnehmungskanäle des Fahrers aktuell die Inhalte des mobilen Anwendergeräts wahrnimmt.Preferably, depending on the input and / or output of the mobile user device, in particular also of evaluated contents, it can be recognized which of the driver's perception channels currently perceives the contents of the mobile user device.
Es kann auch ermittelt werden, wie intensiv dieser Wahrnehmungskanal genutzt oder überlastet ist und daraufhin über die Ansteuerung eines oder mehrerer Aktoren des mobilen Anwendergeräts entschieden werden. Beispielsweise kann eine Vibration und/oder Soundausgabe, insbesondere umfassend eine Ansage erfolgen, oder eine Veränderung und/oder Erzeugen einer Anzeige am mobilen Anwendergerät.It can also be determined how intensively this perception channel is used or overloaded and then decided on the control of one or more actuators of the mobile user device. For example, a vibration and / or sound output, in particular comprising an announcement, or a change and / or generating a display on the mobile user device.
Ferner kann in der Erfindung die Möglichkeit vorgesehen werden mittels des mobilen Anwendergeräts zumindest eine, insbesondere eine im Zusammenhang mit dem Verfahren stehende, passende Funktion des Fahrzeugs zu beeinflussen, insbesondere zu bedienen.Furthermore, the possibility can be provided in the invention by means of the mobile user device to influence, in particular to operate, at least one, in particular a related function of the vehicle in connection with the method.
Gemäß einer weiteren optionalen Ausgestaltung wird eine Größe repräsentierend einen Automatisierungsgrad des Fahrzeugs ermittelt oder prädiziert, und die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts erfolgt abhängig von der ermittelten Größe repräsentierend den Automatisierungsgrad.According to a further optional embodiment, a size representing a degree of automation of the vehicle is determined or predicted, and the control of the output unit of the mobile user device is performed depending on the determined size representing the degree of automation.
Dabei kann die durch das mobile Anwendergerät auszugebende Information abhängig von der ermittelten Größe repräsentierend den Automatisierungsgrad, unterschiedlich ausgewählt und/oder inhaltlich unterschiedlich sein. In this case, the information to be output by the mobile user device depending on the determined size representing the degree of automation, be selected differently and / or content may be different.
Beispielsweise kann bei einem niedrigen Automatisierungsgrad andere Merkmale der Verkehrssituation gemeldet werden, als bei einem hohen Automatisierungsgrad.For example, other characteristics of the traffic situation can be reported with a low degree of automation than with a high degree of automation.
Bei einem niedrigen Automatisierungsgrad kann beispielsweise auch eine relativ kurze Aufmerksamkeit oder Bedienung des mobilen Anwendergeräts zur Ansteuerung der Ausgabeeinheit führen. Diese kann dabei keine oder eine relativ geringe Abhängigkeit von der Fahrsituation und/oder Fahrkontext aufweisen.At a low degree of automation, for example, a relatively brief attention or operation of the mobile user device can lead to the control of the output unit. This can have no or a relatively low dependence on the driving situation and / or driving context.
Bei einem hohen Automatisierungsgrad hingehen, kann lediglich eine relativ kritische Information, z.B. zu Verkehrssituationen, die vom Fahrzeug nicht hinreichend beherrscht werden, ausgegeben. Diese können dabei keine oder eine relativ geringe Abhängigkeit von der Ablenkungszeit und eine relativ hohe Abhängigkeit von der ermittelten (automatisch ausgewerteten, interpretierten) Fahrsituation und/oder Fahrkontext aufweisen.With a high degree of automation, only relatively critical information, e.g. to traffic situations that are not sufficiently controlled by the vehicle issued. These can have no or a relatively low dependence on the deflection time and a relatively high dependence on the determined (automatically evaluated, interpreted) driving situation and / or driving context.
Gemäß einer weiteren optionalen Ausgestaltung betrifft die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts eine Veränderung eines nicht auf das Fahren bezogenen Inhalts.According to another optional embodiment, the control of the output unit of the mobile user device relates to a change of non-driving content.
Der nicht auf das Fahren bezogene Inhalt ist zu verstehen als nicht bezogen oder betreffend den Fahrkontext und die Verkehrssituation, z.B. nicht betreffend einen aktuellen bzw. relevanten Fahrkontext, Verkehrssituation, durch den Fahrer oder durch ein System des Fahrzeugs auszuführende fahrerische Aufgabe, sondern vielmehr einen eigenen Inhalt des mobilen Anwendergeräts, z.B. betreffend Multimedia oder (Tele-)Kommunikation, eine Büroarbeit, ein Computerspiel, und Dergleichen.The non-driving content is to be understood as unrelated or regarding the driving context and the traffic situation, e.g. not concerning a current driving context, traffic situation, driving task to be performed by the driver or by a system of the vehicle, but rather own contents of the mobile user device, e.g. concerning multimedia or (tele) communication, office work, a computer game, and the like.
Beispielsweise, wenn eine kritische Verkehrssituation erkannt wird und/oder ein aktueller oder baldiger Handlungsbedarf des Fahrers ermittelt wird, dann kann eine (ablenkende) Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts, insbesondere solche, die nichts mit dem Fahren zu tun hat, explizit unterdrückt, pausiert, in einer abgeschwächten Form und/oder mit einer Verzögerung ausgegeben werden.For example, if a critical traffic situation is detected and / or a current or urgent need for action of the driver is determined, then a (distracting) control of the output unit of the mobile user device, especially those that has nothing to do with driving, explicitly pauses , issued in a weakened form and / or with a delay.
Alternativ oder zusätzlich kann im Verfahren auch festgestellt oder explizit erkannt werden, dass der Fahrer das mobile Anwendergerät nicht bedient und im Verfahren berücksichtigt werden.Alternatively or additionally, it can also be determined or explicitly recognized in the method that the driver does not operate the mobile user device and is taken into account in the method.
Wenn beispielsweise ermittelt wird, dass die Aufmerksamkeit des Fahrers im Wesentlichen nicht oder noch nicht auf dem mobilen Anwendergerät liegt und, dass eine die Fahreraufmerksamkeit erfordernde Verkehrssituation erkannt oder für die nahe Zukunft prädiziert wird und/oder ein aktueller oder baldiger Handlungsbedarf des Fahrers ermittelt wird, dann können die Ansteuerungen der Ausgabeeinheit des mobilen Anwendergeräts, insbesondere vorausschauend und/oder für ein gewisses Zeitintervall verändert, insbesondere zumindest teilweise unterdrückt, pausiert und/oder erst zu einem späteren Zeitpunkt ausgegeben werden.If, for example, it is determined that the driver's attention is essentially not or not yet on the mobile user device and that a traffic situation requiring driver attention is detected or predicted for the near future and / or a current or early driver action is determined, then the controls of the output unit of the mobile user device, in particular forward-looking and / or changed for a certain time interval, in particular at least partially suppressed, paused and / or output at a later time.
Gemäß einer weiteren optionalen Ausgestaltung erfolgt abhängig von einer übermittelten Information im Zusammenhang mit einer erkannten Verkehrssituation bzw. mit einem Handlungsbedarf des Fahrers des Fahrzeugs:
- - eine Veränderung eines aktuell ausgegebenen Inhalts, z.B. einer aktuellen Anzeige des mobilen Anwendergeräts, z.B. eine Minimierung einer (tendenziell ablenkenden) bisher ausgegebenen Anzeige, und/oder ein Erzeugen einer weiteren Anzeige auf dem mobilen Anwendergerät im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs, und/oder
- - eine Veränderung einer Audioausgabe des mobilen Anwendergeräts, z.B. eine Reduktion der Lautstärke oder Pausieren einer auditiven Telekommunikation, und/oder eine Ausgabe eines Sounds im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs mit dem mobilen Anwendergerät, und/oder
- - eine Ansteuerung eines Aktors des mobilen Anwendergeräts, insbesondere eines Umwuchtaktors, Vibrationsaktors, Beschleunigungsaktors im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs mit dem mobilen Anwendergerät.
- a change of a currently output content, eg a current display of the mobile user device, eg a minimization of a (tendentially distracting) previously issued display, and / or a generation of a further display on the mobile user device in connection with the detected traffic situation or with the Need for action of the driver of the vehicle, and / or
- a change in an audio output of the mobile user device, eg a reduction of the volume or pausing of an auditory telecommunication, and / or an output of a sound in connection with the detected traffic situation or with the action requirement of the driver of the vehicle with the mobile user device, and / or
- - An activation of an actuator of the mobile user device, in particular a Umwuchtaktors, vibration actuator, acceleration actuator in connection with the detected traffic situation or with the need for action of the driver of the vehicle with the mobile user device.
In einem vereinfachten Fall kann die zu dem zumindest einen im Fahrzeug betriebenen mobilen Anwendergerät zu übermittelnde Information und/oder eine daraufhin ausgegebene Insasseninformation eine Kennung, zu einem qualitativen oder quantitativen Parameter der Verkehrssituation und/oder dem Handlungsbedarf (z.B. Handlungsbedarf in Bezug auf die Verkehrssituation) umfassen. Beispielsweise kann zu dem zumindest einem im Fahrzeug betriebenen mobilen Anwendergerät zu übermittelnde Information und/oder eine daraufhin ausgegebene Insasseninformation einen Parameter zu der Art und/oder der Kritikalität der erfassten Verkehrssituation und/oder zu der Art und/oder der Dringlichkeit zumindest eines (bestimmten) Handlungsbedarfs umfassen.In a simplified case, the information to be transmitted to the at least one mobile user device operated in the vehicle and / or an occupant information output thereupon may be an identifier for a qualitative or quantitative parameter of the traffic situation and / or the need for action (eg need for action with respect to the traffic situation). include. For example, the information to be transmitted to the at least one mobile user device operated in the vehicle and / or an occupant information output thereupon may include a parameter relating to the type and / or criticality of the detected traffic situation and / or to the type and / or urgency at least one (specific) need for action.
Beispielsweise umfasst die daraufhin an den zumindest einem mobilen Anwendergerät ausgegebene Insasseninformation eine (durch eine menschliche Wahrnehmung) schnell interpretierbare Bestandteile, z.B. Symbole, gewählte Sounds, bestimmte haptische Muster, etc.For example, the occupant information then output to the at least one mobile user device comprises a component (by human perception) that can be quickly interpreted, e.g. Symbols, selected sounds, certain haptic patterns, etc.
Gemäß einer weiteren optionalen Ausgestaltung ist die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts repräsentierend für:
- - eine Aufforderung zur Zuwendung der Fahreraufmerksamkeit zu der Fahrzeugumgebung,
- - eine Aufforderung zur Zuwendung der Fahreraufmerksamkeit zu einer Information des Fahrzeugs, insbesondere zu einer Anzeige des Fahrzeugs, insbesondere betreffend eine Fahrzeugführung,
- - eine Aufforderung zum Greifen des Lenkrads, insbesondere als ein sogenanntes „Hands-On-Request“
- - eine Aufforderung zum Antippen oder Bedienen eines Pedals des Fahrzeugs oder einer Bestätigung der Bedienbereitschaft zum Bedienen zumindest eines Pedals durch den Fahrer,
- - eine Aufforderung zur Veränderung der Fahrzeuggeschwindigkeit,
- - eine Aufforderung zum Einhalten eines, insbesondere seitlichen Abstands,
- - eine Aufforderung zum Mitwirken des Fahrers bei einem bestimmten Manöver,
- - eine Aufforderung zur Entscheidung des Fahrers in Bezug auf einem bestimmten Manöver,
- - eine Übernahmeaufforderung zumindest eines Teils der Fahrzeugführung durch den Fahrer.
- an invitation to attract driver attention to the vehicle environment,
- a request for the attention of the driver to an information of the vehicle, in particular to a display of the vehicle, in particular concerning a vehicle guidance,
- a request to grasp the steering wheel, in particular as a so-called "hands-on request"
- a request to tap or operate a pedal of the vehicle or a confirmation of operator readiness to operate at least one pedal by the driver,
- a request to change the vehicle speed,
- - a request to maintain a distance, in particular lateral,
- a request for the driver to participate in a particular maneuver,
- an invitation to the driver's decision in relation to a particular maneuver,
- a takeover request for at least part of the vehicle guidance by the driver.
Insbesondere wird dabei eine entsprechendeIn particular, a corresponding
Insasseninformation mit der Ausgabeeinheit des mobilen Anwendergeräts ausgegeben. Diese kann z.B. von einem Parameter der Verkehrssituation und/oder des Handlungsbedarfs abhängig sein. Beispielsweise kann die Insasseninformation ein Merkmal der Aufforderung zur Zuwendung der Fahreraufmerksamkeit zu einem (bestimmten) Objekt oder Raumbereich im Fahrzeug oder außerhalb des Fahrzeugs, ein Merkmal der vom Fahrer auszuführenden Aktion, etc. kennzeichnen.Occupant information is outputted with the output unit of the mobile user equipment. This can e.g. be dependent on a parameter of the traffic situation and / or the need for action. For example, the occupant information may designate a feature of the request to apply the driver's attention to a (specific) object or space area in the vehicle or outside the vehicle, a feature of the action to be performed by the driver, etc.
Gemäß einer weiteren optionalen Ausgestaltung dem erfolgt die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von einem oder mehrerer vorausbestimmten Kriterien in Bezug auf die ermittelte Verkehrssituation und/oder dem Ermitteln eines bestimmten Handlungsbedarfs des Fahrers eines zumindest teilweise automatisiert fahrenden Fahrzeugs.According to a further optional embodiment, the triggering of the output unit of the mobile user device takes place as a function of one or more predetermined criteria with regard to the determined traffic situation and / or determining a specific need for action of the driver of an at least partially automated vehicle.
Als ein vorausbestimmtes Kriterium können dabei beispielsweise angesehen werden:
- - eine Einschätzung der Wichtigkeit und/oder der Eiligkeit einer Information zu einer erkannten Verkehrssituation und/oder eines Handlungsbedarfs des Fahrers,
- - eine Erkennung einer Verkehrssituation als eine Verkehrssituation einer bestimmten Art, z.B. eine Kollisionswahrscheinlichkeit,
- - ein Erkennen eines bestimmten Handlungsbedarfs hinsichtlich: Längsführung des Fahrzeugs und/oder Querführung des Fahrzeugs,
- - ein Überschreitung vorausbestimmter Schwellwerte. Auch können Schwellenwerte abhängig vom Fahrkontext (Stadtfahrt, Landstraßen Schnellstraße, Parken, Fahrer im dichten Verkehr, Nachtfahrt, etc.) gewählt werden.
- an assessment of the importance and / or the urgency of information on a detected traffic situation and / or a need for action of the driver,
- a recognition of a traffic situation as a traffic situation of a certain kind, eg a collision probability,
- a recognition of a specific need for action with regard to: longitudinal guidance of the vehicle and / or transverse guidance of the vehicle,
- - Exceeding predefined thresholds. Threshold values can also be selected depending on the driving context (city driving, highway expressway, parking, drivers in heavy traffic, night driving, etc.).
In einem vereinfachten Fall kann die auf die Erkennung des zumindest eines vorausbestimmten Kriteriums eine vereinfachte Kennung zu der erfassten, ausgewerteten oder für die nahe Zukunft prädizierten Verkehrssituation und/oder möglicher bzw. wahrscheinlicher Konsequenzen der Verkehrssituation oder eines nicht vollzogenen Handlungsbedarfs des Fahrers, insbesondere des Fahrers mit der Ausgabeeinheit des mobilen Anwendergeräts repräsentiert werden. Dabei kann auch der Inhalt, Zeitpunkt der Ansteuerung der zumindest einer Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem zumindest einen vorausbestimmten Kriterium, z.B. von einem oder mehreren qualitativen und/oder quantitativen Parameter des vorausbestimmten Kriterium gewählt werden.In a simplified case, the recognition of the at least one predetermined criterion can be a simplified identifier for the detected, evaluated or predicted for the near future traffic situation and / or possible or probable consequences of the traffic situation or an unfulfilled need for action of the driver, in particular the driver be represented with the output unit of the mobile user equipment. In this case, the content, timing of the activation of the at least one output unit of the mobile user device depending on the at least one predetermined criterion, e.g. selected from one or more qualitative and / or quantitative parameters of the predetermined criterion.
Mit anderen Worten können insbesondere nur (nach vorausbestimmten Kriterien) ausgewählte priorisierte Informationen übermittelt werden und/oder (nach vorausbestimmten Kriterien) priorisierte Ansteuerungen der Ausgabeeinheit des mobilen Anwendergeräts erfolgen.In other words, in particular only (according to predetermined criteria) selected prioritized information can be transmitted and / or (according to predetermined criteria) prioritized controls of the output unit of the mobile user device.
Bevorzugt wird die Ansteuerung der zumindest einer Ausgabeeinheit des mobilen Anwendergeräts derart abhängig von einem oder mehreren vorausbestimmten Kriterien bzw. qualitativen oder quantitativer Parametern der vorausbestimmten Kriterien gewählt, dass ein jeweils zweckmäßiges Maß der Wahrnehmung und/oder Aufmerksamkeit des Fahrers auf die zu übermittelnde Information beansprucht und/oder auf die Umgebung des Fahrzeugs, insbesondere zu einem zweckmäßig gewählten Zeitpunkt gelenkt bzw. abgerufen werden. Dabei kann z.B. ein statistisches geltendes Maß für Menschen im Allgemeinen, für eine bestimmte Person des Fahrers oder für eine bestimmten Personenklasse zu der der Fahrer gehört berücksichtigt werden, die die Eigenschaften seines Agierens oder Reagierens, z.B. ein Maß für seine Reaktionsfähigkeit berücksichtigt werdenPreferably, the activation of the at least one output unit of the mobile user device is selected depending on one or more predetermined criteria or qualitative or quantitative parameters of the predetermined criteria that claimed each appropriate level of perception and / or attention of the driver to the information to be transmitted and / or be directed to the environment of the vehicle, in particular at a convenient time selected or retrieved. In this case, for example, a statistic valid measure for people in the In general, for a particular person of the driver or for a particular class of person to which the driver belongs, taking into account the characteristics of his acting or reacting, eg a measure of his responsiveness
Dabei kann der der Fahrer nur dann oder nur dann in einem wesentlichen Maße aus seiner Beschäftigung herausgeholt, wenn dies die Situation, insbesondere die Gesamtsituation erfordert. Beispielsweise kann ein Anteil der Wahrnehmung und/oder Aufmerksamkeit des Fahrers durch die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts auf eine bestimmte Verkehrssituation und/oder Handlungsbedarf gerichtet werden soll im Verfahren, z.B. abhängig von vorausbestimmten Kriterien oder weiteren Faktoren) variiert werden. Dabei kann bei nicht sehr dringenden Handlungsbedarfen, z.B. Entscheidungsbedarfen erstmal ein bestimmter Anteil der Wahrnehmung, z.B. nur ein bestimmter Wahrnehmungskanal des Fahrers oder ein Teil seiner Aufmerksamkeit auf die Umgebung des Fahrzeugs bzw. auf eine fahrerische Aufhabe gelenkt werden.In this case, the driver can only be brought out of his employment to a significant extent only if this requires the situation, in particular the overall situation. For example, a portion of the driver's perception and / or attention may be directed to a particular traffic situation and / or need for action in the method, for example by controlling the output unit of the mobile user device. depending on predetermined criteria or other factors). In the case of non-urgent action requirements, e.g. Decision making required first a certain proportion of the perception, e.g. only a certain perceptual channel of the driver or a portion of his attention to the environment of the vehicle or on a driving posture are directed.
Falls in dem Fahrzeug mehrere Insassen sind, so ist typischerweise auch pro Insasse ein mobiles Anwendergerät in dem Fahrzeug angeordnet. Somit ist es vorteilhaft, diese mobilen Anwendergeräte zu unterscheiden. Deshalb wird gemäß einer weiteren vorteilhaften Ausgestaltung ein mobiles Anwendergerät im Innenraum des Fahrzeugs als das von dem Insassen am Fahrersitz erkannt, und das Übermitteln der Information zu der erfassten Verkehrssituation und/oder dem zumindest einem bestimmten Handlungsbedarf des Insassen erfolgt an das (bestimmte) erkannte mobile Anwendergerät, bevorzugt zugehörig zu zumindest einem aktuellen Fahrer, z.B. zum mobilen Anwendergerät des Insassen am Fahrersitz.If there are several occupants in the vehicle, a mobile user device is typically also arranged in the vehicle per occupant. Thus, it is advantageous to distinguish these mobile user devices. Therefore, according to a further advantageous embodiment, a mobile user device is recognized in the interior of the vehicle as that of the occupant at the driver's seat, and the transmission of the information on the detected traffic situation and / or the at least one specific action required by the occupant to the (certain) detected mobile User device, preferably associated with at least one current driver, eg to the mobile user device of the occupant at the driver's seat.
Gemäß einer weiteren optionalen Ausgestaltung wird ein aktiver Anzeigeinhalt des mobilen Anwendergeräts reduziert oder aufbereitet, und/oder eine weitere Anzeige angezeigt, die eine betreffende Verkehrssituation und/oder einen bestimmten mit der Verkehrssituation verbundenen Handlungsbedarf des Fahrers des Fahrzeugs zumindest teilweise repräsentiert.According to a further optional refinement, an active display content of the mobile user device is reduced or edited, and / or a further display is displayed that at least partially represents a relevant traffic situation and / or a specific need for action of the driver of the vehicle associated with the traffic situation.
Bevorzugt kann die Veränderung, insbesondere Reduktion und/oder Pausieren des bisher mit Mitteln des mobilen Anwendergeräts ausgegebenen Inhalts und/oder die Ausgabe der Insasseninformation mit mitten des mobilen Anwendergeräts an zumindest eine mit Mitteln des Fahrzeugs, z.B. mit dem Sensorsystem des Fahrzeugs ermittelbare Bedingung geknüpft werden. Eine solche Bedingung kann z.B. kennzeichnen, dass die erfasste Verkehrssituation vorausbestimmten Kriterien entspricht, insbesondere wenn eine (sicherheits-) kritische Verkehrssituation und/oder (sicherheits-) kritischer Handlungsbedarf erkannt wird.Preferably, the modification, in particular reduction and / or pausing of the content previously output by means of the mobile user equipment and / or the output of the occupant information with the middle of the mobile user equipment to at least one vehicle means, e.g. be determined with the sensor system of the vehicle determinable condition. Such a condition may e.g. indicate that the detected traffic situation corresponds to predefined criteria, in particular if a (safety) critical traffic situation and / or (safety) critical need for action is recognized.
Das Verfahren kann ein Aufbereiten der Daten zu der zumindest einen erfassten Verkehrssituation und/oder zu zumindest einem Handlungsbedarf umfassen. Das Aufbereiten kann zumindest teilweise mit Mitteln des Fahrzeugs und/oder zumindest teilweise mit Mitteln des mobilen Anwendergeräts erfolgen. Dabei können beispielsweise Daten der Sensorsystems des Fahrzeugs aufbereitet, insbesondere analysiert, interpretiert werden. Ein Aufbereiten der Daten ist hierbei insbesondere ein Filtern, z.B. eine Extraktion relevanter Gegebenheiten und/oder eine Hervorhebung kritischer Objekte in der Umgebung des Fahrzeugs umfassen. Ferner kann das Aufbereiten der Daten ein Ermitteln einer Voraussage für die nahe Zukunft, beispielsweise eine Extrapolation zumindest eines Teils der Verkehrssituation und/oder eines Handlungsbedarfs für die nächsten Sekunden umfassen.The method may include preparing the data for the at least one detected traffic situation and / or for at least one action requirement. The processing can be carried out at least partially by means of the vehicle and / or at least partially by means of the mobile user device. In this case, for example, data of the sensor system of the vehicle can be processed, in particular analyzed, interpreted. Processing of the data here is in particular a filtering, e.g. an extraction of relevant facts and / or a highlighting of critical objects in the environment of the vehicle include. Furthermore, the preparation of the data may include determining a forecast for the near future, for example an extrapolation of at least part of the traffic situation and / or a need for action for the next few seconds.
Bevorzugt umfasst das Aufbereiten der Daten ein Ermitteln einer zu dem mobilen Anwendergerät zu übermittelnden Information und/oder einer daraufhin am mobilen Anwendergerät auszugebenen Insasseninformation, die sich auf die Verkehrssituation und/oder den Handlungsbedarf bezieht, der zu einem Zeitpunkt in der nahen Zukunft, z.B. etwa, 1,2,3,5, 10 Sekunden nach der Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts gilt oder optimiert ist.The processing of the data preferably comprises determining information to be transmitted to the mobile user device and / or occupant information to be output thereon at the mobile user device, which relates to the traffic situation and / or the action required at a time in the near future, e.g. approximately, 1, 2, 3, 5, 10 seconds after the triggering of the output unit of the mobile user device is valid or optimized.
Insbesondere kann sich die zu dem zumindest einen mobilen Anwendergerät zu übermittelnde Information und/oder die daraufhin ausgegebene Insasseninformation auf die Verkehrssituation und/oder dem Handlungsbedarf bezogen werden, die (z.B. entsprechend einer Extrapolation der Verkehrssituation für die nahe Zukunft) gelten wird. Somit kann der betreffende Fahrer, nach der erfolgte Akkommodation seiner Augen, z.B. etwa auf eine dunkle Umgebung des Fahrzeugs nach dem Betrachten eines hellen Bildschirms des mobilen Anwendergeräts, über eine Insasseninformation verfügen, die etwa zu dem Zeitpunkt zu dem die Akkommodation hinreichend abgeschlossen ist (zumindest mit einer gewissen Wahrscheinlichkeit) zutreffen wird. Somit kann der Fahrer des Fahrzeugs die dann geltende Verkehrssituation mehr oder minder nahtlos wahrnehmen, schnell den „Anschluss finden“, reagieren oder agieren.In particular, the information to be transmitted to the at least one mobile user device and / or the subsequently issued occupant information can relate to the traffic situation and / or the need for action which will apply (for example, according to an extrapolation of the traffic situation for the near future). Thus, after the accommodation of his eyes, e.g. for example, upon a dark environment of the vehicle after viewing a bright screen of the mobile user device, have occupant information that will apply (at least with a certain degree of probability) at about the time the accommodation is sufficiently completed. Thus, the driver of the vehicle can perceive the then prevailing traffic situation more or less seamlessly, quickly find the "connection", react or act.
Beispielsweise kann bei zumindest zwei Insassen im Fahrzeug ein Insasse und/oder ein bestimmtes mobiles Anwendergerät ermittelt werden, der seine Wahrnehmung und/oder Aufmerksamkeit (zumindest mit einer hohen Wahrscheinlichkeit) besser bzw. schneller auf die reale Umgebung übertragen kann. Daraufhin wird zumindest ein bestimmtes mobilen Anwendergerät zu dem zumindest eine zu übermittelnde Information übermittelt wird und/oder die an dem mobilen Anwendergerät daraufhin ausgegebene Insasseninformation gewählt werden.For example, in at least two occupants in the vehicle an occupant and / or a particular mobile user device can be determined, which can transmit its perception and / or attention (at least with a high probability) better or faster to the real environment. Then at least one particular mobile user device becomes at least one transmitting information is transmitted and / or the subsequently issued to the mobile user device occupant information can be selected.
Bevorzugt kann eine bisherige Anzeige, die beispielsweise vom Fahrer beobachtet oder bedient wurde, hinsichtlich ihrer Anzeigefläche, Anzeigeschärfe, virtuell empfundener Anzeigenähe reduziert, insbesondere minimiert werden. Die Reduktion kann in diesem Kontext auch eine vollständige Abschaltung, ein Verstecken oder eine Verschiebung in den Hintergrund umfassen. Bevorzugt wird die zumindest eine Ausgabeeinheit des mobilen Anwendergeräts derart angesteuert, dass eine Reduktion und/oder Pausieren des bisher ausgegebenen Inhalts erfolgt. Beispielsweise kann eine Reduktion der bisher ausgegebenen Inhalte auf die tendenziell wichtigere Umfänge und/oder eine symbolhafte Darstellung zumindest eines Teils der Inhalte, z.B. der Anzeigeinhalte, Audioinhalte, haptischer und/oder taktil wahrnehmbarer Inhalte, ausgeführt werden. Beispielsweise kann eine mit dem mobilen Anwendergerät erzeugte virtuelle Realität, z.B. ein Videospiel pausiert werden. Dabei kann erreicht werden, dass die Wahrnehmung und/oder Aufmerksamkeit des Fahrers sehr viel schneller auf seine reale Umgebung, insbesondere auf die Verkehrssituation oder auf eine bestimmte Handlung, z.B. Bedienhandlung übertragen werden.Preferably, a previous display, which has been observed or operated by the driver, for example, can be reduced, in particular minimized, with regard to its display area, display sharpness, virtually perceived proximity to the display. The reduction in this context may also include a complete shutdown, hiding or shifting to the background. Preferably, the at least one output unit of the mobile user device is controlled in such a way that a reduction and / or pausing of the previously output content occurs. For example, a reduction of the previously output contents to the more important peripheries and / or a symbolic representation of at least part of the contents, e.g. the display contents, audio contents, haptic and / or tactile-perceptible contents. For example, a virtual reality generated by the mobile user device, e.g. a video game will be paused. It can thereby be achieved that the driver's perception and / or attention is transmitted much more quickly to his real environment, in particular to the traffic situation or to a specific action, e.g. Operating action to be transmitted.
Gemäß einer weiteren optionalen Ausgestaltung werden unterschiedliche Schwellenwerte, hinsichtlich der Wichtigkeit der Verkehrssituation und/oder Wichtigkeit und Eiligkeit des Handlungsbedarfs des Fahrers unterschieden und daraufhin werden unterschiedliche Ansteuerungen eines oder mehrerer Ausgabeeinheiten des mobilen Anwendergeräts ausgeführt.According to a further optional embodiment, different threshold values are distinguished with regard to the importance of the traffic situation and / or importance and urgency of the action requirement of the driver, and then different actuations of one or more output units of the mobile user equipment are carried out.
Bevorzugt werden bei unterschiedlichen ermittelten Schwellenwerten unterschiedliche Veränderungen der Anzeige des mobilen Anwendergeräts und/oder unterschiedliche, z.B. unterschiedliche oder unterschiedlich starke Töne und/oder Betätigungen eines haptischen Aktors, z.B. Vibration oder eines weiteren Reizes des mobilen Anwendergeräts veranlasst. Beispielsweise kann, falls sich eine bestimmte, z.B. unerwünschte Verkehrssituation langsam entwickelt, im Falle einen ersten Schwellenwert überschreitenden Information (z.B. nicht eilig), auf dem mobilen Anwendergerät eine unaufdringliche Informationsanzeige, z.B. auch als Bild-in-Bild-Anzeige zusammen oder innerhalb eines weiteren (bisherigen) Inhalts, z.B. zusammen oder innerhalb einer weiteren Anwendung am mobilen Anwendergerät ausgegeben, z.B. angezeigt werden. Erfordert die Verkehrssituation aber eine dringende, insbesondere eine unmittelbare Reaktion/Aktion des Fahrers, kann, im Falle einen zweiten Schwellenwert überschreitenden Information (z.B. dringend und wichtig), abhängig von dem ermittelten Handlungsbedarf ein bisheriger Inhalt, z.B. die bisherige Anzeige beispielsweise minimiert, ausgegraut, versteckt, auf Symbole reduziert werden. Dabei kann die zumindest eine Ausgabeeinheit des mobilen Anwendergeräts angesteuert werden. Die Ausgabeeinheit kann derart angesteuert werden, dass die zu übermittelnde Information zumindest teilweise die Ressourcen nutzt, die durch den bisherigen Inhalt in Anspruch genommen wurden. Beispielsweise kann der Anteil der Anzeigefläche und/oder Audiofrequenzbänder oder Zeitintervalle zur Ausgabe der besagten Insasseninformation benötigt werden, mittels einer Reduktion des bisherigen Inhalts und/oder der Freigabe der entsprechenden Ressourcen erreicht werden. Insbesondere kann, z.B. abhängig von einem oder mehreren vorausbestimmten Kriterien eine Aufteilung der Ressourcen zwischen einer auszugebenen Insasseninformation und einem oder mehreren bisherigen, aktiven Inhalte auf das mobile Anwendergerät ausgeführt werden. Auch können die Ressourcen des mobilen Anwendergeräts in Bezug auf die Rechenleistung, Speicher oder drahtlose Datenübertragung in einer analogen Art und Weise, z.B. zu Gunsten der Ausgabe der Insasseninformation, variiert werden.At different determined threshold values, different changes of the display of the mobile user device and / or different, e.g. different or differently strong tones and / or actuations of a haptic actuator, e.g. Vibration or another stimulus of the mobile user device causes. For example, if a particular, e.g. unwanted traffic situation develops slowly, in the case of information exceeding (e.g., not hurriedly) a first threshold, on the mobile user equipment an unobtrusive information display, e.g. also as a picture-in-picture display together or within another (previous) content, e.g. together or within another application on the mobile user device, e.g. are displayed. However, if the traffic situation requires an urgent, in particular an immediate reaction / action of the driver, in the case of information exceeding a second threshold (for example, urgent and important), depending on the determined need for action, a previous content, e.g. for example, the previous display can be minimized, greyed out, hidden, reduced to symbols. In this case, the at least one output unit of the mobile user device can be controlled. The output unit can be controlled in such a way that the information to be transmitted at least partially uses the resources that were used by the previous content. For example, the proportion of the display area and / or audio frequency bands or time intervals for outputting said occupant information may be required by means of a reduction of the previous content and / or the release of the corresponding resources. In particular, e.g. depending on one or more predetermined criteria, a distribution of the resources between an occupant information to be output and one or more previous, active contents are executed on the mobile user device. Also, the resources of the mobile user equipment may be used in terms of computational power, memory or wireless data transmission in an analogous manner, e.g. in favor of the issue of occupant information.
Gemäß einer weiteren optionalen Ausgestaltung bezieht sich der Handlungsbedarf des Fahrers auf die bestimmte Verkehrssituation und bestimmte vom Fahrer angeforderte oder dem Fahrers empfohlenen Handlungen werden in der Anzeige des mobilen Anwendergeräts repräsentiert.According to another optional embodiment, the driver's need for action relates to the particular traffic situation and certain actions requested by the driver or recommended to the driver are represented in the display of the mobile user device.
Bevorzugt kann eine bisherige Anzeige (die vom Fahrer beobachtet oder bedient wurde) hinsichtlich ihrer Anzeigefläche, Anzeigeschärfe, virtuell empfundener Anzeigenähe reduziert, insbesondere minimiert werden. Als die Reduktion kann in diesem Kontext auch als eine vollständige Abschaltung, ein Verstecken oder eine Verschiebung in den Hintergrund ausgeführt werden.Preferably, a previous display (which was observed or operated by the driver) can be reduced, in particular minimized, with regard to its display area, display sharpness, virtually perceived proximity to the display. In this context, the reduction can also be performed as a complete shutdown, hiding, or a shift to the background.
Gemäß einer weiteren optionalen Ausgestaltung wird erkannt, dass der Fahrer einen hörbaren Inhalt mit dem mobilen Anwendergerät hört und/oder telefoniert, und eine Ausgabe einer auditiven Information erfolgt mit Mitteln des mobilen Anwendergeräts repräsentierend die Information zu der bestimmten erkannten Verkehrssituation und/oder zu einer angeforderten oder empfohlenen Handlung des Fahrers im Zusammenhang mit der erkannten Verkehrssituation.According to a further optional embodiment, it is recognized that the driver hears and / or telephones an audible content with the mobile user device, and auditory information is output by means of the mobile user device representing the information about the particular traffic situation detected and / or requested or recommended action of the driver in connection with the detected traffic situation.
Besonders bevorzugt kann alternativ oder zusätzlich auch eine Vibration ausgegeben werden.Particularly preferably, alternatively or additionally, a vibration can also be output.
Zusammenfassend ergeben sich durch oben beschriebenes Verfahren folgende Vorteile: In summary, the method described above provides the following advantages:
Das Verfahren trägt zu einer Erhöhung der Verkehrssicherheit für den Halter eines, insbesondere zumindest teilweise automatisiert fahrenden Fahrzeugs, seiner Insassen und für andere Verkehrsteilnehmer bei. The method contributes to an increase in traffic safety for the holder of a, in particular at least partially automated moving vehicle, its occupants and other road users.
Mobile Anwendergeräte, wie Smartphones sind für viele Menschen sehr wichtig. Durch das Verfahren können diese Geräte im Fahrbetrieb eines zumindest teilweise automatisiert fahrenden Fahrzeug genutzt werden, ohne dass die Verkehrssicherheit gefährdet wird. Auch umgekehrt wird es mit der Erfindung möglich das Fahrzeug bzw. bestimmte Fahrzeugfunktionen im Fahrbetrieb zu nutzen, während ein mobiles Anwendergerät eine (möglicherweise auch dringende oder wichtige) Funktion erfüllt.Mobile user devices such as smartphones are very important to many people. By the method, these devices can be used while driving an at least partially automated moving vehicle, without the road safety is compromised. Conversely, with the invention it is possible to use the vehicle or certain vehicle functions while driving, while a mobile user device fulfills a (possibly also urgent or important) function.
Weiterhin können Schritte des Verfahrens mittels des mobilen Anwendergeräts durchgeführt werden, so das Ressourcen des mobilen Anwendergeräts (Daten, Sensorik, Rechenleistung) genutzt werden und die gegebenenfalls überlasteten Ressourcen des Fahrzeugs entlastet werden können.Furthermore, steps of the method can be carried out by means of the mobile user device, so that the resources of the mobile user device (data, sensors, computing power) can be used and the possibly overloaded resources of the vehicle can be relieved.
Das Verfahren trägt zu einem Sicherheitsgefühl auch weiterer (nicht am Fahrersitz sitzender) Insassen bei, da diese gegebenenfalls ebenfalls benachrichtigt werden.The procedure contributes to a sense of security of other (not sitting on the driver's seat) inmates, as they may also be notified.
Gemäß eines weiteren Aspekts zeichnet sich die Erfindung aus durch ein mobiles Anwendergerät, insbesondere eine Vorrichtung, umfassend zumindest ein mobiles Anwendergerät, derart eingerichtet, ein Verfahren zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs, insbesondere bei einem zumindest teilweise automatisierten Fahren (zumindest teilautomatisierten Fahrbetrieb), durchzuführen, wobei das mobile Anwendergerät derart eingerichtet ist, zumindest einen Teil des Verfahren zur Ansteuerung einer Ausgabeeinheit des mobilen Anwendergeräts abhängig von einer übermittelten Information durchzuführen. Dabei kann das mobile Anwendergerät derart eingerichtet sein, zumindest einen Teil des Verfahrens gemäß des ersten Aspekts auszuführen.According to a further aspect, the invention is characterized by a mobile user device, in particular a device comprising at least one mobile user device, set up such a method for controlling a mobile user device of a driver of a vehicle, especially in an at least partially automated driving (at least partially automated driving ), wherein the mobile user device is set up to perform at least a part of the method for controlling an output unit of the mobile user device depending on a transmitted information. In this case, the mobile user device can be configured to execute at least a part of the method according to the first aspect.
Das mobile Anwendungsgerät kann hierzu eine drahtgebundene oder drahtlose Schnittstelle, die zur Ausführung des Verfahrens eingerichtet ist, aufweisen. Vorteilhafterweise kann alternativ oder zusätzlich ein Sendeteil und/oder eine Sensorik und/oder Rechenressourcen und/oder eine Sende-Empfangseinheit und/oder Authentisierungsverfahren des mobilen Anwendergeräts im Verfahren verwendet oder mitverwendet werden.
Ein Aufbau einer (zur Ausführung des Verfahrens eingerichteten) Datenverbindung mit dem Fahrzeug kann dabei automatisch hergestellt werden, z.B. wenn erkannt wird, dass der Fahrer sein mobilen Anwendergerät während der Fahrt, insbesondere unter weiteren vorgegebenen Bedingungen zum Fahrkontext, etc.) nutzt. Beispielsweise kann eine solche Verbindung auch als ein Nachweis zur Rechtmäßigkeit der Nutzung des mobilen Anwendergeräts beim Fahren fungieren und/oder als eine technisch umgesetzte Voraussetzung für die Automatisierung der Fahrt sein.For this purpose, the mobile application device can have a wired or wireless interface which is set up to carry out the method. Advantageously, alternatively or additionally, a transmission part and / or a sensor system and / or computing resources and / or a transceiver unit and / or authentication method of the mobile user device can be used or used in the method.
A structure of a (set up for the execution of the method) data connection with the vehicle can be made automatically, for example, if it is recognized that the driver uses his mobile user device while driving, especially under further predetermined conditions for driving context, etc.). For example, such a connection may also act as a proof of legitimacy of the use of the mobile user device while driving and / or as a technically-implemented requirement for the automation of the ride.
Die zwischen dem Fahrzeug bzw. der Fahrzeugeinheit und dem zumindest einem mobilen Anwendergerät übermittelte bzw. ausgetauschte Information kann dabei eine:
- - Mit Mitteln des Fahrzeugs ermittelte und an das mobile Anwendergerät übermittelte Information, insbesondere eine im sogenannten Push-Verfahren übermittelte Information, und/oder
- - eine durch das mobile Anwendergerät, z.B. Smartphone, insbesondere auf die Erfüllung vorausbestimmter Kriterien aus dem Fahrzeug ausgelesene, z.B. explizit abgerufene Information sein;
- - Information determined by means of the vehicle and transmitted to the mobile user device, in particular information transmitted in the so-called push method, and / or
- a information read out of the vehicle, for example explicitly retrieved by the mobile user device, eg smartphone, in particular for the fulfillment of predetermined criteria;
Im Verfahren kann auch zwischen unterschiedlichen Arten mobiler Anwendergeräte unterschieden werden, wobei z.B. unterschiedliche Ansteuerungen der Ausgabeeinheiten bei den verschiedenen Arten mobiler Anwendergeräte vorgesehen sind.The method can also distinguish between different types of mobile user equipment, e.g. different controls of the output units are provided in the different types of mobile user equipment.
Das mobile Anwendungsgerät kann im Rahmen dieser Beschreibung ein Smartphone, Tablet, Smart-Watch, Smart-Closes, insbesondere ein Kleidungsstück mit einer in das Kleidungsstück integrierter elektronischer Vorrichtung, ein Sprachcomputer, Sprachsteuerungssystem, Motorradhelm, z.B. ein Motorradhelm mit einer integrierten Mensch-Maschine-Schnittstelle, eine Datenbrille für den Fahrer des Fahrzeugs, ein mit dem Fahrzeug mitführbarer und an das Fahrzeug mit einer Datenschnittstelle verbindbare Fahrzeugcomputer, ein externes Navigationsgerät, oder eine sinngemäßer Weiterbildung solcher Vorrichtungen sein.For the purposes of this description, the mobile application device may include a smartphone, tablet, smart watch, smart closes, in particular a garment with an electronic device integrated in the garment, a voice computer, voice control system, motorcycle helmet, e.g. a motorcycle helmet with an integrated man-machine interface, a data glasses for the driver of the vehicle, a vehicle mitführbarer and connectable to the vehicle with a data interface vehicle computer, an external navigation device, or an analogous development of such devices.
Beispielsweise kann die Steuerung einer oder mehreren Funktionen oder Inhalte des mobilen Anwendergeräts, abhängig von der Ausführung eines weiteren Merkmals des Verfahrens erfolgen. Beispielsweise wenn erkannt wird, dass das Anwendergerät in einem zumindest teilweise automatisiert fahrbaren bzw. fahrbaren Kraftfahrzeug mitgeführt wird und/oder es am Fahrersitz aktiv betrieben wird, werden bestimmte Funktionen des mobilen Anwendergeräts, betrieben abhängig von der Bereitschaft zur Ausführung des Verfahrens. Beispielsweise werden bestimmte Funktionen, insbesondere bestimmte Anwendungen, Apps, etc. nur oder in einem erweiterten Umfang im Fahrbetrieb des Fahrzeugs betreibbar, wenn eine Datenverbindung zur Ausführung des Verfahrens hergestellt wird oder eine Bereitschaft zum Übermitteln der besagten Information oder zur Ausführung der Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts sichergestellt wird.For example, the control of one or more functions or contents of the mobile user device, depending on the execution of another feature of the method. For example, if it is detected that the user device is carried in an at least partially automated mobile or mobile motor vehicle and / or it is actively operated at the driver's seat, certain functions of the mobile user device, operated depending on the willingness to perform the method. For example, certain functions, in particular certain applications, apps, etc., can be operated only or to a greater extent while the vehicle is being driven, if a data connection is established for carrying out the method or a readiness for transmitting the said information or for executing the control of the output unit of the mobile user equipment is ensured.
Bevorzugt wird das Verfahren abhängig von einer, den Automatisierungsgrad der Fahrt des Fahrzeugs repräsentierenden Größe ausgeführt. Beispielsweise wird das Verfahren nur oder vorwiegend oberhalb eines ersten Grenzwerts und/oder unterhalb eines zweiten der genannten Größe ausführt.The method is preferably carried out as a function of a variable representing the degree of automation of the drive of the vehicle. By way of example, the method is carried out only or predominantly above a first limit value and / or below a second one of the specified size.
Die den Automatisierungsgrad der Fahrt des Fahrzeugs repräsentierenden Größe unterschiedliche Aspekte des Automatisierungsgrads, beispielsweise in Form von Codewerten repräsentieren. Der Automatisierungsgrad bzw. das Maß des Automatisierungsgrads kann dabei qualitative und/oder quantitative Maße des Automatisierungsgrads kennzeichnen. Beispielsweise können die dem Fachmann bekannten Automatisierungsgrade auf der Scala 0 - 5, etwa von VDA (= Verband Deutscher Automobilhersteller) berücksichtigt werden.The variables representing the degree of automation of the drive of the vehicle represent different aspects of the degree of automation, for example in the form of code values. The degree of automation or the degree of automation can characterize qualitative and / or quantitative measures of the degree of automation. For example, the degrees of automation known to the person skilled in the art can be taken into account on the scale 0-5, for example by VDA (= Association of German Automobile Manufacturers).
Unterschiedliche Aspekte des Automatisierungsgrades der Fahrt des Fahrzeugs können jeweils zweckmäßig berücksichtigt werden. Insbesondere können Aspekte des Automatisierungsgrads, die zumindest teilweise unabhängig voneinander aktiviert oder betrieben werden, einzeln oder kumuliert berücksichtigt werden. Dabei können auch Automatisierungsgrade für zumindest zwei unterschiedliche Aspekte der Automatisierung der Bewegung des Fahrzeugs und/oder für zwei oder mehrere unterschiedliche Fahrerassistenzfunktionen des Fahrzeugs angewandt werden, z.B.
- - Längsführung des Fahrzeugs und/oder
- - Querführung des Fahrzeugs und/oder
- - Durchführung eines Spurwechsels und/oder
- - Durchführung eines Überholvorgangs und/oder
- - Fahrerinformation, insbesondere im Zusammenhang mit der Fahrzeugführung.
- - Longitudinal guidance of the vehicle and / or
- - Transverse guidance of the vehicle and / or
- - Carrying out a lane change and / or
- - Carrying out an overtaking process and / or
- Driver information, in particular in connection with the vehicle guidance.
Beispielsweise kann der Automatisierungsgrad bzw. die den Automatisierungsgrad der Fahrt des Fahrzeugs repräsentierende Größe zumindest teilweise in Bezug auf einen vorausliegenden Fahrbahnabschnitt, z.B. von 10, 20, 50, 100, 150 Metern berücksichtigt werden.For example, the degree of automation or the variable representing the degree of automation of the drive of the vehicle may be at least partially determined with reference to a preceding roadway section, e.g. be considered by 10, 20, 50, 100, 150 meters.
Bevorzugt wird mit der Erfindung ein Betrieb des mobilen Anwendergeräts im Innenraum des Fahrzeugs beim Fahrbetrieb des Fahrzeugs (dazu zählt auch ein Park- und Rangierbetrieb des Fahrzeugs) adressiert. Daraus ergeben sich zahlreiche explizit beschriebene sowie weitere vom Fachmann unschwer nachvollziehbare Vorteile. Beispielsweise kann das mobile Anwendergerät dabei in Fahrbetrieb des Fahrzeugs, ggf. auch vom Fahrer bzw. dem Insassen am Fahrersitz des Fahrzeugs (für diverse Zwecke) genutzt werden.Preferably, with the invention, an operation of the mobile user device in the interior of the vehicle when driving the vehicle (this also includes a parking and maneuvering operation of the vehicle) addressed. This results in numerous explicitly described as well as other advantages easily understandable by the skilled person. For example, the mobile user device can be used while driving the vehicle, possibly also by the driver or the occupant at the driver's seat of the vehicle (for various purposes).
Alternativ oder zusätzlich kann das Verfahren auch derart betrieben werden, dass das mobile Anwendergerät zumindest zeitweise außerhalb des Fahrzeugs, insbesondere in der Nähe des Fahrzeugs befindet. Beispielsweise kann das mobile Anwendergerät betrieben werden, während das besagte Fahrzeug einen zumindest teilweise automatisierten Park- oder Rangiervorgang ausführt. D.h. der Insasse des Fahrzeugs kann sich z.B. zeitweise außerhalb des Fahrzeugs befinden.Alternatively or additionally, the method can also be operated such that the mobile user device is at least temporarily outside the vehicle, in particular in the vicinity of the vehicle. For example, the mobile user device may be operated while said vehicle is performing an at least partially automated parking or maneuvering operation. That the occupant of the vehicle may e.g. temporarily outside the vehicle.
Auch wenn in diesem Dokument von einem „Fahrer“ die Rede ist, kann es auch auf mehrere Fahrer bzw. fahrberechtigte Insassen eines, insbesondere zumindest teilweise automatisiert fahrenden, Fahrzeugs angewandt werden. Erfindungsgemäß kann ein Fahrer, ein etwa gleichberechtigter zweiter Fahrer und/oder ein Co-Fahrer definiert werden, der z.B. eine geringere, untergeordnete oder abweichend definierte Bedienmöglichkeiten und/oder Berechtigung zur Bedienung oder Steuerung des Fahrzeugs innehat. Eine solche Rolle etwa des ersten Fahrers, eines zweiten Fahrers, eines Co-Fahrers kann in der Erfindung abhängig von dem Fahrzeugsitz, an dem der zumindest eine Insasse sitzt, gewählt werden. Auch kann eine solche Rolle, z.B. je nach Verkehrssituation und/oder dem Handlungsbedarf zwischen zumindest zwei Insassen des Fahrzeugs aufgeteilt werden.Even if this document refers to a "driver", it can also be applied to a plurality of drivers or passengers with a right to drive, in particular a vehicle that is at least partially automated. According to the invention, a driver, an approximately equal second driver and / or a co-driver may be defined, e.g. a lower, subordinate or differently defined operating options and / or authorization to operate or control the vehicle holds. Such a role of, for example, the first driver, a second driver, a co-driver may be selected in the invention depending on the vehicle seat on which the at least one occupant sits. Also, such a role, e.g. Depending on the traffic situation and / or the need for action between at least two occupants of the vehicle can be divided.
Ein Anwendungsfall ist hierbei, dass im Falle eines vom Fahrzeug erkannten (dringenden) Handlungsbedarfs auch ein Beifahrer benachrichtigt wird, falls beispielsweise der Fahrer bei einem hochautomatisiertem Fahren eingeschlafen ist.One application here is that in the event of an (urgent) need for action identified by the vehicle, a co-driver is also notified if, for example, the driver has fallen asleep during highly automated driving.
Auf die an den mobilen Anwendergerät eines weiteren Insassen z.B. an den Beifahrer übertragene Information kann hierbei beispielsweise eine Insasseninformation ausgegeben werden, die eine Aufforderung zum Wecken oder Erquicken des Fahrers kennzeichnet und/oder eine Aufforderung sein, dem Fahrer einen Hinweis zu der Aufmerksamkeit (z.B. zu bestimmten Gegebenheiten innerhalb oder außerhalb des Fahrzeugs) zu geben. Falls ein eiliger Handlungsbedarf besteht und/oder kann eine Insasseninformation an den weiteren Insassen ausgegeben werden, zumindest eine bestimmte Bedienaktion des Fahrzeugs zu übernehmen, insbesondere eine oder mehrere bestimmte, z.B. innerhalb der Information gekennzeichneten, Bedienhandlungen im Fahrzeug auszuführen.To the mobile user equipment of another occupant, e.g. Information transmitted to the front passenger may in this case be output, for example, to occupant information which indicates a request to wake or refresh the driver and / or be a request to give the driver an indication of the driver's attention (eg to specific conditions inside or outside the vehicle) , If an urgent need for action exists and / or an occupant information can be output to the other occupants to take over at least one specific operating action of the vehicle, in particular one or more specific, e.g. within the information marked to perform operator actions in the vehicle.
Eine mit dem mobilen Anwendergerät an den ersten Fahrer und einen zweiten Fahrer ausgegebene Insasseninformation kann ich derart unterscheiden, dass die Form, Detaillierungsgrad, entsprechende Abbildungen und Kommentare abhängig von dem Alter, Fahrkenntnissen, Fahrberechtigung, Zuständigkeit für die vorliegende Fahrt unterschiedlich gewählt werden. Z.B. kann die an den besagten weiteren Insassen, der z.B. selbst keine Fahrausbildung oder Fahrerlaubnis hat, ausgegebene Insasseninformation (im Gegensatz von der Information an den Fahrer) eine Handlungsanleitung, z.B. zur Ausführung einer Bedienaktion umfasst.I can distinguish a passenger information output by the mobile user device to the first driver and a second driver such that the shape, level of detail, corresponding illustrations and comments depend on the Age, driving skills, driving authorization, responsibility for the present ride are chosen differently. For example, the occupant information output to the said additional occupant, who himself does not have any driver training or driving license (as opposed to the information to the driver), comprises an action instruction, eg for carrying out an operator action.
Auch kann die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts eines zweiten Fahrers abhängig von der tatsächlich erfolgten Reaktion auf die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts des ersten Fahrers bzw. abhängig von der weiteren Information von dem mobilen Anwendergerät des ersten Fahrers erfolgen.Also, the control of the output unit of the mobile user equipment of a second driver may be dependent on the actual response to the control of the output unit of the mobile user equipment of the first driver or depending on the further information from the mobile user equipment of the first driver.
Insbesondere kann dabei ein bestimmter Insasse als eine bestimmte Person, z.B. der Halter des bestimmten mobilen Anwendergeräts, oder als ein Insasse an einem bestimmten Sitz, z.B. am Beifahrersitz des Fahrzeugs erkannt werden. Daraufhin können die jeweiligen Fahrerinformationen bzw. Insasseninformationen passend erzeugt und/oder passend adressiert werden. Dabei kann es sich bei der Insasseninformation für einen weiteren (zweiten) Fahrer um eine zweite Insasseninformation handeln, die sich beispielsweise von der (ersten) Insasseninformation für den (ersten) Fahrer unterscheidet und/oder Zeitversetzt zu der ersten Insasseninformation an den zweiten mobilen Anwendergerät(des zweiten Fahrers)ausgegeben wird.In particular, a particular occupant may be considered a particular person, e.g. the owner of the particular mobile user device, or as an occupant at a particular seat, e.g. be recognized in the passenger seat of the vehicle. The respective driver information or occupant information can then be suitably generated and / or appropriately addressed. In this case, the occupant information for a further (second) driver may be a second occupant information that differs, for example, from the (first) occupant information for the (first) driver and / or time offset from the first occupant information to the second mobile user device ( the second driver) is output.
Im Falle einer nahezu vollautomatisierten Fahrt des Fahrzeugs kann ein Insasse als der (erste bzw. zweite) Fahrer angenommen werden. Beispielsweise kann ein Passagier eines zumindest größtenteils automatisiert fahrenden Taxi oder Pendelfahrzeugs im Sinne der Erfindung als Fahrer gelten.In the case of a nearly fully automated drive of the vehicle, an occupant may be accepted as the (first or second) driver. For example, a passenger of an at least largely automated taxi or shuttle vehicle in the context of the invention may be considered a driver.
Bevorzugt wird die Ansteuerung des mobilen Anwendergeräts bzw. der Ausgabeeinheit des mobilen Anwendergeräts in der angegebenen Art und Weise nicht mehr ausgeführt bzw. die mit der Ansteuerung veranlasste Veränderung nicht mehr bewirkt, aufgehoben z.B. explizit aufgehoben, rückgängig gemacht, wenn ermittelt wird, dass die ermittelte Verkehrssituation (wieder) eine vergrößerte Zuwendung der Aufmerksamkeit zu dem mobilen Anwendergerät oder Inhalten bzw. Interaktionen am mobilen Anwendergerät die zu einem von der vorliegenden Fahrt, Fahrkontext, Fahrzeug unabhängig ist, erlaubt. Beispielsweise wenn keine Aufmerksamkeit des Fahrers an der Umgebung des Fahrzeugs, an einer oder mehreren Fahraufgaben nicht mehr (unbedingt oder dringend) benötigt wird oder wenn kein (bestimmter) Handlungsbedarf (mehr) besteht, wird an der zumindest einer Ausgabeeinheit keine veränderte Ausgabe mehr veranlasst.Preferably, the activation of the mobile user device or the output unit of the mobile user device in the specified manner is no longer carried out or the change caused by the drive is no longer effected, canceled, for example. explicitly canceled, if it is determined that the determined traffic situation allows (again) an increased attention to the mobile user device or content or interactions at the mobile user device that is independent of the current ride, driving context, vehicle. For example, if no attention of the driver to the environment of the vehicle, to one or more driving tasks is no longer required (unconditionally or urgently), or if there is no longer a need for action, at least one output unit will no longer cause any changed output.
Beispielsweise kann ermittelt werden, dass eine Kritikabilität, Dringlichkeit, Gefahrenpotential, der ermittelten, insbesondere prädizierten Verkehrssituation sich z.B. im Vergleich zu einem vorausbestimmten Maß oder im Vergleich zu einer Erwartung verringert hat oder zumindest mit einer hohen Wahrscheinlichkeit, verringern wird. Insbesondere kann eine Information ermittelt werden und zu dem mobilen Anwendergerät übermittelt werden, die (explizit) kennzeichnet, dass die mit der Ansteuerung veranlasste Veränderung nicht mehr bewirkt werden soll, aufgehoben, z.B. explizit ganz oder in stufenweise aufgehoben werden soll. Mit anderen Worten kann im Verfahren auch eine (explizite) Information an das mobile Anwendergerät übermittelt werden, die eine Art „Entwarnung“ übermittelt werden. Daraufhin kann eine unmittelbare oder mittelbare Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts aufgehoben werden oder derart erfolgen, dass zumindest eine Reduktion der zuvor veranlassten Veränderungen erfolgt. Beispielsweise können daraufhin die bisher ausgegebene Inhalte wiederhergestellt oder etwa mit den bisherigen Parametern (weiter) ausgegeben werden und/oder zur Ausgabe geplante (oder in einer sogenannten Warteschlange stehende oder unterbrochene) Inhalte ausgegeben werden. Dabei kann das Aufheben oder nicht mehr in der beschriebenen Art und Weise das Ansteuern und/oder die Ausgabe eines bisherigen veränderten (bis dato unterbrochenen, verkleinerten, pausierten) Inhalts, z.B. in einer bis zuletzt geltenden Art und Weise, abhängig von der (neuen oder aktualisierten) zu dem mobilen Anwendergerät übermittelten Information veranlasst werden.For example, it can be determined that a criticism, urgency, danger potential, the determined, in particular predicated, traffic situation can be found, for example, in compared to a predetermined amount or in comparison to an expectation has decreased or at least with a high probability, will decrease. In particular, information can be determined and transmitted to the mobile user device, which (explicitly) indicates that the change caused by the drive should no longer be effected, canceled, e.g. should be explicitly canceled in whole or in stages. In other words, (explicit) information to the mobile user device can be transmitted in the process, which are transmitted a kind of "all clear". Thereupon, a direct or indirect control of the output unit of the mobile user device can be canceled or carried out such that at least a reduction of the previously caused changes takes place. For example, the previously output contents can then be restored or output (for example) with the previous parameters and / or output planned (or queued or interrupted) for output. In this case, canceling or no longer in the described manner the driving and / or the output of a previously changed (until now interrupted, reduced, paused) content, e.g. in a most recent manner, depending on the (new or updated) information transmitted to the mobile user equipment.
Gemäß eines weiteren Aspekts zeichnet sich die Erfindung aus durch ein Computerprogramm, insbesondere ein Computerprogrammprodukt umfassend ein Computerprogramm, wobei das Computerprogramm ausgebildet ist, bei seiner Ausführung auf einer Recheneinheit des Fahrzeugs und/oder des mobilen Anwendergeräts das Verfahren nach einem der Ansprüche 1-12 durchzuführen.According to a further aspect, the invention is characterized by a computer program, in particular a computer program product comprising a computer program, wherein the computer program is designed to carry out the method according to one of claims 1-12 when executed on a computing unit of the vehicle and / or the mobile user device ,
Gemäß eines weiteren Aspekts zeichnet sich die Erfindung aus durch eine Fahrzeugeinheit oder ein Fahrzeug umfassend die besagte Fahrzeugeinheit. Beispielsweise kann die Fahrzeugeinheit ein Steuergerät des Fahrzeugs, eine verbaute ins Fahrzeug verbaute und/oder mit dem Fahrzeug verbundene Recheneinheit sein, wobei die Fahrzeugeinheit zur Ausführung zumindest des Verfahrens zusammen mit einem im Fahrzeug mitführbaren mobilen Anwendergerät ausgestaltet ist.According to a further aspect, the invention is characterized by a vehicle unit or a vehicle comprising said vehicle unit. By way of example, the vehicle unit may be a control unit of the vehicle, a built-in computing unit installed in the vehicle and / or connected to the vehicle, wherein the vehicle unit is configured to execute at least the method together with a mobile user terminal that can be carried in the vehicle.
Auch kann die Erfindung bei einem zumindest teilweise bzw. größtenteils manuell fahrenden (bzw. fahrbaren) Fahrzeug angewandt werden. Beispielsweise kann das Verfahren auch bei einer mit einem Fahrerassistenzsystem unterstützten bzw. unterstützbaren Fahrt des Fahrzeugs ausführbar sein.Also, the invention can be applied to an at least partially or mostly manually moving (or mobile) vehicle. For example, the method can also be used with a a driver assistance system supported or supportable ride the vehicle be executable.
Ausführungsbeispiele der Erfindung sind im Folgenden ohne Einschränkung der Allgemeinheit anhand der schematischen Zeichnungen näher erläutert. Es zeigen:
-
1 ein Ablaufdiagramm zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs im Fahrbetrieb; und -
2 und3 ein System zur Ansteuerung eines mobilen Anwendergeräts eines Fahrers eines Fahrzeugs im Fahrbetrieb des Fahrzeugs.
-
1 a flowchart for controlling a mobile user device of a driver of a vehicle while driving; and -
2 and3 a system for controlling a mobile user device of a driver of a vehicle while driving the vehicle.
Die
Das Programm kann von einer Vorrichtung oder von mehreren Vorrichtungen, insbesondere im Rahmen eines sogenannten verteilten elektronischen Systems abgearbeitet werden. Die Vorrichtung umfasst hierfür insbesondere zumindest eine Recheneinheit, einen Programm- und Datenspeicher, sowie beispielsweise eine oder mehrere Kommunikationsschnittstellen.The program can be executed by one device or by several devices, in particular in the context of a so-called distributed electronic system. For this purpose, the device comprises in particular at least one arithmetic unit, a program and data memory, as well as, for example, one or more communication interfaces.
Das Programm wird in einem Schritt
In einem Schritt
In einem Schritt
In einem Schritt
Einen Schritt bei dem festgestellt wird, dass das mobile Anwendergerät im Fahrzeug bzw. im Fahrzeuginnenraum mitgeführt wird.A step in which it is determined that the mobile user device is carried in the vehicle or in the vehicle interior.
Einen Schritt bei dem festgestellt wird, dass das mobile Anwendergerät (während der Fahrt des Fahrzeugs) genutzt, insbesondere bedient wird. Dabei kann die Bedienart, Bedienhäufigkeit bewertet und berücksichtigt werden.A step in which it is determined that the mobile user device is used (in particular while the vehicle is traveling), in particular being operated. The operating mode, operating frequency can be evaluated and taken into account.
Einen Schritt umfassend:
- - Erfassung einer Verkehrssituation und/oder Ermitteln eines bestimmten Handlungsbedarfs des Fahrers des Fahrzeugs im Fahrbetrieb,
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von Verkehrssituation und/oder bestimmten Handlungsbedarfs.
- Detecting a traffic situation and / or determining a specific need for action of the driver of the vehicle while driving,
- - Control of the output unit of the mobile user device depending on the traffic situation and / or specific need for action.
Einen Schritt umfassend:
- - Erkennen, dass die Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers ein zweckmäßiges Maß unterschreitet, und
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von der erfassten Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers.
- Recognizing that the driver's attention to a driving task and / or driving activity of the driver is below a reasonable level, and
- - Driving the output unit of the mobile user device depending on the detected attention of the driver with respect to a driving task and / or driving activity of the driver.
Einen Schritt umfassend:
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers an seinem mobilen Anwendergerät, insbesondere, dass ein mobiles Anwendergerät des Fahrers bedient wird,
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers in Bezug auf eine Fahraufgabe und/oder Fahraktivität des Fahrers,
- - Ermitteln eines Maßes der Aufmerksamkeit des Fahrers in Bezug auf eine weitere Beschäftigung, insbesondere eine Kommunikation mit einer Person, und daraufhin:
- - Entscheidung über die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts.
- Determining a measure of the driver's attention at his mobile user device, in particular that a driver's mobile user device is being operated,
- Determining a measure of the driver's attention with respect to a driver's driving task and / or driving activity,
- - Determine a measure of the driver's attention with regard to further employment, in particular communication with a person, and thereupon:
- - Decision on the control of the output unit of the mobile user device.
Einen Schritt umfassend:
- - Erkennen eines vorliegenden Anwendungsfalls des mobilen Anwendergeräts, und/oder zumindest eines durch die Nutzung des mobilen Anwendergeräts beanspruchten Wahrnehmungskanals des Fahrers und daraufhin,
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem erkannten Anwendungsfall des mobilen Anwendergeräts und/oder des ermittelte beanspruchten Wahrnehmungskanals des Fahrers.
- Detecting a present application case of the mobile user device, and / or at least one perception channel of the driver claimed by the use of the mobile user device, and then
- - Driving the output unit of the mobile user device depending on the detected application of the mobile user device and / or the determined claimed perception channel of the driver.
Einen Schritt umfassend:
- - Erkennen, zumindest eines bestimmten Wahrnehmungskanals des Fahrers der durch das mobile Anwendergerät, und insbesondere Erkennen der Intensität in der zumindest ein Wahrnehmungskanal, beansprucht wird und daraufhin,
- - Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von dem erkannten Wahrnehmungskanal, uns insbesondere abhängig von der erkannten Intensität.
- Detecting, at least one particular perception channel of the driver, which is claimed by the mobile user device, and in particular recognizing the intensity in the at least one perception channel, and thereupon,
- - Control of the output unit of the mobile user device depending on the detected perceptual channel, us in particular depending on the detected intensity.
Einen Schritt, bei dem
- - eine Größe repräsentierend einen Automatisierungsgrad des Fahrzeugs ermittelt oder prädiziert wird, und
- - die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von der ermittelten Größe repräsentierend den Automatisierungsgrad erfolgt.
- - a size representing a degree of automation of the vehicle is determined or predicted, and
- - The control of the output unit of the mobile user device depending on the determined size representing the degree of automation.
Einen Schritt, bei dem die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts eine Veränderung eines nicht auf das Fahren bezogenen Inhalts betrifft.
Einen Schritt, bei dem abhängig von einer übermittelten Information im Zusammenhang mit einer erkannten Verkehrssituation bzw. mit einem Handlungsbedarf des Fahrers des Fahrzeugs:
- - eine Veränderung eines aktuell ausgegebenen Inhalts, z.B. einer aktuellen Anzeige des mobilen Anwendergeräts, z.B. eine Minimierung einer ablenkenden Anzeige, und/oder ein Erzeugen einer weiteren Anzeige auf dem mobilen Anwendergerät im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs, und/oder
- - eine Veränderung einer Audioausgabe des mobilen Anwendergeräts, z.B. eine Reduktion der Lautstärke oder Pausieren einer auditiven Kommunikation, und/oder eine Ausgabe eines Sounds im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs mit dem mobilen Anwendergerät, und/oder
- - eine Ansteuerung eines Aktors des mobilen Anwendergeräts, insbesondere eines Umwuchtaktors, Vibrationsaktors, Beschleunigungsaktors im Zusammenhang mit der erkannten Verkehrssituation bzw. mit dem Handlungsbedarf des Fahrers des Fahrzeugs mit dem mobilen Anwendergerät.
A step in which, depending on a transmitted information in connection with a detected traffic situation or with a need for action of the driver of the vehicle:
- - A change of a currently output content, such as a current display of the mobile user device, such as minimizing a distracting display, and / or generating a further display on the mobile user device in connection with the detected traffic situation or with the need for action of the driver of the vehicle , and or
- a change in an audio output of the mobile user device, eg a reduction of the volume or pausing of an auditory communication, and / or an output of a sound in connection with the detected traffic situation or with the action requirement of the driver of the vehicle with the mobile user device, and / or
- - An activation of an actuator of the mobile user device, in particular a Umwuchtaktors, vibration actuator, acceleration actuator in connection with the detected traffic situation or with the need for action of the driver of the vehicle with the mobile user device.
Einen Schritt, bei dem die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts repräsentierend ist für:
- - eine Aufforderung zur Zuwendung der Fahreraufmerksamkeit zu der Fahrzeugumgebung,
- - eine Aufforderung zur Zuwendung der Fahreraufmerksamkeit zu einer Information des Fahrzeugs, insbesondere zu einer Anzeige des Fahrzeugs, insbesondere betreffend eine Fahrzeugführung,
- - eine Aufforderung zum Greifen des Lenkrads, insbesondere als ein sogenanntes „Hands-On-Request“
- - eine Aufforderung zum Antippen oder Bedienen eines Pedals des Fahrzeugs oder einer Bestätigung der Bedienbereitschaft zum Bedienen zumindest eines Pedals durch den Fahrer,
- - eine Aufforderung zur Veränderung der Fahrzeuggeschwindigkeit,
- - eine Aufforderung zum Einhalten eines, insbesondere seitlichen Abstands,
- - eine Aufforderung zum Mitwirken des Fahrers bei einem bestimmten Manöver,
- - eine Aufforderung zur Entscheidung des Fahrers in Bezug auf einem bestimmten Manöver,
- - eine Übernahmeaufforderung zumindest eines Teils der Fahrzeugführung durch den Fahrer.
- an invitation to attract driver attention to the vehicle environment,
- a request for the attention of the driver to an information of the vehicle, in particular to a display of the vehicle, in particular concerning a vehicle guidance,
- a request to grasp the steering wheel, in particular as a so-called "hands-on request"
- a request to tap or operate a pedal of the vehicle or a confirmation of operator readiness to operate at least one pedal by the driver,
- a request to change the vehicle speed,
- - a request to maintain a distance, in particular lateral,
- a request for the driver to participate in a particular maneuver,
- an invitation to the driver's decision in relation to a particular maneuver,
- a takeover request for at least part of the vehicle guidance by the driver.
Einen Schritt, bei dem die Ansteuerung der Ausgabeeinheit des mobilen Anwendergeräts abhängig von einem oder mehrerer vorausbestimmten Kriterien in Bezug auf die ermittelte Verkehrssituation und/oder dem Ermitteln eines bestimmten Handlungsbedarfs zumindest eines Fahrers eines zumindest teilweise automatisiert fahrenden Fahrzeugs erfolgt.A step in which the control of the output unit of the mobile user device is dependent on one or more predetermined criteria with respect to the determined traffic situation and / or the determination of a specific need for action of at least one driver of an at least partially automated driving vehicle.
Einen Schritt, bei dem ein aktiver (z.B. bis dato gültiger oder zur Ausgabe geplanter) Anzeigeinhalt des mobilen Anwendergeräts reduziert, pausiert oder aufbereitet wird, und/oder eine weitere Anzeige angezeigt wird, die eine betreffende Verkehrssituation und/oder einen bestimmten mit der Verkehrssituation verbundenen Handlungsbedarf des Fahrers des Fahrzeugs zumindest teilweise repräsentiert.A step of reducing, pausing or editing an active (eg, date valid or scheduled) display content of the mobile user device, and / or displaying a further indication relating to a traffic situation and / or a particular traffic situation Action requirement of the driver of the vehicle at least partially represented.
Einen Schritt, bei dem unterschiedliche Schwellenwerte, hinsichtlich der Wichtigkeit der Verkehrssituation und/oder Wichtigkeit und Eiligkeit des Handlungsbedarfs des Fahrers unterschieden werden und daraufhin unterschiedliche Ansteuerungen eines oder mehrerer Ausgabeeinheiten des mobilen Anwendergeräts ausgeführt werden.A step in which different threshold values, with regard to the importance of the traffic situation and / or importance and urgency of the driver's need for action, are distinguished, and then different actuations of one or more output units of the mobile user equipment are carried out.
Einen Schritt, bei dem sich der Handlungsbedarf des Fahrers auf die bestimmte Verkehrssituation bezieht und bestimmte vom Fahrer angeforderte oder dem Fahrers empfohlenen Handlungen in der Anzeige des mobilen Anwendergeräts repräsentiert werden.A step in which the driver's need for action is related to the particular traffic situation and certain actions requested by the driver or recommended to the driver are represented in the display of the mobile user equipment.
Einen Schritt, bei dem
- - erkannt wird, dass der Fahrer einen hörbaren Inhalt mit dem mobilen Anwendergerät hört und/oder telefoniert, und
- - eine Ausgabe einer auditiven Information mit Mitteln des mobilen Anwendergeräts repräsentierend die Information zu der bestimmten erkannten Verkehrssituation und/oder zu einer angeforderten oder empfohlenen Handlung des Fahrers im Zusammenhang mit der erkannten Verkehrssituation erfolgt.
- it is recognized that the driver is listening to and / or talking to audible content with the mobile user device, and
- - An output of an auditory information with means of the mobile user device representing the information about the particular detected traffic situation and / or to a requested or recommended action of the driver takes place in connection with the detected traffic situation.
Die
Optional können die mobilen Anwendergeräte
Dabei werden diese unterschiedlichen Sitzen (und dadurch jeweils einem oder mehreren Insassen, z.B. Fahrer, Beifahrer, bestimmter Insasse) zugeordnet.These are assigned to different seats (and thereby to one or more occupants, e.g., driver, passenger, particular occupant).
Die
Bei dem Fahrzeug
Das zumindest eine mobile Anwendergerät
Das Maß an Aufmerksamkeit MA wird ermittelt, insbesondere mit Mitteln des Fahrzeuges
Anschließend erfolgt eine Ansteuerung einer Ausgabeeinheit des mobilen Anwendergeräts
Optional wird von dem mobilen Anwendergerät
Die Insasseninformation II wird mit einer Ausgebeeinheit AE des mobilen Anwendergeräts
Ferner umfasst die Erfindung, dass eine oder mehrere in diesem Dokument beschriebene Funktionalität(en) nicht oder in einer wesentlich veränderten Form ausgeführt wird bzw. werden, wenn erkannt wird, dass das mobile Anwendergerät
Die Schritte können von einer Vorrichtung des Fahrzeugs
Claims (17)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102017215407.1A DE102017215407A1 (en) | 2017-09-04 | 2017-09-04 | Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102017215407.1A DE102017215407A1 (en) | 2017-09-04 | 2017-09-04 | Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102017215407A1 true DE102017215407A1 (en) | 2019-03-07 |
Family
ID=65364135
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102017215407.1A Withdrawn DE102017215407A1 (en) | 2017-09-04 | 2017-09-04 | Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102017215407A1 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102012201513A1 (en) * | 2012-02-02 | 2013-08-08 | Bayerische Motoren Werke Aktiengesellschaft | Warning device in a motor vehicle for warning a driver |
| DE102015103999A1 (en) * | 2014-04-01 | 2015-10-01 | Ford Global Technologies, Llc | Load Estimation for Mobile Function Integration |
| DE102014214078A1 (en) * | 2014-07-18 | 2016-01-21 | Continental Automotive Gmbh | Method for interacting with a driver of a vehicle during automated driving |
| DE102015204287A1 (en) * | 2015-03-10 | 2016-09-15 | Robert Bosch Gmbh | Method and system for operating a vehicle and control unit |
| US20170132016A1 (en) * | 2015-03-13 | 2017-05-11 | Project Ray Ltd. | System and method for adapting the user-interface to the user attention and driving conditions |
-
2017
- 2017-09-04 DE DE102017215407.1A patent/DE102017215407A1/en not_active Withdrawn
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102012201513A1 (en) * | 2012-02-02 | 2013-08-08 | Bayerische Motoren Werke Aktiengesellschaft | Warning device in a motor vehicle for warning a driver |
| DE102015103999A1 (en) * | 2014-04-01 | 2015-10-01 | Ford Global Technologies, Llc | Load Estimation for Mobile Function Integration |
| DE102014214078A1 (en) * | 2014-07-18 | 2016-01-21 | Continental Automotive Gmbh | Method for interacting with a driver of a vehicle during automated driving |
| DE102015204287A1 (en) * | 2015-03-10 | 2016-09-15 | Robert Bosch Gmbh | Method and system for operating a vehicle and control unit |
| US20170132016A1 (en) * | 2015-03-13 | 2017-05-11 | Project Ray Ltd. | System and method for adapting the user-interface to the user attention and driving conditions |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE102017110283B4 (en) | Controlling functions and outputs of autonomous vehicles based on the position and attention of occupants | |
| DE102017130414B4 (en) | VEHICLE SYSTEMS FOR CONTEXT-DEPENDENT ASSESSMENT | |
| DE102017215406A1 (en) | A method, mobile user device, computer program for generating visual information for at least one occupant of a vehicle | |
| EP3752401B1 (en) | Method for selecting a driving profile of a motor car, driving assistance system and motor vehicle | |
| DE102017215404A1 (en) | Method, mobile user device, system, computer program for controlling a mobile user device of an occupant of a vehicle | |
| DE102017215405A1 (en) | Method, mobile user device, system, computer program for controlling a mobile user device of an occupant of a vehicle | |
| DE60124937T2 (en) | METHOD AND DEVICE FOR IMPROVING DRIVER BEHAVIOR IN A VEHICLE | |
| DE102015201456B4 (en) | Method and system for issuing a warning message in a vehicle | |
| DE102019201407A1 (en) | Method and device for controlling a driver's attention | |
| DE102014013960A1 (en) | Method for operating at least one driver assistance device of a motor vehicle and system having a driver assistance device | |
| DE102015116280B4 (en) | vehicle information presentation device | |
| DE102009018074A1 (en) | Method for managing telephone calls in a vehicle | |
| DE102007025531A1 (en) | Line of sight-controlled display system for motor vehicle i.e. car, has control unit controlling display of information based on line of sight duration of detected line of sight relative to display of information on display area | |
| WO2016162237A1 (en) | Control for an electronic multi-function apparatus | |
| DE102019105490A1 (en) | Method, device and computer program for operating a vehicle using a mobile user device | |
| DE102016007483B4 (en) | Method for controlling at least one motor vehicle component and a system comprising a motor vehicle and an attractable device | |
| WO2021223933A1 (en) | Motor vehicle, control device and method for controlling a motor vehicle for gaze-direction-based reduction of kinetosis | |
| DE102017200436B4 (en) | Method for operating a driver assistance system of a motor vehicle | |
| EP4028819B1 (en) | Method for operating a head-mounted display apparatus in a motor vehicle, control device, and head-mounted display apparatus | |
| DE102015206334A1 (en) | Controlling a function of an electronic multifunction device used in a vehicle | |
| WO2022096165A1 (en) | Method, device, computer program and computer-readable storage medium for controlling the provision of suggestion information to a vehicle occupant of a vehicle | |
| DE102012005965A1 (en) | Method for active control of accelerator pedal of motor car, involves transmitting information representing expected driving condition, to driver of motor car by visual and/or acoustic output equipment | |
| WO2023232520A1 (en) | Method for information exchange between a vehicle and a vehicle occupant, and vehicle | |
| DE102019105546A1 (en) | Method, mobile user device, computer program for controlling a control unit of a vehicle | |
| DE102017215410A1 (en) | Method, mobile user device, computer program for controlling a mobile user device of a driver of a vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R163 | Identified publications notified | ||
| R081 | Change of applicant/patentee |
Owner name: AUGST, ALEXANDER, DE Free format text: FORMER OWNER: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, 80809 MUENCHEN, DE |
|
| R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |