DE102014213020A1

DE102014213020A1 - Takeover request for highly automated driving on data glasses

Info

Publication number: DE102014213020A1
Application number: DE102014213020.4A
Authority: DE
Inventors: Matthias Kaufmann; Lutz Lorenz; Ralph Helmar Rasshofer
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2014-07-04
Filing date: 2014-07-04
Publication date: 2016-01-07

Abstract

Offenbart wird ein Verfahren zum Ausgeben einer Übernahmeaufforderung durch ein Fahrzeug bei hochautomatisierter Fahrt, wobei der Fahrer des Fahrzeugs eine Datenbrille trägt, umfassend: Automatisches Erkennen durch das Fahrzeug, dass der hochautomatisierte Fahrtmodus zu beenden ist; In Antwort auf das Automatische Erkennen: Ausgeben eines Hinweises darauf, dass der hochautomatisierte Fahrtmodus beendet wird und der Fahrer die Führung des Fahrzeugs übernehmen muss; Wobei der Hinweis auf der Datenbrille ausgegeben wird; Gekennzeichnet durch: Empfangen einer Angabe zum Bereiches im Umfeld des Fahrzeugs, an dem eine Verkehrssituation besteht, die dazu führt, dass das Fahrzeug automatisch erkennt, dass der hochautomatisierte Fahrtmodus zu beenden ist; wobei der Hinweis zusätzlich auf den genannten Bereich hinweist.Disclosed is a method of issuing a takeover request by a vehicle in a highly automated drive, wherein the driver of the vehicle is wearing data glasses, comprising: automatically detecting by the vehicle that the highly automated drive mode is to be terminated; In response to the automatic detection: outputting an indication that the highly automated driving mode is terminated and the driver must take over the guidance of the vehicle; Where the reference to the data glasses is issued; Characterized by: receiving an indication of the area around the vehicle where there is a traffic situation that causes the vehicle to automatically recognize that the highly automated driving mode is to be terminated; wherein the hint additionally indicates the said area.

Description

Die Erfindung betrifft ein Verfahren zum Ausgeben einer Übernahmeaufforderung auf einer Datenbrille und eine entsprechende Anzeigenvorrichtung. The invention relates to a method for outputting a takeover request on data glasses and a corresponding display device.

Es sind prototypische Fahrzeuge bekannt geworden, die ein hochautomatisiertes Fahren ermöglichen. Dabei übernimmt das Fahrzeug sowohl die Quer- als auch die Längsführung bei der Fahrt. Um dies zu ermöglichen verfügen diese Prototypen über umfangreiche Sensorik wie Radar, Lidar, Kameras und Ultraschallsensoren sowie meist genaue digitale Landkarten. Allerdings kann es beim hochautomatisierten Fahren vorkommen, dass das System eine Verkehrssituation nicht sicher bewältigen kann und dies auch erkennt. Beispielsweise kann ein System zum hochautomatisierten Fahren zunächst nur auf Autobahnfahrten ausgelegt sein und nicht die Fahrzeugführung auf einer Autobahnausfahrt übernehmen. In diesem Fall müsste der Fahrer während der Fahrt auf der Autobahn vor der Ausfahrt die Fahrzeugführung wieder übernehmen. Ähnliche Fälle sind vor Baustellen auf der Autobahn denkbar oder schlicht und einfach durch die Anordnung und Bewegung der anderen Verkehrsteilnehmer. Um eine insgesamt sichere Fahrt zu gewährleisten, muss dem Fahrer des hochautomatisierten Fahrzeugs ausreichend früh vor der Übernahme der Fahrzeugführung die Übernahmeaufforderung mitgeteilt werden. There have been known prototypical vehicles that enable highly automated driving. The vehicle takes over both the transverse and the longitudinal guidance while driving. To make this possible, these prototypes have extensive sensors such as radar, lidar, cameras and ultrasonic sensors as well as mostly accurate digital maps. However, in highly automated driving it can happen that the system can not safely handle a traffic situation and also recognizes this. For example, a system for highly automated driving initially only be designed for driving on freeways and not take over the vehicle on a motorway exit. In this case, the driver would have to take over the vehicle guidance again while driving on the highway before the exit. Similar cases are conceivable before construction sites on the highway or simply and simply by the arrangement and movement of other road users. In order to ensure an overall safe journey, the driver of the highly automated vehicle must be informed of the takeover request sufficiently early before taking over the vehicle guidance.

Die Übernahmeaufforderung kann beispielsweise durch akustische Signale oder Anzeigen im Kombiinstrument oder generell einer Anzeige im Armaturenbrett geschehen. Allerdings besteht die Gefahr, dass der Fahrer das akustische Signal überhört oder dieses ausgeschaltet hat und die Anzeigen ebenfalls nicht wahrnimmt, weil er beispielsweise während der hochautomatisierten Fahrt den Blick von den Anzeigen abgewendet hat und möglicherweise sogar in den Fußraum schaut. The Takeover request can be done for example by acoustic signals or displays in the instrument cluster or generally a display in the dashboard. However, there is a risk that the driver may have overheard or turned off the audible signal, and may not be aware of the displays either, for example because he has averted his gaze from the displays during the highly automated ride and may even look into the footwell.

Jedoch ist Wahrnehmung und möglichst schnelle Reaktion auf die Übernahmeaufforderung äußerst relevant für die Verkehrssicherheit. However, exercising and reacting as quickly as possible to the takeover request is extremely relevant for traffic safety.

Heutzutage sind ferner sogenannte Datenbrillen bekannt geworden, manchmal auch Head-mounted Displays genannt, die eine Anzeige umfassen. Eine Datenbrille wird durch einen Benutzer ähnlich einer gewöhnlichen Brille, die als Sehhilfe verwendet wird, auf dem Kopf getragen. Die Anzeige der Datenbrille befindet sich dabei im Sichtfeld des Trägers. Manche Datenbrillen umfassen eine Anzeige für nur ein Auge, andere Datenbrillen umfassen zwei Teilanzeigen, wobei jedem Auge eine Teilanzeige zugeordnet ist. Nowadays, so-called data glasses are also known, sometimes also called head-mounted displays, which include a display. Data glasses are worn on the head by a user similar to ordinary glasses used as a visual aid. The display of the data glasses is in the field of vision of the wearer. Some data glasses include a display for only one eye, other data glasses include two part displays, each eye is associated with a partial display.

Weiterhin ist es bekannt, dass Datenbrillen eine halbtransparente Anzeige umfassen können. Eine solche Anzeige ermöglicht es dem Träger sowohl angezeigte Informationen als auch das Umfeld hinter der Anzeige zu erkennen. Diese Art an Anzeige ist besonders gut zur kontaktanalogen Darstellung von Informationen geeignet. Es sind Datenbrillen bekannt geworden, deren Anzeige nicht im zentralen Sichtfeld des Trägers liegt. Furthermore, it is known that data glasses can comprise a semi-transparent display. Such an indication allows the wearer to recognize both displayed information and the environment behind the display. This type of display is particularly well suited for contact-analog presentation of information. Data glasses have become known whose display does not lie in the central field of vision of the wearer.

Bei der kontaktanalogen Darstellung werden Informationen derart auf der Datenbrille eingeblendet, dass sie dem Träger in einem räumlichen Bezug zu einem Objekt erscheinen. Dabei kann die Anzeige auf einer halbtransparenten Anzeige oder einer nicht-durchsichtigen Anzeige vorgenommen werden. Im Fall einer nicht-durchsichtigen Anzeige wird zusätzlich ein Videostream einer Kamera angezeigt, die die Umgebung aufnimmt und in diesem Videostream das Objekt markiert. Die Kontaktanalogie wird typischerweise auch bei Bewegungen des Kopfes des Trägers aufrecht erhalten. Die kontaktanaloge Darstellung oder Markierung kann in einem vordefinierten Abstand neben dem zu markierenden Objekt oder direkt das zu markierenden Objekt überlagernd angezeigt werden. Andere Darstellungen des räumlichen Bezugs sind ebenfalls denkbar. In the contact-analog representation, information is superimposed on the data glasses in such a way that they appear to the wearer in a spatial relationship to an object. The display can be made on a semi-transparent display or a non-transparent display. In the case of a non-transparent display, a video stream of a camera is also displayed, which records the environment and marks the object in this video stream. The contact analogy is typically maintained even during movements of the head of the wearer. The contact-analogous representation or marking can be displayed overlaid on a predefined distance next to the object to be marked or directly on the object to be marked. Other representations of the spatial reference are also conceivable.

Aus der Druckschrift DE 10 2013 005 342 A1 ist es bekannt, Übernahmeaufforderungen beim hochautomatisierten Fahren blickrichtungsunabhängig, also ohne Berücksichtigung der Blickrichtung, auf einer Datenbrille anzuzeigen. From the publication DE 10 2013 005 342 A1 It is known takeover prompts in highly automated driving view direction independent, so without consideration of the line of sight to display on a data glasses.

Diese Art der Anzeige der Übernahmeaufforderung stellt lediglich einen Hinweis darauf bereit, dass die Fahrzeugführung wieder übernommen werden muss. Abhängig von der Verkehrssituation kann es dabei vorkommen, dass der Fahrer eine gewisse Zeit braucht, um die Situation zu erfassen und die Fahrzeugführung verkehrssicher zu übernehmen. This way of displaying the takeover request merely provides an indication that the vehicle guidance has to be taken over again. Depending on the traffic situation, it may happen that the driver needs a certain amount of time to record the situation and to take over the vehicle guidance safely.

Der Erfindung liegt deshalb die Aufgabe zugrunde, dem Fahrer eines hochautomatisiert fahrenden Fahrzeugs auf einer Datenbrille eine verbesserte Übernahmeaufforderung zur Verfügung zu stellen. The invention is therefore based on the object to provide the driver of a highly automated moving vehicle on a smart goggles an improved takeover request.

Die Aufgabe wird durch ein Verfahren und ein Anzeigenvorrichtung gemäß den unabhängigen Patentansprüchen gelöst. Vorteilhafte Weiterbildungen sind in den abhängigen Ansprüchen definiert. The object is achieved by a method and a display device according to the independent patent claims. Advantageous developments are defined in the dependent claims.

Ein erster Aspekt der Erfindung betrifft ein Verfahren zum Ausgeben einer Übernahmeaufforderung durch ein Fahrzeug bei hochautomatisierter Fahrt, wobei der Fahrer des Fahrzeugs eine Datenbrille trägt, umfassend: Automatisches Erkennen durch das Fahrzeug, dass der hochautomatisierte Fahrtmodus zu beenden ist; In Antwort auf das Automatische Erkennen: Ausgeben eines Hinweises darauf, dass der hochautomatisierte Fahrtmodus beendet wird und der Fahrer die Führung des Fahrzeugs übernehmen muss; Wobei der Hinweis auf der Datenbrille ausgegeben wird; Empfangen einer Angabe zum Bereich im Umfeld des Fahrzeugs, an dem eine Verkehrssituation besteht, die dazu führt, dass das Fahrzeug automatisch erkennt, dass der hochautomatisierte Fahrtmodus zu beenden ist; wobei der Hinweis zusätzlich auf den genannten Bereich hinweist. Im hochautomatisierten Fahrtmodus übernimmt das Fahrzeug selbsttätig die Längs- und Querführung. Die Verkehrssituation kann eine Anordnung und Bewegung von anderen Verkehrsteilnehmern sein, die von dem System zum hochautomatisierten Fahren nicht sicher bewältigt werden kann. Andererseits kann die Verkehrssituation auch schlicht die Grenze der vorgesehenen Funktion des Systems sein, wie beispielsweise das Verlassen einer Autobahn bei einem System, das nur auf Autobahnfahrten ausgelegt ist. Typischerweise erfordert die Verkehrssituation, die zum Beenden des hochautomatisierten Fahrmodus führt, ein Fahrmanöver, das als nächstes oder als eines der nächsten Fahrmanöver auszuführen ist. A first aspect of the invention relates to a method of issuing a takeover request by a vehicle in highly automated driving, wherein the driver of the vehicle is wearing data glasses, comprising: automatically detecting by the vehicle that the highly automated drive mode is to be terminated; In response to Auto Detect: Issue a hint insist that the highly automated driving mode be terminated and the driver take over the guidance of the vehicle; Where the reference to the data glasses is issued; Receiving an indication of the area around the vehicle where there is a traffic situation that results in the vehicle automatically recognizing that the highly automated driving mode is to be ended; wherein the hint additionally indicates the said area. In highly automated driving mode, the vehicle automatically takes over the longitudinal and transverse guidance. The traffic situation may be an arrangement and movement of other road users that can not be handled safely by the system for highly automated driving. On the other hand, the traffic situation can simply be the limit of the intended function of the system, such as leaving a motorway in a system that is designed only on highway driving. Typically, the traffic situation leading to the termination of the highly automated driving mode requires a driving maneuver to be performed next or as one of the next driving maneuvers.

Hierin wird also vorgeschlagen, dem Fahrer zu zeigen, aufgrund welcher Verkehrssituation die Übernahmeaufforderung erfolgt. Typischerweise sind diese Verkehrssituationen, die auch von dem Fahrer als erstes beachtet werden müssen und die sofortiges oder schnelles Handeln erfordern. Ferner wird dem Fahrer auf diese Weise der interne Zustand des Systems zum hochautomatisierten Fahren mitgeteilt. Dies ermöglicht dem Fahrer einen Lernprozess, welche Situationen von dem System bewältigt werden können und welche nicht und erhöht so auch mittel- bis langfristig die Verkehrssicherheit. It is therefore suggested here to show the driver, on the basis of which traffic situation the takeover request takes place. These are typically traffic situations that must first be taken into account by the driver and that require immediate or quick action. Furthermore, the driver is notified in this way of the internal state of the system for highly automated driving. This allows the driver a learning process, which situations can be handled by the system and which are not and thus increases the medium to long term road safety.

Besonders vorteilhaft wird auf den Bereich durch eine kontaktanaloge Markierung hingewiesen, nämlich durch eine Darstellung auf der Datenbrille, die dem Fahrer am genannten Bereich des Umfeldes erscheint. Die kontaktanaloge Markierung ermöglicht dem Fahrer ein besonders schnelles Erfassen, um welche Verkehrssituation es sich handelt und damit um eine besonders schnelle Reaktionsmöglichkeit. The area is particularly advantageously indicated by a contact-analogous marking, namely by a representation on the data glasses, which appears to the driver in the mentioned area of the surroundings. The contact-analogous marking allows the driver to record particularly quickly which traffic situation is involved and thus a particularly rapid reaction possibility.

Die kontaktanaloge Markierung kann eine geometrische Form umfassen, insbesondere ein Punkt, Kreis oder Rechteck, das dem Fahrer am genannten Bereich erscheint; und weiter insbesondere den Bereich umschließt. Dabei kann die kontaktanaloge Markierung insbesondere eine zeitlich veränderliche Darstellung aufweisen. Dies kann zum Beispiel ein blinkendes Licht sein: In der Brille leuchtet eine Form am Bereich. Auf diese Weise wird der Blick des Fahrers auf die kritische Verkehrssituation geleitet, so dass er die Kontrolle über das Fahrzeug wieder übernehmen kann. The contact-analogous marking may comprise a geometric shape, in particular a point, circle or rectangle, which appears to the driver at said area; and further encloses in particular the area. In this case, the contact-analogous marking may in particular have a time-varying representation. This can be, for example, a flashing light: in the glasses, a shape lights up on the area. In this way, the driver's gaze is directed to the critical traffic situation so that he can regain control of the vehicle.

In einer Alternative umfasst die Darstellung eine geometrische Form, die sich für den Fahrer zum genannten Bereich hinzubewegen scheint. Dies kann einem Hinführen entsprechen, ähnlich einer Lichterkette bei nacheinander aufblinkende Lampen einer Anflugbefeuerung an Flughäfen. In one alternative, the representation includes a geometric shape that appears to be moving toward the area for the driver. This may correspond to a lead, similar to a string of lights with successively flashing lights of approach lights at airports.

In wieder einer anderen Alternative umfasst die kontaktanaloge Markierung einen Pfeil, der für den Fahrer auf den genannten Bereich deutend erscheint. In einer anderen Implementierung weist der Pfeil lediglich in die Richtung auf den genannten Bereich. Auf diese Weise soll der Blick des Fahrers in die notwendige Richtung gelenkt werden. In yet another alternative, the contact analog marker includes an arrow that appears to be indicative of the driver for that range. In another implementation, the arrow points only in the direction of said area. In this way, the driver's gaze should be steered in the necessary direction.

In einer Weiterbildung umfasst das Verfahren ferner: Aufzeichnen eines Videostreams des Umfeldes vor dem Fahrzeug mithilfe einer Kamera; Anzeigen des Videostreams auf der Datenbrille. Die Straße vor dem Fahrzeug wird also mit einer Kamera aufgezeichnet und an die Datenbrille übertragen. Der Fahrer kann ein kleines Fenster in seiner Brille eingeblendet bekommen, welches die Aufzeichnung der Kamera in Echtzeit wiedergibt. Falls die Meldung zur Fahrzeugübernahme kommt, wird dem Fahrer ein Warndreieck oder ein Text angezeigt, dass ihn auffordert die Kontrolle wieder über das Fahrzeug zu übernehmen. Der Fahrer kann so „im Augenwinkel“ allgemein den Verkehr im Umfeld beobachten und bei der Übernahmeaufforderung sofort betrachten, egal, welche Blickrichtung oder Kopfrichtung (wenn (z.B. der Kopf nach unten gerichtet ist und somit kein Blick auf die Straße möglich ist) er eingenommen hatte. In a further development, the method further comprises: recording a video stream of the environment in front of the vehicle with the aid of a camera; Display the video stream on the data glasses. The road in front of the vehicle is therefore recorded with a camera and transmitted to the data glasses. The driver can see a small window in his glasses, which shows the recording of the camera in real time. If the vehicle pickup message arrives, the driver will be presented with a warning triangle or text prompting him to take control of the vehicle again. The driver can thus observe the traffic in the environment "at the corner of his eye" in general and immediately look at the takeover request, no matter which line of vision or heading direction (if (eg the head is pointing downwards and thus no view of the road is possible) he had taken ,

In einer Implementierung wird der Hinweis im angezeigten Videostream angezeigt, und zwar derart, dass der genannte Bereich markiert wird. Dabei wird also die Gefahr, die zur Übernahme des Fahrzeugs führt, direkt markiert. Denkbar ist außerdem, dass die Videoübertragung nur dann in der Brille angezeigt wird, falls der Fahrer nicht auf die Straße schaut. In one implementation, the hint is displayed in the displayed video stream, such that the named area is highlighted. Thus, the danger that leads to the acquisition of the vehicle is marked directly. It is also conceivable that the video transmission is displayed in the glasses only if the driver does not look at the road.

Ein anderer Aspekt der Erfindung betrifft eine Anzeigenvorrichtung zum Ausgeben einer Übernahmeaufforderung, umfassend eine Datenbrille und ein elektronisches Steuergerät; wobei die Anzeigenvorrichtung dazu eingerichtet ist, eines der vorstehenden Verfahren auszuführen. Die Anzeigenvorrichtung kann um Head-Tracking und Eye-Tracking Vorrichtungen ergänzt werden. Another aspect of the invention relates to a display device for issuing a takeover request, comprising a smart phone and an electronic control device; wherein the display device is adapted to execute one of the above methods. The display device can be supplemented with head tracking and eye tracking devices.

KURZE BESCHREIBUNG DER ZEICHNUNGEN BRIEF DESCRIPTION OF THE DRAWINGS

1 zeigt einen Hinweis auf eine Übernahmeaufforderung auf einer Datenbrille gemäß einem ersten Ausführungsbeispiel. 1 shows an indication of a takeover request on a smart phone according to a first embodiment.

2 zeigt einen Hinweis auf eine Übernahmeaufforderung auf einer Datenbrille gemäß einem zweiten Ausführungsbeispiel. 2 shows an indication of a takeover request on a smart phone according to a second embodiment.

3 zeigt einen Hinweis auf eine Übernahmeaufforderung auf einer Datenbrille gemäß einem dritten Ausführungsbeispiel. 3 shows an indication of a takeover request on a data pair according to a third embodiment.

Gleiche Bezugszeichen beziehen sich auf sich entsprechende Elemente über die Figuren hinweg. Like reference numerals refer to corresponding elements throughout the figures.

DETAILLIERTE BESCHREIBUNG DER AUSFÜHRUNGSBEISPIELE DETAILED DESCRIPTION OF THE EMBODIMENTS

1 zeigt einen Hinweis auf eine Übernahmeaufforderung auf einer Datenbrille gemäß einem ersten Ausführungsbeispiel. Die Datenbrille 1 umfasst Bügel und eine Anzeige 2, die vor beiden Augen des Trägers der Datenbrille, dem Fahrer eines Fahrzeugs, angeordnet sind beim bestimmungsgemäßen Tragen der Datenbrille. Bei einer hochautomatisierten Fahrt stellt das dazu verwendete System des Fahrzeugs fest, dass eine Übernahme durch den Fahrer nötig ist. Der Bereich, in dem die Verkehrssituation liegt, aufgrund derer der Fahrer die Fahrzeugführung übernehmen muss, wird bereitgestellt. Es wird erfasst, welche Kopfausrichtung der Fahrer hat (beispielsweise mit im Stand der Technik bekannten Head-Tracking Systemen). Aus diesen Informationen wird die Stelle der Anzeige der Datenbrille errechnet, an der die kontaktanaloge Markierung angezeigt werden müsste, damit sie dem Fahrer im Zentrum des Bereiches erscheint. An dieser Stelle wird dem Fahrer ein Hinweispunkt 3 angezeigt. Der Fahrer erkennt die kontaktanaloge Markierung als Übernahmeaufforderung und kann die kritische Verkehrssituation gleich verorten. Falls der Fahrer den Kopf derart ausgerichtet hat, dass der Hinweispunkt außerhalb der Anzeige angezeigt werden müsste, kann am Rand der Anzeige ein Pfeil in diejenige Richtung angezeigt werden, in der der Fahrer den Kopf bewegen muss, um in die Richtung des kritischen Umfeldbereiches zu blicken. Sobald die kontaktanaloge Markierung in der Anzeige angezeigt werden kann, verschwindet der Pfeil am Rand der Anzeige und die kontaktanaloge Markierung wird angezeigt. 1 shows an indication of a takeover request on a smart phone according to a first embodiment. The data glasses 1 Includes strap and a display 2 , which are arranged in front of both eyes of the wearer of the data glasses, the driver of a vehicle, in the intended use of the data glasses. In a highly automated drive, the system of the vehicle used for this determines that a takeover by the driver is necessary. The area in which the traffic situation lies, by virtue of which the driver must take over the vehicle guidance, is provided. It is detected which head alignment the driver has (for example, head-tracking systems known in the art). From this information, the location of the display of the data glasses is calculated, at which the contact-analogous marking would have to be displayed so that it appears to the driver in the center of the area. At this point, the driver is a reference point 3 displayed. The driver recognizes the contact-analogous marking as takeover request and can locate the critical traffic situation immediately. If the driver has oriented his head so that the point of reference would have to be displayed outside the display, an arrow may be displayed at the edge of the display in the direction in which the driver must move his head to look in the direction of the critical surrounding area , As soon as the contact-analogous marking can be shown in the display, the arrow on the edge of the display disappears and the contact-analogous marking is displayed.

2 zeigt ein weiteres Beispiel eines Hinweises auf eine Übernahmeaufforderung auf einer Datenbrille. Die Datenbrille 1 umfasst ebenfalls ein Display 2. Bei einer Übernahmeaufforderung wird eine Punktkette aus fünf (oder mehr/weniger) Punkten angezeigt. Die Punkte können mindestens eine erste Farbe oder Graustufe annehmen und eine zweite Farbe oder Graustufe. Die Farbe oder Graustufe der Punkte wird nacheinander geändert, so dass eine Farbe bzw. Graustufe sich in Richtung links unten zu bewegen scheint. Beispielsweise haben die Punkte 3a und 3c dieselbe Graustufe und Punkt 3b beispielsweise hat eine andere Graustufe. Alternativ kann auch vorgesehen sein, dass die Graufärbung bzw. die Intensität der Punkte von dem Punkt 3a in Richtung des Punktes 3c zunimmt. Die entstehende Animation symbolisiert ein Anflugfeuer eines Flughafens für Flugzeuge. Der kritische Bereich des Umfelds befindet sich hierbei am Ende der Punktkette, hier am letzten Punkt links unten. 2 shows another example of an indication of a takeover request on a smart phone. The data glasses 1 also includes a display 2 , A takeover request displays a point string of five (or more / fewer) points. The dots can assume at least a first color or gray level and a second color or gray level. The color or grayscale of the dots is changed one after the other so that a color or grayscale seems to move towards the lower left. For example, the points have 3a and 3c the same grayscale and dot 3b for example, has a different grayscale. Alternatively, it can also be provided that the gray color or the intensity of the dots from the point 3a in the direction of the point 3c increases. The resulting animation symbolizes an approach fire of an airport for airplanes. The critical area of the environment is here at the end of the point chain, here at the last point bottom left.

3 zeigt ein drittes Beispiel eines Hinweises auf eine Übernahmeaufforderung auf einer Datenbrille. Eine Datenbrille 1 umfasst wieder eine Anzeige 2. In der rechten oberen Ecke wird dauerhaft ein Videostream einer Frontkamera des Fahrzeugs eingeblendet. Sobald eine Übernahmeaufforderung nötig ist, wird ebenfalls das Warnsymbol 5 eingeblendet, und zwar direkt neben dem Bereich, aufgrund dessen die Übernahmeaufforderung nötig ist. Der Fahrer kann so unmittelbar, unabhängig von der Kopfpose erkennen, wie sich die Verkehrssituation verhält. 3 shows a third example of an indication of a takeover request on a smart phone. A data glasses 1 again includes an ad 2 , In the upper right corner, a video stream from a front camera of the vehicle is permanently displayed. As soon as a takeover request is required, the warning symbol also appears 5 appears next to the area that requires the Takeover Request. The driver can thus immediately, independently of the head pose, recognize how the traffic situation behaves.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

DE 102013005342 A1 [0008]

Claims

A method of issuing a takeover request by a vehicle in a highly automated drive, the driver of the vehicle wearing data glasses, comprising: Automatic recognition by the vehicle that the highly automated drive mode is to be ended; In response to the automatic detection: outputting an indication that the highly automated driving mode is terminated and the driver must take over the guidance of the vehicle; Where the reference to the data glasses is issued; Marked by: Receiving an indication of the area around the vehicle where there is a traffic situation that results in the vehicle automatically recognizing that the highly automated driving mode is to be ended; wherein the hint additionally indicates the said area.

The method of claim 1, wherein the area is indicated by a contact-analogous mark, namely by a representation on the data glasses, which appears to the driver in said area of the environment.

The method of claim 2, wherein the contact-analogous marking comprises a geometric shape, in particular a point, circle or rectangle, which appears to the driver at said area; and further encloses in particular the area.

The method of claim 2, wherein the contact analog label is a time-varying representation.

The method of claim 4, wherein the representation includes a geometric shape that appears to be traveling toward said area for the driver.

The method of claim 2, wherein the contact-analogous marking comprises an arrow that appears to the driver to the said area.

The method of claim 1, further comprising: Recording a video stream of the environment in front of the vehicle using a camera; Display the video stream on the data glasses.

The method of claim 7, wherein the indication is displayed in the displayed video stream, such that said region is highlighted.

A display device for issuing a take-over request, comprising a data goggle and an electronic control device; wherein the display device is adapted to carry out a method according to any one of the preceding claims.