[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

DE202013007354U1 - Computer program product and traffic sign recognition system for a vehicle - Google Patents

Computer program product and traffic sign recognition system for a vehicle Download PDF

Info

Publication number
DE202013007354U1
DE202013007354U1 DE202013007354.3U DE202013007354U DE202013007354U1 DE 202013007354 U1 DE202013007354 U1 DE 202013007354U1 DE 202013007354 U DE202013007354 U DE 202013007354U DE 202013007354 U1 DE202013007354 U1 DE 202013007354U1
Authority
DE
Germany
Prior art keywords
traffic sign
information
vehicle
determined
identified object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
DE202013007354.3U
Other languages
German (de)
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Priority to DE202013007354.3U priority Critical patent/DE202013007354U1/en
Publication of DE202013007354U1 publication Critical patent/DE202013007354U1/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/09675Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where a selection from the received information takes place in the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

Computerprogrammprodukt, das, wenn es auf einer Recheneinheit (1) ausgeführt wird, die Recheneinheit (1) anleitet, folgende Schritte auszuführen: – Ermitteln, ob zumindest ein Verkehrszeichen (2) im Bereich einer momentanen Umgebung (3) eines Fahrzeugs (4) angeordnet ist, basierend auf von zumindest einer optischen Kamera (5) ermittelter Daten, – falls ermittelt wird, dass zumindest ein Verkehrszeichen (2) im Bereich der momentanen Umgebung (3) des Fahrzeugs (4) angeordnet ist, Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen (2) einer vorbestimmten Verkehrszeichen-Art entspricht, basierend auf den von der zumindest einen optischen Kamera (5) ermittelten Daten, wobei die vorbestimmte Verkehrszeichen-Art ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens befindlichen Objekt ist, – falls ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen (2) der vorbestimmten Verkehrszeichen-Art entspricht, Ermitteln von auf dem Verkehrszeichen (2) enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens (2) befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera (5) ermittelten Daten und Ausgeben der ermittelten auf dem Verkehrszeichen (2) enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung (6).Computer program product which, when executed on a computing unit (1), instructs the computing unit (1) to carry out the following steps: - Determine whether at least one traffic sign (2) is arranged in the area of a current environment (3) of a vehicle (4) is based on data determined by at least one optical camera (5), - if it is determined that at least one traffic sign (2) is arranged in the area of the current environment (3) of the vehicle (4), determine whether the at least one is determined Traffic sign (2) corresponds to a predetermined type of traffic sign, based on the data determined by the at least one optical camera (5), the predetermined type of traffic sign being a traffic sign with tourist information relating to an object located in the vicinity of the traffic sign, - If it is determined that the at least one determined traffic sign (2) corresponds to the predetermined type of traffic sign, Ermit the information contained on the traffic sign (2) relating to an object located in the vicinity of the determined traffic sign (2), based on the data determined by the at least one optical camera (5) and outputting the information contained on the traffic sign (2) Information on the object by means of at least one optical and / or acoustic output device (6).

Description

Die Anmeldung betrifft ein Computerprogrammprodukt, ein Verkehrszeichen-Erkennungssystem für ein Fahrzeug und ein computerlesbares Medium.The application relates to a computer program product, a traffic sign recognition system for a vehicle and a computer readable medium.

Aus der US 6 671 615 B1 ist ein Navigationssystem mit Verkehrszeichen-Assistenz bekannt. Dabei können einem Fahrer eines Fahrzeugs während einer Fahrt durch das Navigationssystem zusätzliche Informationen über Verkehrszeichen bereitgestellt werden. Die zusätzlichen Informationen können automatisch oder in Antwort auf eine Anforderung von dem Fahrer bereitgestellt werden. Die zusätzlichen Informationen können eine Übersetzung des Verkehrszeichentexts in eine ausgewählte Sprache, zusätzliche Informationen über das Objekt des Verkehrszeichens, kommerzielle Informationen über das Objekt des Verkehrszeichens oder andere Arten von Informationen beinhalten.From the US Pat. No. 6,671,615 B1 is a navigation system with traffic sign assistance known. In this case, additional information about traffic signs can be provided to a driver of a vehicle while driving through the navigation system. The additional information may be provided automatically or in response to a request from the driver. The additional information may include a translation of the traffic sign text into a selected language, additional information about the object of the traffic sign, commercial information about the object of the traffic sign, or other types of information.

Aufgaben von Ausführungsformen der Erfindung ist es, ein Computerprogrammprodukt, ein Verkehrszeichen-Erkennungssystemen für ein Fahrzeug und ein computerlesbares Medium anzugeben, welche eine weiter verbesserte Bereitstellung von Informationen über Objekte im Bereich einer momentanen Umgebung des Fahrzeugs ermöglichen.It is an object of embodiments of the invention to provide a computer program product, a vehicle traffic sign recognition system, and a computer readable medium that enable further improved provision of information about objects in the range of a current environment of the vehicle.

Gemäß einem Aspekt der Erfindungen wird ein Computerprogrammprodukt angegeben, das, wenn es auf einer Recheneinheit ausgeführt wird, die Recheneinheit anleitet, folgende Schritte auszuführen:

  • – Ermitteln, ob zumindest ein Verkehrszeichen im Bereich einer momentanen Umgebung eines Fahrzeugs angeordnet ist, basierend auf von zumindest einer optischen Kamera ermittelter Daten,
  • – falls ermittelt wird, dass zumindest ein Verkehrszeichen im Bereich der momentanen Umgebung des Fahrzeugs angeordnet ist, Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen einer vorbestimmten Verkehrszeichen-Art entspricht, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten, wobei die vorbestimmte Verkehrszeichen-Art ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens befindlichen Objekt ist,
  • – falls ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen der vorbestimmten Verkehrszeichen-Art entspricht, Ermitteln von auf dem Verkehrszeichen enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten und Ausgeben der ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung.
According to one aspect of the invention, a computer program product is specified which, when executed on a computing unit, instructs the computing unit to carry out the following steps:
  • Determining whether at least one traffic sign is arranged in the region of a current environment of a vehicle, based on data determined by at least one optical camera,
  • If it is determined that at least one traffic sign is arranged in the region of the current surroundings of the vehicle, determining whether the at least one determined traffic sign corresponds to a predetermined traffic sign type, based on the data determined by the at least one optical camera, wherein the predetermined traffic signs -Art is a traffic sign with tourist information about an object in the vicinity of the traffic sign,
  • If it is determined that the at least one determined traffic sign corresponds to the predetermined traffic sign type, determining information contained on the traffic sign to an object located in the vicinity of the determined traffic sign based on the data determined by the at least one optical camera and outputting the determined information contained on the traffic sign to the object by means of at least one optical and / or acoustic output device.

Das Computerprogrammprodukt gemäß der genannten Ausführungsform ermöglicht eine weiter verbesserte Bereitstellung von Informationen über Objekte im Bereich einer momentanen Umgebung des Fahrzeugs. Dies erfolgt insbesondere durch das Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen einem Verkehrszeichen mit touristischen Informationen entspricht und das Ermitteln von auf dem Verkehrszeichen enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens befindlichen Objekt, jeweils basierend auf den von der zumindest einen optischen Kamera ermittelten Daten sowie das Ausgeben der ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt. Dadurch können die Insassen des Fahrzeugs, insbesondere der Fahrer des Fahrzeugs, auf touristisch bedeutende Objekte, welche auf derartigen Verkehrszeichen dargestellt werden, aufmerksam gemacht werden. Dies ist insbesondere in Situationen von Vorteil, in welchen der Fahrern des Fahrzeugs beispielsweise aufgrund eines erhöhten Verkehrsaufkommens das entsprechende Verkehrszeichen nicht wahrnimmt, da er seine Aufmerksamkeit ausschließlich auf das Verkehrsgeschehen richtet oder die Sicht auf das Verkehrszeichen durch weitere Verkehrsteilnehmer verdeckt ist. Das Ermitteln, ob das zumindest eine Verkehrszeichen einem Verkehrszeichen mit touristischen Informationen entspricht, sowie das Ermitteln der auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt, erfolgt dabei in vorteilhafter Weise basierend auf Daten, welche von einer insbesondere fahrzeugeigenen Sensorik in Form der zumindest einen optischen Kamera ermittelt werden können. Damit können insbesondere Verkehrszeichen ermittelt werden, welche gegebenenfalls noch nicht in Datenbanken hinterlegt sind.The computer program product according to the aforementioned embodiment enables a further improved provision of information about objects in the area of a current environment of the vehicle. This is done in particular by determining whether the at least one determined traffic sign corresponds to a traffic sign with tourist information and determining information contained on the traffic sign to an object located in the vicinity of the determined traffic sign, each based on the at least one optical camera determined data and outputting the determined information contained on the traffic signs to the object. As a result, the occupants of the vehicle, in particular the driver of the vehicle, can be alerted to objects of major importance to tourism which are displayed on such traffic signs. This is particularly advantageous in situations in which the drivers of the vehicle, for example, due to an increased traffic volume does not perceive the corresponding traffic sign, since he focuses his attention exclusively on the traffic or the view of the traffic sign is covered by other road users. Determining whether the at least one traffic sign corresponds to a traffic sign with tourist information, as well as determining the information contained in the traffic sign to the object, takes place in an advantageous manner based on data, which of a particular in-vehicle sensors in the form of at least one optical camera can be determined. In particular traffic signs can be determined, which may not yet be stored in databases.

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet wird, folgende Schritte auszuführen:

  • – Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts, basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt,
  • – Abrufen von in einer Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt.
In a further embodiment of the computer program product, the arithmetic unit is additionally instructed to carry out the following steps:
  • Identifying the object located in the vicinity of the determined traffic sign, based on the information on the object contained on the traffic sign,
  • Retrieving information stored in a storage device about the identified object.

Dadurch können in vorteilhafter Weise zusätzlich zu den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt weitere Informationen zu diesem abgerufen und den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, bereitgestellt bzw. angeboten werden.As a result, in addition to the information on the object contained on the traffic sign, further information about this can advantageously be retrieved and made available or offered to the occupants of the vehicle, in particular the driver of the vehicle.

In einer weiteren Ausführungsform des Computerprogrammprodukts beinhaltet das Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts ein Abrufen von in der Speichervorrichtung abgelegten Informationen basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt. Dies ermöglicht eine weiter verbesserte Identifikation des Objekts mittels in der Speichervorrichtung abgelegten Informationen. In a further embodiment of the computer program product, identifying the object located in the vicinity of the determined traffic sign includes retrieving information stored in the memory device based on the information on the object contained on the traffic sign. This allows a further improved identification of the object by means of information stored in the memory device.

In einer weiteren Ausführungsform des Computerprogrammprodukts beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem identifizierten Objekt. Dadurch kann den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, eine große Zahl an zusätzlichen Informationen zu dem identifizierten Objekt bereitgestellt werden. Die fahrzeugexterne Speichervorrichtung ist dabei beispielsweise Bestandteil eines Servers.In a further embodiment of the computer program product, retrieving the information stored in the storage device about the identified object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system for the identified object. As a result, the occupants of the vehicle, in particular the driver of the vehicle, can be provided with a large number of additional information about the identified object. The vehicle-external storage device is, for example, part of a server.

In einer weiteren Ausführungsform des Computerprogrammprodukts beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem Objekt basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt. In derartigen Speichervorrichtungen werden typischerweise Informationen zu touristischen Objekten hinterlegt, womit die Identifikation des Objekts weiter verbessert werden kann. Die touristischen Objekte stellen dabei beispielsweise eine bestimmte Art von so genannten POIs (POI, Point of Interest) dar.In a further embodiment of the computer program product, retrieving the information stored in the storage device about the object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system based on the information contained on the traffic sign the object. In such storage devices, information about tourist objects is typically deposited, whereby the identification of the object can be further improved. The tourist objects represent, for example, a certain type of so-called POIs (POI, point of interest).

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen: Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung. Dadurch können die zusätzlichen Informationen zu dem identifizierten Objekt den Insassen des Fahrzeugs angezeigt bzw. in akustischer Form ausgegeben werden. Das Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt kann insbesondere automatisch erfolgen, sobald die Informationen von der Speichervorrichtung abgerufenen wurden. Weiterhin kann das Ausgeben der abgerufenen Informationen in Abhängigkeit der abgerufenen Informationen erfolgen. Beispielsweise können die abgerufenen Informationen eine Öffnungszeit des identifizierten Objekts beinhalten und das Ausgeben der abgerufenen Informationen in Abhängigkeit der Öffnungszeiten erfolgen bzw. unterbleiben, d. h., das Ausgeben der abgerufenen Informationen erfolgt, falls das identifizierte Objekt gegenwärtig geöffnet bzw. zugänglich ist und unterbleibt, falls das identifizierten Objekt gegenwärtig nicht geöffnet bzw. nicht zugänglich ist.In a further embodiment of the computer program product, the arithmetic unit is additionally instructed to execute the following steps: outputting the retrieved information about the identified object by means of the at least one optical and / or acoustic output device. As a result, the additional information about the identified object can be displayed to the occupants of the vehicle or output in audible form. In particular, the outputting of the retrieved information about the identified object can take place automatically as soon as the information has been retrieved from the storage device. Furthermore, the outputting of the retrieved information can be effected in dependence on the retrieved information. For example, the retrieved information may include an opening time of the identified object and the outputting of the retrieved information depending on the opening times may occur or be omitted, d. h., the retrieval of the retrieved information occurs if the identified object is currently open or accessible and omitted, if the identified object is not currently open or not accessible.

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen:

  • – Ausgeben einer Nutzerabfrage zur Ausgabe weiterer Informationen zu dem identifizierten Objekt,
  • – Ermitteln, ob eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt,
  • – wobei das Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt.
In a further embodiment of the computer program product, the arithmetic unit is also instructed to carry out the following steps:
  • Outputting a user query for outputting further information on the identified object,
  • Determining whether there is a user request for outputting further information on the identified object,
  • - wherein the outputting of the retrieved information to the identified object by means of the at least one optical and / or acoustic output device takes place, if it is determined that there is a user request for outputting further information on the identified object.

Dadurch können die zusätzlichen Informationen zu dem identifizierten Objekt den Insassen des Fahrzeugs in vorteilhafter Weise lediglich in den Fällen angezeigt bzw. in akustischer Form ausgegeben werden, in welchen dies die Insassen des Fahrzeugs wünschen.As a result, the additional information about the identified object can be advantageously displayed to the occupants of the vehicle only in the cases in which the occupants of the vehicle so desire.

Basierend auf den von der Speichervorrichtung abgerufenen Informationen kann in einer weiteren Ausgestaltung insbesondere eine Position des identifizierten Objekts relativ zu dem Fahrzeug ermittelt und mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung ausgegeben werden. Insbesondere kann mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung ausgegeben werden, in welcher Himmelsrichtung und/oder in welcher Entfernung sich das identifizierte Objekt relativ zu dem Fahrzeug befindet.Based on the information retrieved from the storage device, in a further embodiment, in particular a position of the identified object relative to the vehicle can be determined and output by means of the at least one optical and / or acoustic output device. In particular, by means of the at least one optical and / or acoustic output device can be output in which direction and / or at which distance the identified object is relative to the vehicle.

In einer weiteren Ausführungsform des Computerprogrammprodukts, in welcher das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen einer Position des identifizierten Objekts beinhaltet, wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen:

  • – Ermitteln einer ersten momentanen Position des Fahrzeugs mittels einer Positionsermittlungsvorrichtung,
  • – Ermitteln einer Fahrtroute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts mittels in der Speichervorrichtung des Navigationssystems abgelegten Kartendaten,
  • – Ausgeben der ermittelten Fahrtroute mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.
In a further embodiment of the computer program product in which retrieving the information stored in the storage device about the identified object includes retrieving a position of the identified object, the arithmetic unit is further instructed to carry out the following steps:
  • Determining a first instantaneous position of the vehicle by means of a position-determining device,
  • Determining a travel route from the first current position of the vehicle to the position of the identified object by means of Storage device of the navigation system stored map data,
  • - Issuing the determined route by means of at least one optical and / or acoustic output device.

Dadurch kann den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, in vorteilafter Weise automatisch eine Fahrtroute zu dem identifizierten Objekt bereitgestellt bzw. angeboten werden.As a result, the occupants of the vehicle, in particular the driver of the vehicle, can advantageously be provided or offered a route to the identified object in an advantageous manner.

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen:

  • – Ausgeben einer Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem identifizierten Objekt,
  • – Ermitteln, ob eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt,
  • – wobei das Ermitteln der Fahrtoute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts und das Ausgeben der ermittelten Fahrtroute erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt.
In a further embodiment of the computer program product, the arithmetic unit is also instructed to carry out the following steps:
  • Outputting a user query for outputting a route to the identified object,
  • Determining whether there is a user request to output a route to the identified object,
  • - wherein the determination of the route from the first current position of the vehicle to the position of the identified object and the output of the determined route takes place, if it is determined that there is a user request for outputting a route to the identified object.

Damit kann die Fahrtroute zu dem Objekt in vorteilhafter Weise lediglich in den Fällen angezeigt bzw. in akustischer Form ausgegeben werden, in welchen dies die Insassen des Fahrzeugs wünschen.Thus, the route to the object can be displayed in an advantageous manner only in cases or issued in an acoustic form, in which this is what the occupants of the vehicle want.

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen:

  • – Ermitteln zumindest eines, eine mögliche Müdigkeit eines momentanen Fahrers des Fahrzeugs kennzeichnenden Parameters,
  • – Ermitteln eines Grades der Müdigkeit des Fahrers basierend auf dem zumindest einen ermittelten Parameter,
  • – wobei das Ausgeben der Nutzerabfrage zur Ausgabe der Fahrtroute zu dem identifizierten Objekt erfolgt, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet und wobei das Ausgeben der Nutzerabfrage zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrad des Fahrers kennzeichnenden Warnmeldung beinhaltet.
In a further embodiment of the computer program product, the arithmetic unit is also instructed to carry out the following steps:
  • Determining at least one parameter characterizing possible tiredness of a current driver of the vehicle,
  • Determining a degree of driver fatigue based on the at least one determined parameter,
  • Wherein issuing the user query to output the route to the identified object occurs if the determined degree of fatigue of the driver exceeds a predetermined threshold and wherein outputting the user query further includes outputting a warning indicative of increased driver fatigue.

Damit kann in vorteilhafter Weise die Fahrsicherheit dadurch weiter erhöht werden, dass dem Fahrer des Fahrzeugs bei einem erhöhten Müdigkeitsgrad das Einlegen einer Pause bei dem identifizierten Objekt automatisch angeboten und ein entsprechender Routenvorschlag bereitgestellt wird.Thus, the driving safety can advantageously be further increased by the fact that the driver of the vehicle with an increased degree of fatigue, the insertion of a break in the identified object offered automatically and a corresponding route proposal is provided.

Der zumindest eine, eine mögliche Müdigkeit des momentanen Fahrers des Fahrzeugs kennzeichnende Parameter ist beispielsweise ausgewählt aus der Gruppe, bestehend aus einer Schließhäufigkeit zumindest eines Augenlids des Fahrers, einer Schließgeschwindigkeit des zumindest einen Augenlids des Fahrers, einer Körpertemperatur des Fahrers, einer Pulsfrequenz des Fahrers, einer Häufigkeit von von dem Fahrer durchgeführten Lenkbewegungen und einem zeitlichen Verlauf von von dem Fahrer durchgeführten Lenkbewegungen. Die genannten Parameter können beispielsweise basierend auf von einer optischen Kamera und/oder einem Lenkwinkelsensor ermittelter Daten bestimmt werden, wobei die optischen Kamera derart in dem Fahrzeug angeordnet ist, dass eine Erfassungsbereich der optischen Kamera die Sitzposition des Fahrers zumindest teilweise beinhaltet. Die genannten Parameter ermöglichen, den Grad der Müdigkeit des Fahrers in möglichst genauem Maße zu ermitteln.The at least one parameter characterizing a possible tiredness of the current driver of the vehicle is for example selected from the group consisting of a closing frequency of at least one eyelid of the driver, a closing speed of the at least one eyelid of the driver, a body temperature of the driver, a pulse frequency of the driver, a frequency of steering movements performed by the driver and a timing of steering movements performed by the driver. The said parameters can be determined, for example, based on data determined by an optical camera and / or a steering angle sensor, wherein the optical camera is arranged in the vehicle so that a detection range of the optical camera at least partially includes the seated position of the driver. The parameters mentioned make it possible to determine the degree of driver fatigue to the greatest extent possible.

In einer weiteren Ausführungsform des Computerprogrammprodukts wird die Recheneinheit zudem angeleitet, folgende Schritte auszuführen:

  • – Ermitteln einer zweiten momentanen Position des Fahrzeugs mittels der Positionsermittlungsvorrichtung,
  • – Ermitteln, ob sich die zweite momentane Position in einem vorbestimmten Bereich um die Position des identifizierten Objekts befindet,
  • – falls ermittelt wird, dass sich die zweite momentane Position in dem vorbestimmten Bereich um die Position des identifizierten Objekts befindet, wiederholtes Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt und/oder Ausgeben von weiteren Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.
In a further embodiment of the computer program product, the arithmetic unit is also instructed to carry out the following steps:
  • Determining a second instantaneous position of the vehicle by means of the position-determining device,
  • Determining whether the second instantaneous position is in a predetermined range around the position of the identified object,
  • If it is determined that the second instantaneous position is in the predetermined range around the position of the identified object, repeatedly outputting the retrieved information to the identified object and / or outputting further information to the identified object by means of the at least one optical and / or or acoustic output device.

Dadurch können bei Erreichen des identifizierten Objekts die zusätzlichen Informationen zu diesem wiederholt ausgegeben und/oder weiterführende Informationen zu dem Objekt bereitgestellt werden.As a result, upon reaching the identified object, the additional information about this can be repeatedly output and / or further information about the object can be provided.

Ein weiterer Aspekt der Erfindung betrifft ein Verkehrszeichen-Erkennungssystem für ein Fahrzeug, aufweisend

  • – zumindest eine optische Kamera, wobei die zumindest eine optische Kamera zum Erfassen von Objekten ausgebildet ist,
  • – zumindest eine optische und/oder akustische Ausgabevorrichtung,
  • – eine Recheneinheit,
  • – ein Computerprogrammprodukt nach einer der genannten Ausführungsformen.
Another aspect of the invention relates to a traffic sign recognition system for a vehicle comprising
  • At least one optical camera, wherein the at least one optical camera is designed to detect objects,
  • At least one optical and / or acoustic output device,
  • A computing unit,
  • - A computer program product according to one of the aforementioned embodiments.

Das Verkehrszeichen-Erkennungssystem gemäß der genannten Ausführungsform weist die bereits im Zusammenhang mit dem entsprechenden Computerprogrammprodukt genannten Vorteile auf, welche dieser Stelle zur Vermeidung von Wiederholungen nicht nochmals aufgeführt werden.The traffic sign recognition system according to the said embodiment has the advantages already mentioned in connection with the corresponding computer program product, which of this location will not be listed again to avoid repetition.

In einer Ausführungsform ist das Verkehrszeichen-Erkennungssystem Bestandteil des Fahrzeugs.In one embodiment, the traffic sign recognition system is part of the vehicle.

In einer weiteren Ausführungsform ist das Verkehrszeichen-Erkennungssystem Bestandteil eines Mobiltelefons, beispielsweise eines Smartphones, welches dazu in dem Fahrzeug angeordnet ist.In a further embodiment, the traffic sign recognition system is part of a mobile telephone, for example a smartphone, which is arranged in the vehicle for this purpose.

Darüber hinaus betrifft ein weiterer Aspekt der Erfindung ein computerlesbares Medium, auf dem ein Computerprogrammprodukt gemäß einer der genannten Ausführungsformen gespeichert ist.Moreover, another aspect of the invention relates to a computer-readable medium having stored thereon a computer program product according to one of said embodiments.

Das computerlesbare Medium gemäß der genannten Ausführungsform weist die bereits im Zusammenhang mit dem entsprechenden Computerprogrammprodukt genannten Vorteile auf, welche an dieser Stelle zur Vermeidung von Wiederholungen nicht nochmals aufgeführt werden.The computer-readable medium according to the mentioned embodiment has the advantages already mentioned in connection with the corresponding computer program product, which are not listed again at this point in order to avoid repetitions.

Das Fahrzeug ist beispielsweise ein Kraftfahrzeug, insbesondere ein Personenkraftwagen oder ein Lastkraftwagen.The vehicle is for example a motor vehicle, in particular a passenger car or a truck.

Ein weiterer Aspekt der Erfindung betrifft ein Verfahren zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug, wobei das Verfahren folgende Schritte aufweist:

  • – Ermitteln, ob zumindest ein Verkehrszeichen im Bereich einer momentanen Umgebung des Fahrzeugs angeordnet ist, basierend auf von zumindest einer optischen Kamera ermittelter Daten,
  • – falls ermittelt wird, dass zumindest ein Verkehrszeichen im Bereich der momentanen Umgebung des Fahrzeugs angeordnet ist, Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen einer vorbestimmten Verkehrszeichen-Art entspricht, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten, wobei die vorbestimmte Verkehrszeichen-Art ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens befindlichen Objekt ist,
  • – falls ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen der vorbestimmten Verkehrszeichen-Art entspricht, Ermitteln von auf dem Verkehrszeichen enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten und Ausgeben der ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung.
A further aspect of the invention relates to a method for operating a traffic sign recognition system for a vehicle, the method comprising the following steps:
  • Determining whether at least one traffic sign is arranged in the region of a current environment of the vehicle, based on data determined by at least one optical camera,
  • If it is determined that at least one traffic sign is arranged in the region of the current surroundings of the vehicle, determining whether the at least one determined traffic sign corresponds to a predetermined traffic sign type, based on the data determined by the at least one optical camera, wherein the predetermined traffic signs -Art is a traffic sign with tourist information about an object in the vicinity of the traffic sign,
  • If it is determined that the at least one determined traffic sign corresponds to the predetermined traffic sign type, determining information contained on the traffic sign to an object located in the vicinity of the determined traffic sign based on the data determined by the at least one optical camera and outputting the determined information contained on the traffic sign to the object by means of at least one optical and / or acoustic output device.

Das Verfahren gemäß der genannten Ausführungsform weist die bereits im Zusammenhang mit dem entsprechenden Computerprogrammprodukt genannten Vorteile auf, welche an dieser Stelle zur Vermeidung von Wiederholungen nicht nochmals aufgeführt werden.The method according to the aforementioned embodiment has the advantages already mentioned in connection with the corresponding computer program product, which are not listed again at this point in order to avoid repetitions.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt:

  • – Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts, basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt,
  • – Abrufen von in einer Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt.
In a further embodiment of the method, the following steps are also carried out:
  • Identifying the object located in the vicinity of the determined traffic sign, based on the information on the object contained on the traffic sign,
  • Retrieving information stored in a storage device about the identified object.

In einer weiteren Ausführungsform des Verfahrens beinhaltet das Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts ein Abrufen von in der Speichervorrichtung abgelegten Informationen basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt.In a further embodiment of the method, identifying the object located in the vicinity of the determined traffic sign includes retrieving information stored in the memory device based on the information on the object contained on the traffic sign.

In einer weiteren Ausführungsform des Verfahrens beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem identifizierten Objekt.In a further embodiment of the method, retrieving the information stored in the storage device about the identified object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system for the identified object.

In einer weiteren Ausführungsform des Verfahrens beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem Objekt basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt.In a further embodiment of the method, retrieving the information stored in the storage device about the object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system based on the information contained on the traffic sign the object.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt: Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.In a further embodiment of the method, the following steps are additionally carried out: outputting of the retrieved information about the identified object by means of the at least one optical and / or acoustic output device.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt:

  • – Ausgeben einer Nutzerabfrage zur Ausgabe weiterer Informationen zu dem identifizierten Objekt,
  • – Ermitteln, ob eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt,
  • – wobei das Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der optischen und/oder akustischen Ausgabevorrichtung erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt.
In a further embodiment of the method, the following steps are also carried out:
  • Outputting a user query for outputting further information on the identified object,
  • Determining whether there is a user request for outputting further information on the identified object,
  • - wherein the outputting of the retrieved information to the identified object by means of optical and / or acoustic output device, if it is determined that there is a user request for outputting further information on the identified object.

In einer weiteren Ausführungsform des Verfahrens, in welcher das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen einer Position des identifizierten Objekts beinhaltet, werden zudem folgende Schritte ausgeführt:

  • – Ermitteln einer ersten momentanen Position des Fahrzeugs mittels einer Positionsermittlungsvorrichtung,
  • – Ermitteln einer Fahrtroute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts mittels in der Speichervorrichtung des Navigationssystems abgelegten Kartendaten,
  • – Ausgeben der ermittelten Fahrtroute mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.
In a further embodiment of the method, in which retrieving the information stored in the storage device about the identified object includes retrieving a position of the identified object, the following steps are also performed:
  • Determining a first instantaneous position of the vehicle by means of a position-determining device,
  • Determining a travel route from the first instantaneous position of the vehicle to the position of the identified object by means of map data stored in the storage device of the navigation system,
  • - Issuing the determined route by means of at least one optical and / or acoustic output device.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt:

  • – Ausgeben einer Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem identifizierten Objekt,
  • – Ermitteln, ob eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt,
  • – wobei das Ermitteln der Fahrtoute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts und das Ausgeben der ermittelten Fahrtroute erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt.
In a further embodiment of the method, the following steps are also carried out:
  • Outputting a user query for outputting a route to the identified object,
  • Determining whether there is a user request to output a route to the identified object,
  • - wherein the determination of the route from the first current position of the vehicle to the position of the identified object and the output of the determined route takes place, if it is determined that there is a user request for outputting a route to the identified object.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt:

  • – Ermitteln zumindest eines, eine mögliche Müdigkeit eines momentanen Fahrers des Fahrzeugs kennzeichnenden Parameters,
  • – Ermitteln eines Grades der Müdigkeit des Fahrers basierend auf dem zumindest einen ermittelten Parameter,
  • – wobei das Ausgeben der Nutzerabfrage zur Ausgabe der Fahrtroute zu dem identifizierten Objekt erfolgt, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet und wobei das Ausgeben der Nutzerabfrage zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrad des Fahrers kennzeichnenden Warnmeldung beinhaltet.
In a further embodiment of the method, the following steps are also carried out:
  • Determining at least one parameter characterizing possible tiredness of a current driver of the vehicle,
  • Determining a degree of driver fatigue based on the at least one determined parameter,
  • Wherein issuing the user query to output the route to the identified object occurs if the determined degree of fatigue of the driver exceeds a predetermined threshold and wherein outputting the user query further includes outputting a warning indicative of increased driver fatigue.

Der zumindest eine, eine mögliche Müdigkeit des momentanen Fahrers des Fahrzeugs kennzeichnende Parameter ist beispielsweise ausgewählt aus der Gruppe, bestehend aus einer Schließhäufigkeit zumindest eines Augenlids des Fahrers, einer Schließgeschwindigkeit des zumindest einen Augenlids des Fahrers, einer Körpertemperatur des Fahrers, einer Pulsfrequenz des Fahrers, einer Häufigkeit von von dem Fahrer durchgeführten Lenkbewegungen und einem zeitlichen Verlauf von von dem Fahrer durchgeführten Lenkbewegungen. Die genannten Parameter können beispielsweise basierend auf von einer optischen Kamera und/oder einem Lenkwinkelsensor ermittelter Daten bestimmt werden, wobei die optischen Kamera derart in dem Fahrzeug angeordnet ist, dass eine Erfassungsbereich der optischen Kamera die Sitzposition des Fahrers zumindest teilweise beinhaltet.The at least one parameter characterizing a possible tiredness of the current driver of the vehicle is for example selected from the group consisting of a closing frequency of at least one eyelid of the driver, a closing speed of the at least one eyelid of the driver, a body temperature of the driver, a pulse frequency of the driver, a frequency of steering movements performed by the driver and a timing of steering movements performed by the driver. The said parameters can be determined, for example, based on data determined by an optical camera and / or a steering angle sensor, wherein the optical camera is arranged in the vehicle so that a detection range of the optical camera at least partially includes the seated position of the driver.

In einer weiteren Ausführungsform des Verfahrens werden zudem folgende Schritte ausgeführt:

  • – Ermitteln einer zweiten momentanen Position des Fahrzeugs mittels der Positionsermittlungsvorrichtung,
  • – Ermitteln, ob sich die zweite momentane Position in einem vorbestimmten Bereich um die Position des identifizierten Objekts befindet,
  • – falls ermittelt wird, dass sich die zweite momentane Position in dem vorbestimmten Bereich um die Position des identifizierten Objekts befindet, wiederholtes Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt und/oder Ausgeben von weiteren Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.
In a further embodiment of the method, the following steps are also carried out:
  • Determining a second instantaneous position of the vehicle by means of the position-determining device,
  • Determining whether the second instantaneous position is in a predetermined range around the position of the identified object,
  • If it is determined that the second instantaneous position is in the predetermined range around the position of the identified object, repeatedly outputting the retrieved information to the identified object and / or outputting further information to the identified object by means of the at least one optical and / or or acoustic output device.

Ferner betrifft ein weiterer Aspekt der Anmeldung eine Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug, aufweisend:

  • – Mittel zum Ermitteln, ob zumindest ein Verkehrszeichen im Bereich einer momentanen Umgebung eines Fahrzeugs angeordnet ist, basierend auf von zumindest einer optischen Kamera ermittelter Daten,
  • – Mittel zum Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen einer vorbestimmten Verkehrszeichen-Art entspricht, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten, wobei die vorbestimmte Verkehrszeichen-Art ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens befindlichen Objekt ist, falls ermittelt wird, dass zumindest ein Verkehrszeichen im Bereich der momentanen Umgebung des Fahrzeugs angeordnet ist,
  • – Mittel zum Ermitteln von auf dem Verkehrszeichen enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten und Mittel zum Ausgeben der ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung, falls ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen der vorbestimmten Verkehrszeichen-Art entspricht.
Furthermore, another aspect of the application relates to an apparatus for operating a traffic sign recognition system for a vehicle, comprising:
  • Means for determining whether at least one traffic sign is arranged in the region of a current surroundings of a vehicle, based on data determined by at least one optical camera,
  • - means for determining whether the at least one determined traffic sign corresponds to a predetermined traffic sign type, based on the determined by the at least one optical camera data, wherein the predetermined traffic sign type a traffic sign with tourist information to one, in the region of an environment of the traffic sign is located, if it is determined that at least one traffic sign is arranged in the region of the current environment of the vehicle,
  • - means for determining information contained in the traffic sign to an object located in the vicinity of the determined traffic sign, based on the data determined by the at least one optical camera and means for outputting the determined information contained on the traffic sign to the object by means of at least one optical and / or acoustic output device, if it is determined that the at least one determined traffic sign of the predetermined traffic sign type corresponds.

Mittels der genannten Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug wird, wie bereits erläutert, eine weiter verbesserte Bereitstellung von Informationen über Objekte im Bereich einer momentanen Umgebung des Fahrzeugs ermöglicht.By means of said device for operating a traffic sign recognition system for a vehicle, as already explained, a further improved provision of information about objects in the region of a current environment of the vehicle is made possible.

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf:

  • – Mittel zum Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts, basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt,
  • – Mittel zum Abrufen von in einer Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt.
In another embodiment, the apparatus for operating a traffic sign recognition system for a vehicle further comprises:
  • Means for identifying the object located in the vicinity of the determined traffic sign, based on the information on the object contained on the traffic sign,
  • - Means for retrieving information stored in a storage device to the identified object.

Dadurch können in vorteilhafter Weise zusätzlich zu den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt weitere Informationen zu diesem abgerufen und den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, bereitgestellt bzw. angeboten werden.As a result, in addition to the information on the object contained on the traffic sign, further information about this can advantageously be retrieved and made available or offered to the occupants of the vehicle, in particular the driver of the vehicle.

In einer weiteren Ausführungsform der Vorrichtung beinhaltet das Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts ein Abrufen von in der Speichervorrichtung abgelegten Informationen basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt. Dies ermöglicht eine weiter verbesserte Identifikation des Objekts mittels in der Speichervorrichtung abgelegter Informationen.In a further embodiment of the device, identifying the object located in the vicinity of the determined traffic sign includes retrieving information stored in the memory device based on the information on the object contained on the traffic sign. This allows a further improved identification of the object by means of information stored in the memory device.

In einer weiteren Ausführungsform der Vorrichtung beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem identifizierten Objekt. Dadurch kann den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, eine große Zahl an zusätzlichen Informationen zu dem identifizierten Objekt bereitgestellt werden. Die fahrzeugexterne Speichervorrichtung ist dabei beispielsweise Bestandteil eines Servers.In a further embodiment of the device, retrieving the information stored in the storage device about the identified object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system for the identified object. As a result, the occupants of the vehicle, in particular the driver of the vehicle, can be provided with a large number of additional information about the identified object. The vehicle-external storage device is, for example, part of a server.

In einer weiteren Ausführungsform der Vorrichtung beinhaltet das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem Objekt basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt. In derartigen Speichervorrichtungen werden typischerweise Informationen zu touristischen Objekten hinterlegt, womit die Identifikation des Objekts weiter verbessert werden kann. Die touristischen Objekte stellen dabei beispielsweise eine bestimmte Art von so genannten POIs (POI, Point of Interest) dar.In a further embodiment of the device, retrieving the information stored in the storage device about the object includes retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system based on the information contained on the traffic sign the object. In such storage devices, information about tourist objects is typically deposited, whereby the identification of the object can be further improved. The tourist objects represent, for example, a certain type of so-called POIs (POI, point of interest).

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf: Mittel zum Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung. Dadurch können die zusätzlichen Informationen zu dem identifizierten Objekt den Insassen des Fahrzeugs angezeigt bzw. in akustischer Form ausgegeben werden.In a further embodiment, the device for operating a traffic sign recognition system for a vehicle further comprises: means for outputting the retrieved information about the identified object by means of the at least one optical and / or acoustic output device. As a result, the additional information about the identified object can be displayed to the occupants of the vehicle or output in audible form.

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf:

  • – Mittel zum Ausgeben einer Nutzerabfrage zur Ausgabe weiterer Informationen zu dem identifizierten Objekt,
  • – Mittel zum Ermitteln, ob eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt,
  • – wobei das Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt.
In another embodiment, the apparatus for operating a traffic sign recognition system for a vehicle further comprises:
  • Means for outputting a user query for outputting further information on the identified object,
  • Means for determining whether there is a user request for outputting further information on the identified object,
  • - wherein the outputting of the retrieved information to the identified object by means of the at least one optical and / or acoustic output device takes place, if it is determined that there is a user request for outputting further information on the identified object.

Dadurch können die zusätzlichen Informationen zu dem identifizierten Objekt den Insassen des Fahrzeugs in vorteilhafter Weise lediglich in den Fällen angezeigt bzw. in akustischer Form ausgegeben werden, in welchen dies die Insassen des Fahrzeugs wünschen.As a result, the additional information about the identified object can be advantageously displayed to the occupants of the vehicle only in the cases in which the occupants of the vehicle so desire.

In einer weiteren Ausführungsform der Vorrichtung, in welcher das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt ein Abrufen einer Position des identifizierten Objekts beinhaltet, weist die Vorrichtung zudem folgendes auf:

  • – Mittel zum Ermitteln einer ersten momentanen Position des Fahrzeugs mittels einer Positionsermittlungsvorrichtung,
  • – Mittel zum Ermitteln einer Fahrtroute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts mittels in der Speichervorrichtung des Navigationssystems abgelegten Kartendaten,
  • – Mittel zum Ausgeben der ermittelten Fahrtroute mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.
In a further embodiment of the device, in which retrieving the information stored in the storage device about the identified object includes retrieving a position of the identified object, the device further comprises:
  • Means for determining a first instantaneous position of the vehicle by means of a position-determining device,
  • Means for determining a route from the first current position of the vehicle to the position of the identified object by means of the map stored in the memory device of the navigation system,
  • - Means for outputting the determined route by means of the at least one optical and / or acoustic output device.

Dadurch kann den Insassen des Fahrzeugs, insbesondere dem Fahrer des Fahrzeugs, in vorteilafter Weise automatisch eine Fahrtroute zu dem identifizierten Objekt bereitgestellt bzw. angeboten werden.As a result, the occupants of the vehicle, in particular the driver of the vehicle, can advantageously be provided or offered a route to the identified object in an advantageous manner.

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf:

  • – Mittel zum Ausgeben einer Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem identifizierten Objekt,
  • – Mittel zum Ermitteln, ob eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt,
  • – wobei das Ermitteln der Fahrtoute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts und das Ausgeben der ermittelten Fahrtroute erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt.
In another embodiment, the apparatus for operating a traffic sign recognition system for a vehicle further comprises:
  • Means for outputting a user query for outputting a route to the identified object,
  • Means for determining whether a user request exists for outputting a route to the identified object,
  • - wherein the determination of the route from the first current position of the vehicle to the position of the identified object and the output of the determined route takes place, if it is determined that there is a user request for outputting a route to the identified object.

Damit kann die Fahrtroute zu dem Objekt in vorteilhafter Weise lediglich in den Fällen angezeigt bzw. in akustischer Form ausgegeben werden, in welchen dies die Insassen des Fahrzeugs wünschen.Thus, the route to the object can be displayed in an advantageous manner only in cases or issued in an acoustic form, in which this is what the occupants of the vehicle want.

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf:

  • – Mittel zum Ermitteln zumindest eines, eine mögliche Müdigkeit eines momentanen Fahrers des Fahrzeugs kennzeichnenden Parameters,
  • – Mittel zum Ermitteln eines Grades der Müdigkeit des Fahrers basierend auf dem zumindest einen ermittelten Parameter,
  • – wobei das Ausgeben der Nutzerabfrage zur Ausgabe der Fahrtroute zu dem identifizierten Objekt erfolgt, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet und wobei das Ausgeben der Nutzerabfrage zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrad des Fahrers kennzeichnenden Warnmeldung beinhaltet.
In another embodiment, the apparatus for operating a traffic sign recognition system for a vehicle further comprises:
  • Means for determining at least one parameter characterizing possible tiredness of a current driver of the vehicle,
  • Means for determining a degree of fatigue of the driver based on the at least one determined parameter,
  • Wherein issuing the user query to output the route to the identified object occurs if the determined degree of fatigue of the driver exceeds a predetermined threshold and wherein outputting the user query further includes outputting a warning indicative of increased driver fatigue.

Damit kann in vorteilhafter Weise die Fahrsicherheit dadurch weiter erhöht werden, dass dem Fahrer des Fahrzeugs bei einem erhöhten Müdigkeitsgrad das Einlegen einer Pause bei dem identifizierten Objekt automatisch angeboten und ein entsprechender Routenvorschlag bereitgestellt wird.Thus, the driving safety can advantageously be further increased by the fact that the driver of the vehicle with an increased degree of fatigue, the insertion of a break in the identified object offered automatically and a corresponding route proposal is provided.

Der zumindest eine, eine mögliche Müdigkeit des momentanen Fahrers des Fahrzeugs kennzeichnende Parameter ist beispielsweise ausgewählt aus der Gruppe, bestehend aus einer Schließhäufigkeit zumindest eines Augenlids des Fahrers, einer Schließgeschwindigkeit des zumindest einen Augenlids des Fahrers, einer Körpertemperatur des Fahrers, einer Pulsfrequenz des Fahrers, einer Häufigkeit von von dem Fahrer durchgeführten Lenkbewegungen und einem zeitlichen Verlauf von von dem Fahrer durchgeführten Lenkbewegungen. Die genannten Parameter können beispielsweise basierend auf von einer optischen Kamera und/oder einem Lenkwinkelsensor ermittelter Daten bestimmt werden, wobei die optischen Kamera derart in dem Fahrzeug angeordnet ist, dass eine Erfassungsbereich der optischen Kamera die Sitzposition des Fahrers zumindest teilweise beinhaltet. Die genannten Parameter ermöglichen, den Grad der Müdigkeit des Fahrers in möglichst genauem Maße zu ermitteln.The at least one parameter characterizing a possible tiredness of the current driver of the vehicle is for example selected from the group consisting of a closing frequency of at least one eyelid of the driver, a closing speed of the at least one eyelid of the driver, a body temperature of the driver, a pulse frequency of the driver, a frequency of steering movements performed by the driver and a timing of steering movements performed by the driver. The said parameters can be determined, for example, based on data determined by an optical camera and / or a steering angle sensor, wherein the optical camera is arranged in the vehicle so that a detection range of the optical camera at least partially includes the seated position of the driver. The parameters mentioned make it possible to determine the degree of driver fatigue to the greatest extent possible.

In einer weiteren Ausführungsform weist die Vorrichtung zum Betreiben eines Verkehrszeichen-Erkennungssystems für ein Fahrzeug zudem folgendes auf:

  • – Mittel zum Ermitteln einer zweiten momentanen Position des Fahrzeugs mittels der Positionsermittlungsvorrichtung,
  • – Mittel zum Ermitteln, ob sich die zweite momentane Position in einem vorbestimmten Bereich um die Position des identifizierten Objekts befindet,
  • – Mittel zum wiederholten Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt und/oder Mittel zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung, falls ermittelt wird, dass sich die zweite momentane Position in dem vorbestimmten Bereich um die Position des identifizierten Objekts befindet.
In another embodiment, the apparatus for operating a traffic sign recognition system for a vehicle further comprises:
  • Means for determining a second instantaneous position of the vehicle by means of the position-determining device,
  • Means for determining whether the second instantaneous position is within a predetermined range around the position of the identified object,
  • - Means for repeatedly outputting the retrieved information on the identified object and / or means for outputting further information to the identified object by means of the at least one optical and / or acoustic output device, if it is determined that the second current position in the predetermined range located around the location of the identified object.

Dadurch können bei Erreichen des identifizierten Objekts die zusätzlichen Informationen zu diesem wiederholt ausgegeben und/oder weiterführende Informationen zu dem Objekt bereitgestellt werden.As a result, upon reaching the identified object, the additional information about this can be repeatedly output and / or further information about the object can be provided.

Ausführungsformen der Erfindung werden nun anhand der beigefügten Figuren näher erläutert.Embodiments of the invention will now be described with reference to the accompanying figures.

1 zeigt ein Flussdiagramm eines Verfahrens, das mittels einer Recheneinheit ausgeführt wird; 1 shows a flowchart of a method that is performed by means of a computing unit;

2 zeigt ein Beispiel einer Verkehrssituation, in welcher ein Verfahren, das mittels einer Recheneinheit ausgeführt wird, eingesetzt werden kann; 2 shows an example of a traffic situation in which a method that is executed by means of a computing unit can be used;

3 zeigt ein Verkehrszeichen-Erkennungssystem gemäß einer Ausführungsform der Erfindung. 3 shows a traffic sign recognition system according to an embodiment of the invention.

1 zeigt ein Flussdiagramm eines Verfahrens, das mittels einer Recheneinheit ausgeführt wird, wenn ein Computerprogrammprodukt gemäß einer der oben genannten Ausführungsformen auf der Recheneinheit ausgeführt wird. 1 shows a flowchart of a method that is carried out by means of a computing unit when a computer program product according to one of the above embodiments is performed on the computing unit.

In einem Schritt 40 erfolgt ein Ermitteln zumindest eines im Bereich einer momentanen Umgebung eines Fahrzeugs angeordneten Verkehrszeichens basierend auf von zumindest einer optischen Kamera ermittelter Daten. Die zumindest eine optische Kamera kann insbesondere Bestandteil des Fahrzeugs oder eines in dem Fahrzeug angeordneten Mobiltelefons sein.In one step 40 a determination is made of at least one traffic sign arranged in the region of a current environment of a vehicle based on data determined by at least one optical camera. The at least one optical camera may in particular be part of the vehicle or of a mobile telephone arranged in the vehicle.

In einem Schritt 50 wird, falls zumindest ein Verkehrszeichen im Bereich der momentanen Umgebung des Fahrzeugs ermittelt wird, basierend auf den in dem Schritt 40 ermittelten Daten ermittelt, ob das zumindest eine ermittelte Verkehrszeichen einer vorbestimmten Verkehrszeichen-Art entspricht. Die der vorbestimmte Verkehrszeichen-Art ist dabei ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichen befindlichen Objekts, beispielsweise das Verkehrszeichen Nr. 386 aus dem Verkehrszeichenkatalog der Straßenverkehrsordnung. Das Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen einem Verkehrszeichen mit touristischen Informationen entspricht, das heißt das Klassifizieren des ermittelten Verkehrszeichens, kann insbesondere mittels einer Mustererkennung und/oder mittels eines Ermittelns von Abmessungen des ermittelten Verkehrszeichens und/oder eines Ermittelns einer Position des ermittelten Verkehrszeichens relativ zu einer von dem Fahrzeug befahrenen Fahrbahn erfolgen.In one step 50 is determined if at least one traffic sign in the area of the current environment of the vehicle is determined, based on the in the step 40 ascertained data determines whether the at least one determined traffic sign corresponds to a predetermined traffic sign type. The predetermined traffic sign type is a traffic sign with tourist information about an object located in the vicinity of the traffic sign, for example the traffic sign no. 386 from the traffic sign catalog of the Highway Code. Determining whether the at least one determined traffic sign corresponds to a traffic sign with tourist information, that is to say classifying the determined traffic sign, can in particular be done by pattern recognition and / or by determining dimensions of the determined traffic sign and / or determining a position of the determined traffic sign take place relative to a road used by the vehicle.

Wird in dem Schritt 50 ermittelt, dass das zumindest eine ermittelte Verkehrszeichen nicht der vorbestimmten Verkehrszeichen-Art entspricht, werden in der gezeigten Ausführungsform die Schritte 40 und 50 wiederholt ausgeführt.Will in the step 50 determines that the at least one determined traffic sign does not correspond to the predetermined traffic sign type, the steps become in the shown embodiment 40 and 50 repeatedly executed.

Falls hingegen in dem Schritt 50 ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen der vorbestimmten Verkehrszeichen-Art entspricht, erfolgt in einem Schritt 60 ein Ermitteln von auf dem Verkehrszeichen enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera ermittelten Daten. Dies kann insbesondere ein Ermitteln von auf dem Verkehrszeichen enthaltenen Schriftzeichen mittels einer Schrifterkennung beinhalten.If, in contrast, in the step 50 it is determined that the at least one determined traffic sign corresponds to the predetermined traffic sign type, takes place in one step 60 determining information contained on the traffic sign for an object located in the vicinity of the determined traffic sign, based on the data determined by the at least one optical camera. This may include in particular a determination of characters contained on the traffic sign by means of a text recognition.

In einem Schritt 70 erfolgt basierend auf den in dem Schritt 60 ermittelten, auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt, ein Identifizierten des im Bereich der Umgebung des ermittelten Verkehrszeichens befindlichen Objekts. Dazu können insbesondere basierend auf den in dem Schritt 60 ermittelten, auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt Informationen, welche in einer Speichervorrichtung abgelegt sind, abgerufen werden. Das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem Objekt kann dabei ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem Objekt basierend auf den auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt beinhalten.In one step 70 is done based on the one in the step 60 determined, contained on the traffic sign information about the object, an identified located in the vicinity of the detected traffic sign object. For this purpose, in particular based on those in the step 60 determined, contained on the traffic sign information about the object information that is stored in a storage device retrieved. Retrieving the information stored in the storage device about the object may include retrieving information stored in an off-board storage device and / or information stored in a storage device of a navigation system to the object based on the information contained on the traffic sign to the object.

Nachdem das Objekt in dem Schritt 70 identifiziert worden ist, erfolgt in einem Schritt 80 ein Abrufen von in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt. Das Abrufen der in der Speichervorrichtung abgelegten Informationen zu dem identifizierten Objekt kann dabei wiederum ein Abrufen von in einer fahrzeugexternen Speichervorrichtung abgelegten Informationen und/oder von in einer Speichervorrichtung eines Navigationssystems abgelegten Informationen zu dem identifizierten Objekt beinhalten. Dabei kann das Abrufen der Informationen derart erfolgen, dass lediglich Informationen abgerufen werden, welche einer fahrzeugeigenen Spezifikation entsprechen. Beispielsweise können lediglich Informationen abgerufen werden, welche in einer fahrzeugeigenen Sprache abgefasst sind.After the object in the step 70 has been identified takes place in one step 80 retrieving information stored in the storage device about the identified object. In this case, retrieving the information stored in the storage device about the identified object may in turn include retrieving information stored in a vehicle-external storage device and / or information stored in a storage device of a navigation system about the identified object. In this case, the retrieval of the information can take place in such a way that only information is retrieved which corresponds to an in-vehicle specification. For example, only information can be retrieved, which are written in an on-board language.

In einem Schritt 90 werden die in dem Schritt 60 ermittelten, auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung ausgegeben. Die zumindest eine optische und/oder akustische Ausgabevorrichtung kann Bestandteil des Fahrzeugs sein und insbesondere im Bereich eines Kombiinstruments des Fahrzeugs angeordnet sein. Ferner kann die zumindest eine optische und/oder akustische Ausgabevorrichtung Bestandteil eines Informations- und Unterhaltungssystems des Fahrzeugs sein. Weiterhin kann die zumindest eine optische und/oder akustische Ausgabevorrichtung Bestandteil eines Mobiltelefons sein, welches in dem Fahrzeug angeordnet ist. Darüber hinaus erfolgt in der gezeigten Ausführungsform in dem Schritt 90 ein Ausgeben einer Nutzerabfrage mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung, ob eine Ausgabe weiterer Informationen zu dem identifizierten Objekt erfolgen soll.In one step 90 will be in the step 60 determined, contained on the traffic sign information about the object output by at least one optical and / or acoustic output device. The at least one optical and / or acoustic output device may be part of the vehicle and be arranged in particular in the region of a combination instrument of the vehicle. Furthermore, the at least one optical and / or acoustic output device can be part of an information and entertainment system of the vehicle. Furthermore, the at least one optical and / or acoustic output device may be part of a mobile telephone which is arranged in the vehicle. Moreover, in the illustrated embodiment, in the step 90 outputting a user query by means of the at least one optical and / or acoustic output device, if an output of further information about the identified object is to take place.

Das Ausgeben der Nutzerabfrage erfolgt in einer weiteren Ausgestaltung, in welcher ein Grad der Müdigkeit eines Fahrers des Fahrzeugs mittels eines entsprechenden Fahrerassistenzsystems ermittelt wird, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet. In der genannten Ausgestaltungen beinhaltet das Ausgeben der Nutzerabfrage zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrades des Fahrers kennzeichnenden Warnmeldung.The user query is output in a further embodiment, in which a degree of fatigue of a driver of the vehicle by means of a corresponding driver assistance system is determined if the determined degree of fatigue of the driver exceeds a predetermined threshold. In said embodiments, issuing the user query also includes outputting a warning message indicative of an increased degree of driver fatigue.

In einem Schritt 100 wird ermittelt, ob innerhalb einer vorbestimmten Zeitdauer, beispielsweise 10 Sekunden, eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt. Die Nutzeranforderung kann dabei beispielsweise mittels einer Nutzereingabe durch Betätigen eines Bedienelements, insbesondere mittels einer Eingabe auf einem Touchscreen, erfolgen.In one step 100 it is determined whether within a predetermined period of time, for example 10 seconds, there is a user request for outputting further information on the identified object. The user request can take place, for example, by means of a user input by actuating an operating element, in particular by means of an input on a touchscreen.

Wird in dem Schritt 100 ermittelt, dass innerhalb der vorbestimmten Zeitdauer keine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt, wird das Ausgeben der ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt beendet und die Schritte 40 und 50 sowie gegebenenfalls 60, 70, 80, 90 und 100 wiederholt ausgeführt.Will in the step 100 determines that there is no user request for outputting further information on the identified object within the predetermined period of time, the outputting of the ascertained information on the object contained on the traffic sign is ended and the steps 40 and 50 and optionally 60 . 70 . 80 . 90 and 100 repeatedly executed.

Falls hingegen in dem Schritt 100 ermittelt wird, dass innerhalb der vorbestimmten Zeitdauer eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt, werden in einem Schritt 110 die von der Speichervorrichtung abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung ausgegeben. Ferner erfolgt in der gezeigten Ausführungsform in dem Schritt 110 eine Ausgabe einer weiteren Nutzerabfrage, ob eine Ausgabe einer Fahrtroute, welche zu dem identifizierten Objekt führt, erfolgen soll. Basierend auf den von der Speichervorrichtung abgerufenen Informationen kann in einer weiteren Ausgestaltung eine Position des identifizierten Objekts, insbesondere eine Position des identifizierten Objekts relativ zu dem Fahrzeug, ermittelt und in dem Schritt 110 mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung ausgegeben werden. Beispielsweise kann mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung ausgegeben werden, in welcher Entfernung sich das identifizierte Objekt relativ zu dem Fahrzeug befindet. Damit kann insbesondere der Fahrer des Fahrzeugs in einfacher Weise entscheiden, ob sich das identifizierte Objekt in einer für den Fahrer angemessenen Entfernung zu dem Fahrzeug befindet und damit eine Ausgabe einer Fahrtroute, welche zu dem identifizierten Objekt führt, erfolgen soll oder ob das identifizierte Objekt zu weit von dem Fahrzeug entfernt ist und der Fahrer des Fahrzeugs dieses daher nicht ansteuern möchte, womit in letztgenanntem Fall das Ausgeben einer Fahrtroute, welche zu dem identifizierten Objekt führt, unterbleiben kann.If, in contrast, in the step 100 it is determined that within the predetermined period of time there is a user request for outputting further information on the identified object, in a step 110 the information retrieved from the storage device is outputted to the identified object by means of the at least one optical and / or acoustic output device. Further, in the illustrated embodiment, in the step 110 an output of another user query as to whether an output of a route leading to the identified object should occur. Based on the information retrieved from the storage device, in a further embodiment, a position of the identified object, in particular a position of the identified object relative to the vehicle, determined and in the step 110 be output by the at least one optical and / or acoustic output device. For example, by means of the at least one optical and / or acoustic output device can be output at which distance the identified object is relative to the vehicle. In particular, the driver of the vehicle can thus easily decide whether the identified object is located at a distance from the vehicle which is appropriate for the driver and thus an output of a route leading to the identified object is to be made or if the identified object is to is far away from the vehicle and the driver of the vehicle therefore does not want to drive it, which can be omitted in the latter case, the issuing of a route leading to the identified object.

In einem Schritt 120 wird ermittelt, ob innerhalb einer vorbestimmten Zeitdauer, beispielsweise 10 Sekunden, eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt.In one step 120 it is determined whether within a predetermined period of time, for example 10 seconds, there is a user request for outputting a route to the identified object.

Wird in dem Schritt 120 ermittelt, dass keine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt, wird das Ausgeben der von der Speichervorrichtung abgerufenen Informationen zu dem identifizierten Objekt beispielsweise nach einer vorbestimmten Zeitdauer beendet und die Schritte 40 und 50 sowie gegebenenfalls 60, 70, 80, 90 und 100 sowie gegebenenfalls weiterhin 110 und 120 werden wiederholt ausgeführt.Will in the step 120 determines that there is no user request to output a route to the identified object, the outputting of the information retrieved from the storage device to the identified object is terminated, for example, after a predetermined period of time and the steps 40 and 50 and optionally 60 . 70 . 80 . 90 and 100 and, if appropriate, continue 110 and 120 are repeatedly executed.

Falls hingegen in dem Schritt 120 ermittelt wird, dass eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt, erfolgt in einem Schritt 130 ein Ermitteln und Ausgeben einer Fahrtroute zum dem identifizierten Objekt. Dazu wird eine erste momentane Position des Fahrzeugs mittels einer Positionsermittlungsvorrichtung eines Navigationssystems ermittelt und eine Fahrtroute von der ersten momentanen Position des Fahrzeugs zu der Position des identifizierten Objekts mittels in einer Speichervorrichtung des Navigationssystems abgelegten Kartendaten ermittelt. Die Position des identifizierten Objekts kann dabei insbesondere aus der Speichervorrichtung des Navigationssystems und/oder einer fahrzeugexternen Speichervorrichtung abgerufenen werden.If, in contrast, in the step 120 it is determined that there is a user request for outputting a route to the identified object, takes place in one step 130 determining and outputting a route to the identified object. For this purpose, a first instantaneous position of the vehicle is determined by means of a position-determining device of a navigation system, and a travel route is determined from the first current position of the vehicle to the position of the identified object by means of map data stored in a storage device of the navigation system. The position of the identified object can be retrieved in particular from the storage device of the navigation system and / or an off-board storage device.

In einem weiteren, nicht näher dargestellten Schritt kann ferner nach dem Ermitteln und Ausgeben der Fahrtroute eine zweite momentane Position des Fahrzeugs mittels der Positionsermittlungsvorrichtung ermittelt werden und ferner ermittelt werden, ob sich die zweite momentane Position in einem vorbestimmten Bereich um die Position des identifizierten Objekts befindet. Falls dabei ermittelt, dass sich die zweite momentane Position in dem vorbestimmten Bereich um die Position des identifizierten Objekt befindet, erfolgt in der genannten Ausgestaltungen ein wiederholtes Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt und/oder ein Ausgeben von weiteren Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung.In a further step, which is not shown in further detail, after determining and outputting the travel route, a second instantaneous position of the vehicle can be determined by means of the position-determining device, and it can also be determined whether the second instantaneous position is within a predetermined range around the position of the identified object , In this case, if it is determined that the second instantaneous position is in the predetermined range around the position of the identified object, in the mentioned embodiments a repeated outputting of the retrieved information to the identified object and / or outputting of further information to the identified object takes place the at least one optical and / or acoustic output device.

Mittels der gezeigten Ausführungsform wird somit beispielsweise ermöglicht, das Verkehrsschild mit der Nummer 386 in dem Verkehrszeichenkatalog der Straßenverkehrsordnung, insbesondere die Zeichen 386.1, 386.2 und 386.3, beispielsweise mittels Fahrzeugsensorik in Form einer Frontkamera zu erkennen, eine Identifikation über eine Texterkennung sowie eine Zuordnung zu der auf dem Verkehrsschild erwähnten Sehenswürdigkeit durchzuführen und dazugehörige Informationen für die Fahrzeuginsassen in textueller, audio- und/oder visueller Form bereitzustellen und die Navigation zu der entsprechenden Sehenswürdigkeit anzubieten.By means of the embodiment shown, it is thus possible, for example, to identify the traffic sign with the number 386 in the traffic sign catalog of the Highway Code, in particular the signs 386.1, 386.2 and 386.3, for example by means of vehicle sensors in the form of a front camera, an identification via a text recognition and an assignment to the to perform on the road sign mentioned attraction and related information for the vehicle occupants in textual, audio and / or visual form and to offer navigation to the relevant attraction.

Ein entsprechendes Verkehrszeichen-Erkennungssystem erkennt somit die Verkehrsschilder bzw. Verkehrszeichen beispielsweise mithilfe der Frontkamera des Fahrzeugs und identifiziert mittels eines Schrifterkennungsalgorithmus in Verbindung mit hinterlegten oder herunterzuladenden Informationen die auf dem jeweiligen Verkehrsschild bzw. Verkehrszeichen genannte Sehenswürdigkeit und zeigt diese beispielsweise in einem Infotainment-System des Fahrzeugs, gegebenenfalls mittels einer Pop-up-Anzeige, an. Ferner können mittels des Verkehrszeichen-Erkennungssystems Zusatzinformationen zu der identifizierten Sehenswürdigkeit beispielsweise aus dem Internet heruntergeladen werden, beispielsweise mittels einer UMTS-Kommunikationseinheit des Fahrzeugs, und den Insassen des Fahrzeugs der Abruf weiterführender Informationen zu der Sehenswürdigkeit in textueller, audio- und/oder visueller Form angeboten und weitergehend eine Route, insbesondere eine Navigationsroute, zur Erreichung der Sehenswürdigkeit vorgeschlagen werden. Weiterhin können bei Erreichen der Sehenswürdigkeit nochmals die bereits zuvor angezeigten Informationen und/oder weiterführende Informationen bereitgestellt werden.A corresponding traffic sign recognition system thus recognizes the traffic signs or traffic signs, for example by means of the front camera of the vehicle and identifies by means of a text recognition algorithm in conjunction with stored or downloaded information called on the respective road sign or traffic sign and shows them for example in an infotainment system of Vehicle, possibly by means of a pop-up display. Furthermore, by means of the traffic sign recognition system, additional information about the identified attraction can for example be downloaded from the Internet, for example by means of a UMTS communication unit of the vehicle, and the occupants of the vehicle the retrieval of further information about the sight in textual, audio and / or visual form offered and continue a route, in particular a navigation route to be proposed for the achievement of the attraction. Furthermore, upon reaching the point of interest, the previously displayed information and / or further information can be provided again.

Das System bietet dem Fahrer in einer weiteren Ausgestaltung ferner die Möglichkeit, Pausen während der Fahrt an sehenswerten Orten auf Wunsch auszuführen oder auch vor Fahrtantritt zu planen oder bei der Erkennung von Müdigkeit des Fahrers durch das Fahrzeug eine Pause an einem sehenswerten Ort mit allen genannten Informationen zu der Sehenswürdigkeit sowie mit einem Routenvorschlag dahin anzubieten.The system also provides the driver in a further embodiment, the ability to execute pauses while driving at places worth seeing on request or plan before driving or in the detection of fatigue of the driver by the vehicle a break at a place worth seeing with all the information to the attraction as well as with a suggested route to offer.

Die genannte Ausführungsform ermöglicht dabei die Bereitstellung eines kostengünstigen zusätzlichen Merkmals eines Verkehrszeichen-Erkennungssystems, da neben der typischerweise bereits in dem Fahrzeug vorhandenen optischen Kamera keine weitere zusätzliche Sensorik erforderlich ist. Ferner wird in vorteilhafter Weise eine umfassende Information der Insassen über Sehenswürdigkeiten ermöglicht. Zudem können insbesondere in Verbindung mit einer Müdigkeitsdetektion Pausenvorschläge an touristisch interessanten Orten ausgegeben werden.The named embodiment makes it possible to provide a cost-effective additional feature of a traffic sign recognition system, since in addition to the optical camera already typically present in the vehicle no further additional sensor system is required. Furthermore, comprehensive information of the passengers about sights is advantageously made possible. In addition, pause suggestions can be issued at touristically interesting places, especially in connection with a fatigue detection.

2 zeigt ein Beispiel einer Verkehrssituation, in welcher ein Verfahren, das mittels einer Recheneinheit ausgeführt wird, insbesondere das im Zusammenhang mit 1 erläuterte Verfahren, eingesetzt werden kann. 2 shows an example of a traffic situation in which a method which is executed by means of a computing unit, in particular that associated with 1 explained method can be used.

In der gezeigten Verkehrssituation fährt ein Fahrzeug 4 in Form eines Personenkraftwagens in einer schematisch mittels eines Pfeils A dargestellten Fahrtrichtung auf einem ersten Fahrstreifen bzw. einer ersten Fahrspur 14 einer Fahrbahn 15. Die Fahrbahn 15 weist neben der ersten Fahrspur 14 einen weiteren Fahrstreifen bzw. eine weitere Fahrspur 16 auf. Die Fahrbahn 15 ist beispielsweise Bestandteil einer Autobahn.In the traffic situation shown drives a vehicle 4 in the form of a passenger car in a direction schematically represented by an arrow A direction of travel on a first lane or a first lane 14 a roadway 15 , The roadway 15 points next to the first lane 14 another lane or another lane 16 on. The roadway 15 is for example part of a motorway.

Das Fahrzeug 4 weist eine optische Kamera 5 auf, welche in der gezeigten Situation im Bereich eines Innenspiegels des Fahrzeugs 4 angeordnet ist und eine Frontkamera des Fahrzeugs 4 bildet. Die optische Kamera 5 ist zum Erfassen von Objekten im Bereich einer momentanen Umgebung 3 des Fahrzeugs 4 innerhalb eines schematisch dargestellten Erfassungsbereiches 13 ausgebildet.The vehicle 4 has an optical camera 5 on, which in the situation shown in the region of an interior mirror of the vehicle 4 is arranged and a front camera of the vehicle 4 forms. The optical camera 5 is for detecting objects in the area of a current environment 3 of the vehicle 4 within a schematically represented detection area 13 educated.

Ein Verkehrszeichen 2, welches benachbart zu der ersten Fahrspur 14 der Fahrbahn 15 angeordnet ist, befindet sich zumindest teilweise innerhalb des Erfassungsbereiches 13 der optischen Kamera 5. Das Verkehrszeichen 2 bildet ein Verkehrsschild mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens 2 befindlichen Objekts, in der gezeigten Situation der ”Burg Eltz”, wobei diese in 2 nicht näher dargestellt ist. Das Verkehrszeichen 2 beinhaltet dabei bildliche Informationen 18 in Form einer schematischen Darstellung des touristischen Objekts sowie Informationen 19 in Textform, welche das abgebildete Objekt benennen.A traffic sign 2 which is adjacent to the first lane 14 the roadway 15 is located at least partially within the detection range 13 the optical camera 5 , The traffic sign 2 forms a road sign with tourist information to one, in the area of an environment of the traffic sign 2 in the situation shown the "castle Eltz", which in 2 not shown in detail. The traffic sign 2 contains pictorial information 18 in the form of a schematic representation of the tourist object as well as information 19 in text form, which name the depicted object.

Wie im Zusammenhang mit der folgenden Figur näher erläutert wird, können in der gezeigten Situation auf dem Verkehrszeichen 2 enthaltene Informationen zu dem im Bereich der Umgebung des Verkehrszeichens 2 befindlichen Objekt, insbesondere die Informationen 19 in Textform, basierend auf von der optischen Kamera 5 ermittelten Daten ermittelt werden und mittels einer in 2 nicht näher dargestellten optischen und/oder akustischen Ausgabevorrichtung des Fahrzeugs 4 ausgegeben werden. Ferner kann das touristische Objekt basierend auf den auf dem Verkehrszeichen 2 enthaltenen Informationen zu dem Objekt identifiziert werden und mittels einer Kommunikationseinheit 17 des Fahrzeugs 4 Informationen zu dem identifizierten Objekt von einer in 2 nicht näher dargestellten fahrzeugexternen Speichervorrichtung abgerufenen werden, wie ebenfalls im Zusammenhang mit der folgenden Figur näher erläutert wird.As will be explained in more detail in connection with the following figure, in the situation shown on the traffic sign 2 information contained in the area around the traffic sign 2 located object, in particular the information 19 in text form, based on the optical camera 5 determined data and by means of a in 2 not shown optical and / or acoustic output device of the vehicle 4 be issued. Furthermore, the tourist object can be based on the traffic sign 2 contained information about the object to be identified and by means of a communication unit 17 of the vehicle 4 Information about the identified object from an in 2 not shown in detail external vehicle storage device can be retrieved, as will also be explained in more detail in connection with the following figure.

Dazu zeigt 3 ein Verkehrszeichen-Erkennungssystem 11 des in 2 dargestellten Fahrzeugs 4 gemäß einer Ausführungsform der Erfindung. Aus Gründen der Übersichtlichkeit ist das Fahrzeug 4 in 3 lediglich schematisch dargestellt.In addition shows 3 a traffic sign recognition system 11 of in 2 shown vehicle 4 according to an embodiment of the invention. For clarity, the vehicle is 4 in 3 only shown schematically.

Das Verkehrszeichen-Erkennungssystem 11 weist in der gezeigten Ausführungsform zusätzlich zu der in 2 gezeigten optischen Kamera 5 eine Ausgabevorrichtung 6 auf, wobei die Ausgabevorrichtung 6 als optische und/oder akustische Ausgabevorrichtung ausgebildet ist. Die Ausgabevorrichtung 6 kann insbesondere als Anzeigevorrichtung eines Informations- und Unterhaltungssystems des Fahrzeugs 4 ausgebildet sein. The traffic sign recognition system 11 In the embodiment shown, in addition to that in FIG 2 shown optical camera 5 an output device 6 on, with the output device 6 is designed as an optical and / or acoustic output device. The output device 6 can in particular as a display device of an information and entertainment system of the vehicle 4 be educated.

Zudem weist das Verkehrszeichen-Erkennungssystem 11 eine Recheneinheit 1 auf. Die Recheneinheit 1 weist ein computerlesbares Medium 12 und eine Verarbeitungseinheit 20 auf. Die Verarbeitungseinheit 20 kann beispielsweise als elektronischer Prozessor, insbesondere als Mikroprozessor, Mikrocontroller oder anwendungsspezifische integrierte Schaltung (ASIC) ausgebildet sein. Das computerlesbare Medium 12 kann beispielsweise als Flash-Speichern ausgebildet sein. Auf dem computerlesbaren Medium 12 ist ein Computerprogrammprodukt gemäß einer der oben genannten Ausführungsformen gespeichert, das, wenn es auf der Recheneinheit 1 ausgeführt wird, die Recheneinheit 1 anleitet, die im Zusammenhang mit den oben genannten Ausführungsformen erläuterten Schritte auszuführen.In addition, the traffic sign recognition system has 11 an arithmetic unit 1 on. The arithmetic unit 1 has a computer readable medium 12 and a processing unit 20 on. The processing unit 20 For example, it can be designed as an electronic processor, in particular as a microprocessor, microcontroller or application-specific integrated circuit (ASIC). The computer-readable medium 12 can be configured, for example, as flash memories. On the computer readable medium 12 is stored a computer program product according to one of the above embodiments, which, when it is on the computing unit 1 is executed, the arithmetic unit 1 to carry out the steps explained in connection with the above-mentioned embodiments.

Die Recheneinheit 1 ist dazu über eine Signalleitung 27 mit der optischen Kamera 5 verbunden. Ferner ist die Recheneinheit 1 über eine Signalleitung 29 mit der in 2 dargestellten Kommunikationseinheit 17 des Fahrzeugs 4 verbunden. Mittels der Kommunikationseinheit 17, welche insbesondere als Mobilfunk-Kommunikationseinheit ausgebildet sein kann, können in einer fahrzeugexternen Speichervorrichtung 7 abgelegte Informationen zu dem identifizierten Objekt abgerufen werden. Die fahrzeugexterne Speichervorrichtung 7 ist dabei beispielsweise Bestandteil eines Servers 26. Weiterhin ist die Recheneinheit 1 über eine Signalleitung 30 mit einem Navigationssystem 9 des Fahrzeugs 4 sowie über eine Signalleitung 31 mit der Ausgabevorrichtung 6 verbunden. Damit können in einer Speichervorrichtung 8 des Navigationssystems 9 abgelegte Informationen zu dem identifizierten Objekt abgerufen werden. Das Navigationssystem 9 weist darüber hinaus eine Positionsermittlungsvorrichtung 10 auf, mittels derer eine momentane Position des Fahrzeugs 4 beispielsweise satellitengestützten ermittelt werden kann.The arithmetic unit 1 is via a signal line 27 with the optical camera 5 connected. Furthermore, the arithmetic unit 1 via a signal line 29 with the in 2 represented communication unit 17 of the vehicle 4 connected. By means of the communication unit 17 , which may be formed in particular as a mobile communication unit, may be in a vehicle external storage device 7 stored information about the identified object can be retrieved. The off-board storage device 7 is for example part of a server 26 , Furthermore, the arithmetic unit 1 via a signal line 30 with a navigation system 9 of the vehicle 4 as well as via a signal line 31 with the output device 6 connected. This can be done in a storage device 8th of the navigation system 9 stored information about the identified object can be retrieved. The navigation system 9 moreover has a position detecting device 10 on, by means of which a current position of the vehicle 4 For example, satellite-based can be determined.

Die Ausgabevorrichtung 6 weist in der gezeigten Ausführungsform einen Touchscreen 21 auf, wobei in einem ersten Bereich 22 des Touchscreens 21 die ermittelten auf dem Verkehrszeichen enthaltenen Informationen zu dem Objekt ausgegeben werden. In einem zweiten Bereich 23 des Touchscreens 21 wird eine Nutzerabfrage zur Ausgabe weiterer Informationen zu dem auf dem Verkehrszeichen enthaltenen Objekt sowie in einem dritten Bereich 24 eine Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem Objekt ausgegeben.The output device 6 has a touch screen in the embodiment shown 21 on, being in a first area 22 of the touchscreen 21 the determined information contained on the traffic sign is output to the object. In a second area 23 of the touchscreen 21 is a user query to output more information about the object contained on the traffic sign as well as in a third area 24 a user query issued to output a route to the object.

Falls eine Nutzeranforderung zum Ausgeben weiterer Informationen zu dem auf dem Verkehrszeichen enthaltenen Objekt vorliegt, beispielsweise durch Berühren des entsprechenden zweiten Bereichs 23 des Touchscreens 21, werden die von der Speichervorrichtung 7 und/oder der Speichervorrichtung 8 abgerufenen Informationen mittels der Ausgabevorrichtung 6 ausgegeben. Falls eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem Objekt vorliegt, beispielsweise durch Berühren des entsprechenden dritten Bereichs 24 des Touchscreens 21, wird mittels des Navigationssystems 9 eine momentane Position des Fahrzeugs 4 sowie eine Fahrtroute von der momentanen Position des Fahrzeugs 4 zu der Position des Objekts mittels in der Speichervorrichtung 8 des Navigationssystems 9 abgelegten Kartendaten ermittelt, wobei die Position des Objekts beispielsweise aus der fahrzeugexternen Speichervorrichtung 7 abgerufen wird. Mittels der Ausgabevorrichtung 6 kann die ermittelte Fahrtroute anschließend ausgegeben werden. Die Ausgabevorrichtung 6 ist dazu über eine Signalleitung 32 mit dem Navigationssystem 9 verbunden.If there is a user request for outputting further information on the object contained on the traffic sign, for example by touching the corresponding second area 23 of the touchscreen 21 , those from the storage device 7 and / or the storage device 8th retrieved information by means of the output device 6 output. If there is a user request to output a route to the object, for example by touching the corresponding third area 24 of the touchscreen 21 , is by means of the navigation system 9 a current position of the vehicle 4 and a travel route from the current position of the vehicle 4 to the position of the object by means of in the storage device 8th of the navigation system 9 stored map data, wherein the position of the object, for example, from the vehicle external storage device 7 is retrieved. By means of the output device 6 The determined route can then be issued. The output device 6 is via a signal line 32 with the navigation system 9 connected.

In der gezeigten Ausführungsform weist das Verkehrszeichen-Erkennungssystem 11 zudem eine weitere optische Kamera 25 auf, welche derart in einem Innenraum des Fahrzeugs 4 angeordnet ist, dass ein in 3 nicht näher dargestellter Fahrer des Fahrzeugs 4 zumindest teilweise innerhalb eines Erfassungsbereiches der optischen Kamera 25 angeordnet ist. Basierend auf von der optischen Kamera 25 ermittelten Daten kann damit ein Grad einer Müdigkeit des Fahrers des Fahrzeugs 4 ermittelt werden und, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet, eine Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem identifizierten Objekt mittels der Ausgabevorrichtung 6 ausgegeben werden, wobei das Ausgeben der Nutzerabfrage in der genannten Situation zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrades des Fahrers kennzeichnenden Warnmeldung beinhaltet. Die optische Kamera 25 ist dazu über eine Signalleitung 28 mit der Recheneinheit 1 verbunden.In the embodiment shown, the traffic sign recognition system 11 also another optical camera 25 on, which is so in an interior of the vehicle 4 arranged is that in 3 not shown driver of the vehicle 4 at least partially within a detection range of the optical camera 25 is arranged. Based on the optical camera 25 Ascertained data can thus be a degree of fatigue of the driver of the vehicle 4 and, if the determined degree of driver fatigue exceeds a predetermined threshold, a user query for outputting a route to the identified object by the output device 6 outputting the user query in said situation further includes outputting a warning message indicative of an increased degree of driver fatigue. The optical camera 25 is via a signal line 28 with the arithmetic unit 1 connected.

Obwohl zumindest eine beispielhafte Ausführungsform in der vorhergehenden Beschreibung gezeigt wurde, können verschiedene Änderungen und Modifikationen vorgenommen werden. Die genannten Ausführungsformen sind lediglich Beispiele und nicht dazu vorgesehen, den Gültigkeitsbereich, die Anwendbarkeit oder die Konfiguration in irgendeiner Weise zu beschränken. Vielmehr stellt die vorhergehende Beschreibung dem Fachmann einen Plan zur Umsetzung zumindest einer beispielhaften Ausführungsform zur Verfügung, wobei zahlreiche Änderungen in der Funktion und der Anordnung von in einer beispielhaften Ausführungsform beschriebenen Elementen gemacht werden können, ohne den Schutzbereich der angefügten Ansprüche und ihrer rechtlichen Äquivalente zu verlassen.Although at least one exemplary embodiment has been shown in the foregoing description, various changes and modifications may be made. The above embodiments are merely examples and are not intended to limit the scope, applicability, or configuration in any way. Rather, the foregoing description provides those skilled in the art with a plan for practicing at least one example embodiment, wherein numerous Changes in the function and arrangement of elements described in an exemplary embodiment may be made without departing from the scope of the appended claims and their legal equivalents.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Recheneinheitcomputer unit
22
Verkehrszeichenroad sign
33
UmgebungSurroundings
44
Fahrzeugvehicle
55
Kameracamera
66
Ausgabevorrichtungoutput device
77
Speichervorrichtungstorage device
88th
Speichervorrichtungstorage device
99
Navigationssystemnavigation system
1010
PositionsermittlungsvorrichtungPosition-determining device
1111
Verkehrszeichen-ErkennungssystemTraffic sign recognition system
1212
Mediummedium
1313
Erfassungsbereichdetection range
1414
Fahrspurlane
1515
Fahrbahnroadway
1616
Fahrspurlane
1717
Kommunikationseinheitcommunication unit
1818
Informationeninformation
1919
Informationeninformation
2020
Verarbeitungseinheitprocessing unit
2121
Touchscreentouchscreen
2222
BereichArea
2323
BereichArea
2424
BereichArea
2525
Kameracamera
2626
Serverserver
2727
Signalleitungsignal line
2828
Signalleitungsignal line
2929
Signalleitungsignal line
3030
Signalleitungsignal line
3131
Signalleitungsignal line
3232
Signalleitungsignal line
4040
Schrittstep
5050
Schrittstep
6060
Schrittstep
7070
Schrittstep
8080
Schrittstep
9090
Schrittstep
100100
Schrittstep
110110
Schrittstep
120120
Schrittstep
130130
Schrittstep
AA
Pfeilarrow

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • US 6671615 B1 [0002] US 6671615 B1 [0002]

Claims (15)

Computerprogrammprodukt, das, wenn es auf einer Recheneinheit (1) ausgeführt wird, die Recheneinheit (1) anleitet, folgende Schritte auszuführen: – Ermitteln, ob zumindest ein Verkehrszeichen (2) im Bereich einer momentanen Umgebung (3) eines Fahrzeugs (4) angeordnet ist, basierend auf von zumindest einer optischen Kamera (5) ermittelter Daten, – falls ermittelt wird, dass zumindest ein Verkehrszeichen (2) im Bereich der momentanen Umgebung (3) des Fahrzeugs (4) angeordnet ist, Ermitteln, ob das zumindest eine ermittelte Verkehrszeichen (2) einer vorbestimmten Verkehrszeichen-Art entspricht, basierend auf den von der zumindest einen optischen Kamera (5) ermittelten Daten, wobei die vorbestimmte Verkehrszeichen-Art ein Verkehrszeichen mit touristischen Informationen zu einem, im Bereich einer Umgebung des Verkehrszeichens befindlichen Objekt ist, – falls ermittelt wird, dass das zumindest eine ermittelte Verkehrszeichen (2) der vorbestimmten Verkehrszeichen-Art entspricht, Ermitteln von auf dem Verkehrszeichen (2) enthaltenen Informationen zu einem im Bereich einer Umgebung des ermittelten Verkehrszeichens (2) befindlichen Objekt, basierend auf den von der zumindest einen optischen Kamera (5) ermittelten Daten und Ausgeben der ermittelten auf dem Verkehrszeichen (2) enthaltenen Informationen zu dem Objekt mittels zumindest einer optischen und/oder akustischen Ausgabevorrichtung (6).Computer program product that, when stored on a computer unit ( 1 ) is executed, the arithmetic unit ( 1 ) to carry out the following steps: determining whether at least one traffic sign ( 2 ) in the area of a current environment ( 3 ) of a vehicle ( 4 ) is arranged, based on at least one optical camera ( 5 ), if it is determined that at least one traffic sign ( 2 ) in the area of the current environment ( 3 ) of the vehicle ( 4 ), determining whether the at least one determined traffic sign ( 2 ) corresponds to a predetermined traffic sign type, based on the of the at least one optical camera ( 5 ), wherein the predetermined traffic sign type is a traffic sign with tourist information about an object located in the vicinity of the traffic sign, if it is determined that the at least one determined traffic sign ( 2 ) corresponds to the predetermined traffic sign type, determining on the traffic sign ( 2 ) contained in an area of an environment of the determined traffic sign ( 2 ) based on that of the at least one optical camera ( 5 ) and outputting the determined on the traffic sign ( 2 ) information about the object by means of at least one optical and / or acoustic output device ( 6 ). Computerprogrammprodukt nach Anspruch 1, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens (2) befindlichen Objekts, basierend auf den auf dem Verkehrszeichen (2) enthaltenen Informationen zu dem Objekt, – Abrufen von in einer Speichervorrichtung (7, 8) abgelegten Informationen zu dem identifizierten Objekt.Computer program product according to claim 1, wherein the arithmetic unit ( 1 ) is also instructed to carry out the following steps: identifying the area of the detected traffic sign ( 2 ), based on the traffic sign ( 2 ) information about the object, - fetching in a storage device ( 7 . 8th ) stored information about the identified object. Computerprogrammprodukt nach Anspruch 2, wobei das Identifizieren des im Bereich der Umgebung des ermittelten Verkehrszeichens (2) befindlichen Objekts ein Abrufen von in der Speichervorrichtung (7, 8) abgelegten Informationen basierend auf den auf dem Verkehrszeichen (2) enthaltenen Informationen zu dem Objekt beinhaltet.A computer program product according to claim 2, wherein the identifying in the vicinity of the determined traffic sign ( 2 ) in the storage device (FIG. 7 . 8th ) stored information based on the traffic sign ( 2 ) contains information about the object. Computerprogrammprodukt nach Anspruch 2 oder Anspruch 3, wobei das Abrufen der in der Speichervorrichtung (7, 8) abgelegten Informationen zu dem identifizierten Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung (7) abgelegten Informationen und/oder von in einer Speichervorrichtung (8) eines Navigationssystems (9) abgelegten Informationen zu dem identifizierten Objekt beinhaltet.A computer program product according to claim 2 or claim 3, wherein the retrieval of data in the storage device ( 7 . 8th stored information on the identified object retrieving in an off-board storage device ( 7 ) stored information and / or in a storage device ( 8th ) of a navigation system ( 9 ) contains stored information about the identified object. Computerprogrammprodukt nach Anspruch 3 oder Anspruch 4, wobei das Abrufen der in der Speichervorrichtung (7, 8) abgelegten Informationen zu dem Objekt ein Abrufen von in einer fahrzeugexternen Speichervorrichtung (7) abgelegten Informationen und/oder von in einer Speichervorrichtung (8) eines Navigationssystems (9) abgelegten Informationen zu dem Objekt basierend auf den auf dem Verkehrszeichen (2) enthaltenen Informationen zu dem Objekt beinhaltet.A computer program product according to claim 3 or claim 4, wherein said retrieving in the memory device ( 7 . 8th ) stored information about the object in a vehicle external storage device ( 7 ) stored information and / or in a storage device ( 8th ) of a navigation system ( 9 ) stored information about the object based on the traffic sign ( 2 ) contains information about the object. Computerprogrammprodukt nach einem der Ansprüche 2 bis 5, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung (6).Computer program product according to one of claims 2 to 5, wherein the arithmetic unit ( 1 ) is further performed to execute the following steps: outputting the retrieved information on the identified object by means of the at least one optical and / or acoustic output device ( 6 ). Computerprogrammprodukt nach Anspruch 6, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Ausgeben einer Nutzerabfrage zur Ausgabe weiterer Informationen zu dem identifizierten Objekt, – Ermitteln, ob eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt, – wobei das Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung (6) erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben von weiteren Informationen zu dem identifizierten Objekt vorliegt.Computer program product according to claim 6, wherein the arithmetic unit ( 1 ) is further instructed to perform the steps of: - issuing a user query to output further information on the identified object, - determining whether there is a user request to output further information on the identified object, - outputting the retrieved information to the identified object by means of the at least one optical and / or acoustic output device ( 6 ), if it is determined that there is a user request to output further information on the identified object. Computerprogrammprodukt nach einem der Ansprüche 2 bis 7, wobei das Abrufen der in der Speichervorrichtung (7, 8) abgelegten Informationen zu dem identifizierten Objekt ein Abrufen einer Position des identifizierten Objekts beinhaltet und wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Ermitteln einer ersten momentanen Position des Fahrzeugs (4) mittels einer Positionsermittlungsvorrichtung (10), – Ermitteln einer Fahrtroute von der ersten momentanen Position des Fahrzeugs (4) zu der Position des identifizierten Objekts mittels in der Speichervorrichtung (8) des Navigationssystems (9) abgelegten Kartendaten, – Ausgeben der ermittelten Fahrtroute mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung (6).The computer program product of any one of claims 2 to 7, wherein retrieving the data in the memory device ( 7 . 8th ) contains information about the identified object, retrieving a position of the identified object, and wherein the arithmetic unit ( 1 ) is instructed to carry out the following steps: determining a first instantaneous position of the vehicle ( 4 ) by means of a position-determining device ( 10 ), - determining a travel route from the first current position of the vehicle ( 4 ) to the position of the identified object by means of in the memory device ( 8th ) of the navigation system ( 9 ) stored map data, outputting the determined travel route by means of the at least one optical and / or acoustic output device ( 6 ). Computerprogrammprodukt nach Anspruch 8, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Ausgeben einer Nutzerabfrage zur Ausgabe einer Fahrtroute zu dem identifizierten Objekt, – Ermitteln, ob eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt, – wobei das Ermitteln der Fahrtoute von der ersten momentanen Position des Fahrzeugs (4) zu der Position des identifizierten Objekts und das Ausgeben der ermittelten Fahrtroute erfolgt, falls ermittelt wird, dass eine Nutzeranforderung zum Ausgeben einer Fahrtroute zu dem identifizierten Objekt vorliegt.Computer program product according to claim 8, wherein the arithmetic unit ( 1 ) is additionally instructed to carry out the following steps: issuing a user query for outputting a route to the identified object, determining whether a user request exists for outputting a route to the identified object, Wherein determining the travel route from the first current position of the vehicle ( 4 ) to the position of the identified object and outputting the determined travel route, if it is determined that there is a user request for issuing a travel route to the identified object. Computerprogrammprodukt nach Anspruch 9, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Ermitteln zumindest eines, eine mögliche Müdigkeit eines momentanen Fahrers des Fahrzeugs (4) kennzeichnenden Parameters, – Ermitteln eines Grades der Müdigkeit des Fahrers basierend auf dem zumindest einen ermittelten Parameter, – wobei das Ausgeben der Nutzerabfrage zur Ausgabe der Fahrtroute zu dem identifizierten Objekt erfolgt, falls der ermittelte Grad der Müdigkeit des Fahrers einen vorbestimmten Schwellenwert überschreitet und wobei das Ausgeben der Nutzerabfrage zudem ein Ausgeben einer, einen erhöhten Müdigkeitsgrad des Fahrers kennzeichnenden Warnmeldung beinhaltet.Computer program product according to claim 9, wherein the arithmetic unit ( 1 ) is guided by the following steps: determining at least one possible fatigue of a current driver of the vehicle ( 4 characterizing parameter, - determining a degree of driver fatigue based on the at least one determined parameter, - outputting the user query to output the travel route to the identified object if the determined degree of driver fatigue exceeds a predetermined threshold, and wherein outputting the user query further includes outputting a warning message indicative of increased driver fatigue. Computerprogrammprodukt nach einem der Ansprüche 8 bis 10, wobei die Recheneinheit (1) zudem angeleitet wird, folgende Schritte auszuführen: – Ermitteln einer zweiten momentanen Position des Fahrzeugs (4) mittels der Positionsermittlungsvorrichtung (10), – Ermitteln, ob sich die zweite momentane Position in einem vorbestimmten Bereich um die Position des identifizierten Objekts befindet, – falls ermittelt wird, dass sich die zweite momentane Position in dem vorbestimmten Bereich um die Position des identifizierten Objekts befindet, wiederholtes Ausgeben der abgerufenen Informationen zu dem identifizierten Objekt und/oder Ausgeben von weiteren Informationen zu dem identifizierten Objekt mittels der zumindest einen optischen und/oder akustischen Ausgabevorrichtung (6).Computer program product according to one of claims 8 to 10, wherein the arithmetic unit ( 1 ) is instructed to carry out the following steps: determining a second instantaneous position of the vehicle ( 4 ) by means of the position-determining device ( 10 ), - determining whether the second current position is in a predetermined range around the position of the identified object, - if it is determined that the second current position is in the predetermined range around the position of the identified object, repeatedly outputting the retrieved Information on the identified object and / or output of further information on the identified object by means of the at least one optical and / or acoustic output device ( 6 ). Verkehrszeichen-Erkennungssystem für ein Fahrzeug (4), aufweisend – zumindest eine optische Kamera (5), wobei die zumindest eine optische Kamera (5) zum Erfassen von Objekten ausgebildet ist, – zumindest eine optische und/oder akustische Ausgabevorrichtung (6), – eine Recheneinheit (1), – ein Computerprogrammprodukt nach einem der vorhergehenden Ansprüche.Traffic sign recognition system for a vehicle ( 4 ), comprising - at least one optical camera ( 5 ), wherein the at least one optical camera ( 5 ) is designed for detecting objects, - at least one optical and / or acoustic output device ( 6 ), - a computing unit ( 1 ), - a computer program product according to any one of the preceding claims. Verkehrszeichen-Erkennungssystem nach Anspruch 12, wobei das Verkehrszeichen-Erkennungssystem (11) Bestandteil des Fahrzeugs (4) ist.Traffic sign recognition system according to claim 12, wherein the traffic sign recognition system ( 11 ) Part of the vehicle ( 4 ). Verkehrszeichen-Erkennungssystem nach Anspruch 12, wobei das Verkehrszeichen-Erkennungssystem Bestandteil eines Mobiltelefons ist.The traffic sign recognition system of claim 12, wherein the traffic sign recognition system is part of a mobile telephone. Computerlesbares Medium, auf dem ein Computerprogrammprodukt nach einem der Ansprüche 1 bis 11 gespeichert ist.A computer readable medium having stored thereon a computer program product according to any one of claims 1 to 11.
DE202013007354.3U 2013-08-14 2013-08-14 Computer program product and traffic sign recognition system for a vehicle Expired - Lifetime DE202013007354U1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE202013007354.3U DE202013007354U1 (en) 2013-08-14 2013-08-14 Computer program product and traffic sign recognition system for a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE202013007354.3U DE202013007354U1 (en) 2013-08-14 2013-08-14 Computer program product and traffic sign recognition system for a vehicle

Publications (1)

Publication Number Publication Date
DE202013007354U1 true DE202013007354U1 (en) 2014-11-18

Family

ID=52010702

Family Applications (1)

Application Number Title Priority Date Filing Date
DE202013007354.3U Expired - Lifetime DE202013007354U1 (en) 2013-08-14 2013-08-14 Computer program product and traffic sign recognition system for a vehicle

Country Status (1)

Country Link
DE (1) DE202013007354U1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017080822A1 (en) * 2015-11-10 2017-05-18 Robert Bosch Gmbh Method and device for analysing a driving manner of a driver of a vehicle
DE102015015510A1 (en) 2015-11-30 2017-06-01 Audi Ag A method of recognizing an object based on a location of the object in an image, apparatus and motor vehicle

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10034499A1 (en) * 2000-07-15 2002-01-24 Bosch Gmbh Robert Information and control system for vehicles
US20020147910A1 (en) * 2001-03-05 2002-10-10 Brundage Trent J. Digitally watermarked maps and signs and related navigational tools
US6671615B1 (en) 2000-05-02 2003-12-30 Navigation Technologies Corp. Navigation system with sign assistance
DE10338455A1 (en) * 2003-08-21 2005-04-14 Robert Bosch Gmbh Driver information device
DE102005026991A1 (en) * 2005-06-10 2006-12-14 Robert Bosch Gmbh Motor vehicle driver informing method, involves providing information signal when steering/driving time exceeds limit value, and road sign for indicating resting possibilities, to driver
DE60318430T2 (en) * 2003-08-14 2009-01-02 Harman Becker Automotive Systems Gmbh Computer-aided system and method for outputting information to a driver of a vehicle
US20130076883A1 (en) * 2011-09-23 2013-03-28 Visteon Global Technologies Inc. Vehicle system and method for providing information regarding an external item a driver is focusing on

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6671615B1 (en) 2000-05-02 2003-12-30 Navigation Technologies Corp. Navigation system with sign assistance
DE10034499A1 (en) * 2000-07-15 2002-01-24 Bosch Gmbh Robert Information and control system for vehicles
US20020147910A1 (en) * 2001-03-05 2002-10-10 Brundage Trent J. Digitally watermarked maps and signs and related navigational tools
DE60318430T2 (en) * 2003-08-14 2009-01-02 Harman Becker Automotive Systems Gmbh Computer-aided system and method for outputting information to a driver of a vehicle
DE10338455A1 (en) * 2003-08-21 2005-04-14 Robert Bosch Gmbh Driver information device
DE102005026991A1 (en) * 2005-06-10 2006-12-14 Robert Bosch Gmbh Motor vehicle driver informing method, involves providing information signal when steering/driving time exceeds limit value, and road sign for indicating resting possibilities, to driver
US20130076883A1 (en) * 2011-09-23 2013-03-28 Visteon Global Technologies Inc. Vehicle system and method for providing information regarding an external item a driver is focusing on

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017080822A1 (en) * 2015-11-10 2017-05-18 Robert Bosch Gmbh Method and device for analysing a driving manner of a driver of a vehicle
CN108349500A (en) * 2015-11-10 2018-07-31 罗伯特·博世有限公司 The method and apparatus of the drive manner of driver for analyzing vehicle
DE102015015510A1 (en) 2015-11-30 2017-06-01 Audi Ag A method of recognizing an object based on a location of the object in an image, apparatus and motor vehicle

Similar Documents

Publication Publication Date Title
EP2583263B1 (en) Method for combining a road sign recognition system and a lane detection system of a motor vehicle
DE102013019904A1 (en) Portable vehicle operating device with position detection
DE102016222592A1 (en) Traffic sign recognition device and associated speed limiting method
DE102013000131B4 (en) Motor vehicle feedback system and method for providing feedback
DE202013006466U1 (en) Computer program product and driver assistance system for a vehicle
DE102011114888A1 (en) Method for operating a driver assistance system of a motor vehicle and driver assistance system for a motor vehicle
DE102014009627A1 (en) Method for reporting a free parking space for a vehicle
DE102013210729A1 (en) Method and device for signaling a visually at least partially hidden traffic object for a driver of a vehicle
DE102013215176A1 (en) A method for displaying a traffic environment information of a traffic environment of a motor vehicle and motor vehicle
DE202013010566U1 (en) Driver assistance system for a motor vehicle
DE102012024613A1 (en) Method for operating e.g. car, involves determining recorded signs having specific traffic rule for vehicle combinations with trailer based on obtained data, if connection between vehicle and trailer is made through coupling device
DE202013008112U1 (en) Driver assistance system for a motor vehicle
DE102017204254A1 (en) Method and device for reminding a driver to start at a light signal device
DE102012016366A1 (en) Method for operating a driver assistance system of a motor vehicle and driver assistance system for a motor vehicle
DE202013007354U1 (en) Computer program product and traffic sign recognition system for a vehicle
DE102017213981A1 (en) A method of assisting a user of a vehicle by visualizing a vehicle target position history
DE102006024615B4 (en) Method for selecting and displaying a visual representation for an operating function of a control device in a vehicle and operating device
DE102013001747A1 (en) Method for providing a rating of drive along traffic route traveled by learner-driver of motor car, involves detecting route data and evaluation data along busy route so as to assign the data to current geographical position of car
DE102015217659B4 (en) Method and device for extended driver information
DE102017003339A1 (en) Driver assistance system and method for operating such
DE102021201065A1 (en) Method for displaying an environment model of an environment of a motor vehicle, and environment detection system
DE102010042039A1 (en) Method for determining acoustic guidance information for driver of vehicle to be located from route portion to destination, involves determining acoustic guidance information, where information comprises references to objects
DE102018200980B4 (en) Method for determining an object perception probability with which a driver of a motor vehicle perceives objects in the surroundings of the motor vehicle, as well as a control device for a motor vehicle and motor vehicle
DE102019125663A1 (en) Method for selecting data for ADAS systems
DE102008026186A1 (en) Method for displaying information in vehicle, involves determining travel route and route guidance by multiple output units of navigation device, where multiple travel information is issued on output units sequence

Legal Events

Date Code Title Description
R163 Identified publications notified
R082 Change of representative
R207 Utility model specification

Effective date: 20141224

R150 Utility model maintained after payment of first maintenance fee after three years
R157 Lapse of ip right after 6 years