DE102008008948A1 - System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module - Google Patents

System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module Download PDF

Info

Publication number
DE102008008948A1
DE102008008948A1 DE102008008948A DE102008008948A DE102008008948A1 DE 102008008948 A1 DE102008008948 A1 DE 102008008948A1 DE 102008008948 A DE102008008948 A DE 102008008948A DE 102008008948 A DE102008008948 A DE 102008008948A DE 102008008948 A1 DE102008008948 A1 DE 102008008948A1
Authority
DE
Germany
Prior art keywords
input
information
modality
modalities
system architecture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102008008948A
Other languages
German (de)
Inventor
Christoph WÄLLER
Heino Dr. rer. nat. Wengelnik
Thorsten Dr. Bohnenberger
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102008008948A priority Critical patent/DE102008008948A1/en
Publication of DE102008008948A1 publication Critical patent/DE102008008948A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval

Abstract

The architecture has detecting modules with user interfaces providing the multi-part and hierarchically structured multiword information due to the modal input-interaction of a user to output the information to user interfaces of an output module. Each executed input of information parts of the information of the selected or used input modalities (M1-M3) interacts to further selected or used input modalities such that the system controls the information length in each selected or used input modality by a system-procedure and inputs the result about the interfaces of the output module. An independent claim is also included for a method for multi-modal object inputting of the multi-part and hierarchically structured object information and dynamic revaluation of an object for a navigation system of a motor vehicle based on the object information.

Description

Die Erfindung betrifft eine Systemarchitektur zur multimodalen Informationseingabe einer mehrteilig und hierarchisch gegliederten Mehrwort-Information, und eine dynamische Anpassung einer Informationsanzeige, insbesondere eines Navigationssystems eines Kraftfahrzeuges, mit einer Vielzahl von Ein- und Ausgabe-Modalitäten mit den im Oberbegriff des Anspruchs 1 genannten Merkmalen und ein Verfahren zur automatischen Ansteuerung eines Navigationssystems eines Kraftfahrzeuges zur multimodalen Informationseingabe einer mehrteilig und hierarchisch gegliederten Mehrwort-Information, mit den im Oberbegriff der Ansprüche 18 und 19 genannten Merkmalen.The The invention relates to a system architecture for multimodal information input a multi-part and hierarchically structured multi-word information, and a dynamic adaptation of an information display, in particular a navigation system of a motor vehicle, with a plurality of input and output modalities with those in the preamble of Claim 1 features and a method for automatic Control of a navigation system of a motor vehicle for multimodal Information input of a multi-part and hierarchically structured Multi-word information, in the preamble of the claims 18 and 19 mentioned features.

Es ist bekannt, dass das automobile Umfeld noch weitere multimodale Benutzerschnittstellen erfordert, als beispielsweise die Mensch-Computer-Kommunikation an einem heimischen Personalcomputer. Während einer Autofahrt ist es die visuelle Sinneswahrnehmung des Fahrers, die besonders durch das Fahren selbst und die Beobachtung des Verkehrs belastet ist.It is known that the automotive environment is even more multimodal Requires user interfaces, such as human-computer communication at a domestic personal computer. During a drive It is the visual sensory perception of the driver that is particularly through the driving itself and the observation of traffic is strained.

Werden nun weitere Informationen, wie zum Beispiel die Routeninformationen eines Navigationssystems, ebenfalls über eine visuelle Ausgabe dargestellt, birgt dies ein nicht zu unterschätzendes Gefahrenpotenzial. Wenn der Fahrer in einer heiklen Verkehrssituation den Blick vom Verkehrsgeschehen abwendet, besteht die Gefahr der visuellen Wahrnehmungsüberforderung. Demnach kann es passieren, dass der Fahrer die Information aufgrund der verstärkten visuellen Modalität aus dem Fahrgeschehen und beispielsweise der Routeninformationen des Navigationssystems nicht aufnehmen kann. Multimodale Dialogsysteme bieten hier die Möglichkeit einer situationsgerechten und sicheren Kommunikation.Become now more information, such as the route information of a navigation system, also via a visual This is not to be underestimated Potential danger. When the driver is in a delicate traffic situation avoids the view from the traffic, there is a danger of visual perception overload. Accordingly, it can happen that the driver the information due to the enhanced visual Modality of the driving and for example the Route information of the navigation system can not record. Multimodal dialog systems offer the possibility of a appropriate and secure communication.

Es wurden daher in den letzten Jahren bemerkenswerte Anstrengungen unternommen, die Dateneingabe und die Bereitstellung der Information für den Fahrer optimaler zu gestalten. So sind beispielsweise Spracheingabesysteme entwickelt worden, die eine kontaktlose Eingabe fast ohne Zuhilfenahme der wenigstens einen Hand des Fahrzeugführers ermöglichen.It have therefore been making remarkable efforts in recent years undertaken, data entry and provision of information for to make the driver more optimal. For example, voice input systems been developed, which allows a contactless input almost without assistance allow at least one hand of the driver.

Ferner werden Bildschirme als Anzeigeelemente und zur Bedienung als Touch-Screens auch gleichzeitig als Eingabeschnittstellen für elektronische Geräte im Fahrzeug, wie einem Navigationsgerät, einer Freisprecheinrichtung, einem Radio, einem Fernseher und sogar als Klimabediengerät und dergleichen eingesetzt.Further screens are used as display elements and for operation as touch screens also simultaneously as input interfaces for electronic Devices in the vehicle, such as a navigation device, a handsfree, a radio, a TV and even used as a climate control device and the like.

Aus dem Stand der Technik sind ferner mehrere Eingabemöglichkeiten, sogenannte Eingabe-Modalitäten, einer strukturierten Information unabhängig voneinander nutzbar. So kann sich der Benutzer beispielsweise entscheiden, seine Zielvorgabe durch die Spracheingabe-Modalität oder per Tastatur einzugeben, wobei die Tastatur wiederum, beispielsweise auf einem Touch-Screen, in Form von berührungssensitiven Feldern abgebildet sein kann. Ferner kann der Benutzer sein Ziel beispielsweise durch ein Berühren oder Umkreisen eines geografischen Ortpunktes vorgeben.Out The prior art also has several input options, so-called input modalities, structured information usable independently of each other. That way the user can For example, decide his or her goal through the voice input modality or by keyboard, again with the keyboard, for example on a touch screen, in the form of touch-sensitive Fields can be shown. Furthermore, the user can be his destination for example, by touching or circling a specify geographic location point.

Jedoch ist allen Ein-/Ausgabeschnittstellen beziehungsweise Modalitäten und den mit ihnen bedienbaren elektronischen Geräten eigen, dass die einmal, für die beispielhaft erwähnte Zieleingabe, ausgewählte Modalität bis zum Abschluss der Eingabe beibehalten werden muss, so dass sogar mit einer anderen Eingabe-Modalität neu begonnen werden muss, wenn dem Benutzer aus irgendeinem Grund die zunächst gewählte Eingabe-Modalität bei der weiteren Zieleingabe missfällt.however is all input / output interfaces or modalities and the electronic devices that can be operated with them, that once, for the example mentioned Destination input, selected modality to completion the input must be maintained, so even with another Input modality must be restarted when the user for some reason the initially selected input modality in the further destination input displeases.

Die Art der einzugebenden Information, die zumeist eine Zielvorgabe für eine Navigationsvorrichtung ist, kann vorgeben, dass für verschiedene Teile, der beispielsweise als Adressenangabe strukturierten Zielinformation, andere Eingabe- und Anzeige-Modalitäten vorteilhafter sind als die, mit der der Benutzer seine Zieleingabe begonnen hatte. Ähnliche Situationen können vorkommen, wenn ein Musiktitel aus einer großen Anzahl gespeicherter Titel für eine Tonwiedergabe auszuwählen ist.The Type of information to be entered, which is usually a target for a navigation device can pretend that for different parts, for example as an address structured destination information, other input and display modalities are more advantageous than the one with which the user enters his destination had begun. Similar situations can occur if a song is stored from a large number Title for a sound reproduction is to be selected.

Deswegen kann die Benutzung der Eingabe- und Ausgabe-Modalitäten einer elektronischen Vorrichtung im Fahrzeug durch den Fahrzeugführer während der Fahrt problematisch sein.therefore may be the use of the input and output modalities an electronic device in the vehicle by the driver during the ride be problematic.

Der Begriff Modalität, beziehungsweise Eingabe-/Ausgabe-Modalität, wird in dieser Spezifikation so verwendet, dass er jeweils eine Gesamtheit zur Ausführung einer Funktion benötigter Baugruppen, Einheiten, Programme und ähnliches mit einschließt.Of the Term modality, or input / output modality, is used in this specification to have one each Entity needed to perform a function Includes assemblies, units, programs, and the like.

Der Erfindung liegt die Aufgabe zugrunde, die Ein- und Ausgabe-Modalitäten einer elektronischen Vorrichtung im Fahrzeug, insbesondere eines Navigationssystems, einfacher bedienbar zu gestalten.Of the Invention is based on the object, the input and output modalities an electronic device in the vehicle, in particular a navigation system, easier to use.

Ein Verfahren und eine Vorrichtung zur Erkennung von Sprachkommandos ist bereits aus der DE 195 33 541 C1 bekannt. Dieses Verfahren ermöglicht die automatische Steuerung eines oder mehrerer Geräte durch Sprachkommandos oder per Sprachdialog im Echtzeitbetrieb. Die Patentschrift offenbart ferner eine Vorrichtung, bei welcher eine Spracheingabe- und Sprachausgabeeinheit über eine Sprachsignalvorverarbeitungseinheit mit einer Spracherkennungseinheit verbunden sind.A method and a device for recognizing speech commands is already out of the DE 195 33 541 C1 known. This method allows the automatic control of one or more devices by voice commands or voice dialogue in real-time operation. The patent further discloses an apparatus in which a voice input and output unit are connected to a voice recognition unit via a voice signal preprocessing unit.

Bekannt ist ferner eine Vorrichtung und ein Verfahren, die in der Offenlegungsschrift DE 10 2005 007 317 A1 beschrieben sind und dazu dienen, den Benutzer zur Anwendung einer Sprachbedienung anzuregen, wobei nicht-sprachliche Eingaben ebenfalls ermöglicht sind.Also known is an apparatus and a method that in the published patent application DE 10 2005 007 317 A1 are described and serve to encourage the user to use a voice control, with non-linguistic inputs are also possible.

Die Erfindung geht von diesem Stand der Technik aus, der durch die Merkmale des Oberbegriffs des Anspruchs 1 definiert ist.The Invention is based on this prior art, by the features the preamble of claim 1 is defined.

Die Erfindung zeichnet sich ausgehend vom Oberbegriff des Anspruchs 1 zunächst dadurch aus, dass nach Eingabe eines Informationsteils, einer mehrteilig und hierarchisch gegliederten Mehrwort-Information, in einer von mindestens zwei ausgewählten Eingabe-Modalitäten, abweichend von der bisher zur Teileingabe verwendeten Eingabe-Modalität, eine andere Eingabe-Modalität auswählbar und zur Eingabe nutzbar ist.The Invention is based on the preamble of the claim 1 initially characterized in that after entering an information piece, a multi-part and hierarchically structured multi-word information, in one of at least two selected input modalities, deviating from the input modality previously used for part input, another input modality selectable and to Input is usable.

Diese Vorgehensweise ist möglich, da erfindungsgemäß jede getätigte Eingabe eines Informationsteils der mehrteilig, hierarchisch gegliederten Mehrwort-Information der ausgewählten oder benutzten Eingabe-Modalität, auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität einwirkt.These Approach is possible because according to the invention each inputting an information part of the multipart, hierarchically structured multi-word information of the selected or used input modality, to which at least one more Selected or used input modality acts.

Das System ist mit Hilfe dieser Systemarchitektur in der Lage, den jeweils bis dahin bereitgestellten Informationsumfang über eine System-Prozedur in jeder der ausgewählten oder benutzten Modalität weiter einzuschränken und das Ergebnis über mindestens eine angeordnete Benutzerschnittstellen eines Ausgabemoduls auszugeben.The System is able to do this with the help of this system architecture until then provided information about a System procedure in each of the selected or used Modality continues to narrow and the result over at least one arranged user interface of an output module issue.

Für eine Routenplanung eines Navigationssystems, insbesondere dessen Zieleingabe, ergibt sich mit Hilfe der Systemarchitektur nach Anspruch 1 ein Verfahren nach Anspruch 19, dessen allgemeinen Verfahrensschritte, die auch für andere Anwendungen einsetzbar sind, in Anspruch 18 formuliert sind.For a route planning of a navigation system, in particular its Destination input, results with the help of the system architecture according to claim 1 a method according to claim 19, whose general method steps, which are also suitable for other applications, in use 18 are formulated.

Das Verfahren nach Anspruch 19 zeichnet sich zur Ermittlung einer Zielinformation dadurch aus, dass die Eingabe eines Informationsteils einer mehrteilig und hierarchisch gegliederten Zielinformation zunächst in einer ersten Modalität erfolgt, wobei abweichend von der für die erste Teileingabe verwendeten ersten Eingabe-Modalität eine weitere Modalität zur Eingabe der Zielinformation, zur Korrektur und Einschränkung der Zielinformation mittels einer System-Prozedur auswählbar und nutzbar ist. Dabei wirkt jede getätigte Teileingabe eines Zielinformationsteils der mehrteilig, hierarchisch gegliederten Zielinformation in der jeweils ausgewählten oder benutzten Eingabe-Modalität auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität ein.The The method of claim 19 is characterized to determine a destination information characterized in that the input of an information part of a multi-part and hierarchically structured destination information first takes place in a first modality, which deviates from the first input modality used for the first part input another modality for entering the destination information, for correcting and limiting the destination information by means of a system procedure is selectable and usable. It works each partial input of a destination information part the multi-part, hierarchically structured destination information in the each selected or used input modality on the at least one other selected or used Input modality on.

Die Zielinformation oder die, über eine andere Modalität, korrigierte Zielinformation wird darüber hinaus, in der jeweils bis dahin bereitgestellten Genauigkeit in einer kartografischen Darstellung an ihren Geopositionen über mindestens eine angeordnete Benutzerschnittstelle eines Ausgabemoduls, insbesondere über ein Navigationsdisplay, ausgegeben.The Destination information or, via another modality, corrected destination information is beyond, in the each provided by then accuracy in a cartographic Presentation at their geopositions over at least one arranged user interface of an output module, in particular via a navigation display, issued.

In der Ausgestaltung der Systemarchitektur nach Anspruch 1 und dem Verfahren nach Anspruch 19 wird das Verfahren als „Geo-Speller" bezeichnet.In the embodiment of the system architecture according to claim 1 and the The method of claim 19, the method as a "geo-Speller" designated.

Dieses Verfahren zeichnet sich dadurch aus, dass ausgehend von den Merkmalen des Oberbegriffs des Anspruchs 18, die Eingabe eines Informationsteils einer mehrteilig und hierarchisch gegliederten Zielinformation zunächst in einer ersten Modalität per Spracheingabe erfolgt „Speller" [vom engl. "speller" – im Sinne von richtiger oder falsch erfasster Spracheingabe als geschriebene Information], wobei abweichend von der zuerst verwendeten Teileingabe per Spracheingabe eine weitere Modalität zur Eingabe der Zielinformation, insbesondere eine Tastatur- oder Touch-Bedienhandlung oder eine gestische Handlung, zur Korrektur und Einschränkung der Zielinformation mittels einer System-Prozedur auswählbar und nutzbar ist.This Method is characterized in that starting from the features of the preamble of claim 18, the input of an information piece a multi-part and hierarchically structured destination information first in a first modality by voice input "Speller" [from the English "speller" - in the sense of right or wrong detected speech input as written information], where different from the first used part input by voice input another Modality for entering the destination information, in particular a keyboard or touch operator action or gestural act, for correcting and limiting the destination information by means of a system procedure is selectable and usable.

Jede so getätigte Teileingabe einer Zielinformation der mehrteilig, hierarchisch gegliederten Zielinformation in der jeweils ausgewählten oder benutzten Eingabe-Modalität wirkt auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität ein.each Partial input of a target information of the multipart, hierarchically structured destination information in the respectively selected or used input modality affects the at least another selected or used input modality one.

Die eingesprochene Zielinformation und die, über eine weitere Modalität, korrigierte Zielinformation wird in der jeweils bis dahin bereitgestellten Genauigkeit in einer kartografischen Darstellung an ihren Geopositionen [„Geo"] über mindestens eine angeordnete Benutzerschnittstelle eines Ausgabemoduls, insbesondere über das Navigationsdisplay, ausgegeben. Die Kombination aus erster Eingabe der mehrteiligen, hierarchisch gegliederten Zielinformation per Sprache „Speller" und der Anzeige auf einem Navigationsdisplay an der entsprechenden geografischen Position „Geo” wird daraus abgeleitet als „Geo-Speller"-Verfahren bezeichnet.The collated target information and the, over another Modality, corrected destination information is in each case until then provided accuracy in a cartographic Presentation at their geopositions ["Geo"] about at least one arranged user interface of an output module, especially via the navigation display. The Combination of first input of the multipart, hierarchically structured Destination information by language "Speller" and the display a navigation display at the corresponding geographical location "Geo" derived therefrom as the "Geo-Speller" method.

Zur Durchführung eines Verfahren nach Anspruch 18 und 19 weist die Systemarchitektur bevorzugte Merkmale auf.to Implementation of a method according to claim 18 and 19 the system architecture has preferred features.

Als eine erste Eingabe-Modalität ist eine Spracheingabe und als zweite Eingabe-Modalität ist eine Tastatur- und/oder Touch-Bedienhandlung und/oder als eine dritte Eingabe-Modalität ist eine gestische Bedienhandlung vorgesehen. Diesen Eingabe-Modalitäten ist jeweils ein Erfassungsmodul mit der jeweiligen Benutzerschnittstelle, insbesondere ein Spracherfassungsmodul, beispielsweise ein Mikrofon, eine durch Tasten bedienbare Tastatur oder ein durch Berührung bedienbares Display beziehungsweise ein Gesten erkennendes Erfassungsmodul, beispielsweise ein Display beziehungsweise Navigationsdisplay mit einer Näherungssensorik, zugeordnet. Bevorzugt erfolgt die Ausgabe der Informationen an der, dem jeweiligen Ausgabemodul zugeordneten Benutzerschnittstelle, insbesondere auf einem Display, insbesondere einem Navigationsdisplay, kartografisch beziehungsweise über das Sprachausgabemodul per Sprachausgabe über einen Lautsprecher akustisch.As a first input modality is a voice input and as a second input modality is a keyboard and / or touch control action and / or as a third input modality is provided a gestural operating action. This one Gift-modalities is in each case a detection module with the respective user interface, in particular a voice detection module, for example a microphone, a keyboard operable by keys or a touch-operable display or a gestures recognizing detection module, such as a display or navigation display with a proximity sensor, assigned. The output of the information preferably takes place acoustically on the user interface assigned to the respective output module, in particular on a display, in particular a navigation display, cartographically or via the voice output module via voice output via a loudspeaker.

Die, den bereitgestellten Informationsumfang weiter einschränkende, System-Prozedur basiert auf einer Datenbank, die auf vorhandene, vorher in die Systemarchitektur einzupflegende, Daten zugreift. Die Systemarchitektur weist Funktionen auf, die es ermöglichen in der Datenbank nach Eingabe einer Mehrwort-Information in jeder der benutzten Eingabe-Modalität Ergebnisdaten, beispielsweise Zielinformationen, bereitzustellen, wobei zu der Mehrwort-Information ein mögliches, gesuchtes Merkmal oder eine mögliche, gesuchte Gruppe von Merkmalen aus den Daten der Datenbank herausfiltert und die gefundenen Daten in dem Ausgabemodul hierarchisch gegliedert ausgegeben werden.The, the scope of information further limited, System procedure is based on a database based on existing, previously loaded into the system architecture, accessing data. The system architecture has functions that make it possible in the database after entering a multi-word information in each the input modality used result data, such as destination information, providing to the multi-word information a possible, searched feature or a possible searched group of features filtered out of the data of the database and the found data output hierarchically in the output module.

In bevorzugter Ausgestaltung der Erfindung ist die mehrteilige und hierarchisch gegliederte Mehrwort-Information eine Adresseninformation als Ziel einer Routenplanung und/oder eine POI-Suche in einem Navigationsmodus eines Navigationssystems oder eine Musikauswahlinformation in einem Entertainmentmodus des Systems, wobei Eingabe und Ausgabe der Teilinformationen der Mehrwort-Information in einer vorbestimmten oder wählbaren Reihenfolge eingebbar oder ausgebbar sind. Diese Vorgehensweise wird in dem Ausführungsbeispiel noch näher erläutert.In Preferred embodiment of the invention is the multi-part and hierarchically structured multi-word information an address information as a destination of route planning and / or a POI search in a navigation mode a navigation system or a music selection information in one Entertainment mode of the system, whereby input and output of the partial information the multi-word information in a predetermined or selectable Order can be entered or output. This approach will be explained in more detail in the embodiment.

Bevorzugt ist ferner, dass beispielsweise in dem Navigationsmodus, eine auf einer Tastatur oder durch Berührung erfolgte Bedienhandlung und/oder eine gestische Bedienhandlung und/oder eine Spracheingabe der hierarchisch gegliederten Mehrwort-Information, die mit Hilfe der System-Prozedur eingeschränkt worden ist, zu einer, auf dem Ausgabemodul insbesondere dem Display, visualisierbaren, eingeschränkten Bildanzeige und/oder einer Auswahlliste führt.Prefers is further that, for example, in the navigation mode, one on a keyboard or touch operation and / or gestural operator action and / or voice input the hierarchically structured multi-word information using the the system procedure has been restricted to one, on the output module, in particular the display, visualizable, restricted image display and / or a selection list leads.

Ferner wird durch die jeweilige multimodale Eingabe bevorzugt eine Bildanzeige generiert, die in der kartografischen Darstellung ausgeführt ist, wobei die Darstellung in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen selbstständig oder per Eingabe in mindestens einer der Modalitäten ein- und auszoombar ist, wobei in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen, per Eingabe in mindestens einer der Modalitäten, eine weitere Einschränkung des bis dahin herausfilterten Informationsumfanges möglich ist, der seinerseits wiederum als kartografische Darstellung visualisierbar sowie selbstständig oder per Eingabe ein- und auszoombar ist. Das Ein- und Auszoomen wird als Heran- und Wegzoomen der jeweiligen Darstellung verstanden.Further is preferred by the respective multi-modal input an image display generated in the cartographic representation is, the representation depending on the possible, found characteristics or feature groups independently or by entering in at least one of the modalities and ausoombar, depending on the possible, found features or feature groups, by entering at least one modalities, another limitation of until then filtered out information scope possible which in turn can be visualized as a cartographic representation as well as independently or by input on and ausoombarbar is. The zoom in and zoom out is as zoom in and out of the respective Representation understood.

In einer anderen bevorzugten Ausgestaltung wird über die jeweilige Eingabe in einer der Modalitäten die Auswahlliste generiert, die als eine listenartige Darstellung ausgeführt ist, die in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen per Eingabe in mindestens einer der Modalitäten eine weitere Einschränkung des bis dahin herausfilterten Informationsumfanges in einer menüartigen Bestenliste ermöglicht, die ihrerseits wiederum als listenartige Darstellung als neue Bestenliste visualisierbar ist.In Another preferred embodiment is about the respective Input in one of the modalities the picklist generates, which is executed as a list-like representation, the depending on the possible features found or feature groups by entering in at least one of the modalities another limitation of the filtered out so far Scope of information in a menu-style leaderboard, in turn, as a list-like presentation as a new leaderboard can be visualized.

Um eine solche Funktion zu gewährleisten sind die generierte Bildanzeige und die Auswahlliste miteinander derart verknüpft, dass eine, über die jeweilig benutzte ausgewählte Eingabe-Modalität, getätigte weitere Auswahl, der bereits möglichen, gefundenen Merkmale oder Merkmalsgruppen, zu einer Fortführung der einschränkenden System-Prozedur, auch in der gerade nicht benutzten Modalität, führt und die so eingeschränkte Auswahl – in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen – auf dem Display visualisierbar ist, wobei das System, die neu eingeschränkte Auswahl, als Bildanzeige durch Ein- und Auszoomen der kartografischen Darstellung an ein Display/Navigationsdisplay, als Ausgabemodul, anpasst.Around to ensure such a function are the generated Image display and the selection list linked together so that one selected over the one used Input modality, further selection made, the already possible, found characteristics or feature groups, to a continuation of the restrictive system procedure, too in the currently unused modality, leads and the so limited selection - depending on the possible, found characteristics or feature groups - on the display is visualizable, the system being the new limited Selection, as image display by zooming in and out of the cartographic Display on a display / navigation display, as output module, adapts.

Beispielsweise wird in einem Navigationsmodus der Systemarchitektur der Grad des, durch eine eingeschränkte Auswahl bewirkten, Einzoomvorgangs an der Bildanzeige und/oder der Auswahlliste durch die, in mindestens einer der Modalitäten erfolgte, Eingabe an der Bildanzeige oder der Auswahlliste, durch die von der System-Prozedur herausfilterten, eingeschränkten Informationen bestimmt oder nicht durch die von der System-Prozedur herausfilterten, eingeschränkten Informationen bestimmt, sondern es wird ein vorbestimmter Zoomfaktor angewendet, der nur einen vorbestimmten Teil der Informationen auf einem Display/Navigationsdisplay ausgibt.For example In a navigation mode of the system architecture, the degree of caused by a limited selection, zoom in process on the image display and / or the selection list by, in at least one of the modalities was done, input to the image display or the select list filtered out by the system procedure, limited information is determined or not those filtered out by the system procedure Information determines, but it becomes a predetermined zoom factor applied to only a predetermined portion of the information a display / navigation display.

Umgekehrt wird in einem Navigationsmodus der Systemarchitektur der Grad des, durch eine erweiternde Auswahl bewirkten, Auszoomvorgangs an der Bildanzeige und/oder der Auswahlliste durch die, in mindestens einer der Modalitäten erfolgte, Eingabe an der Bildanzeige oder der Auswahlliste, durch die von der System-Prozedur herausgefilterten, erweiterten Informationen bestimmt oder nicht durch die von der System-Prozedur herausgefilterten, erweiterten Informationen bestimmt, sondern es wird ein vorbestimmter Zoomfaktor vorgegeben, der nur einen Teil der erweiterten Information ausgibt.Conversely, in a navigation mode of the system architecture, the degree of zooming out of the image display and / or drop-down list caused by an expanding selection is determined by the zooming in of at least one of the modalities be determined on the image display or the selection list, by the filtered by the system procedure, extended information or not determined by the filtered out by the system procedure, extended information, but it is given a predetermined zoom factor, which is only a part of the extended information outputs.

Ferner kann die Systemarchitektur so ausgelegt werden, dass in dem Navigationsmodus der Grad des, durch die eingeschränkte Auswahl an der Bildanzeige und/oder der Auswahlliste bewirkten, Einzoomvorgangs und des, an der Bildanzeige und/oder der Auswahlliste bewirkten, Auszoomvorgang durch Auswertung der Wahrscheinlichkeit verschiedener Orte und/oder durch die Größe der Ortschaften und/oder durch die Nähe des Fahrzeugs zur jeweiligen Auswahl und/oder durch ehemals angesteuerte Ziele bestimmt wird.Further For example, the system architecture can be designed to work in the navigation mode the degree of, due to the limited selection of the image display and / or drop-down list, zoom in and out the image display and / or drop-down list caused the image to zoom out by evaluating the probability of different locations and / or by the size of the towns and / or by the proximity of the vehicle to the respective selection and / or determined by previously driven goals.

Schließlich wird in weiterer bevorzugter Ausgestaltung der Erfindung dafür gesorgt, dass die Auswahl der Eingabe-Modalität jederzeit während einer Eingabe oder Teileingabe eines beliebigen Informationsteils der mehrteiligen, hierarchisch gegliederten Information mithilfe eines auf dem Display erscheinenden Menüs durchführbar ist, welches die benutzbaren Modalitäten vorschlägt.After all is in a further preferred embodiment of the invention for it Made sure the selection of input modality at any time during input or part input of any Information parts of the multi-part, hierarchically structured information using a menu that appears on the display is what the modalities that can be used suggest.

Über das Menü, welches auf dem Display/Navigationsdisplay visualisierbar ist, sind die Eingabe-Modalitäten auswählbar beziehungsweise aufrufbar. Das Menü ist dabei auf oder in einem dafür vorgesehenen Bereich auf dem Display/Navigationsdisplay visualisierbar. Das Menü ist ferner in einer Ausgestaltung ein Popup-Menü, welches in Kombination, sowohl die benutzbaren Modalitäten vorschlägt als auch die jeweilige Bestenliste anzeigt.about the menu, which can be visualized on the display / navigation display is, the input modalities are selectable or callable. The menu is on or in a designated Area can be visualized on the display / navigation display. The menu is Furthermore, in one embodiment, a pop-up menu, which in Combination, proposing both the modalities that can be used as well as the respective best list displays.

Die Systemarchitektur und das zugehörigen Verfahren werden nachfolgend in einem Ausführungsbeispiel anhand der zugehörigen Figuren erläutert. Es zeigen:The System architecture and its associated procedure below in an embodiment with reference to the associated Figures explained. Show it:

1 ein Beispiel einer Bildschirmanzeige mit kartografischer Eingabe-Modalität und Tasteneingabe-Modalität und 1 an example of a screen display with cartographic input modality and key input modality and

2 ein Beispiel einer Bildschirmanzeige mit kartografischer Eingabe-Modalität und Tasteneingabe-Modalität mit, die Bildschirmanzeige überlagerndem. Menü. 2 an example of a screen display with cartographic input modality and key input modality with, overlay the screen display. Menu.

1 zeigt ein Beispiel eines Navigationsmodus innerhalb einer Bildschirmanzeige. Der als Navigationsdisplay 1 fungierende Bildschirm weist am unteren Rand des Bildschirms eine Schaltfeldleiste in Form einer Auswahlliste 3 auf, welche nacheinander hierarchisch gegliederte Betätigungsfelder umfasst. 1 shows an example of a navigation mode within a screen display. The as a navigation display 1 functioning screen has a button bar at the bottom of the screen in the form of a selection list 3 on, which comprises successively hierarchically structured fields of activity.

Diese Betätigungsfelder ermöglichen in diesem Ausführungsbeispiel die Eingabe einer Zieladresse Z [Stadt, Straße, Hausnummer], die hier in absteigender Hierarchie-Reihenfolge eingebbar ist. Diese Hierarchie-Reihenfolge kann selbstverständlich bei gleicher oder anderen Anwendungen auch aufsteigend gestaltet sein. Die Zieladresse oder Zielinformation Z entspricht in diesem Ausführungsbeispiel einer allgemein eingebbaren mehrteilig, gegliederten Mehrwort-Information für einen Navigationsmodus des Systems.These Fields of activity allow in this embodiment entering a destination address Z [city, street, house number], which can be entered here in descending hierarchical order. These Hierarchy order can of course be the same or other applications may be ascending. The destination address or destination information Z corresponds in this embodiment a generally input multi-part, articulated multi-word information for a navigation mode of the system.

Die nachfolgenden Erläuterungen können analog auf einen Entertainmentmodus des Systems zur Eingabe von hierarchisch gegliederten Musikauswahlinformationen [Genre, Interpret, Album; Titel] oder dergleichen übertragen werden.The following explanations can be made analogously an entertainment mode of the system for input of hierarchical articulated music selection information [genre, artist, album; Title] or the like.

Parallel dazu umfasst das Navigationsdisplay 1 eine kartografische Darstellung 2, welche im Ausführungsbeispiel gerade die in der Hierarchie am Höchsten liegende Teilinformation [Stadt] darstellt.Parallel to this, the navigation display includes 1 a cartographic representation 2 , which in the exemplary embodiment just represents the highest part of the hierarchy in the hierarchy [city].

Das Navigationsdisplay 1 zeigt in 1 beispielsweise zunächst einen voreingestellten Kartenausschnitt um den eigenen Standort herum an oder zum Beispiel einen, der seit letzter Benutzung stehen geblieben war, da dieser eine hohe Wahrscheinlichkeit der Weiterbenutzung aufweisen kann.The navigation display 1 shows in 1 For example, first a preset map section around the own location around or for example one who had stopped since last use, as this can have a high probability of further use.

Von dieser Ausgangsbildschirmanzeige aus kann der Benutzer auf verschiedene Arten beginnen, eine Zieleingabe zu tätigen. Grundsätzlich erlaubt die Systemarchitektur mit jeder Eingabe-Modalität M1, M2, M3 zu beginnen.From From this home screen, the user can switch to different Species begin to make a destination entry. in principle allows the system architecture with any input modality M1, M2, M3 to begin.

Hierzu ist die Systemarchitektur so ausgestaltet, dass ein erster Schritt zur Eingabe einer Zielinformation Z über eine erste Eingabe-Modalität M1, beispielsweise per Spracheingabe, erfolgt. Der Benutzer tippt auf das Betätigungsfeld [Ziel], wonach das Sprachausgabemodul den Benutzer über eine Lautsprecher zur „Zieleingabe" per Sprache auffordert, der daraufhin die Zieladresse [Stadt, Straße, Hausnummer] in einem Satz als hierarchisch, gegliederte Mehrwort-Information in ein Mikrofon, als Teil eines Erfassungsmodul eines Spracherkenners, spricht. Ist die Spracherkennung fehlerfrei und eindeutig, dann hat der Benutzer bereits die gewünschte Eingabe der Zieladresse Z erfolgreich getätigt und die Zieladresse wird auf dem Navigationsdisplay 1 kartografisch als Bildanzeige 2 angezeigt.For this purpose, the system architecture is designed so that a first step for entering a destination information Z via a first input modality M1, for example by voice input takes place. The user taps the [Destination] panel, whereupon the voice output module prompts the user via a "destination input" loudspeaker, which then sets the destination address [city, street, house number] in a sentence as hierarchical, articulated multi-word information into a microphone , If the speech recognition is error-free and unique, then the user has already successfully made the desired entry of the destination address Z and the destination address is on the navigation display 1 cartographically as image display 2 displayed.

Die Systemarchitektur kann ferner so ausgestaltet sein, dass als erster Schritt die Eingabe einer Zielinformation Z über eine zweite Eingabe-Modalität M2 per Tastatur eines Tastenbedienfeldes oder per Berührung des Navigationsdisplays 1 erfolgt. Gemäß 1 betätigt der Benutzer das Schaltfeld [Stadt, Strasse, Hausnummer] durch Tasten oder Berühren und gibt die Zieladresse Z über eine dem Navigationsdisplay 1 zugeordnete Tastatur durch Tasten oder Berühren der Buchstaben und Ziffern ein (nicht dargestellt). Ist die Eingabe in dieser zweiten Modalität M2 fehlerfrei und eindeutig, dann hat der Benutzer bereits die gewünschte Eingabe der Zieladresse Z erfolgreich getätigt und die Zieladresse wird auf dem Navigationsdisplay 1 kartografisch als Bildanzeige 2 angezeigt.The system architecture can also be configured such that, as a first step, the input of a destination information Z via a second input modality M2 by means of a keyboard of a key panel or by touching the navigation display 1 he follows. According to 1 the user actuates the button [city, street, house number] by pressing or touching and gives the destination address Z via a navigation display 1 associated keyboard by pressing or touching the letters and numbers (not shown). If the input in this second modality M2 is error-free and unique, then the user has already successfully made the desired entry of the destination address Z and the destination address is displayed on the navigation display 1 cartographically as image display 2 displayed.

Die Systemarchitektur ist ferner so ausgestaltet, dass als ein erster Schritt die Eingabe einer Zielinformation Z über eine dritte Eingabe-Modalität M3 zunächst per Gestik erfolgt. Hierzu verschiebt der Benutzer über eine gestische Bedienhandlung die kartografischen Darstellung 2 auf dem Navigationsdisplay 1 bis beispielsweise die gewünschte Stadt als Zieladresse Z im jeweiligen Ausschnitt des Navigationsdisplays 1 auftaucht. Hierbei kann der Benutzer durch gestische Bedienhandlungen den Ausschnitt entsprechend ein- und auszoomen. Von hier aus wechselt der Benutzer dann zur weiteren Eingabe und Auswahl in die erste oder zweite Modalität M1, M2, Spracheingabe oder Tastatur- beziehungsweise Touch-Bedienhandlung, und wählt wie bereits beschrieben die entsprechende „Stadt" aus. Bei der nächsten Hierarchiestufe, beispielsweise der Auswahl der „Strasse", usw. erfolgt der Vorgang von neuem.The system architecture is further designed such that, as a first step, the input of a destination information Z via a third input modality M3 is first done by gestures. To do this, the user moves the cartographic representation via a gestural operator action 2 on the navigation display 1 for example, the desired city as the destination address Z in the respective section of the navigation display 1 shows up. In this case, the user can by Gestische operator actions the cut in and out accordingly. From here, the user then changes to the first or second modality M1, M2, voice input or keyboard or touch operator action for further input and selection, and selects the corresponding "city" as described above Selection of the "road", etc., the process takes place again.

In jeder der verwendeten Modalitäten M1, M2, M3 sorgt die Systemarchitektur dafür, dass nach Eingabe eines Informationsteils, der mehrteilig und hierarchisch gegliederten Mehrwort-Information beispielsweise der „Stadt" nachfolgend abweichend von der zur bisherigen Teileingabe verwendeten Eingabe-Modalität M1, M2, M3 nun eine andere Eingabe-Modalität (M1, M2, M3) auswählbar und zur Eingabe nutzbar ist.In each of the modalities used M1, M2, M3 provides the System architecture that after entering an information piece, the multi-part and hierarchically structured multi-word information for example, the "city" below deviating from the input modality used for the previous part input M1, M2, M3 now another input modality (M1, M2, M3) selectable and usable for input.

Die Systemarchitektur stellt sicher, dass jede getätigte Eingabe eines Informationsteils der mehrteilig, hierarchisch gegliederten Mehrwort-Information, der bisher ausgewählten oder benutzten Eingabe-Modalität M1, M2, M3, auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität M1, M2, M3 einwirkt, so dass das System in der Lage ist, den jeweils bis dahin bereitgestellten Informationsumfang, beispielsweise „Stadt", über eine System-Prozedur in jeder nachfolgend ausgewählten oder benutzten Modalität M1, M2, M3 weiter einzuschränken und das Ergebnis über mindestens eine angeordnete Benutzerschnittstelle des Ausgabemoduls auszugeben.The System architecture ensures that every input made an information part of the multi-part, hierarchically structured Multi-word information, previously selected or used Input modality M1, M2, M3, on the at least one more selected or used input modality M1, M2, M3 acts, so that the system is capable of each until then provided information, for example "city" a system procedure in each subsequently selected or used modality M1, M2, M3 further restrict and the result via at least one arranged user interface output the output module.

Es erfolgt als Ausgabe, unabhängig von der zur Eingabe der Zieladresse genutzten Modalität M1, M2, M3 auf dem Navigationsdisplay 1, stets parallel die Anzeige der bereits gefundenen „Stadt” oder der mehreren gefundenen „Städte", „Strasse", Hausnummer" usw. in der jeweiligen Geoposition als kartografische Darstellung 2.It takes place as an output, independently of the mode M1, M2, M3 used for entering the destination address on the navigation display 1 , always parallel the display of the already found "city" or of the several found "cities", "street", house number "etc. in the respective geoposition as a cartographic representation 2 ,

Es besteht somit die Möglichkeit, beispielsweise die „Stadt" per Spracherkennung in der ersten Modalität M1 einzugeben und anschließend die „Strasse" per Tastatur oder Touch-Bedienhandlung in der zweiten Modalität M2, wie beschrieben, auszuwählen oder gar zwischendurch eine Verschiebung des kartografischen Ausschnitts 2 durch eine gestische Bedienhandlung in der dritten Modalität M3 zu weiteren Einschränkung oder Erweiterung der möglichen gesuchten Teileingabe „Strasse" vorzunehmen.Thus, it is possible, for example, to enter the "city" by voice recognition in the first mode M1 and then to select the "street" via the keyboard or touch control action in the second modality M2, as described, or even in between a shift in the cartographic detail 2 by gestural operator action in the third modality M3 to further restrict or expand the possible sought part input "street" make.

Bevorzugt soll für die ersten Schritte, die erste Modalität M1 die Spracherkennung der Zielinformation Z [Stadt, Straße, Hausnummer] genutzt werden, da hier eine Ablenkung von der Verkehrsbeobachtung, entgegen zu anderen manuellen Bedienungen am Geringsten ist.Prefers should for the first steps, the first modality M1 the speech recognition of the destination information Z [city, street, House number] are used, since here a distraction from the traffic observation, contrary to other manual operations is least.

In einem ersten Schritt wird der Benutzer, wie bereits beschrieben, auf das Schaltfeld [Ziel] tippen, wonach das Sprachausgabemodul den Benutzer zur „Zieleingabe" per Sprache auffordert, der daraufhin die Zieladresse [Stadt, Straße, Hausnummer] in einem Satz als hierarchisch gegliederte Mehrwort-Information in das Mikrofon eines Spracherkenners spricht.In a first step, the user, as already described, Touch the [Destination] button, then the voice output module prompts the user for "destination input" by voice, then the destination address [city, street, house number] in a sentence as hierarchically structured multi-word information speaks into the microphone of a speech recognizer.

Ist die Spracherkennung nicht fehlerfrei und/oder nicht eindeutig, werden dem Benutzter verschiedene Ergebnisse als Bildanzeige 2 auf dem Navigationsdisplay 1 präsentiert und innerhalb der Betätigungsfelder werden die möglichen Ergebnisse in einer menüartigen Bestenliste 5 hinterlegt. Zur Korrektur der, per Spracheingabe M1 vorgenommen, Zieleingabe bietet die Systemarchitektur nun mehrere Instrumente.If the speech recognition is not error-free and / or ambiguous, the user will get different results as an image display 2 on the navigation display 1 presented and within the fields of activity are the possible outcomes in a menu-like leaderboard 5 deposited. The system architecture now offers several instruments for correcting the destination input made by voice input M1.

Zunächst sorgt die Systemarchitektur dafür, dass durch die Spracheingabe M1 die Bildanzeige 2 so generiert wird, dass diejenige kartografische Darstellung ausgeführt wird, bei der die Darstellung in Abhängigkeit der gefundenen Zieladressen „Stadt 1, 2, 3..." usw. ein- und auszoombar ist. Dadurch ist anschließend in mindestens einer der Modalitäten M1, M2, M3 eine weitere Einschränkung, der bis dahin „herausgefilterten" Zieladresse Z möglich, die ihrerseits wiederum als kartografische Darstellung 2 visualisierbar sowie selbstständig oder per Eingabe ein- und auszoombar ist.First of all, the system architecture ensures that the image display is activated by the speech input M1 2 is generated so that the one cartographic representation is executed, in which the representation in dependence of the found destination addresses "city 1, 2, 3 ..." etc. can be zoomed in and out, thereby subsequently in at least one of the modalities M1, M2 , M3 another restriction, the hitherto "filtered out" destination Z possible, in turn, as a cartographic representation 2 can be visualized and independently or by input on and ausoombarbar is.

In den meisten Fällen wird, wie 2 an einem Navigationsdisplay 1 als Ausführungsbeispiel darstellt, die Systemarchitektur nach erfolgter Spracheingabe M1, beispielsweise eine bestimmte Anzahl von „Städten 1, 2, 3...", als Bildanzeige 2 in ihren Geopositionen und parallel dazu als listenartige Darstellung innerhalb der jeweiligen Auswahlliste 3 gezeigt.In most cases, how will 2 on a navigation display 1 As an exemplary embodiment, the system architecture after voice input M1, for example, a certain number of "cities 1, 2, 3 ...", as an image display 2 in their geopositions and in parallel as list-like representation within the respective selection list 3 ge shows.

Die weitere korrigierende Auswahl kann zum Einen durch eine Touch-Bedienhandlung auf dem Navigationsdisplay 1 direkt in der zweiten Modalität M2 erfolgen, wie die 2 mit der dargestellten Bedienhand verdeutlichen soll. Zum Anderen erfolgt die Anzeige einer Bestenliste 5. Hier hat der Benutzer nicht das Betätigungsfeld „Ziel" der Auswahlliste 3 bedient, sondern das Betätigungsfeld „Stadt" der Auswahlliste 3 berührt, worauf das gezeigte Popup-Menü als Bestenliste 5 eingeblendet wird.The further corrective selection can on the one hand by a touch operator action on the navigation display 1 directly in the second modality M2, like the 2 should clarify with the illustrated operating hand. On the other hand, the display of a leaderboard 5 , Here the user does not have the "Target" field of the selection list 3 but the field of activity "city" of the selection list 3 touched, whereupon the pop-up menu shown as a leaderboard 5 is displayed.

Mit diesem angezeigten Popup-Menü als Bestenliste 5 stehen ihm nun wieder alle verfügbaren Eingabemodalitäten M1, M2, M3 zur Verfügung. Der Benutzer kann beginnend in der Bestenliste das Feld „Tastatur" betätigen, um zur korrigierenden Zieleingabe die zweite Modalität M2 durch Eingabe per Tastatur zu verwenden, die daraufhin zusätzliche oder anstelle oder gemeinsam mit dem Popup-Menü eingeblendet wird.Use this pop-up menu as a leaderboard 5 Now all available input modalities M1, M2, M3 are available to him again. Beginning in the leaderboard, the user can press the "keyboard" field to use the second modality M2 by keypad entry for corrective destination input, which is then displayed in addition to or in conjunction with or in conjunction with the pop-up menu.

Alternativ könnte der Benutzer das Feld „Einsprechen" betätigen und damit wieder die Spracheingabe M1 aktivieren, die jedoch in diesem Korrekturmodus beispielsweise nur wortweise eine weitere Spracheingabe entgegen nimmt.alternative the user could press the field "voice in" and thus activate the speech input M1 again, but in This correction mode, for example, just word by word another voice input receives.

Eine Auswahl „gestische Betätigung" mittels der Modalität M3 ist in 1 und 2 nicht dargestellt, ist aber ebenfalls denkbar.A selection "gestural actuation" by means of the modality M3 is in 1 and 2 not shown, but is also conceivable.

Im Ausführungsbeispiel ist exemplarisch die Bestenliste 5 zusätzlich mit den, durch die Spracheingabe gefundenen, „Städte 1, 2, 3, 4" dargestellt. Die eingeschränkte Auswahl „Stadt 1, 2, 3, 4" als Bestenliste 5 kann aufgrund vorliegender statistischer Informationen oder Nutzungsinformationen vorgenommen worden sein.In the exemplary embodiment is exemplary the best list 5 in addition to those found by voice input, "cities 1, 2, 3, 4." The limited selection "city 1, 2, 3, 4" as leaderboard 5 may have been made on the basis of available statistical information or usage information.

Die Bestenliste 5 kann ferner weiter scrollbar sein, wodurch weitere Ortsnamen verfügbar sind, wie zum Beispiel in der Bildanzeige 2 „Stadt 5, 6", die parallel in den Geopositionen auf dem Navigationsdisplay 1 angezeigt sind. Der Benutzer kann das als Bestenliste 5 gestaltete Popup-Menü unbenutzt lassen und statt dessen, wie gezeigt und beschrieben, mit dem Finger der Bedienhand direkt auf dem Navigationsdisplay 1, beispielsweise wie dargestellt, die gewünschte Stadt 5 per Touch-Bedienhandlung M2 auswählen und betätigen.The leaderboard 5 may also be further scrollable, whereby further place names are available, such as in the image display 2 "City 5, 6" parallel in the geo positions on the navigation display 1 are displayed. The user can do that as a leaderboard 5 designed pop-up menu unused and instead, as shown and described, with the finger of the operating hand directly on the navigation display 1 For example, as shown, the desired city 5 Select and press M2 via touch control.

Die hierbei verdeckten „Städte" können auf verschiedene Weise bedienbar gemacht werden.The Covert "cities" can be different Be made accessible.

Erstens kann in einer Ausgestaltung der Bestenliste 5 das Popup-Menü an einer der vier Bildschirmseiten enger dargestellt sein, wodurch ein größerer Bildschirmbereich für die kartografische Darstellung 2 vorbehalten bleiben würde.First, in one embodiment, the leaderboard 5 the popup menu will be narrower on one of the four screen pages, providing a larger screen area for cartographic presentation 2 would be reserved.

Zweitens kann der Kartenausschnitt 2 durch Halten und Ziehen mit dem Finger, analog wie es mit einer Maus an einem Personalcomputer möglich ist, in alle Richtung verschoben werden, bis der gewünschte Kartenausschnitt 2 und die jeweilige gegebenenfalls auszuwählende „Stadt" zum Vorschein kommt.Second, the map section 2 by holding and pulling with your finger, analogous to how it is possible with a mouse on a personal computer, to be moved in all directions until the desired map section 2 and the respective "city" to be selected if necessary.

Drittens kann nach der Berührung des Navigationsdisplays 1 im Bereich der kartografischen Darstellung 2 das Popup-Menü 4 ausgeblendet werden. Es erfolgt dann, wie in 2 gezeigt, die Auswahl per Modalität M2, per Berührung der in der Geoposition dargestellten „Stadt 5".Third, after touching the navigation display 1 in the field of cartographic representation 2 the pop-up menu 4 be hidden. It then takes place as in 2 shown, the selection by modality M2, by touching the "City 5" shown in the Geoposition.

Nachfolgend, jedoch nicht dargestellt, erfolgt nach der, in der gewählten Modalität M1, M2 und/oder unter Zuhilfenahme von M3 getätigten, Auswahl der Zielortschaft die Darstellung der nächsten Hierarchiestufe, nämlich die vom Spracherkenner ermittelte „Strasse". Insofern die Erkennung nun eindeutig ist, wird wiederum nur noch diese Strasse in der Bildanzeige 2 eingeblendet und in die Bestenliste 5 der Auswahlliste 3 geschrieben.Subsequently, but not shown, the presentation of the next hierarchy level, namely the "street" determined by the speech recognizer, takes place according to the choice of the destination location made in the selected modality M1, M2 and / or with the aid of M3 , in turn, only this street in the image display 2 and in the leaderboard 5 the selection list 3 written.

Der kartografische Kartenausschnitt 2 wird also erfindungsgemäß in die gewählte „Stadt", beispielsweise „Stadt 5", eingezoomt und gleichzeitig, wenn die Spracherkennung nicht eindeutig ist, als Bestenliste 5 der „Strassen" in der Auswahlliste 3 hinterlegt. Analog zum Bild in 2 werden dann auf dem Navigationsdisplay 1, die gleichzeitig in der Auswahlliste 3 hinterlegten „Straßen" der ausgewählten „Stadt" zu sehen sein, wiederum zunächst ohne dass zunächst ein Popup-Menü 4 eingeblendet ist.The cartographic map section 2 Thus, according to the invention, it is zoomed into the selected "city", for example "city 5", and at the same time, if the speech recognition is not unambiguous, as the best list 5 the "streets" in the selection list 3 deposited. Analogous to the picture in 2 will then be on the navigation display 1 that are simultaneously in the selection list 3 deposited "streets" of the selected "city" to be seen again in turn without first having a pop-up menu 4 is displayed.

Der Benutzer kann dann wieder frei wählen, welche von den verfügbaren Modalitäten M1, M2, M3 er zur weiteren Eingabe verwenden will. Er kann die „Strasse" direkt auf dem Navigationsdisplay mittels der zweiten Modalität M2 per Touch-Bedienhandlung ausführen oder das Bedienfeld „Strasse" per Tasten oder Touch tippen, so dass sich ein zur 2 analoges Menü 4 zur weiteren Auswahl oder Korrektur der gesuchten „Strasse" öffnet. Hier kann dann auch wieder die Auswahl der weiter gewünschten, zu benutzenden Modalität M1, M2, M3 getroffen werden.The user can then freely choose again which of the available modalities M1, M2, M3 he wants to use for further input. He can execute the "road" directly on the navigation display by means of the second modality M2 by means of a touch operation or by tapping the "road" control panel via keys or touch, so that a to 2 analog menu 4 for further selection or correction of the searched "street" opens.Here then also the selection of the further desired, to be used modality M1, M2, M3 can be made.

Mit der Eingabe der „Hausnummer", beziehungsweise deren Visualisierung auf dem Navigationsdisplay 1, kann der Benutzer analog verfahren.By entering the "house number" or its visualization on the navigation display 1 , the user can proceed analogously.

Wenn der Benutzer die fertiggestellte Zieladresse Z durch Betrachten geschriebener Informationen in der Auswahlliste 3 und/oder beispielsweise durch Anhören, der durch eine Sprachausgabemodul gesprochenen Zieladresse, überprüft und für richtig befunden hat, oder anhand der Auswahl über die Geoposition auf dem Navigationsdisplay 1 als richtig einschätzt beziehungsweise ausgewählt hat, kann er durch Betätigen der Abschlusstaste „OK" oder durch ein Sprachkommando über das Spracheingabemodul veranlassen, dass die Zieladresse Z der Navigationsführung des Navigationssystems übergeben wird.When the user completes the destination address Z by viewing written information in the selection list 3 and / or, for example, by listening to the destination address spoken by a speech output module, checked and found to be correct, or by selection via the Ge oposition on the navigation display 1 has judged or selected as correct, he can cause by pressing the end key "OK" or by a voice command via the voice input module that the destination address Z of the navigation system of the navigation system is transferred.

11
Display [Navigationsdisplay]display [Navigation Display]
22
kartografische Darstellung [Bildanzeige]cartographic Presentation [Image Display]
33
listenartige Darstellung [Auswahlliste]list-like Presentation [selection list]
44
Menümenu
55
BestenlisteLeaderboard
M1M1
Modalität [Sprache]modality [Language]
M2M2
Modalität [Tastatur-/Touch-Bedienhandlung]modality [Keyboard / touch control action]
M3M3
Modalität [berührungslose Gestik]modality [non-contact gesture]
ZZ
Zielinformationdestination information

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • - DE 19533541 C1 [0012] - DE 19533541 C1 [0012]
  • - DE 102005007317 A1 [0013] DE 102005007317 A1 [0013]

Claims (19)

Systemarchitektur zur multimodalen Informationseingabe einer mehrteiligen und hierarchisch, gegliederten Mehrwort-Information und einer dynamischen Anpassung einer, auf der Mehrwort-Information basierenden, Informationsanzeige, insbesondere für ein Navigationssystem eines Kraftfahrzeuges, wobei die Systemarchitektur mehrere, mindestens zwei, Eingabe-Modalitäten (M1, M2, M3) umfasst, denen jeweils Benutzerschnittstellen aufweisende Erfassungsmodule zugeordnet sind, über die der Benutzerschnittstelle die Mehrwort-Information, ausgehend von der jeweiligen modalen Eingabe-Interaktion eines Nutzers, zuführbar ist, um die Mehrwort-Information an einer Benutzerschnittstelle eines Ausgabemodul auszugeben, dadurch gekennzeichnet, dass • nach Eingabe eines Informationsteils, der mehrteilig und hierarchisch gegliederten Mehrwort-Information, in einer der mindestens zwei ausgewählten Eingabe-Modalitäten (M1, M2, M3), abweichend von der zur bisherigen Teileingabe verwendeten Eingabe-Modalität (M1, M2, M3), eine andere Eingabe-Modalität (M1, M2, M3) auswählbar und zur Eingabe nutzbar ist, da • jede getätigte Eingabe eines Informationsteils der mehrteilig, hierarchisch gegliederten Mehrwort-Information der ausgewählten oder benutzten Eingabe-Modalität (M1, M2, M3) auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität (M1, M2, M3) einwirkt, • so dass, das System in der Lage ist, den jeweils bis dahin bereitgestellten Informationsumfang über eine System-Prozedur in jeder ausgewählten oder benutzten Modalität (M1, M2, M3) weiter einzuschränken und das Ergebnis über mindestens eine angeordnete Benutzerschnittstellen eines Ausgabemoduls auszugeben.System architecture for multimodal information input of a multi-part and hierarchically structured multi-word information and a dynamic adaptation of an information display based on the multi-word information, in particular for a navigation system of a motor vehicle, wherein the system architecture several, at least two, input modalities (M1, M2 , M3), each associated with the user interface detection modules, via which the user interface, the multi-word information, based on the respective modal input interaction of a user, can be supplied to output the multi-word information to a user interface of an output module, characterized in that, after input of an information part, the multi-part and hierarchically structured multi-word information, in one of the at least two selected input modalities (M1, M2, M3), deviating from the input modal used for the previous partial input (M1, M2, M3), another input modality (M1, M2, M3) is selectable and usable for input, since • every input of an information part of the multi-part, hierarchically structured multi-word information of the selected or used input modality (M1, M2, M3) to the at least one other selected or used input modality (M1, M2, M3) acts, • so that, the system is able to provide the respective previously provided information via a system procedure in to further restrict each selected or used modality (M1, M2, M3) and to output the result via at least one arranged user interface of an output module. Systemarchitektur nach Anspruch 1, dadurch gekennzeichnet, dass als erste Eingabe-Modalität Spracheingabe (M1) und/oder als zweite Eingabe-Modalität (M2) eine Tastatur- und/oder eine Touch-Bedienhandlung und/oder als dritte Eingabe-Modalität (M3) eine gestische Bedienhandlung vorgesehen ist, denen das jeweilige Erfassungsmodul mit der jeweiligen Benutzerschnittstelle, insbesondere ein Spracherfassungsmodul und eine durch Tasten bedienbare Tastatur oder ein durch Berührung oder Gesten bedienbares Display (1), zugeordnet ist.System architecture according to claim 1, characterized in that as a first input modality voice input (M1) and / or as a second input modality (M2) a keyboard and / or a touch operator action and / or as a third input modality (M3) a Gestische operating action is provided to which the respective detection module with the respective user interface, in particular a speech detection module and a keyboard operable by keys or a touch-operated or gestures display ( 1 ), assigned. Systemarchitektur nach Anspruch 1, dadurch gekennzeichnet, dass die Ausgabe der Informationen an der, dem jeweiligen Ausgabemodul zugeordneten Benutzerschnittstelle, insbesondere auf dem Display (1), kartografisch beziehungsweise über das Sprachausgabemodul per Sprachausgabe akustisch erfolgt.System architecture according to claim 1, characterized in that the output of the information at the, the respective output module associated user interface, in particular on the display ( 1 ), cartographically or via the voice output module by voice output acoustically. Systemarchitektur nach Anspruch 1, dadurch gekennzeichnet, dass die, den bereitgestellten Informationsumfang weiter einschränkende, System-Prozedur zumindest eine datenbankbasierende Funktion aufweist, die auf die, in der Datenbank der jeweiligen Eingabe-Modalität (M1, M2, M3), bereitgestellten Daten zugreift und zu der Mehrwort-Information ein mögliches, gesuchtes Merkmal oder eine mögliche, gesuchte Gruppe von Merkmalen aus den Daten der Datenbank herausfiltert und die gefundenen Daten in dem Ausgabemodul hierarchisch gegliedert ausgibt.System architecture according to Claim 1, characterized that the scope of information further limited, System procedure has at least one database-based function, on the, in the database of the respective input modality (M1, M2, M3), data provided and to the multi-word information a possible, sought-after trait or a possible, sought after trait Group of characteristics from the data of the database filters out and the found data is hierarchically structured in the output module outputs. Systemarchitektur nach Anspruch 1, dadurch gekennzeichnet, dass die mehrteilige und hierarchisch gegliederte Mehrwort-Information • eine Adresseninformation als Ziel einer Routenplanung und/oder eine POI-Suche in einem Navigationsmodus des Systems oder • eine Musikauswahlinformation in einem Entertainmentmodus ist, wobei Eingabe und Ausgabe der Mehrwort-Information, in einer vorbestimmten oder wählbaren Reihenfolge eingebbar oder ausgebbar sind.System architecture according to claim 1, characterized, that the multi-part and hierarchically structured multi-word information • one Address information as a destination of route planning and / or a POI search in a navigation mode of the system or • one Music selection information in an entertainment mode, in which Input and output of the multi-word information, in a predetermined or selectable order can be entered or output. Systemarchitektur nach Anspruch 2, dadurch gekennzeichnet, dass in einem Navigationsmodus eine, auf einer Tastatur oder durch Berührung vorgenommene Bedienhandlung (M2) und/oder eine gestische Bedienhandlung (M3) und/oder eine Spracheingabe (M1), hierarchisch gegliederten Mehrwort-Information, die mit Hilfe der System-Prozedur eingeschränkt worden ist, zu einer, auf dem Ausgabemodul (1), insbesondere dem Display (1), visualisierbaren, eingeschränkten Bildanzeige (2) und/oder einer Auswahlliste (3) führt.System architecture according to claim 2, characterized in that in a navigation mode, made on a keyboard or by touch control action (M2) and / or gestural operating action (M3) and / or a voice input (M1), hierarchically structured multi-word information, the with the help of the system procedure has been restricted to one, on the output module ( 1 ), especially the display ( 1 ), visualizable, restricted image display ( 2 ) and / or a selection list ( 3 ) leads. Systemarchitektur nach den Ansprüchen 4 und 6, dadurch gekennzeichnet, dass durch die jeweilige multimodale Eingabe die Bildanzeige (2) generiert wird, die als eine kartografische Darstellung (2) ausgeführt ist, wobei die Darstellung in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen selbstständig oder per Eingabe in mindestens einer der Modalitäten (M1, M2, M3) ein- und auszoombar ist, wobei in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen per Eingabe in mindestens einer der Modalitäten (M1, M2, M3) eine weitere Einschränkung, des bis dahin herausfilterten Informationsumfanges möglich ist, der seinerseits wiederum als kartografische Darstellung (2) visualisierbar sowie selbstständig oder per Eingabe ein- und auszoombar ist.System architecture according to claims 4 and 6, characterized in that by the respective multimodal input the image display ( 2 ) is generated as a cartographic representation ( 2 ) is carried out, wherein the representation depending on the possible, found features or feature groups independently or by input in at least one of the modalities (M1, M2, M3) on and ausoombar, depending on the possible, found features or feature groups by input in at least one of the modalities (M1, M2, M3) a further restriction of the hitherto filtered-out information scope is possible, which in turn as a cartographic representation ( 2 ) can be visualized and independently or by input on and ausoombarbar is. Systemarchitektur nach den Ansprüchen 4 und 6, dadurch gekennzeichnet, dass über die jeweilige Eingabe in einer der Modalitäten (M1, M2, M3) die Auswahlliste (3) generiert wird, die als eine listenartige Darstellung ausgeführt ist, die in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen per Eingabe in mindestens einer der Modalitäten (M1, M2, M3) eine weitere Einschränkung, des bis dahin herausfilterten Informationsumfanges in einer menüartigen Bestenliste (5) ermöglicht, die ihrerseits wiederum als listenartige Darstellung (3) visualisierbar ist.System architecture according to claims 4 and 6, characterized in that on the respective input in one of the modalities (M1, M2, M3) the selection list ( 3 ) is generated, which is executed as a list-like representation, depending on the possible, found features or feature groups by entering in at least one of the modalities (M1, M2, M3) a further restriction of the hitherto filtered out information in a menu-like leaderboard ( 5 ), which in turn can be used as a list-like representation ( 3 ) is visualizable. Systemarchitektur nach Anspruch 6 oder 7, dadurch gekennzeichnet, dass die generierte Bildanzeige (2) und die Auswahlliste (3) miteinander derart verknüpft sind, dass eine; über die jeweilig benutzte ausgewählte Eingabe-Modalität (M1, M2, M3) getätigte; weitere Auswahl, der bereits möglichen, gefundenen Merkmale oder Merkmalsgruppen zu einer Fortführung der einschränkenden System-Prozedur, auch in der gerade nicht benutzten Modalität (M1, M2, M3); führt und die so eingeschränkte Auswahl – in Abhängigkeit der möglichen, gefundenen Merkmale oder Merkmalsgruppen – auf dem Display (1) visualisierbar ist, wobei das System die neu eingeschränkte Auswahl als Bildanzeige (2) durch Ein- und Auszoomen der kartografischen Darstellung an ein Display (1), als Ausgabemodul, anpasst.System architecture according to claim 6 or 7, characterized in that the generated image display ( 2 ) and the selection list ( 3 ) are linked together such that one; made over the respectively used selected input modality (M1, M2, M3); further selection of already possible, found characteristics or feature groups for a continuation of the restrictive system procedure, even in the currently unused modality (M1, M2, M3); leads and the so limited selection - depending on the possible, found characteristics or feature groups - on the display ( 1 ), the system has the newly limited selection as image display ( 2 ) by zooming in and out of the cartographic representation on a display ( 1 ), as output module. Systemarchitektur nach Anspruch 6 oder 7, dadurch gekennzeichnet, dass in einem Navigationsmodus, der Grad des, durch eine eingeschränkte Auswahl bewirkten, Einzoomvorgangs an der Bildanzeige und/oder der Auswahlliste durch die, in mindestens einer der Modalitäten (M1, M2, M3) erfolgte, Eingabe an der Bildanzeige (2) oder der Auswahlliste (3), • durch die, von der System-Prozedur herausgefilterten, eingeschränkten Informationen bestimmt ist oder • nicht durch die, von der System-Prozedur herausgefilterten, eingeschränkten Informationen bestimmt ist, sondern ein vorbestimmter Zoomfaktor anwendbar ist, der nur einen vorbestimmten Teil der Informationen ausgibt.System architecture according to claim 6 or 7, characterized in that, in a navigation mode, the degree of limited zoom selection zooming on the image display and / or the selection list by, in at least one of the modalities (M1, M2, M3) , Input on the image display ( 2 ) or the selection list ( 3 ), • is determined by the limited information filtered out by the system procedure, or • is not determined by the restricted information filtered out by the system procedure, but a predetermined zoom factor is applicable which outputs only a predetermined part of the information , Systemarchitektur nach Anspruch 6 oder 7, dadurch gekennzeichnet, dass in einem Navigationsmodus der Grad des, durch eine erweiternde Auswahl bewirkten, Auszoomvorgangs an der Bildanzeige (2) und/oder der Auswahlliste (3) durch die, in mindestens einer der Modalitäten (M1, M2, M3) erfolgte, Eingabe an der Bildanzeige (2) oder der Auswahlliste (3), • durch die, von der System-Prozedur herausgefilterten, erweiterten Informationen bestimmt ist oder • nicht durch die, von der System-Prozedur herausgefilterten, erweiterten Informationen bestimmt ist, sondern ein vorbestimmter Zoomfaktor anwendbar ist, der nur einen Teil der erweiterten Information ausgibt.System architecture according to claim 6 or 7, characterized in that, in a navigation mode, the degree of zooming out of the image display caused by an expanding selection ( 2 ) and / or the selection list ( 3 ) by the, in at least one of the modalities (M1, M2, M3), input to the image display ( 2 ) or the selection list ( 3 ), • is determined by the extended information filtered out by the system procedure, or • is not determined by the extended information filtered out by the system procedure, but a predetermined zoom factor is applicable which outputs only a part of the extended information , Systemarchitektur nach einem der Ansprüche 9 bis 11, dadurch gekennzeichnet, dass in dem Navigationsmodus der Grad des, durch die eingeschränkte Auswahl an der Bildanzeige (2) und/oder der Auswahlliste (3) bewirkten, Einzoomvorgangs und des, an der Bildanzeige (2) und/oder der Auswahlliste (3) bewirkten, Auszoomvorgang durch Auswertung der Wahrscheinlichkeit verschiedener Orte und/oder durch die Größe der Ortschaften und/oder durch die Nähe des Fahrzeugs zur jeweiligen Auswahl und/oder durch ehemals angesteuerte Ziele bestimmt ist.System architecture according to one of Claims 9 to 11, characterized in that, in the navigation mode, the degree of, due to the limited selection of the image display ( 2 ) and / or the selection list ( 3 ), zoom in, and, on the image display ( 2 ) and / or the selection list ( 3 ), Auszoomvorgang determined by evaluating the probability of different locations and / or by the size of the localities and / or by the proximity of the vehicle to the respective selection and / or by previously driven targets. Systemarchitektur nach Anspruch 1, dadurch gekennzeichnet, dass eine Auswahl der Eingabe-Modalität (M1, M2, M3) jederzeit während einer Eingabe oder Teileingabe eines beliebigen Informationsteils der mehrteiligen, hierarchisch gegliederten Information mithilfe eines Menüs (4) erfolgt, welches die benutzbaren Modalitäten (M1, M2, M3) vorschlägt.System architecture according to claim 1, characterized in that a selection of the input modality (M1, M2, M3) at any time during an input or partial input of any information part of the multi-part, hierarchically structured information using a menu ( 4 ), which proposes the usable modalities (M1, M2, M3). Systemarchitektur nach Anspruch 13, dadurch gekennzeichnet, dass das Menü (4) über eine der Eingabe-Modalitäten (M1, M2, M3) aufrufbar und auf dem Display (1) visualisierbar oder in einem dafür vorgesehenen Bereich auf dem Display (1) visualisiert ist.System architecture according to claim 13, characterized in that the menu ( 4 ) via one of the input modalities (M1, M2, M3) and on the display ( 1 ) or in a designated area on the display ( 1 ) is visualized. Systemarchitektur nach Anspruch 13, dadurch gekennzeichnet, dass das Menü (4) ausgehend von der Auswahlliste (3) ein Popup-Menü ist, welches sowohl die benutzbaren Modalitäten (M1, M2, M3) vorschlägt als auch die jeweilige Bestenliste (5) anzeigt.System architecture according to claim 13, characterized in that the menu ( 4 ) starting from the selection list ( 3 ) is a pop-up menu that proposes both the modalities that can be used (M1, M2, M3) and the respective leaderboard ( 5 ). Systemarchitektur nach Anspruch 2, dadurch gekennzeichnet, dass die Tastatur als Bedienhandlung der zweiten Modalität (M2) zur Eingabe der hierarchisch gegliederten Mehrwort-Information durch eine Mausbedienung und/oder Joystickbedienung und/oder Trackballbedienung über ihnen zugeordnete Benutzerschnittstellen des Erfassungsmoduls durchgeführt oder unterstützt wird.System architecture according to claim 2, characterized that the keyboard as a control action of the second modality (M2) for inputting the hierarchically structured multi-word information by a mouse operation and / or joystick operation and / or trackball operation via associated with them user interfaces of the detection module or supported. Systemarchitektur nach Anspruch 2, dadurch gekennzeichnet, dass die gestische Bedienhandlung der dritten Modalität (M3) zur Eingabe der hierarchisch gegliederten Mehrwort-Information durch eine Näherungssensorik über eine zugeordnete Benutzerschnittstelle des Erfassungsmoduls durchgeführt wird.System architecture according to claim 2, characterized that the gestural operating action of the third modality (M3) for entering the hierarchically structured multi-word information by a proximity sensor via an associated User interface of the acquisition module is performed. Verfahren zur multimodalen Zieleingabe einer mehrteiligen und hierarchisch gegliederten Zielinformation (Z) und einer dynamischen Anpassung, des auf der Zielinformation (Z) basierenden Zieles, insbesondere für ein Navigationssystem eines Kraftfahrzeuges, wobei die Eingabe über mehrere, mindestens jedoch über zwei, Eingabe-Modalitäten (M1, M2, M3) erfolgt, wobei die Zielinformation (Z), ausgehend von der jeweiligen modalen Eingabeinteraktion eines Nutzers, einer Benutzerschnittstelle eines der jeweiligen Modalität (M1, M2, M3) zugeordneten Eingabemoduls zuführbar ist, um die Zielinformation (Z) auf einem Display (1) zu visualisieren, dadurch gekennzeichnet, dass • die Eingabe eines Informationsteils der mehrteilig und hierarchisch gegliederten Zielinformation (Z) zunächst in einer ersten Modalität (M1, M2, M3) erfolgt, wobei abweichend von der für die erste Teileingabe verwendeten ersten Eingabe-Modalität (M1, M2, M3) eine weitere Modalität (M1, M2, M3) zur Eingabe der Zielinformation (Z), zur Korrektur und Einschränkung der Zielinformation (Z) mittels einer System-Prozedur auswählbar und nutzbar ist, • wobei jede getätigte Teileingabe (M1, M2, M3) eines Zielinformationsteils der mehrteilig, hierarchisch gegliederten Zielinformation (Z) in der jeweils ausgewählten oder benutzten Eingabe-Modalität (M1, M2, M3) auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität (M1, M2, M3) einwirkt, und die Zielinformation (Z) oder die über eine andere Modalität (M1, M2, M3) korrigierte Zielinformation (Z) in der jeweils bis dahin bereitgestellten Genauigkeit in einer kartenbasierten Darstellung (2) an ihren Geopositionen über mindestens eine angeordnete Benutzerschnittstelle eines Ausgabemoduls, insbesondere über ein Navigationsdisplay (1), ausgegeben wird.Method for multimodal destination input of a multi-part and hierarchically structured destination information (Z) and a dynamic adaptation of the destination based on the destination information (Z), in particular for a navigation system of a motor vehicle, wherein the input over several, but at least two, input modalities ( M1, M2, M3), wherein the destination information (Z), based on the respective modal input interaction of a user, a user interface of the respective modality (M1, M2, M3) associated with A can be fed to the target information (Z) on a display ( 1 ), characterized in that • the input of an information part of the multi-part and hierarchically structured destination information (Z) initially takes place in a first modality (M1, M2, M3), wherein different from the first input modality used for the first part input ( M1, M2, M3) a further modality (M1, M2, M3) for inputting the destination information (Z), for correcting and limiting the destination information (Z) can be selected and used by means of a system procedure, wherein each partial input (M1 , M2, M3) of a destination information part of the multipart, hierarchically structured destination information (Z) in the respectively selected or used input modality (M1, M2, M3) on the at least one further selected or used input modality (M1, M2, M3) acts, and the destination information (Z) or via another modality (M1, M2, M3) corrected destination information (Z) in the respectively provided until then accuracy in a ka rtenbasierten representation ( 2 ) at their geopositions via at least one arranged user interface of an output module, in particular via a navigation display ( 1 ) is output. Verfahren zur multimodalen Zieleingabe einer mehrteiligen und hierarchisch gegliederten Zielinformation (Z) und einer dynamischen Anpassung des, auf der Zielinformation (Z) basierenden, Zieles, insbesondere für ein Navigationssystem eines Kraftfahrzeuges, wobei die Eingabe über mehrere, mindestens jedoch über zwei, Eingabe-Modalitäten (M1, M2, M3) erfolgt, wobei die Zielinformation (Z), ausgehend von der jeweiligen modalen Interaktion eines Nutzers, einer Benutzerschnittstelle eines, der jeweiligen Modalität (M1, M2, M3) zugeordneten, Eingabemoduls zuführbar ist, um die Zielinformation (Z) auf einem Display (1) zu visualisieren, dadurch gekennzeichnet, dass • die Eingabe eines Informationsteils der mehrteilig und hierarchisch gegliederten Zielinformation (Z) zunächst in einer ersten Modalität per Spracheingabe (M3) erfolgt, wobei abweichend von der zuerst verwendeten Teileingabe per Spracheingabe (M3) eine weitere Modalität (M2, M3) zur Eingabe der Zielinformation (Z), insbesondere eine Tastatur- oder Touch-Bedienhandlung oder eine gestische Handlung (M2, M3), zur Korrektur und Einschränkung der Zielinformation (Z), mittels einer System-Prozedur auswählbar und nutzbar ist, • wobei jede getätigte Teileingabe (M1, M2, M3) eines Zielinformationsteils der mehrteilig, hierarchisch gegliederten Zielinformation (Z) in der jeweils ausgewählten oder benutzten Eingabe-Modalität (M1, M2, M3) auf die mindestens eine weitere ausgewählte oder benutzte Eingabe-Modalität (M1, M2, M3) einwirkt, und die eingesprochene Zielinformation (Z) oder die, über eine weitere Modalität (M2, M3), korrigierte Zielinformation (Z) in der jeweils bis dahin bereitgestellten Genauigkeit in einer kartenbasierten Darstellung (2) an ihren Geopositionen über mindestens eine angeordnete Benutzerschnittstelle eines Ausgabemoduls, insbesondere über ein Navigationsdisplay (1), ausgegeben wird.Method for multimodal destination input of a multi-part and hierarchically structured destination information (Z) and a dynamic adaptation of based on the destination information (Z), target, in particular for a navigation system of a motor vehicle, wherein the input over a plurality, but at least two, input modalities (M1, M2, M3), whereby the destination information (Z), based on the respective modal interaction of a user, can be fed to a user interface of an input module assigned to the respective modality (M1, M2, M3) in order to obtain the destination information (Z ) on a display ( 1 ), characterized in that • the input of an information part of the multi-part and hierarchically structured destination information (Z) initially in a first modality via voice input (M3), wherein different from the first-used part input by voice input (M3) another modality ( M2, M3) for inputting the destination information (Z), in particular a keyboard or touch operation or gestural action (M2, M3), for correcting and limiting the destination information (Z), can be selected and used by means of a system procedure, Wherein each effected part input (M1, M2, M3) of a destination information part of the multi-part, hierarchically structured destination information (Z) in the respectively selected or used input modality (M1, M2, M3) to the at least one further selected or used input modality (M1, M2, M3), and the input target information (Z) or, via another modality (M2, M3), korrigi erte destination information (Z) in the respectively provided up to then accuracy in a map-based representation ( 2 ) at their geopositions via at least one arranged user interface of an output module, in particular via a navigation display ( 1 ) is output.
DE102008008948A 2008-02-13 2008-02-13 System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module Pending DE102008008948A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102008008948A DE102008008948A1 (en) 2008-02-13 2008-02-13 System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102008008948A DE102008008948A1 (en) 2008-02-13 2008-02-13 System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module

Publications (1)

Publication Number Publication Date
DE102008008948A1 true DE102008008948A1 (en) 2009-08-20

Family

ID=40873924

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102008008948A Pending DE102008008948A1 (en) 2008-02-13 2008-02-13 System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module

Country Status (1)

Country Link
DE (1) DE102008008948A1 (en)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009024693A1 (en) * 2009-06-12 2010-12-16 Volkswagen Ag Infotainment system for vehicle, comprises speech recognizing system for converting voice commands to partial quantity of text elements, where output device is provided for visual representation of information
DE102009025530A1 (en) * 2009-06-19 2010-12-23 Volkswagen Ag Method for operating e.g. aircraft by automated speech dialogue, involves selecting speech dialogue element in list and correcting or iterating operating information corresponding to selected dialogue element
DE102009058151A1 (en) * 2009-12-12 2011-06-16 Volkswagen Ag Speech dialog system operating method for e.g. operation of devices of car, involves differentiating graphical element with equal representation feature and other graphical element with unequal representation feature from each other
DE102009059792A1 (en) * 2009-12-21 2011-06-22 Continental Automotive GmbH, 30165 Method and device for operating technical equipment, in particular a motor vehicle
DE102009059981A1 (en) * 2009-12-22 2011-06-30 Volkswagen AG, 38440 A method of displaying a plurality of selectable elements and apparatus for performing the method
WO2011137960A1 (en) 2010-05-04 2011-11-10 Volkswagen Aktiengesellschaft Method and apparatus for operating a user interface
DE102010023534A1 (en) 2010-06-11 2011-12-15 Volkswagen Ag Method for operating speech interface for navigation system utilized to visualize e.g. navigation destinations, in vehicle, involves combining search results into group, so that number of elements is smaller than displayed results
WO2011084156A3 (en) * 2010-01-06 2012-06-21 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
WO2012167952A1 (en) 2011-06-10 2012-12-13 Volkswagen Aktiengesellschaft Method and apparatus for providing a user interface
US8456297B2 (en) 2010-01-06 2013-06-04 Apple Inc. Device, method, and graphical user interface for tracking movement on a map
US8464182B2 (en) 2009-06-07 2013-06-11 Apple Inc. Device, method, and graphical user interface for providing maps, directions, and location-based information
US8607167B2 (en) 2007-01-07 2013-12-10 Apple Inc. Portable multifunction device, method, and graphical user interface for providing maps and directions
WO2014102041A2 (en) 2012-12-28 2014-07-03 Volkswagen Aktiengesellschaft Method for inputting and identifying a character string
DE102013001886A1 (en) 2013-02-02 2014-08-07 Audi Ag System-initiated help function for the operation of a device associated with a vehicle - display and / or output of examples
US8862576B2 (en) 2010-01-06 2014-10-14 Apple Inc. Device, method, and graphical user interface for mapping directions between search results

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19533541C1 (en) 1995-09-11 1997-03-27 Daimler Benz Aerospace Ag Method for the automatic control of one or more devices by voice commands or by voice dialog in real time and device for executing the method
DE19914631A1 (en) * 1999-03-31 2000-10-12 Bosch Gmbh Robert Input procedure in a driver information system
DE102004010406B3 (en) * 2004-03-01 2005-10-27 Siemens Ag Information or entertainment system of a motor vehicle and method for selecting a list entry
GB2421161A (en) * 2003-02-26 2006-06-14 Tomtom Bv Navigation device with touch screen keyboard
DE102005007317A1 (en) 2005-02-17 2006-08-24 Robert Bosch Gmbh Method and device for voice control of a device or a system in a motor vehicle

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19533541C1 (en) 1995-09-11 1997-03-27 Daimler Benz Aerospace Ag Method for the automatic control of one or more devices by voice commands or by voice dialog in real time and device for executing the method
DE19914631A1 (en) * 1999-03-31 2000-10-12 Bosch Gmbh Robert Input procedure in a driver information system
GB2421161A (en) * 2003-02-26 2006-06-14 Tomtom Bv Navigation device with touch screen keyboard
DE102004010406B3 (en) * 2004-03-01 2005-10-27 Siemens Ag Information or entertainment system of a motor vehicle and method for selecting a list entry
DE102005007317A1 (en) 2005-02-17 2006-08-24 Robert Bosch Gmbh Method and device for voice control of a device or a system in a motor vehicle

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8607167B2 (en) 2007-01-07 2013-12-10 Apple Inc. Portable multifunction device, method, and graphical user interface for providing maps and directions
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US11849063B2 (en) 2007-06-22 2023-12-19 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US10686930B2 (en) 2007-06-22 2020-06-16 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location based information
US9792001B2 (en) 2008-01-06 2017-10-17 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US10521084B2 (en) 2008-01-06 2019-12-31 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US11126326B2 (en) 2008-01-06 2021-09-21 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US9330381B2 (en) 2008-01-06 2016-05-03 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US10503366B2 (en) 2008-01-06 2019-12-10 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8464182B2 (en) 2009-06-07 2013-06-11 Apple Inc. Device, method, and graphical user interface for providing maps, directions, and location-based information
DE102009024693B4 (en) 2009-06-12 2019-07-11 Volkswagen Ag Infotainment system for a vehicle and method for presenting information
DE102009024693A1 (en) * 2009-06-12 2010-12-16 Volkswagen Ag Infotainment system for vehicle, comprises speech recognizing system for converting voice commands to partial quantity of text elements, where output device is provided for visual representation of information
DE102009025530A1 (en) * 2009-06-19 2010-12-23 Volkswagen Ag Method for operating e.g. aircraft by automated speech dialogue, involves selecting speech dialogue element in list and correcting or iterating operating information corresponding to selected dialogue element
DE102009025530B4 (en) * 2009-06-19 2019-05-23 Volkswagen Ag Method for operating a vehicle by means of an automated voice dialogue and a correspondingly designed voice dialogue system and vehicle
DE102009058151A1 (en) * 2009-12-12 2011-06-16 Volkswagen Ag Speech dialog system operating method for e.g. operation of devices of car, involves differentiating graphical element with equal representation feature and other graphical element with unequal representation feature from each other
DE102009058151B4 (en) * 2009-12-12 2020-08-20 Volkswagen Ag Method for operating a speech dialogue system with semantic evaluation and speech dialogue system in addition
DE102009059792A1 (en) * 2009-12-21 2011-06-22 Continental Automotive GmbH, 30165 Method and device for operating technical equipment, in particular a motor vehicle
DE102009059981A1 (en) * 2009-12-22 2011-06-30 Volkswagen AG, 38440 A method of displaying a plurality of selectable elements and apparatus for performing the method
EP2339297A3 (en) * 2009-12-22 2012-06-13 Volkswagen Aktiengesellschaft Method for displaying a number of selectable elements and device for executing the method
US10169431B2 (en) 2010-01-06 2019-01-01 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
WO2011084156A3 (en) * 2010-01-06 2012-06-21 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
US8862576B2 (en) 2010-01-06 2014-10-14 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
US8456297B2 (en) 2010-01-06 2013-06-04 Apple Inc. Device, method, and graphical user interface for tracking movement on a map
WO2011137960A1 (en) 2010-05-04 2011-11-10 Volkswagen Aktiengesellschaft Method and apparatus for operating a user interface
DE102010019191A1 (en) 2010-05-04 2011-11-10 Volkswagen Ag Method and device for operating a user interface
US9489435B2 (en) 2010-05-04 2016-11-08 Volkswagen Ag Method and apparatus for operating a user interface
US10503747B2 (en) 2010-05-04 2019-12-10 Volkswagen Ag Method and apparatus for operating a user interface
DE102010023534A1 (en) 2010-06-11 2011-12-15 Volkswagen Ag Method for operating speech interface for navigation system utilized to visualize e.g. navigation destinations, in vehicle, involves combining search results into group, so that number of elements is smaller than displayed results
WO2012167952A1 (en) 2011-06-10 2012-12-13 Volkswagen Aktiengesellschaft Method and apparatus for providing a user interface
US9875003B2 (en) 2011-06-10 2018-01-23 Volkswagen Ag Method and apparatus for providing a user interface
DE102011103869A1 (en) 2011-06-10 2012-12-13 Volkswagen Aktiengesellschaft Method and device for providing a user interface
DE102013009375A1 (en) 2012-12-28 2014-07-03 Volkswagen Aktiengesellschaft Method for entering and recognizing a character string
WO2014102041A2 (en) 2012-12-28 2014-07-03 Volkswagen Aktiengesellschaft Method for inputting and identifying a character string
US9703393B2 (en) 2012-12-28 2017-07-11 Volkswagen Ag Method for inputting and identifying a character string
WO2014117933A1 (en) 2013-02-02 2014-08-07 Audi Ag System-initiated help function for the operation of a device associated with a vehicle - display and/or output of examples
DE102013001886A1 (en) 2013-02-02 2014-08-07 Audi Ag System-initiated help function for the operation of a device associated with a vehicle - display and / or output of examples

Similar Documents

Publication Publication Date Title
DE102008008948A1 (en) System architecture for dynamic adaptation of information display for navigation system of motor vehicle i.e. car, has input modalities with input interacting to modalities so that system inputs result about user interfaces of output module
EP2026328B1 (en) Method for multimodal control of at least one device in a motor vehicle
EP2223046A2 (en) Multimode user interface of a driver assistance system for inputting and presentation of information
EP2567194B1 (en) Method and device for operating a user interface
EP3486805A1 (en) Method for operating an electronic device or an application and corresponding device
DE102006011288A1 (en) Method for selecting functions using a user interface and user interface
DE112015004198T5 (en) VEHICLE EQUIPMENT CONTROL DEVICE AND METHOD FOR SEARCHING TO CONTROL CONTENTS
EP2951663B1 (en) System-initiated help function for operating an apparatus associated with a vehicle - input of spaces
EP3077892B1 (en) Motor vehicle control apparatus with touch-sensitive input panel
EP1899898A1 (en) Method for selecting a designation
DE102004010406B3 (en) Information or entertainment system of a motor vehicle and method for selecting a list entry
DE102009030263A1 (en) Method for controlling menu-based operation and information system of vehicle, involves displaying menu and forming controlling element for controlling menu
EP3049911B1 (en) User interface and method for assisting a user in the operation of an operator control unit
DE102009018590B4 (en) Motor vehicle with an operating device and associated method
EP3074265B1 (en) System-wide search in driver information systems
DE102013016196B4 (en) Motor vehicle operation using combined input modalities
EP3368967A1 (en) Method and apparatus for improving recognition accuracy for the handwritten input of alphanumeric characters and gestures
DE102017211447B4 (en) Method for selecting a list entry from a selection list of an operating device by means of voice control and operating device
WO2006003087A2 (en) Method for entering characters into a mobile communications device and mobile communications device that is equipped therefor
DE102008033441B4 (en) Method for operating an operating system for a vehicle and operating system for a vehicle
DE102013001885A1 (en) System-initiated help function per trip and / or per user for the operation of a device associated with a vehicle
DE102009058151B4 (en) Method for operating a speech dialogue system with semantic evaluation and speech dialogue system in addition
DE102019206310A1 (en) Searching driver information systems of a vehicle
EP2339297A2 (en) Method for displaying a number of selectable elements and device for executing the method
DE102011121585A1 (en) Motor car has control unit that is connected with data memory and display device so as to display detected characters into display device during search mode according to data stored in data memory

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
R012 Request for examination validly filed
R012 Request for examination validly filed

Effective date: 20140917

R016 Response to examination communication