LT Summit, Saarbrücken, 11. Mai 2004 Förderung der Sprachverarbeitung und der Mensch-Technik-Interaktion in Deutschland Ministerialrat Dr. Bernd Reuse

LT Summit, Saarbrücken, 11. Mai 2004

Förderung der Sprachverarbeitung Förderung der Sprachverarbeitung und der Mensch-Technik-und der Mensch-Technik-

InteraktionInteraktionin Deutschlandin Deutschland

Förderung der Sprachverarbeitung Förderung der Sprachverarbeitung und der Mensch-Technik-und der Mensch-Technik-

InteraktionInteraktionin Deutschlandin Deutschland

Ministerialrat Dr. Bernd Reuse

Bundesministerium für Bildung und Forschung

2LT Summit, Saarbrücken, 11. Mai 2004

ÜbersichtÜbersicht

1. Leitprojekt Verbmobil (1993 – 2000)

2. Leitprojekte Mensch-Technik-Interaktion (1999 – 2003)

3. MTI-Sonderausstellung auf der CeBIT 2004 (03/2004)

4. Kompetenzzentrum Collate (2001 – 2006)

5. ERA-Net LangNet (ab 2004)


Leitprojekt VerbmobilLeitprojekt Verbmobil

Laufzeit: 1/1993-9/2000

Ziele: Erkennung und Übersetzung spontan gesprochener Sprache in Real World, mit:

Diskontinuitäten, Räuspern Mehrdeutigkeiten, Selbstkorrekturen, Prosodie

Forschungsgruppen: Koordinator DFKI Saarbrücken, Prof. Wahlster 32 Forschungsgruppen aus Deutschland ( 7 Unternehmen, 25 Universitäten) 2 Forschungsgruppen aus USA, 1 aus Japan (ATR, Kyoto)

Ergebnisse: Prototypisches Übersetzungssystem Deutsch-Englisch (10.000 Wörter) und Deutsch-

Japanisch (3.000 Wörter), PC Wartung (30.000 Wörter) 20 spin-off Produkte, 8 spin-off Unternehmen, 900 ausgebildete

Sprachwissenschaftler

Projektkosten: 59 Mio. € durch BMBF, 28 Mio. € durch Industrie

Deutscher “Zukunftspreis” des Bundespräsidenten Rau in 2001


Von der Sprache zur „Real World“ Multimodalen InteraktionVon der Sprache zur „Real World“ Multimodalen Interaktion

MultimodaleInteraktion

Gesprochener Dialog

Grafische Benutzer-interfaces

GestischeInteraktion

Gesichts-ausdrücke

Haptik

InterpretationIntension of user

Interpretation derAbsicht des Benutzers


Leitprojekte zur Mensch-Technik-InteraktionLeitprojekte zur Mensch-Technik-Interaktion

Laufzeit: 7/1999-9/2003

Ziele: Attraktive wissenschaftliche Lösungen mit hohem Marktpotenzial

Integrierte multimodale Interaktionsformen mit Sprache, Gestik,

Mimik, Haptik und Visualisierung (hands free)

Interdisziplinäre, intelligente, robuste und benutzerzentrierte

Schnittstellen

Ergonomie und Benutzerakzeptanz als Hauptkriterien

Projektpartner:

38 Großunternehmen, 34 KMU, 15 Unis, 15 Forschungseinrichtungen

6 Internationale Konzerne, bzw. ausländische Forschungsgruppen

Mittel: 82,4 Mio. € durch BMBF/BMWA

69,7 Mio. € durch Industrie

Web: www.dlr.de/pt-dlr/sw

http://www.dlr.de/pt-dlr/sw


SMARTKOM: Computer ohne Tastatur und Maus Integrierte Sprach- und Gestikverarbeitung zur Interaktion mit dem System Situationsbedingtes Verstehen auch bei unsicherer, mehrdeutiger oder

unvollständiger multimodaler Eingabe

ARVIKA: Der Computer in der Brille Mobiles Agieren in gemischt realen und virtuellen zukunftsorientierten

Arbeitsumgebungen von Entwicklung, Produktion und Service Weltweit erstmalig „remote support“ für Serviceanwendungen

MORPHA: Mobile Serviceroboter unterstützen den Menschen Interaktive Programmierparadigmen durch Integration taktiler, gestischer und

sprachlicher Kanäle (z. B. Programmieren durch Vormachen)

Highlights der MTI-Highlights der MTI-ProjekteProjekte (I) (I)


MAP: Der vernetzte digitale Assistent im Taschenformat (BMWA) Sichere Agentensysteme zur persönlichen Assistenz bei mobilen und

stationären Arbeitssituationen (z. B. Delegierung von Routineaufgaben)

INVITE: Multimediale und multimodale verteilte Teamarbeit Gesprächsunterstützung durch Begriffsassoziationen in Konferenzen,

Exploration und Extraktion von Wissensstrukturen

Interaktive & kollaborative Datenrepräsentation in immersiven 3D-Umgebungen

EMBASSI: Multimodale Bedienung elektronischer Alltagsgeräte Ordnung bei Benutzerschnittstellen und Bedienungsanleitungen durch

multimodale Assistenz bei der Auswahl und Steuerung elektronischer Geräte

Highlights der MTI-Highlights der MTI-ProjekteProjekte (II) (II)


Email aus einem fahrenden Auto (M3L)Email aus einem fahrenden Auto (M3L)

Ich möchte eine Email an Dr.Reuse senden

<domainObject>

<sendTelecommunicationProcess>

<sender>....................</sender>

<receiver>..............</receiver>

<document>..........</document>

<email>...........</email>

</sendTelecommunicationProcess>

</domainObject>

www.smartkom.org

http://www.smartkom.org/


Gegenwärtige Situation: Kabelverlegung im Gegenwärtige Situation: Kabelverlegung im Airbus mit VerdrahtungslistenAirbus mit Verdrahtungslisten

ISSUE DOK RELEASENUMBER INCORPORATED A --047033 ----- UK32 MP D42139 B --047120 ----- UE55 MP D43129 C --047371 ----- UF59 MP D42229 D --047580 ----- UB70 MP D43295 E --047033 ----- UM22 MP D42139 MP D43129 BM D811355 BM D811388 F --047371 ----- UJ49 MP D42229 BM D811366 G --047371 ----- UJ53 MP D42229 H --049999 ----- UA00 J --047580 ----- UF85 MP D43295 MP D43374 BM D815022 K --047120 ----- UV68 MP D43129 BM D817306 BM D817308 MP D43252 BM D817308 MP D43295 BM D816617 L --047120 ----- UW57

ISSUE DOK RELEASENUMBER INCORPORATED A --047033 ----- UK32 MP D42139 B --047120 ----- UE55 MP D43129 C --047371 ----- UF59 MP D42229 D --047580 ----- UB70 MP D43295 E --047033 ----- UM22 MP D42139 MP D43129 BM D811355 BM D811388 F --047371 ----- UJ49 MP D42229 BM D811366 G --047371 ----- UJ53 MP D42229 H --049999 ----- UA00 J --047580 ----- UF85 MP D43295 MP D43374 BM D815022 K --047120 ----- UV68 MP D43129 BM D817306 BM D817308 MP D43252 BM D817308 MP D43295 BM D816617 L --047120 ----- UW57

www.arvika.de

DemoDemo

http://www.arvika.de/


Zukunft:Zukunft:Kabelverlegung – mit AR UnterstützungKabelverlegung – mit AR Unterstützung

Kabelverteiler

Sprachsteuerung für Kabelnummer

Ausgabe des Kontakts auf dem

Kabelverteiler

Bestätigung der korrekten Verbindung

www.arvika.de

DemoDemo

http://www.arvika.de/


Demo: Demo: Exploration und Extraktion von WissensstrukturenExploration und Extraktion von Wissensstrukturen

Ziel

Sprachbasierte Extraktion von domänenspezifischen Wissensstrukturen mit Ontologie-Unterstützung

Konzepte

– Inhaltserkennung und Inhaltsstrukturierung

– Integration von Spracherkennung, Text Mining und Ontologie

www.invite.de


Forschungsergebnisse Mensch-Technik-InteraktionForschungsergebnisse Mensch-Technik-Interaktion

Kommerzielle Ergebnisse 149Demonstratoren 117Patentanmeldungen 56spin-off-Produkte 13spin-off-Unternehmen 154neu geschaffene high-tech Arbeitsplätze (bis 07/03)

Wissenschaftliche Ergebnisse 898wissenschaftliche Publikationen 16Berufungen auf Lehrstühle an Universitäten 211Diplomarbeiten, Promotionen, Habilitationen 1 European Information Technology Prize 2003 der EU


MTI-Sonderausstellung auf der CeBIT 2004MTI-Sonderausstellung auf der CeBIT 2004


MTI-Sonderausstellung auf der CeBIT 2004MTI-Sonderausstellung auf der CeBIT 2004


Virtual Human: Anthropomorphe InteraktionsagentenVirtual Human: Anthropomorphe Interaktionsagenten

Laufzeit 11/2002 - 10/2006

Ziele Multimodale Dialoge unter Berücksichtigung des affektiven Computing

Visuelle Akzeptanz und ästhetische Attraktivität der dargestellten Charaktere

Glaubhaftes, spontanes, psychologisch, emotional und semantisch

konsistentes Bewegen und Dialogverhalten

Pragmatik und Effizienz bei der Konstruktion attraktiver Applikationen durch

Autoren jenseits des Bereichs der Computerwissenschaften

Projektpartner DFKI, Saarbrücken, FhG-IGD, FhG-IMK und 4 Partner (3 aus der Industrie)

Mittel BMBF-Förderung: 7,0 Millionen € , Gesamtkosten: 8,1 Millionen €

www.virtual-human.org


Virtual Human: Virtual Human: PräsentationPräsentation auf der CeBIT 2004 auf der CeBIT 2004

www.virtual-human.org


BMBF Strategie zur Förderung der Mensch-Technik-BMBF Strategie zur Förderung der Mensch-Technik-InteraktionInteraktion

1992

1999

2000

2003

VerbmobilSpin-Off-

Produkte: 20Spin-Off-Unter-

nehmen: 8Patente:

11

Leitinnovation

Service Robotik

Leitinnovation 2005

2008

Morp

haEmbassi Smart-

KomInvite

Arvika

Map

129 4 06 0 2952 6 41 2 512 0 637 1

ServicerobotikBasisarbeiten

Home- Elektronik

Multimodale Interaktion

VerteilteTeamarbeit

Mobile Interaktion

VR/AR Arbeits-umgebung

Virtual Human

Artesas

Leitinnovation

Smart Web


Laufzeit: 04/2001 - 02/2006

Ziele: Erhalt und Transfer des Wissens aus Verbmobil ff. durch

Virtuelles Informationszentrum für Sprachtechnologie

Demonstrationszentrum für Sprach- und Textverarbeitungs-Technologien

Evaluationszentrum für Entwicklungen und Produkte der Sprachtechnologie

Forschungspartner: DFKI Saarbrücken Universität Saarbrücken Ludwig-Maximilians-Universität München

Mittel : 7,9 Mio. € vom BMBF0,2 Mio. € vom DFKI

http://collate.dfki.de

Kompetenzzentrum für Sprachtechnologie Collate


Kompetenzzentrum für Sprachtechnologie Collate

http://collate.dfki.de

Kompetenzzentrum Sprachtechnologie

Saarbrücken

F+E Förderprojekt Transferzentrum

Verwertung

passive Angebote Internet

Zeitlich begrenzte Mitarbeit im

Zentrum

Beratung

Aufträge

Anstoßfinanzierung 5 Jahre, BMBF, 7,9 Mio. €

DFKI, Uni SB, LMU München,

Land, Gesellschafter

Unterstützung von Spin-off´s

Forschungsressourcen in Saarbrücken

Angebote für Anwender in Industrie

Sprachforschung Uni Saarbrücken

Sprachfor-

schung DFKI

Personal Räume Geräte

Vorlaufende F+E Begleitende F+E prototypische

Demonstration

Personal Sachmittel Geräte

weitere Partner

F+E Sprachressourcen

BITS

Prof. Mariani Berlin, 04. November 2003

ERA-Net AimsERA-Net Aims

• Cooperation & coordination of national or regional Cooperation & coordination of national or regional research and innovation activities (i.e. programs)research and innovation activities (i.e. programs)– Exchange of information and best practices (projects,

priorities, evaluation process, management…)

– Strategic activities (complementarities, multinational scheme, barriers identification)

– Implementation joint activities (clustering, joint evaluation, use of test beds)

– Transnational research activities (joint programs, calls, funding...)


LangNet ParticipantsLangNet Participants• Identify EU Countries having similar programsIdentify EU Countries having similar programs

– France (TechnoLangue)– Germany, Italy, Trentino, Norway, Finland, Denmark, The

Netherlands/Belgium (Dutch Union) (contacts with officials)– Spain, Austria, Greece, UK, Portugal (first contacts)– Czech republic (first contact)– Sweden, Switzerland… (national programs)

• Extendable to other partnersExtendable to other partners– AS (Slovenia, Cyprus, Romania, Bulgaria, Poland,

Hungary…)– USA, Japan, South Africa (contacts)– Canada…


LangNet ProposalLangNet Proposal

• Focus on 4 infrastructural topicsFocus on 4 infrastructural topics– Language resources (data, tools)

– Language technology evaluation

– Standards

– Survey (including portal and conferences)

• 4 kinds of activities4 kinds of activities– Share of information and best practices

– Strategic activities

– Implementation of joint activities

– Transnational research activities


LangNet StructureLangNet Structure

• 7 working groups7 working groups– Language resources

– Language systems evaluation

– Standards

– Technological survey & industry

– Joint evaluation experiment

– Future broader strategic European program

– Conference and workshop organization

• Duration: 3 years (2004-2007)Duration: 3 years (2004-2007)• Budget (100 % total cost) : 3 M€Budget (100 % total cost) : 3 M€

Documents

LT Summit, Saarbrücken, 11. Mai 2004 Förderung der Sprachverarbeitung und der Mensch-Technik-Interaktion in Deutschland Ministerialrat Dr. Bernd Reuse