Obwohl heutige KI-Systeme viele Aufgaben hervorragend bewältigen, haben sie immer noch
Schwierigkeiten mit solchen, die ein höheres Maß an Verständnis des physischen Kontexts
erfordern. Ein Beispiel: Übersetzungen in lauten, überfüllten Räumen mit mehreren
Gesprächsteilnehmenden. Menschliche Zuhörer können anhand visueller und akustischer
Hinweise – wie Blickrichtung, Gesichtsausdruck, Lautstärke oder Entfernung – problemlos die
sprechende Person identifizieren. Audio-basierte Systeme hingegen scheitern hier häufig. DVPS hingegen kombiniert visuelle Eingaben, räumlichen Klang und Sprecherrichtung, um
die richtige Quelle zu erkennen – für deutlich präzisere Übersetzungen.
Die potenziellen Anwendungsbereiche sind vielfältig: im Sprachbereich, wo sie
Echtzeitübersetzungen in einer Vielzahl von Sprachen ermöglichen, wobei Text, Sprache,
Gesten und der physische Kontext berücksichtigt werden; im Gesundheitswesen, wo sie die
Früherkennung von Herz-Kreislauf-Risiken mithilfe eines aus medizinischen Bilddaten
erstellten digitalen 3D-Modells des Herzens unterstützen; und im Umweltbereich, wo sie die
Katastrophenhilfe durch Hochwasservorhersagen auf Basis von Satelliten- und Drohnendaten
in Kombination mit Echtzeit-Beobachtungssignalen verbessern.
Die Initiative wird von Translated geleitet, das für die Gesamtvision und -umsetzung
verantwortlich ist.
Das Gründungsteam von DVPS besteht aus 70 führenden europäischen KI-
Wissenschaftlerinnen und Wissenschaftlern aus den folgenden Partnerorganisationen:
- Forschung: Universität Oxford, Alan Turing Institute, École Polytechnique
Fédérale de Lausanne, ETH Zürich, Imperial College London, Fondazione Bruno
Kessler, Karlsruher Institut für Technologie, Universitat de Barcelona und Vlaamse
Instelling voor Technologisch Onderzoek
- Vertikal spezialisierte Partner: Universitätsklinikum Heidelberg, Vall d'Hebron
Institut de Recerca und Amsterdam University Medical Centers, Deepset, Sistema
und MEEO, Lynkeus, Data Valley und Pi School of AI
- Hochleistungsrechnen (Modelltraining): Cyfronet, Polens nationales HPC-
Zentrum