SAunque los sistemas de IA actuales destacan en muchas tareas, todavía tienen dificultades
en aquellas que requieren un entendimiento más profundo del contexto físico. Por ejemplo,
en el ámbito del lenguaje, estos modelos permiten la traducción en vivo en entornos
complejos, como espacios concurridos y ruidosos con múltiples interlocutores. Los sistemas
tradicionales tienen dificultades para identificar quién está hablando, mientras que los
humanos enfocan su atención con facilidad utilizando señales visuales y acústicas, como la
dirección de la mirada, la orientación del rostro, la intensidad de la voz y la distancia. Los
sistemas de traducción basados únicamente en audio tienen un rendimiento deficiente en
estos escenarios debido a su falta de conciencia contextual. En cambio, DVPS combina la
entrada visual, el sonido espacial y la dirección del habla para identificar al interlocutor
correcto y ofrecer traducciones más precisas.
Las potenciales aplicaciones de este sistema abarcan múltiples ámbitos. En el ámbito del
lenguaje, permite la traducción en tiempo real en una amplia gama de idiomas, con
comprensión de texto, voz, gestos y contexto físico. En el ámbito de la salud, posibilita la
detección temprana de riesgos cardiovasculares mediante la creación de un gemelo digital
3D del corazón generado a partir de imágenes médicas. En el ámbito medioambiental,
mejora la respuesta ante desastres mediante la predicción de inundaciones basada en
datos satélite, drones y señales de observación en tiempo real.
La iniciativa está liderada por Translated, que se encarga de supervisar la visión general y
su ejecución.
El equipo fundador de DVPS está compuesto por 70 científicos europeos destacados
especialistas en inteligencia artificial, procedentes de los siguientes centros:
- Investigación: Universidad de Oxford, Instituto Alan Turing, Escuela Politécnica
Federal de Lausana, ETH Zurich, Imperial College London, Fondazione Bruno
Kessler, Instituto de Tecnología de Karlsruhe, Universidad de Barcelona y Vlaamse
Instelling voor Technologisch Onderzoek.
- Los socios especializados por sector son: Hospital Universitario de Heidelberg,
Vall d’Hebron Institut de Recerca, Centros Médicos Universitarios de Ámsterdam,
Deepset, Sistema, MEEO, Lynkeus, Data Valley y Pi School of AI.
- Computación de alto rendimiento (entrenamiento de modelos): Cyfronet, el
centro nacional de computación de alto rendimiento de Polonia.
