Hierfür nutzen wir KI zur Echtzeit-Übersetzung von Spracheingabe und KI-basierte Trainingspartner*innen für die Simulation einer realistischen menschlichen Interaktion. So ermöglichen wir mit virtuellen Mitspieler*innen die Durchführung von Mehr-Personen-Workflows, auch wenn gerade keine zweite Person verfügbar ist. Damit wollen wir VR-Trainings auf ein neues Level haben und sorgen für eine noch interaktivere Lernerfahrung.
Klingt anspruchsvoll? Das ist es auch! Deshalb gehen wir dieses ambitionierte Projekt mit dem Namen AIXTRA auch nicht allein an…

Multiplayer Mode on

Wir freuen uns sehr mit MindPort ein kompetentes Partnerunternehmen an unserer Seite zu haben. Sie stehen hinter dem Open-Source Unity-Plugin VR Builder – Ein echter Gamechanger für die Entwicklung von VR-Anwendungen und ein gern gesehenes Tool bei der Entwicklung unserer VR-Trainings.

Gemeinsam hat unser Firmen- Konsortium den Open Call der europäischen Initiative VOXReality gewonnen. Diese Projektförderung setzt sich für Natural Language Processing (NLP) und Computer Vision (CV) im XR-Bereich ein. Hierfür entwickelt sie beispielsweise ein KI-Modell mit visuellem Verständnis, die auf die Umgebung der Nutzer*innen eingehen kann.
Unser Projekt AIXTRA soll als Praxis-Use-Cases demonstrieren, wo diese Technologien genutzt werden können und was sie dabei für Mehrwert bieten.

Core Features

Unser Projekt hat dabei zwei Ziele – die Sprachbarriere in virtual Reality zu überwinden und mit KI-basierten Mitspieler*innen VR-Trainings zu revolutioniert! Hierum gehts im Detail:
Echtzeitübersetzung – Dank KI-basierter Übersetzungstools können wir zukünftig die Kommunikation in VR-Schulungen in verschiedensten Sprachen ermöglichen. Mittels Echtzeitübersetzung können so mehrere Trainingsteilnehmende in ihren jeweiligen Muttersprachen miteinander kommunizieren. Damit sorgen wir nicht nur für eine extra Portion Inklusion, sondern erleichtern gerade bei komplexen Anwendungen das Verständnis erheblich.
KI-basierte virtuelle Trainingspartner*innen – Kein Trainingsbuddy verfügbar? Kein Problem! Mittels künstlicher Intelligenz und Intent-Recognition simulieren wir realistisch die Interaktion mit menschlichen Mitspieler*innen. So kann man zukünftig auch alleine in interaktive Trainingswelten eintauchen und das Medium noch besser für die Simulation komplexer Prozesse in Multi-Player-Szenarien nutzen.

Step by Step

Wir nehmen euch mit bei unserer Journey hin zu virtuellen Sparringspartner*innen. Weitere Details zum Projekt finden sich zeitnah auf dieser Seite oder unserem YouTube-Kanal. Das Projekt läuft noch bis Herbst 2025 – bis dahin freuen wir uns auf viele technische Updates und eine gute Zusammenarbeit mit allen Partner* und Förder*innen. Außerdem wird es zum Abschluss auch eine Nutzungsstudie geben, für welche wir zeitnah noch Proband*innen suchen. Wer Interesse hat, darf sich gerne melden hugging face

Supporter – Hier fördert die EU

Von der Europäischen Union finanziert. Die geäußerten Ansichten und Meinungen entsprechen jedoch ausschließlich denen des Autors bzw. der Autoren und spiegeln nicht zwingend die der Europäischen Union oder der Europäischen Exekutivagentur für Bildung und Kultur (EACEA) wider. Weder die Europäische Union noch die EACEA können dafür verantwortlich gemacht werden.