Sprechende Gemälde von TimeLeapVR

Ausstellungen und Erlebnisorte vermitteln Inhalte häufig linear über Texte, Audio oder Video. BesucherInnen können dabei keine eigenen Fragen stellen oder ein Gespräch vertiefen. Talking Paintings ergänzt diese Angebote durch freie Echtzeit-Dialoge mit animierten Charakteren. Anders als generische AI-Avatare verbindet jedes Talking Painting eine festgelegte Persönlichkeit mit freigegebenen Quellen, einer geprüften Wissensbasis und einer zum Charakter passenden 3D-Darstellung. Technisch kombiniert das System Spracherkennung und Natural Language Processing mit Large Language Models (LLMs), Text-to-Speech und Echtzeit-3D-Animation. Optional bezieht Computer Vision Blickkontakt, Gestik und Anwesenheit ein. Der Betrieb ist vollständig lokal und offline als On-Premise-Lösung oder hybrid mit ausgewählten Cloud-Diensten möglich. Die Entwicklung zeigte, dass sich diese Module auch lokal mit kurzen Reaktionszeiten betreiben lassen. Zentrale Hürden waren geringe Latenz, zuverlässiger Dauerbetrieb, verständliche Audioausgabe, glaubwürdige Animationen, inhaltlich kontrollierbare Antworten, einfache Wissenspflege und ein datenschutzbewusster Betrieb. Entstanden ist eine marktfähige Plattform mit Verwaltungsoberfläche und Hardwarepaketen für stationäre sowie mobile Installationen.

videoreality entwickelt interaktive 3D- und XR-Erlebnisse sowie AI-Powered Digital Humans für physische und hybride Räume. Talking Paintings richtet sich primär an Kultur- und Entertainment-Anbieter: Museen, Ausstellungen, Gedenkstätten, Science Center, Bildungsorte, Themen- und Freizeitparks sowie Veranstalter. Das Produkt ergänzt bestehende Vermittlungs- und Erlebnisangebote um persönliche Gespräche, ohne Texte, Guides oder Mitarbeitende zu ersetzen. Auftraggeber bestimmen Charakter, Wissen und Ton und können zwischen On-Premise- und Hybridbetrieb sowie stationären oder mobilen Installationen wählen. Weitere Anwendungsfelder sind Unternehmensgeschichte, Besucherinformation, Showrooms, Messen und Produktkommunikation. Im Förderzeitraum wurde das System in zwei Museen und weiteren Präsentationskontexten erprobt. Zum Projektabschluss waren 19 Talking-Paintings-Installationen in Betrieb, davon acht im europäischen Ausland.

Die Idee entstand aus der Arbeit der videoreality GmbH mit der Kultur- und Entertainment-Brand TimeLeapVR. Nachdem Kunstwerke bereits mit VR und interaktiven Formaten erlebbar gemacht worden waren, sollten als nächster Schritt freie Gespräche mit den dargestellten Charakteren möglich werden. videoreality beantragte und realisierte das Projekt. Das Team vereint Software- und KI-Entwicklung, Game Engines und Echtzeit-3D, Medienproduktion, Gestaltung, User Experience, Kunst- und Kulturvermittlung, Projektmanagement und Business Development. Entscheidend war diese Verbindung von Technik, Charakterentwicklung, geprüftem Wissen und Erfahrung im Ausstellungsbetrieb. Formal wurde das Projekt von videoreality allein umgesetzt. Kulturinstitutionen und weitere Auftraggeber wirkten als Praxispartner an Pilotierungen und Tests mit. Für das Museum für Kommunikation Frankfurt entstand das Talking Painting Alan Turing; BesucherInnen gaben Feedback zu Dialog, Bedienung und Verständlichkeit.