Steuerung per LLM: TiMax erweitert Spatial-Audio-Funktionalität durch SpatAI v2

Das KI-gestützte Spatial-Motion-Tool von sonicLAB adressiert nun TiMax SoundHub direkt über OSC. Grundlage ist eine gemeinsame Weiterentwicklung, die bei den Tileyard Studios initiiert wurde.

TiMax hat eine neue native Integration für den TiMax SoundHub vorgestellt, die auf der im September 2025 überarbeiteten OSC-Implementierung basiert. Diese sollte eine schnellere und direkte Entwicklung von Drittanbieter-Anwendungen ermöglichen. Die aktuelle Integration stammt von sonicLAB: Deren SpatAI v2 spricht TiMax SoundHub nun direkt über OSC an und bringt KI-gestützte, promptbasierte Objektbewegungen in den TiMax-Workflow.

SpatAI nutzt Large Language Models, um natürlichsprachliche Beschreibungen von Klangbewegungen in Echtzeit-3D-Bewegungsdaten zu übersetzen. Anwender formulieren Bewegungen in Textform, beispielsweise „verteile Objekte zufällig im Raum und bewege jedes entlang der Höhenachse in Kreisen“. SpatAI wandelt diese Beschreibung in mathematische Gleichungen um, die die Position jedes Objekts steuern.

Nach der Einführung von SpatAI v1 Anfang 2026 traf sich sonicLAB-Gründer Sinan Bokesoy mit Robin Whittaker von TiMax in den Tileyard Studios, um die Anwendung zu evaluieren. Die daraus gewonnenen Erkenntnisse flossen in gezielte Weiterentwicklungen ein, die nun in Version 2 umgesetzt wurden.

Kern der Aktualisierung ist die native TiMax-OSC-Integration. SpatAI implementiert das spezifische OSC-Protokoll von TiMax direkt, sodass TiMax SoundHub ohne zusätzliche Zwischenschicht als Ziel ausgewählt werden kann. Ergänzend wurde eine externe Netzwerkadressierung integriert, die über allgemeine IP-Konfiguration die Kommunikation über mehrere Systeme hinweg ermöglicht.

Neben der TiMax-Integration unterstützt Version 2 auch lokale Large Language Models, die über Ollama oder LM Studio betrieben werden können, zusätzlich zur bestehenden Cloud-Option. Damit sollen Aspekte wie Tokenverbrauch, Latenz und Datenschutz adressiert werden.

Sinan Bokesoy erklärt: „SpatAI ermöglicht es Sounddesignern, Bewegungen so zu beschreiben, wie sie tatsächlich darüber nachdenken. Das Treffen mit Robin in den Tileyard Studios war ein Wendepunkt, und sein Feedback hat das gesamte v2-Update geprägt. Nutzer können jetzt ohne Umwege direkt in ein TiMax-System arbeiten.“

Robin Whittaker ergänzt: „Die Integration von SpatAI als native Erweiterung gibt einen Einblick in die zukünftige Rolle von KI in objektbasierten Workflows. Die Nutzung von Large Language Models zur Interpretation menschlicher Beschreibungen eröffnet neue kreative Möglichkeiten und erleichtert den Zugang für Sounddesigner. Genau diese Art schneller, nativer Integration war das Ziel der OSC-Überarbeitung im September 2025.“

Dan Higgott, Product and Software Manager bei TiMax, erklärt abschließend: „Mit der Überarbeitung des OSC-Frameworks wollten wir TiMax SoundHub zur am einfachsten integrierbaren Spatial-Audio-Plattform machen – sei es mit großen Mischpulten, Show-Control-Systemen, DAW-Plug-ins oder neuen kreativen Tools wie SpatAI. Die Integration von SpatAI entspricht genau dieser Zielsetzung.“

SpatAI v2 ist ab sofort für macOS und Windows als VST3, VST2, AU sowie als Standalone-Version verfügbar. Die OSC-Unterstützung für TiMax SoundHub ist ab Version 6.11 verfügbar.