Ton steuert Video. Nicht umgekehrt.
Lightricks und ElevenLabs bringen Audio-zu-Video-Generierung. Der Sound bestimmt, was auf dem Bildschirm passiert.
Video-Tools haben ein Problem. Sie behandeln Ton als Nachgedanken. Erst das Bild, dann irgendwann der Sound. Lightricks dreht das um.
Audio-zu-Video ist jetzt live. Mit ElevenLabs als exklusivem Launch-Partner. Breiterer Zugang kommt am 27. Januar.
Das ist nicht Text-zu-Video mit nachträglich eingefügtem Ton. Es beginnt mit Sound. Audio wird zur Steuerungsebene. Stimme, Musik und Soundeffekte bestimmen Timing, Bewegung und Performance ab dem ersten Frame. Nicht erst danach als Dekoration.
Die Struktur des Videos entsteht aus dem Audio selbst. Sprachrhythmus bestimmt das Tempo. Musikalische Energie beeinflusst Bewegung und Kameraverhalten. Szenenwechsel passieren, wo der Sound sie verlangt. Nicht wo ein Prompt rät, dass sie passen könnten.
Besonders stark ist das am Anfang des kreativen Prozesses. Wenn Teams Ideen schnell testen wollen. Wenn sie ein Gefühl dafür brauchen, wie etwas wirkt, bevor sie Zeit in Details investieren.
Das Problem mit bisherigen Tools
Jahrelang haben Video-Tools den Ton als separaten Arbeitsschritt behandelt. Selbst fortgeschrittene generative Systeme bringen Sound erst spät ins Spiel. Nachdem Szenen, Einstellungen und Bewegungen bereits festgelegt sind.
Willst du Bilder, die wirklich zu einer Stimme oder einem Musikstück passen? Du musst Sound in etwas anderes übersetzen. Prompts, Zeitstempel, Kameranotizen oder nachträgliche Schnitte.
Diese Umwege sind so normal geworden, dass wir sie nicht mehr hinterfragen. Aber sie funktionieren nicht gut. Audio enthält bereits Absicht. Es trägt Timing, Betonung, Rhythmus und Emotion. Wenn es nicht führen darf, fühlen sich Videos weniger natürlich an.
Audio-zu-Video startet von einer einfachen Idee. Hör auf, Sound zu übersetzen. Lass ihn die Generierung direkt steuern.
Partnerschaft mit ElevenLabs
Der Launch läuft exklusiv mit ElevenLabs. Einem globalen Anbieter für KI-Audio. Während der initialen Release-Phase.
ElevenLabs baut erstklassiges Audio, das Geschichten erzählt. LTX-2 macht daraus Video. Direkt. Die Audio-Ebene wird zur visuellen Geschichte.
Luke Harries, Growth bei ElevenLabs
„Unseren Nutzern exklusiv LTX's Audio-zu-Video-Fähigkeiten anzubieten, gibt unserer Community Zugang zu unglaublicher Kreativität. Sie können professionelle Videos schnell erstellen. Wir sind begeistert von dieser Partnerschaft, weil wir immer geglaubt haben, dass KI Creators dabei helfen soll, technische Hürden zu überwinden."
Daniel Berkovitz, Chief Product Officer bei Lightricks
„Mit Audio-zu-Video-Fähigkeiten den kreativen Prozess zu beschleunigen, macht ElevenLabs zum natürlichen Partner. Von Sound zu starten gibt Creators präzise Kontrolle über Tempo, Performance und Struktur. Ein Ansatz, der in der Animation lange genutzt wird und jetzt für alle Video-Erstellung zugänglich wird."
Gebaut für echte Workflows
Audio-zu-Video ist ab 20. Januar in LTX und ElevenLabs Image & Video verfügbar. API und Open-Source-Zugang folgen am 27. Januar.
User liefern eine Audiodatei. Stimme, Dialog, Musik oder Soundeffekte. Das ist der primäre Input. Optional kann ein Bild einen Charakter oder eine Szene verankern. Ein kurzer Text-Prompt kann den visuellen Stil lenken. Aber Audio bleibt in Kontrolle.
Das Ergebnis ist ein einzelner Full-HD-Video-Clip. Dessen Länge und Bewegung vom Audio gesteuert werden. Für längere Sequenzen können Clips verkettet werden. Teams können so vollständige Videos modular aufbauen, ohne den Audio-First-Ansatz aufzugeben.
Das ist Infrastruktur, kein Demo. Gebaut für Plattformen, Entwickler und Studios, die Produkte und Pipelines bauen. Nicht nur experimentieren.
LTX als Zugang für Creators
Audio-zu-Video ist Teil des breiteren LTX-Ökosystems. Lightricks baut die zugrunde liegenden Modelle und Infrastruktur. LTX ist der Zugangspunkt für Entwickler und Creators.
LTX wendet dieselbe Technologie auf echte kreative Workflows an. Es hilft zu formen, wie diese Tools in der Praxis genutzt werden. Jede Ebene informiert die anderen. Forschung, Plattform und Produktion bewegen sich zusammen.
Für Plattformen
Echte Audio-gesteuerte Kontrolle ermöglicht neue Audio-First-Produkte. Ohne komplexe Orchestrierung.
Für Entwickler
Es reduziert die Lücke zwischen Absicht und Output.
Für kreative Teams
Es macht Sound zu etwas, mit dem du starten kannst. Nicht etwas, das du später reparierst.
Sound erzählt Geschichten
Sound hat schon immer die harte Arbeit des Storytellings übernommen. Jetzt darf er endlich führen.