Runway tauscht Schauspieler im gedrehten Video ohne Nachdreh

Runway hat dem App Studio die App Character Swap hinzugefügt: Sie tauscht die Figur oder den Handlungsort in einem bereits gedrehten Video aus und lässt die ursprüngliche Bewegung unberührt. Der Ton kann dabei vom Original übernommen, auf die neue Szene übertragen oder ersetzt werden.

Für die Produktion verlagert das das Recasting vom Drehstudio in die Postproduktion. Die Szene ist schon gespielt, verändert wird nur, wer sich darin befindet und wo das stattfindet. Runway benennt das Szenario, für das die App gemacht ist, ausdrücklich: Versionen eines Videos für verschiedene Märkte mit dem jeweils passenden Schauspieler herausbringen oder eine Szene neu zusammensetzen, ohne einen Nachdreh zu organisieren. In der Beschreibung der Möglichkeiten von App Studio taucht der Austausch von Produkten oder Figuren für zwei Dutzend Märkte und SKUs auf, ohne das Video neu zu rendern.

Was der Nutzer vorgibt

Die neue Figur wird entweder über ein Bild oder über eine Textbeschreibung vorgegeben. Laut der offiziellen Beschreibung setzt die App das Ausgangsvideo mit der neuen Figur neu zusammen und stützt sich dabei auf ein Keyframe, das anhand einer Tiefenkarte erstellt wird, sowie auf das Videomodell Seedance 2.5. Die Tiefenkarte ist hier dafür verantwortlich, dass Szenengeometrie und Komposition erhalten bleiben, während die Generierung selbst ein fremdes Modell übernimmt und nicht Runways eigene Reihe.

Die Apps sind in eine neue Hülle umgezogen

Der frühere Katalog Runway Apps ist ins App Studio umgezogen: Nach Angaben des Unternehmens müssen Nutzer nichts tun — die Apps lassen sich wie bisher verwenden oder beliebig zu einer eigenen Version umbauen. Character Swap ist unter den eingebauten Apps aufgeführt, die Runway gemeinsam mit App Studio veröffentlicht hat, neben Precise Edit, AutoComp, Product Portfolio, 3D Camera Control und Runway Pro.

App Studio ist ein Baukasten, in dem der Nutzer das gewünschte Werkzeug in Worten beschreibt und die Plattform die App mit eigener Oberfläche selbst schreibt, testet und hostet; der Code bleibt dabei einsehbar. Verfügbar sind darin Runways Modelle für Bild, Video und Ton sowie Brand Kits, Workflows, Assets und Referenzen des Workspace. Eine fertige Kette aus einer Agent-Sitzung oder einem Workflow wird mit einem Schritt in eine App verwandelt: Prompt, Modellauswahl und Einstellungen werden festgeschrieben, nach außen bleiben nur die nötigen Felder.

Der Sinn einer solchen Verpackung ist jedem klar, der eine Pipeline geführt hat. Das Rezept, mit dem das gewünschte Ergebnis entsteht, steckt meist in den Prompts und Einstellungen einer einzigen Person. Die App macht daraus ein Werkzeug für das ganze Team, und eine Aktualisierung von Workflow, Referenzen oder Brand Kit schlägt sich in neuen Ergebnissen nieder.

Zahlt, wer den Knopf drückt

App Studio selbst ist in allen bezahlten Tarifen enthalten, ohne Extrakauf und Aufpreis, aber das Bauen, Ausführen und Hosten von Apps zieht Credits vom bestehenden Guthaben des Kontos ab. Jede App zeigt ihren eigenen Verbrauch an, damit sich die Ausgaben pro App und pro Workspace verfolgen lassen. Ein kostenloses Konto kann die eingebauten Apps und die mit ihm geteilten starten; um eigene zu bauen, ist ein bezahlter Tarif nötig. Ist eine App über einen offenen Link veröffentlicht, bezahlt der Besucher seine Generierungen selbst, der Besitzer zahlt nur für das Bauen, seine eigenen Ausführungen und das Hosting. Character Swap lässt sich aus dem Katalog der eingebauten Apps von App Studio öffnen.

Der Zugriff ist genauso kleinteilig geregelt: Eine App ist privat, bis der Autor sie teilt, Teams und Unternehmenskunden können sie für bestimmte Personen, ein Projekt oder den gesamten Workspace öffnen, und Administratoren sehen die Nutzung und steuern, ob öffentliche Links erlaubt sind. In der Admin-Konsole deaktivierte Modelle sind auch innerhalb der Apps nicht verfügbar.

Runway verkauft das Gesamtpaket, nicht nur das Modell

Ein Unternehmen, das seinen Ruf auf eigenen generativen Modellen aufgebaut hat, stellt in seinen eigenen Katalog eine App, in der Seedance 2.5 für die Generierung zuständig ist. Zur Ware wird in dieser Logik das Bündel: Preprocessing, Oberfläche, Zugriffsrechte, Hosting und Billing.

Was man an echtem Material prüfen sollte

Die App überträgt die Bewegung des Originals unverändert — das ist gleichzeitig ihre Stärke und ihre Grenze: Die Eigenheiten des Drehs bleiben zusammen mit der neuen Figur im Bild. Anhand des Demovideos lässt sich nicht beurteilen, wie Character Swap eine lange Einstellung hält; das muss man am eigenen Material prüfen.

Warum solche Werkzeuge gerade jetzt auftauchen

Der Figurentausch im fertigen Video hat sich im letzten Jahr zu einer eigenen Produktkategorie entwickelt: Ähnliche Funktionen gibt es sowohl bei spezialisierten Diensten als auch bei Zusammenbauten auf Basis offener Videomodelle. Der Unterschied zwischen ihnen hängt immer weniger an der Qualität der Generierung und immer mehr daran, wie vorhersehbar sich ein Werkzeug in den Arbeitstag einfügt. Daher die Form, die Runway gewählt hat: eine schmale App mit einigen Feldern, Zugriffsrechten und Erfassung des Credit-Verbrauchs.

Hält der Trend an, werden die Veränderungen zuerst diejenigen spüren, die Werbung lokalisieren und mehrsprachige Versionen von Videos erstellen: Dort war ein Nachdreh für den Wechsel des Schauspielers immer der teuerste Posten im Budget. Danach dürfte die Frage auf die juristische Ebene wandern — Rechte am Bild und an der Stimme des Darstellers, Einwilligung zum Recasting, Kennzeichnung generierter Versionen.

Würden Sie Character Swap den Austausch eines Schauspielers dort anvertrauen, wo früher Rotoskopie und Tracking von Hand gemacht wurden? Was muss zusammenkommen, damit Sie ihm ein echtes Projekt übergeben?