Die Veröffentlichung von „The Hardest Part“, dem ersten großen Musikvideo, das mit dem SORA-Modell von OpenAI erstellt wurde, markiert einen bedeutenden Meilenstein an der Schnittstelle zwischen künstlicher Intelligenz und kreativer Kunst. Das von Paul Trillo für den Künstler Washed Out gedrehte Video nutzt die innovativen Möglichkeiten von SORA, um die Grenzen dessen, was in der Musikvideoproduktion möglich ist, zu erweitern.
Die Entstehung von „Der schwierigste Teil“
Paul Trillo nutzte SORA, um etwa 700 Clips zu erstellen, die jeweils etwa 20 Sekunden lang waren, und wählte 55 für das endgültige, fast vierminütige Video aus. Der Prozess umfasste das Rendern in 720P-Auflösung und späteres Upscaling auf 2K. Die Übergänge zwischen den Szenen wurden mit Hilfe von Langform-Prompts gestaltet, da die multimodale Überblendfunktion, die sich damals noch in der Entwicklung befand, nicht zur Verfügung stand.
Innovationen in SORA: MiniClips und Prompt Engineering
Eine der neuesten Funktionen von SORA, MiniClips, spielt eine entscheidende Rolle bei der Verbesserung des kreativen Workflows. Mit diesem Tool können Regisseure die ersten vier Bilder von entweder 8 oder 32 Mini-Clips in der Vorschau anzeigen. Diese Funktion ermöglicht eine schnelle Bewertung der grundlegenden Elemente einer Aufnahme, bevor ein vollständiges Rendering erstellt wird. Dadurch wird der Zeit- und Arbeitsaufwand für das Trial-and-Error-Verfahren bei der Erstellung von Prompt-Engineering erheblich reduziert.
Promptes Engineering ist ein entscheidender Aspekt für den effektiven Einsatz von SORA. Trillos Ansatz bestand darin, detaillierte Prompts zu erstellen, die mehrere Szenenübergänge innerhalb einer einzigen Generation bewältigen konnten. In einer Eingabeaufforderung wurde zum Beispiel eine kontinuierliche Aufnahme beschrieben, die durch einen Korridor einer High School aus den 1980er Jahren zoomt, in ein Klassenzimmer übergeht und schließlich auf ein Fußballfeld führt – alles in einer filmischen Vintage-Ästhetik.
Kosten und Zugänglichkeit
Die Rechenkosten für die Erstellung von Videos mit SORA sind beträchtlich, werden aber für die professionelle Nutzung als angemessen erachtet. Schätzungen zufolge könnte das Ableiten von 230 Minuten SORA-Video etwa $644 kosten, wobei andere Kosten wie Upload, Download und Speicherung nicht berücksichtigt sind. Dies macht SORA zu einem leistungsstarken, aber kostspieligen Instrument, das die Notwendigkeit erheblicher Investitionen in die KI-Infrastruktur unterstreicht.
Zukunftsperspektiven
Es wird erwartet, dass SORA in Zukunft multimodale Eingaben integrieren wird, um den kreativen Prozess weiter zu vereinfachen, indem die Benutzer neben Textanweisungen auch visuelle Referenzen einbeziehen können. Diese Entwicklung wird SORA für Filmemacher und andere Kreative noch zugänglicher und leistungsfähiger machen.
Zusammenfassend lässt sich sagen, dass das Debüt von „The Hardest Part“ mehr als nur eine technische Errungenschaft ist; es stellt einen Blick in die Zukunft der KI-gesteuerten kreativen Prozesse dar. Die Weiterentwicklung von SORA verspricht neue Dimensionen der Kreativität und Effizienz in der Videoproduktion zu erschließen.
Die Perspektive des Künstlers: Washed Out über KI und Kreativität
Washed Out, der Musiker hinter dem Song „The Hardest Part“, teilte seine Gedanken über KI in Musik und Kunst auf Twitter mit. Er stellte klar, dass sein neues Album kein „KI-Album“ ist und keine KI-bezogenen Themen enthält. Er betonte jedoch sein Interesse an Wissenschaft und Technologie und äußerte sich begeistert über das kreative Potenzial dieser neuen Werkzeuge.
Washed Out erkannte auch die ernsten Bedenken an, die im Zusammenhang mit KI geäußert wurden, und betonte die Notwendigkeit eines verantwortungsvollen Einsatzes von KI-Tools. Er sieht das Musikvideo als eine Gelegenheit, eine Diskussion über den verantwortungsvollen Einsatz von KI in der Kreativbranche anzuregen.
Fazit
Das Debüt von „The Hardest Part“ ist mehr als nur eine technische Errungenschaft. Es ist ein Blick in die Zukunft der KI-gesteuerten kreativen Prozesse. Die Weiterentwicklung von SORA verspricht neue Dimensionen der Kreativität und Effizienz in der Videoproduktion zu erschließen. Die Diskussionen und Perspektiven rund um dieses Projekt unterstreichen die Bedeutung eines ausgewogenen und verantwortungsvollen Umgangs mit KI in der Kunst.