Chinesisches Animationshaus stellt KI-Fähigkeiten auf die Probe

Apr 29, 2024

Melden Sie sich für den täglichen Marketplace-Newsletter an, um über die wichtigsten Geschäfts- und Wirtschaftsnachrichten informiert zu sein.

Chris Bremble, Gründer eines in Peking ansässigen Unternehmens für visuelle Effekte und Animationen namens Base Media und Emmy-Preisträger, erinnert sich an das erste Mal, als er von generativer künstlicher Intelligenz hörte.

Es war auf einer Branchenkonferenz im Jahr 2018. Er sah eine Demonstration einer Software, die den Rauch eines Fotos innerhalb von fünf Sekunden nachbilden konnte.

„Ich hatte eine kleine Panikattacke“, sagte Bremble. „Als ich das Ding sah, dachte ich: ‚Ja, es kommt.‘ Das können wir nicht vermeiden.‘“

Fünf Jahre später ist generative KI in der Filmpostproduktion noch nicht weit verbreitet, aber viele Schauspieler und Autoren in Hollywood sind bereits besorgt über ihre Auswirkungen auf ihre Kunst und ihre Arbeit. Das ist zum Teil der Grund, warum sie streiken.

In China, wo Bremble in einigen Städten Niederlassungen hat, gibt es bereits Berichte über Entlassungen in der Videospielbranche aufgrund generativer KI. Bremble ist bestrebt, technologisch immer einen Schritt voraus zu sein.

Base Media hat an Hollywood-Blockbustern wie „Black Panther: Wakanda Forever“ mitgewirkt; die limitierte „Star Wars“-Serie „Obi-Wan Kenobi“; und chinesische Filme wie „The Wandering Earth“. Anfang des Jahres wurde das Unternehmen vom chinesischen Streaming-Riesen iQiyi beauftragt, die Potenziale generativer KI zu untersuchen. Konkret wollte die Kinder- und Animationsabteilung von iQiyi, Wonderworks, testen, wie gut KI 3D-Standorte generiert, was den teuersten und arbeitsintensivsten Teil der Animationsproduktion darstellt.

„Wenn es zum Beispiel „Aladdin“ ist, haben Sie hier ein Schloss, eine Stadtecke, und Sie möchten, dass die Figur hindurchläuft, und Sie möchten die Figur aus der Vogelperspektive sehen, die sich durch die Gasse schlängelt. Dann muss man tatsächlich das Ganze [virtuell] bauen“, sagte Wang Huiyu, Leiter von Wonderworks. „Jede Ladenfront und jedes Fenster muss gebaut werden.“

Sie sagte, 30 % ihrer Animationsproduktion fließen normalerweise in die Erstellung von Drehorten.

Um die Fähigkeiten der KI zu testen, gab Wang Base Media ein 90-sekündiges Drehbuch über ein Mädchen, das nach ihren Freunden sucht, und eine iQiyi-Animationsserie namens „The Roofus“, die sie gerade fertiggestellt hat. Alle 260 Minuten der Animationsserie wurden in die KI-Maschine eingespeist, um das Aussehen und den Stil der von Wang gewünschten Animation im Endprodukt nachzubilden.

Igor Lodeiro, Supervisor für visuelle Effekte bei Base Media im Büro in Xiamen, leitete das Projekt. Er hat einen Tages-Emmy gewonnen und an vielen Oscar-nominierten Filmen mitgewirkt. Lodeiro sagte, er habe anfangs geringe Erwartungen an die KI-Tools gehabt.

Sein Team hat einen Rohschnitt zusammengestellt. Sie animierten die Hauptfigur von Hand und platzierten graue Blöcke im Hintergrund und überall sonst. Das Team gibt Fotos und Schlüsselwörter ein, um die KI zu veranlassen.

„Am Anfang war es ziemlich abgefahren“, sagte Lodeiro. „Es gab einige Anomalien und Verzerrungen, aber wenn man sich die [ersten] Bilder [des Testvideos] ansieht, sah es so aus, als ob es zu [iQiyis „The Roofus“]-Show gehören könnte. Ich war überrascht."

Im letzten Video fährt die Zeichentrickfigur mit dem Skateboard eine Holzbrücke in Peking hinunter, rennt über geschwungene chinesische Dächer und hängt an einem Wasserspeier mit Blick auf die weitläufige Stadt Paris.

Die KI hat jeden Ort generiert, den der Charakter durchquert. Die Skateboard-Bewegung wurde ebenfalls von KI erstellt. KI-Tools sind nicht perfekt und einige Optimierungen wurden von Hand vorgenommen. Die Fertigstellung des endgültigen Videos dauerte drei Wochen. Mit einem menschlichen Animationsteam hätte es mehr als acht Personen gedauert.

Als Betrachter ist es schwer zu erkennen, was die KI getan hat und was nicht.

„Das ist das Beste, was wir hören konnten“, sagte Bremble. „Das Publikum sollte sich eine Show nicht ansehen und sagen: ‚Oh, das ist KI-generiert.‘“

Er ist gespannt darauf, wie KI seinen Top-Talenten dabei helfen kann, mehr an einem Tag zu leisten und dadurch die Produktionsplanung vorhersehbarer zu machen.

Während Lodeiro erkennt, dass die langwierigeren Teile der Animationsproduktion – wie das Storyboarding – vollständig von der KI erledigt werden könnten, glaubt er, dass das Publikum letztendlich Animationen von besserer Qualität erhalten könnte.

„Wenn sie uns der KI freien Lauf lassen, können wir Looks kreieren, die mit einer herkömmlichen Pipeline nur sehr schwer zu erreichen sind. So werden wir in der Lage sein, sehr einzigartige Dinge zu schaffen, die nicht typisch sind“, sagte Lodeiro.

Er ist vom Potenzial der KI sehr begeistert. Und er macht sich keine Sorgen um die Arbeitsplatzsicherheit seines Unternehmens oder seines Teams.

„[Diese KI-Tools sind] Elektrowerkzeuge. „Sie lassen uns mehr und besser machen“, sagte Lodeiro. „Dies ist ein sehr wettbewerbsintensiver Markt. Wenn Sie jetzt eine höhere Qualität zum gleichen Preis produzieren können, haben Sie jetzt die Oberhand.“

Doch Base Media geht mit Vorsicht vor, denn nicht jeder Kunde ist von der KI überzeugt.

„Unsere chinesischen Kunden sagen: ‚KI, KI, KI.‘ Wie kann man [mit KI] mehr erreichen?‘“, sagte Bremble. „Unsere US-Kunden [verlangen], dass wir eine Vereinbarung unterzeichnen, in der wir versprechen, dass bei der Erstellung [der] Arbeit überhaupt keine KI eingesetzt wurde.“

Das liege daran, dass in den USA mehr Bedenken wegen Urheberrechtsverletzungen bestehen, sagte er.

Wang von iQiyi Wonderwork in China sagte, sie sei besorgt über Urheberrechtsverletzungen, freue sich aber mehr über die Fähigkeit von KI, ihre Kreativität in einem sehr wettbewerbsintensiven Umfeld zu fördern. Wang möchte sehen, was KI in anderen Bereichen leisten könnte, beispielsweise um Lebensmittel in Animationen realistischer aussehen zu lassen.

„Echtes Essen erfordert viel Geduld und Details, um die Textur, den Dampf und die Transparenz herzustellen“, sagte Wang. „Ich habe es nicht mit der Natur getestet, zum Beispiel mit Blüten, Blättern und Tau.“

Nach einigen weiteren Versuchen möchte Wang einen ganzen Film mit generativer KI drehen.

Zusätzliche Forschung von Charles Zhang.

Es passiert viel auf der Welt. Bei all dem ist Marketplace für Sie da.

Sie verlassen sich darauf, dass Marketplace die Ereignisse der Welt aufschlüsselt und Ihnen faktenbasiert und verständlich mitteilt, welche Auswirkungen sie auf Sie haben. Um dies weiterhin zu ermöglichen, sind wir auf Ihre finanzielle Unterstützung angewiesen.

Ihre heutige Spende unterstützt den unabhängigen Journalismus, auf den Sie sich verlassen. Für nur 5 US-Dollar pro Monat können Sie dabei helfen, Marketplace aufrechtzuerhalten, damit wir weiterhin über die Dinge berichten können, die Ihnen wichtig sind.