Nowa metoda tworzenia syntetycznego wideo oparta na sztucznej inteligencji

Forschende von Google, der Universität Tel Aviv, dem Weizmann-Institut und dem Technion haben ein neues künstliche Intelligenz-Modell namens Lumiere entwickelt, das die Erzeugung von „realistischer, vielfältiger und kohärenter Bewegung“ in Videos ermöglicht. Lumiere kann fünfsekündige Videos mit einer Auflösung von 1024×1024 basierend auf Anweisungen erstellen und Animationen in verschiedenen Stilen generieren. Das Modell bietet außerdem Funktionen wie wpainting (das Auffüllen von fehlenden Teilen in Videos) und outpainting (die Erweiterung von Videoframes).

Definitionen:
– Lumiere: Ein künstliche Intelligenz-Modell, das von Forschenden von Google, der Universität Tel Aviv, dem Weizmann-Institut und dem Technion entwickelt wurde und die Erzeugung realistischer Bewegung in Videos ermöglicht.
– Künstliche Intelligenz: Computertechnologie, die Maschinen dazu befähigt, Aufgaben auszuführen, die normalerweise menschliche Intelligenz erfordern.
– Video: Eine Aufzeichnung von bewegten Bildern, die aus Frames besteht.
– Auflösung: Die Anzahl der Pixel, in die das Videobild unterteilt ist.
– Aquarell: Eine Maltechnik, bei der Pigmente in Wasser gelöst werden.
– Sticker: Eine Grafik, die auf Bilder geklebt werden kann.
– Realistische Bewegung: Das Generieren von Videobewegungen, die realistisch erscheinen.
– Wpainting: Das Auffüllen von fehlenden Teilen in Videos.
– Outpainting: Die Erweiterung von Videoframes.

FAQ:

1. Was ist Lumiere?
Lumiere ist ein neues künstliche Intelligenz-Modell, das von Forschenden von Google, der Universität Tel Aviv, dem Weizmann-Institut und dem Technion entwickelt wurde. Es ermöglicht die Erzeugung von realistischer Bewegung in Videos.

2. Welche Funktionen bietet Lumiere?
Lumiere kann fünfsekündige Videos mit einer Auflösung von 1024×1024 basierend auf Anweisungen erstellen und Animationen in verschiedenen Stilen generieren. Das Modell bietet außerdem Funktionen wie wpainting (das Auffüllen von fehlenden Teilen in Videos) und outpainting (die Erweiterung von Videoframes).

3. Gibt es andere Tools zur Videoerstellung mithilfe von künstlicher Intelligenz?
Ja, es gibt bereits Tools auf dem Markt wie Runway, Pika und Stable Diffusion, die die Videoerstellung mithilfe von künstlicher Intelligenz ermöglichen.

4. Welche Einschränkungen hat Lumiere?
Lumiere kann keine Videos mit verschiedenen Aufnahmen oder solche erstellen, die Übergänge zwischen verschiedenen Szenen enthalten. Die Forschenden äußern auch Bedenken hinsichtlich des missbräuchlichen Einsatzes der Technologie und fordern die Entwicklung von Tools, die Fehler und schädlichen Gebrauch erkennen können.

5. Wie herausfordernd ist die Videoerstellung mithilfe von künstlicher Intelligenz?
Die Videoerstellung mithilfe von künstlicher Intelligenz stellt Forschende vor große Herausforderungen. Die Verarbeitung von Informationen in der Zeit, die Darstellung von Bewegung und die Eliminierung von überflüssigen Informationen aus Videos sind nur einige dieser Herausforderungen.

Vorgeschlagene Links:
– [Google](https://www.google.com)
– [Universität Tel Aviv](https://www.tau.ac.il)
– [Weizmann-Institut](https://www.weizmann.ac.il)
– [Technion](https://www.technion.ac.il)

The source of the article is from the blog meltyfan.es