Dein wichtigster Touchpoint zur Digitalbranche.
Dein wichtigster Touchpoint zur Digitalbranche.
Technologie
Neues KI-Video-Tool: Das kann der Boximator von ByteDance

Neues KI-Video-Tool: Das kann der Boximator von ByteDance

Caroline Immer | 13.02.24

Könnte es das nächste revolutionäre Tool in der KI-Landschaft sein? Der Boximator von ByteDance Research ermöglicht es, mithilfe von simplen Zeichnungen Bewegungsabläufe in KI-erstellten Videos selbst zu bestimmen.

Text-to-Image, Text-to-Video, Image-to-Video: Die Möglichkeiten, die KI-Tools wie Midjourney und Runways Gen-2 den Usern bei der Content-Kreation bieten, sind zahlreich – dennoch besteht weiterhin Luft nach oben; sowohl bei der Bild- und Videoqualität als auch bei der Funktionalität. Ein neues Tool könnte die KI-Landschaft nun aufmischen. Der sogenannte Boximator, welcher laut eigener Angabe von ByteDance Research entwickelt wurde, ermöglicht die Steuerung der Bewegungen von Objekten in KI-kreierten Videos durch das Zeichnen von Quadraten.


It is a method to enhance video diffusion models with fine-grained motion control in a flexible and user-friendly way,

beschreibt das Team hinter dem Boximator das Tool auf der Website. Bewegungen werden mit dem Boximator durch das Zeichnen von Quadraten gesteuert. Hierfür wird zunächst ein Mensch, Tier, Fahrzeug oder anderes bewegliches Objekt mit einer Box eingeschlossen. Während eine Box mit einer durchgezogenen Linie die finale Position des Objekts markiert, wird die gestrichelte Box gemeinsam mit Richtungspfeilen zur Angabe von Bewegungen genutzt. Nähere Details zur Anwendung des Tools sowie konkrete Beispiele kannst du dir im folgenden Video anschauen.


Konkurrenz für Runway?

Der KI-Experte Jens Polomski merkt in einem Beitrag auf LinkedIn an, dass das Tool an den Motion Brush von Runway erinnert. Dieser erlaubt es den Nutzer:innen, die von ihnen erstellten KI-Videos präziser zu steuern, indem sie unabhängige Bewegungen verschiedenen Bildbereichen hinzufügen. Damit können sie beispielsweise frei über die Bewegung eines Gesichts oder die Richtung der Wolken am Himmel entscheiden. Zum aktuellen Zeitpunkt ermöglicht das Tool allerdings nur die Angabe der Richtung von Bewegungen und nicht – wie der Boximator – die finale Position.


Momentan ist noch nicht bekannt, wann und wie der Boximator umfassend gelauncht werden soll – eigenen Angaben zufolge soll der Zugriff auf die Demo-Website in zwei bis drei Monaten geöffnet werden. Da das Tool laut der Website von ByteDance Research gefördert wird, ist auch eine Integration bei TikTok denkbar.

Auch Google wartet derzeit mit einigen KI-Updates auf: So kündigte CEO Sundar Pichai kürzlich auf dem Google Blog an, dass das Unternehmen den KI-Chatbot Bard in Gemini umbenannt hat. Das Tech-Unternehmen stellte außerdem die Version Gemini Advanced vor, welche den Zugang zu Googles „größtem und leistungsstärkstem KI-Modell“, Gemini Ultra 1.0, eröffnet. 


Google:
KI-Modell Gemini Advanced ist da
und Bard heißt jetzt Gemini

© Google

Kommentare aus der Community

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert

*
*
Aktuelle Whitepaper
Local Search Trends 2024 WHITEPAPER:
Local Search Trends 2024
Digitale Barrierefreiheit WHITEPAPER:
Digitale Barrierefreiheit
KI-Reise mit den richtigen Tools und Strategien WHITEPAPER:
KI-Reise mit den richtigen Tools und Strategien
HR KPI Cheat Sheet WHITEPAPER:
HR KPI Cheat Sheet

Über 30.000 Subscriber können nicht irren. Melde dich jetzt zu unserem NEWSLETTER an: