Adobes KI bearbeitet ganze Videos aus einem einzigen Frame

Adobe, ein führender Anbieter von Kreativsoftware, hat kürzlich auf seiner Max-Konferenz neue KI-Tools vorgestellt, die die Video- und Fotobearbeitung sowie die Audiokorrektur verändern könnten. Weit entfernt von den üblichen Updates oder grundlegenden Verbesserungen befinden sich diese als “Sneaks” bezeichneten Werkzeuge noch in der Testphase, zeigen aber Adobes innovativen Ansatz für die erwarteten Bedürfnisse der Nutzer.

Die vielleicht visuell erstaunlichste dieser Neuerungen ist Project Frame Forward. Mit diesem Werkzeug können Videobearbeiter beliebige Elemente in das Filmmaterial einfügen oder daraus entfernen, ohne auf Masken zurückgreifen zu müssen, was traditionell ein langwieriger Prozess ist. Frame Forward erkennt ein Objekt oder eine Person, isoliert das Element aus dem ersten Frame und entfernt es vollständig, wobei die Änderung automatisch auf das gesamte Filmmaterial übertragen wird. Das entfernte Element wird durch einen überzeugend natürlichen Hintergrund ersetzt, ähnlich wie bei Photoshop mit dem kontextabhängigen Werkzeug "Füllen" oder "Hintergrund entfernen". In Zukunft werden Cutter in der Lage sein, ihre Videoinhalte mit nur wenigen Klicks so stark zu beeinflussen.

Mit Project Frame Forward können auch neue Objekte in das Video eingefügt werden. Die Benutzer können zeichnen, wo sie ein Objekt platzieren möchten, und über eine KI-Eingabeaufforderung beschreiben, was sie hinzufügen möchten. Diese Manipulation erstreckt sich über das gesamte Videomaterial, so dass es so aussieht, als wäre das Objekt von Anfang an dabei gewesen. In der Demo von Adobe spiegelte ein eingefügtes Objekt - eine künstliche Pfütze - die Bewegungen einer bereits im Video vorhandenen Katze wider und demonstrierte damit die Fähigkeit des Tools, kontextbezogene Ergänzungen zu erstellen.

Eine weitere Neuerung, Project Light Touch, ermöglicht es den Benutzern, Lichtquellen in Fotos anzupassen. So kann das Werkzeug beispielsweise die Richtung der Beleuchtung ändern, simulieren, als ob im Originalbild Lampen eingeschaltet wären, und es erlaubt dem Benutzer, die Streuung von Licht und Schatten zu steuern. Noch beeindruckender ist, dass das Werkzeug dynamische Beleuchtungen erstellen kann, die der Benutzer über die Bearbeitungsfläche bewegen kann, um das Licht nach Bedarf um Objekte und Personen herum zu biegen. Es kann sogar eine ganze Szene von Tag auf Nacht umstellen und die Farbe der manipulierten Lichtquellen anpassen, um gewünschte Effekte wie Wärme oder lebendige RGB-ähnliche Eindrücke zu erzielen.

Ein weiteres neues Bearbeitungswerkzeug, Project Clean Take, ist eine leistungsstarke Ressource, mit der die Aussprache von Sprache mithilfe von KI-Eingabeaufforderungen geändert werden kann. Die Redakteure können die Aussprache oder die Emotionen einer Stimme verändern, z. B. indem sie sie fröhlicher oder neugieriger klingen lassen, ohne dass eine Neuaufnahme erforderlich ist. Die Benutzer können Wörter vollständig ersetzen, wobei die einzigartigen Merkmale der Originalstimme des Sprechers erhalten bleiben. Das Werkzeug Clean Take kann sogar Hintergrundgeräusche in einzelne Quellen aufteilen, so dass der Benutzer bestimmte Geräusche anpassen oder stummschalten kann. Auf diese Weise lässt sich die Klarheit der Stimme verbessern, ohne dass die gesamte Audioatmosphäre beeinträchtigt wird.

Obwohl diese innovativen Sneaks zweifellos faszinierend sind, sind sie derzeit nicht für die öffentliche Nutzung verfügbar und werden garantiert nicht zu offiziellen Funktionen in Adobes Creative Cloud-Software oder Firefly-Apps. Nichtsdestotrotz begannen viele erfolgreiche Funktionen wie die Photoshop-Werkzeuge zum Entfernen von Ablenkungen und Harmonisieren als Sneak-Projekte. Dies deutet darauf hin, dass Adobe-Nutzer sich darauf freuen können, dass eine Version dieser experimentellen Werkzeuge in Zukunft verfügbar sein wird.

Ausführliche Vorschauen zu allen Sneaks, die auf dem Max-Event vorgestellt werden, Lesen Sie den Originalartikel auf The Verge.

Dies könnte Ihnen auch gefallen

Porozmawiaj z ALIA

ALIA