Adobe, a leader in creative software, recently presented sneak peeks of novel AI tools at its Max conference which could change the face of video and photo editing and audio correction. Far from the usual updates or basic improvements, these tools, known as “sneaks,” are still under testing but showcase Adobe’s innovative approach to anticipated user needs.
Być może najbardziej zaskakującym wizualnie z tych podstępów jest Project Frame Forward. Narzędzie to umożliwia montażystom wideo wstawianie lub usuwanie dowolnych elementów z materiału filmowego bez konieczności stosowania masek, co tradycyjnie jest żmudnym procesem. Frame Forward może zidentyfikować obiekt lub osobę, odizolować element od pierwszej klatki i całkowicie go usunąć, automatycznie replikując zmianę w całym materiale filmowym. Usunięta jednostka jest zastępowana przekonująco naturalnym tłem, podobnym do kontekstowego narzędzia Fill lub Remove Background programu Photoshop. W przyszłości montażyści będą mogli wywierać tak znaczący wpływ na swoje materiały wideo za pomocą zaledwie kilku kliknięć.
Project Frame Forward also allows new objects to be incorporated into the video. Users can draw where they want an object placed and describe what they wish to add through an AI prompt. This manipulation extends through the entirety of the video footage, making it as if the object was there from the start. In Adobe’s demo, an inserted object—an artificial puddle—reflected the movements of a pre-existing cat in the video, demonstrating the tool’s ability to create context-aware additions.
Kolejna funkcja, Project Light Touch, umożliwia użytkownikom dostosowanie źródeł światła na zdjęciach. Narzędzie może na przykład zmieniać kierunek oświetlenia, symulować, jakby lampy były włączone na oryginalnym obrazie, a także pozwala użytkownikom kontrolować rozproszenie światła i cienia. Co jeszcze bardziej imponujące, narzędzie może tworzyć dynamiczne oświetlenie, które użytkownicy mogą przesuwać po płótnie edycji, wyginając światło wokół obiektów i osób zgodnie z wymaganiami. Może nawet zmienić całą scenę z dnia na noc i dostosować kolor manipulowanych źródeł światła, aby uzyskać pożądane efekty, takie jak ciepło lub żywe wrażenia podobne do RGB.
Kolejne nowe narzędzie do edycji, Project Clean Take, to potężny zasób, który może modyfikować sposób wymawiania mowy za pomocą podpowiedzi AI. Redaktorzy mogą zmienić sposób dostarczania lub emocje głosu, na przykład sprawiając, że brzmi on radośniej lub dociekliwie, bez konieczności ponownego nagrywania. Użytkownicy mogą całkowicie zastąpić słowa, zachowując unikalne cechy oryginalnego głosu mówcy. Narzędzie Clean Take może nawet rozdzielić szum tła na poszczególne źródła, umożliwiając użytkownikom dostosowanie lub wyciszenie określonych dźwięków. Funkcja ta może poprawić czystość głosu przy jednoczesnym zachowaniu ogólnej atmosfery audio.
Though these innovative sneaks are undoubtedly intriguing, they are not currently available for public use and aren’t guaranteed to become official features in Adobe’s Creative Cloud software or Firefly apps. Nonetheless, many successful features like Photoshop’s Distraction Removal and Harmonize tools started out as sneaks projects. This suggests that Adobe users can look forward to some version of these experimental tools becoming available in the future.
Szczegółowe podglądy wszystkich niesamowitych możliwości sneakersów zaprezentowanych podczas wydarzenia Max, Sprawdź oryginalny artykuł na The Verge.
