Adobe разрабатывает генеративную видеомодель для сервиса Firefly, которая предоставит пользователям возможность расширять снимки с генеративным заполнением и добавлять/удалять объекты, а также использовать подобные инструменты в интеграции со сторонними производителями.
Ранее на конференции Adobe MAX 2023 компания анонсировала работу над генеративным ИИ для видео. И недавно стало известно, что Adobe работает над генеративной видеомоделью с искусственным интеллектом для своего проекта Firefly, которое позволит использовать новые генеративные инструменты при редактировании видео в Premiere Pro.
ИИ в Premiere Pro будет работать по тому же принципу, как в интегрированная функция генеративной заливки в Adobe Photoshop: для добавления объекта нужно выделить место, где он должен находиться, и указать текстовое описание (если требуется), после чего объект сгенерируется.
По словам Adobe, важная идея состоит в том, чтобы предоставить пользователям Premiere Pro больше выбора в плане использования сторонних инструментов, позволяя им использовать в приложении такие модели, как Pika, например, для расширения снимков или Sora и Runway AI при создании видеозаписей для своих проектов. Adobe также заявляет, что к сгенерированному контенту могут быть применены ее отличительные метки «Content Credentials», чтобы определить, какие модели искусственного интеллекта использовались при их создании.
Первыми появятся опции для добавления и удаления объектов, преобразования текста в видео для создания broll и generative extend (по мере растягивания видео на таймлайне, создается совершенно новое видео с помощью выбранной модели).
К сожалению, в отличие от предыдущих анонсов Adobe, связанных с Firefly, конкретная дата выпуска новых генеративных инструментов для создания видео (альфа-, бета-версии или какой-либо другой) пока не установлена. Сообщается только, что они появятся «позже в этом году».