11 инновационных разработок на основе ИИ c конференции Adobe MAX 2023

На крупнейшей в мире конференции по креативности Adobe MAX компания Adobe представила следующее поколение возможностей создания изображений Firefly с существенно улучшенной моделью. Adobe Firefly Image 2 Model, доступная сейчас в бета-версии в веб-приложении Adobe Firefly, значительно улучшает контроль над создателем и качество изображения. Следующее поколение генеративного искусственного интеллекта для визуализации обеспечивает лучшее качество генерации изображений и большую информативную емкость модели, что позволяет быстрее и проще реализовать творческий замысел.

«Adobe Sneaks» ежегодно становится одним из самых любимых моментов поклонников выставки MAX, и не зря — ничто так не вдохновляет, как демонстрация блестящими сотрудниками передовых технологий, которые могут стать основой будущих продуктов Adobe. Благодаря тому, что Adobe Firefly, семейство творческих генеративных моделей искусственного интеллекта Adobe, уже доступно на коммерческой основе, диапазон и сфера применения новых технологий не ограничиваются созданием изображений. В рамках конференции были приведены 11 инновационных проектов разработок, где генеративный ИИ может переосмыслить рабочие процессы в области видео, аудио, анимации и графики движения, ускоряя процессы поиска и создания идей и сокращая время постпроизводства с нескольких дней до нескольких минут.

Фото

Project Stardust — это новый мощный редактор, совершающий революцию в редактировании изображений и позволяющий «волшебным образом» перемещать или удалять объекты простым нажатием на них. С помощью Project Stardust пользователи могут легко выделять, редактировать и удалять сложные элементы на любом изображении. Например, Project Stardust позволяет выбрать человека на фотографии, переместить его в другое место композиции и заполнить фон, на котором он ранее стоял. Пользователь также может изменить такие элементы, как цвет одежды человека или его положение, что позволяет работать с любыми плоскими 2D-изображениями как с файлами со слоями.

Project See Through — это инструмент с искусственным интеллектом, позволяющий легко удалять отражения на фотографиях. Отражения в стекле — это раздражающий фактор на фотографиях, с которым знаком каждый. Они портят снимок и зачастую делают изображение непригодным для использования. Качественно убрать отражения с помощью существующего программного обеспечения возможно, но довольно сложно, но See Through значительно упрощает этот процесс.

Видео и аудио

Project Fast Fill предлагает впервые использовать возможности генеративного искусственного интеллекта Firefly в видео. Используя технологию Generative Fill, которая уже применяется в Adobe Photoshop для облегчения добавления, удаления или расширения контента на изображениях с помощью простых текстовых запросов, управляемых Firefly, проект Project Fast Fill дает возможность такие же возможности в инструментах видеомонтажа Adobe, включая Premiere Pro и After Effects. Например, функция на базе искусственного интеллекта может добавить галстук к костюму. При этом, нейросеть учтёт условия освещения и походку человека.

Project Dub Dub автоматизирует процесс дублирования видео, делая трудоемкий и затратный процесс простым и легким, как нажатие кнопки. Благодаря возможностям искусственного интеллекта Project Dub Dub запись или аудиодорожка видеоролика может быть автоматически переведена на все поддерживаемые языки с сохранением голоса диктора, выровнена по времени с оригинальным диалогом и готова к публикации.

Project Scene Change позволяет видеоредакторам легко объединить объект и сцену из двух отдельных видеороликов, снятых с разными траекториями движения камеры, в одну сцену с синхронизированным движением камеры.

Project Res Up — инструмент, позволяющий легко преобразовывать видео из низкого разрешения в высокое с помощью инновационной технологии «диффузного апсемплинга».

3D и дизайн

Project Poseable представляет собой прорыв в моделях генерации изображений на основе искусственного интеллекта, позволяя генератору изображений легко взаимодействовать с большими 3D-объектами, включая позы с фотографий реальных людей. Прототип может создавать 3D-рендеринг на основе текстового запроса, учитывать глубину и перспективу, а также выравнивать объект. В то время как создание 3D-сцен с использованием традиционных «скелетных систем» технически сложно и требует много времени, Project Poseable предлагает альтернативный вариант, позволяющий любому человеку расширить свои творческие горизонты.

Project Neo позволяет создавать 3D-фигуры в 2D-дизайнах, не требуя при этом технических знаний и навыков работы с инструментами для создания 3D. Сегодня создатели 2D-дизайнов, таких как инфографика, плакаты или логотипы, часто ограничены в возможностях включения 3D-элементов из-за сложности этих рабочих процессов, которые могут потребовать многолетнего опыта. Проект Neo позволяет создавать упрощенный 3D-дизайн в рамках 2D-инструментов и методов.

Project Primrose стирает границы между технологиями и модой, демонстрируя возможности гибких текстильных дисплеев и превращая одежду в холст для креатива. Например, «интерактивное платье» может предложить бесконечные возможности для создания стиля, отображая контент, созданный с помощью Adobe Firefly, After Effects, Stock и Illustrator.

Project Glyph Ease делает создание собственных шрифтов более доступным, упрощая утомительный процесс разработки глифов — специфических элементов дизайна и формы каждого буквенного символа. Начиная с нарисованной от руки формы буквы, Project Glyph Ease с помощью искусственного интеллекта автоматически генерирует целый набор глифов, соответствующих заданному стилю письма. Затем пользователи могут легко редактировать созданные глифы в Illustrator.

Project Draw & Delight предлагает набор генеративных инструментов искусственного интеллекта, которые помогают любому человеку на пути к творчеству: от преобразования первоначальных идей, часто представленных в виде грубых каракулей или набросков, в отшлифованные и доработанные эскизы, а затем позволяет экспериментировать с цветовой палитрой, вариациями стиля и различными фонами.