Adobe создала свой искусственный интеллект-генератор Firefly, чтобы избежать предвзятости и проблем с авторским правом

Цель нового генератора изображений с искусственным интеллектом - быть максимально удобным для пользователя. Вот как это будет работать.

Отредактировано 2023-25-06
В настоящее время Firefly находится в стадии бета-тестированияВ настоящее время Firefly находится в стадии бета-тестирования.

Системы искусственного интеллекта, способные генерировать изображения, стали главной новостью прошлого года. Системы DALL-E 2 и Stable Diffusion от OpenAI доминировали в заголовках газет, а Google, Meta и Microsoft объявили о функциях, над которыми они работают. Но одно огромное имя было явно не замечено: Adobe. Сегодня, с анонсом Firefly, семейства генеративных моделей ИИ, ситуация изменилась.

Более двух десятилетий компания Adobe лидирует в индустрии создания цифровых изображений и манипуляций с ними. Ее флагманский продукт, Adobe Photoshop, стал глаголом вопреки ее воле. И хотя в продуктах компании всегда были функции, основанные на искусственном интеллекте, такие как заливка с учетом содержимого и нейрофильтры, Firefly представляет собой первый публично объявленный искусственный интеллект Adobe, генерирующий изображения. Первоначально бета-версия будет интегрирована с Express, Photoshop, Illustrator и ориентированным на маркетинг Adobe Experience Manager.

Что будет делать Adobe's Firefly

Как и DALL-E 2 и Stable Diffusion, Firefly может взять текстовый запрос и превратить его в изображение. Однако, в отличие от этих двух приложений, Firefly предназначен для получения более последовательных результатов. Александру Костин, вице-президент Adobe по генеративному ИИ и Sensei, в ходе видеоконференции с PopSci назвал вид подсказок, которые использует большинство людей, "словесным супом". Например, чтобы получить отличные результаты с помощью Stable Diffusion, вам часто приходится добавлять в подсказку такие слова, как "4K", "тренд на арт-станции", "гиперреалистичность", "цифровое искусство" и "супердетализация".

Так, вместо того чтобы сказать что-то вроде "Бэтмен едет на скутере", вы говорите "Бэтмен едет на скутере, кинематографическое освещение, фильм, режиссер Крис Нолан". Это очень хакерский подход, но для большинства генеративных ИИ это лучший способ получить хорошие результаты.

Firefly использует другой подход. Общий вид и настроение создаваемого изображения определяется выпадающими списками и кнопками. Вы можете набрать "batman riding a scooter" и затем выбрать из различных вариантов нужный вам вид. Костин также объяснил, что изображения не регенерируются каждый раз, когда вы выбираете новый стиль, поэтому если вас устраивает содержание изображения, вы можете не беспокоиться, что изменение стиля приведет к созданию чего-то совершенно другого. Это сделано для того, чтобы быть гораздо более удобным для пользователя.

Фотография ИИ"много светлячков в ночи" Adobe

Помимо создания новых изображений на основе текстовых подсказок, Firefly также сможет генерировать текстовые эффекты. Пример, который показал Костин (выше), - это рендеринг слова "Светлячок" с "множеством светлячков в ночи, эффект боке". Это выглядит впечатляюще и показывает, как генеративные ИИ могут интегрироваться с другими видами искусства и дизайна.

Чего не должен делать "Светлячок

По словам Костина, Adobe хочет использовать ИИ ответственно, и в своей презентации он напрямую затронул две наиболее значимые проблемы, связанные с генеративным ИИ: проблемы авторского права и предвзятости.

Авторское право - особенно острый вопрос для генеративных ИИ. Компания StabilityAI, создатель Stable Diffusion, в настоящее время судится с группой художников и сервисом стоковых изображений Getty Photos за использование их фотографий для обучения Stable Diffusion без лицензирования. Особенно показательны примеры, когда Stable Diffusion создает размытый логотип, похожий на логотип Getty.

Adobe обошла стороной подобные проблемы с авторским правом, обучив Firefly сотням миллионов изображений Adobe Stock, а также контенту с открытой лицензией и общественным достоянием. Это защищает создателей от любых потенциальных проблем с авторским правом, особенно если они намерены использовать созданный контент в коммерческих целях.

Лама такая стильная.Эта лама очень стильная. Adobe

Аналогичным образом, Костин говорит, что компания Adobe справилась с потенциальными предубеждениями в своих учебных данных, разработав Firefly для намеренного создания разнообразных изображений людей разного возраста, пола и этнической принадлежности. "Мы не хотим переносить предубеждения в данные", - говорит он, поэтому, по его словам, Adobe активно решает эту проблему. Конечно, вы все еще можете попросить ИИ сделать определенный рендеринг, но если предоставить его самому себе, он, надеюсь, не будет выдавать необъективные результаты.

Хотя Firefly запущен в бета-версии, у Adobe большие планы. "Мир будет преобразован искусственным интеллектом", - говорит Костин, и Adobe намерена принять в этом участие.

В перспективе Adobe хочет видеть будущее, в котором творцы смогут обучать собственные модели ИИ на своих работах, а генеративные ИИ будут органично интегрированы во все продукты компании. Теоретически, это позволит художникам генерировать любые необходимые им активы прямо в Photoshop или Illustrator и обращаться с ними так же, как с любым другим изображением или блоком текста.