Adobe присоединилась к гонке ИИ, представив «набор генеративных ИИ-моделей» Firefly для работы с изображениями. Представленные Adobe инструменты ориентированы, конечно же, на людей творческих профессий, а их отличительной особенностью является то, что они не нарушают авторские права — модели обучены на изображениях, авторы которых дали разрешение на такое их использование.

Источник изображений: Adobe

Первый представленный ИИ-инструмент является аналогом популярных нейросетей DALL-E или Midjourney — он так же позволяет создавать изображения по текстовому описанию. Второй инструмент позволяет творчески декорировать надписи и напоминает продвинутую версию WordArt.

Adobe пытается сделать свои ИИ-инструменты более простыми в использовании. Например, вместо ввода подробного описания для стилизации изображения, Adobe предлагает встроенные варианты художественных стилей, освещения и соотношения сторон. Пользователи также смогут применять эти эффекты к уже созданному изображению, а не генерировать новое каждый раз. Инструмент для создания текстовых эффектов работает аналогичным образом, со встроенными опциями для размера эффекта и цвета фона.

В будущем Adobe запустит ещё больше ИИ-инструментов, в том числе для редактирования изображений. Например, ИИ сможет перерисовывать части изображения или менять его стилистику, заменять цвета, менять отдельные объекты или их окружение, а также выполнять другие изменения по текстовым описаниям. Также обещан генератор изображений по 3D-моделям, преобразователь набросков в изображения и многое другое.

Но самой важной частью Firefly является то, что Adobe обучала свои модели на открытых или на лицензированных изображениях, в том числе из библиотеки Adobe Stock, заведомо не нарушая авторских прав художников. В дальнейшем компания собирается платить поставщикам данных, а также позволить владельцам изображений запрещать обучение ИИ по своим материалам.

Как отметили в Adobe, такой подход позволяет «генерировать высококачественный контент, а не случайные [сочетания из] интеллектуальной собственности брендов и других людей, потому что наша модель никогда не видела контента этого бренда или торговую марку». Также в компании добавили: «Мы не боимся перемен, и мы принимаем эти перемены».

Также Adobe планирует разрешить художникам тренировать Firefly на собственных изображениях, что по задумке позволит генерировать работы в совершенно уникальном, персональном стиле.

Пока что Firefly находится в стадии бета-тестирования и доступен исключительно на сайте Adobe. Доступ к инструментам пока ограничен — нужно получить приглашение. Записаться в очередь на приглашения может любой желающий. Позднее компания интегрирует Firefly в свои творческие приложения, включая Photoshop, Illustrator и Premiere Pro, снабдив простым визуальным интерфейсом.

В Photoshop появится ИИ-генерируемая заливка, Illustrator сможет генерировать векторные вариации нарисованных от руки эскизов, а Premiere Pro позволит изменять цвет или стиль изображения, используя подсказки. Adobe не называет сроков выпуска этих функций, но это одни из функций, над которыми компания работает.

Разработчики представили пятую версию системы генеративного искусственного интеллекта MidJourney, способную создавать изображения по текстовым описаниям. В настоящий момент новая версия генеративной ИИ-сети доступна в рамках программы альфа-тестирования для тех, кто подписан на сервис MidJourney. Подписку можно оформить в официальном канале разработчиков в Discord.

Источник изображений: MidJourney

По словам графического дизайнера Джули Виланд (Julie Wieland), часто публикующей в Twitter изображения, созданные с помощью MidJourney, генеративная сеть MidJourney v5 научилась создавать практически фотореалистичные изображения.

«MJ v5 ощущается так, как будто вы наконец-то надели очки после того, как долго страдали от недостатка зрения. Неожиданно всё вокруг вы видите, как в 4K. Это одновременно ошеломляет и удивляет», — прокомментировала Виланд.

Виланд, давно наблюдающая за развитием генеративной сети MidJourney, поделилась изображениями, демонстрирующими прогресс в её эволюции. Её первая версия была представлена в марте 2022 года. До третьей версии генеративная сеть добралась в августе, а четвёртая версия была представлена в ноябре. Ниже представлены примеры, демонстрирующие прогресс в развитии этой технологии. С каждым новым поколением нейросеть училась создавать более сложные и детализованные изображения.

MidJourney v3 (слева), MidJourney v4 (в центре) и MidJourney v5 (справа)

MidJourney работает по тому же принципу, согласно которому работают другие генеративные системы искусственного интеллекта, вроде Stable Diffusion и DALL-E. Они создают изображения на основе заданного текстового описания (промта), используя ИИ-модель, обученную на основе миллионов изображений, созданных людьми.

За день экспериментов MidJourney v5 Виланд пришла к выводу, что нейросеть значительно продвинулась вперёд. Она научилась «невероятно реалистично» передавать текстуру кожи и черты лица, создаёт более реалистичное и кинематографическое освещение, лучше передаёт отражения, блики и тени, выбирает более выразительные ракурсы и общий план, «а глаза научилась создавать практически идеально».

Также MidJourney v5 научилась лучше рисовать руки и зубы. В описании к MidJourney v5 указывается, что генеративная система искусственного интеллекта получила расширенный стилистический диапазон, у неё повышена отзывчивость на запросы, разрешение сгенерированных изображений увеличено в два раза. Кроме того, улучшены динамический диапазон и детализация.

В прошлом году фотобанк Shutterstock и компания Open AI объявили о партнёрстве, в рамках которого последняя планировала интегрировать в фотосервис свою ИИ-модель DALL-E 2 для генерации изображений по текстовому описанию. Теперь же было объявлено, что пользователи онлайн-платформы для дизайнеров Creative Flow от Shutterstock смогут генерировать изображения по текстовому описанию, используя для этого инструмент на основе DALL-E 2.

Источник изображения: freepik.com

Ключевая особенность нового инструмента, который, похоже, не имеет названия, заключается в том, что сгенерированные ИИ изображения можно будет лицензировать. Это важно, поскольку один из крупнейших конкурентов Shutterstock в лице платформы Getty Images в настоящее время ведёт судебное разбирательство по поводу изображений, созданных с помощью генеративного алгоритма Stable Diffusion от компании Stability AI. Поводом для иска стало использование разработчиками для обучения своего алгоритма изображений, размещённых на платформе Getty Images.

Другими словами, сервис Shutterstock не только намерен использовать возможности нейросетей для генерации картинок, но и наделять авторскими правами созданный таким образом контент. Этим решением сервис ставит себя в оппозицию Getty Images, владельцы которого выступили на стороне авторов контента, недовольных тем, что их работы используются для обучения генеративных нейросетей. Хотя Stability AI получила значительное финансирование, по состоянию на эту неделю Open AI значительно превосходит её в этом плане. В 2019 году Microsoft инвестировала в Open AI $1 млрд и на днях софтверный гигант объявил, что намерен вложить ещё миллиарды.

Помимо партнёрства с Open AI, Shutterstock также недавно объявил о сотрудничестве с Meta✴ Platforms, владельцем Facebook✴, Instagram✴ и WhatsApp. В рамках этого сотрудничества Meta✴ будет использовать фото- и другие медиатеки Shutterstock для создания наборов данных для обучения собственных ИИ-алгоритмов. В конечном счёте можно ожидать появления новых инструментов на основе генеративных нейросетей.

Группа художниц подала коллективный иск в отношении создателей генераторов изображений, основанных на алгоритмах искусственного интеллекта (ИИ). Им вменяется в вину кража миллиардов защищённых авторским правом изображений, которые использовались для обучения этих систем — авторы изображений не получили компенсаций, а их согласия никто не спрашивал.

Источник изображения: Conny Schneider / unsplash.com

Иск подан от имени Сары Андерсен (Sarah Andersen), Келли МакКернан (Kelly McKernan) и Карлы Ортиз (Karla Ortiz), их интересы представляет юридическая фирма Джозефа Савери (Joseph Saveri Law Firm), а ответчиками выступают компании Stability AI, Midjourney и DeviantArt. Основанные на ИИ генераторы Stable Diffusion от Stability AI, DreamUp на платформе DeviantArt и Midjourney позволяют создавать по текстовому описанию изображения, подражающие манерам письма того или иного художника. Подобные системы появляются всё чаще, вызывая порой резко негативную реакцию со стороны сообщества художников.

Примечательно, что в списке ответчиков отсутствует компания OpenAI, в чьём арсенале присутствует ИИ-модель DALL-E — разработчик в точности не раскрыл, на каких данных обучил платформу, но уточнил, что часть из них лицензировал у крупных фотобанков вроде Shutterstock. Законность работы других подобных систем, включая Stable Diffusion, пока не рассматривалась в суде, но у представителя ответчика уже есть опыт в противостоянии с разработчиками ИИ-систем — фирма уже судилась с платформой GitHub, которая выпустила генератор программного кода Copilot AI.

Отдельные утверждения истцов звучат несколько сомнительно с технической точки зрения, заметил ресурс Ars Technica. К примеру, генерирующие изображения модели искусственного интеллекта назвали «не более чем сложным инструментом для создания коллажей», а сами изображения — полностью основанными на использованных при обучении, то есть их копиями.

А вот пункты обвинения с меньшей долей технической информации звучат более убедительно. В частности, это незаконная конкуренция, предусматривающая машинное дублирование стиля художника, и нарушение права на публичность — при генерации изображения в том или ином стиле система не запрашивает разрешения у автора этого стиля. В конечном итоге истцы хотят доказать, что ответчики незаконно обогащаются на защищённых авторским правом материалах. Художницы требуют возмещения ущерба и судебного запрета на дальнейшие действия ответчиков, нарушающие права истцов.

Коммерческая онлайн-галерея DeviantArt представила собственные генератор изображений по текстовому описанию. Алгоритм DreamUp построен на базе нейросети Stable Diffusion и может создавать изображения, основываясь на анализе сотен миллионов картинок в интернете, в том числе опубликованных на сайте DeviantArt или собранных в набор данных LAION.

Источник изображения: DeviantArt

Вероятность того, что нейросеть будет использовать для обучения работы художников без их разрешения, по мнению авторов проекта, является важным моментом. Поэтому DeviantArt запустила инициативу, в рамках которой художники смогут исключить свои работы из базы, применяемой для анализа алгоритмом DreamUp. Возможно, такой шаг направлен на то, чтобы успокоить художников, многие их которых недовольны тем, что их работы используются для обучения ИИ-алгоритма.

Любопытно, что у художников есть возможность запретить DreamUp использовать не только существующие работы, но и будущие. Для этого автору потребуется заполнить соответствующую форму на сайте DeviantArt. На странице DeviantArt также указано, что галерея не давала согласия на обработку размещённых на сайте изображений алгоритмами генерации изображений на основе Stable Diffusion сторонних разработчиков.

Что касается самого алгоритма DreamUp, то для участников сообщества DeviantArt предлагается возможность создать несколько изображений бесплатно. Для постоянного взаимодействия с алгоритмом придётся оформить один из вариантов платной подписки, стоимость которой варьируется от $3,95 до $14,95 в месяц.