Данные берутся из публикации Практикум по ИИ-рисованию, часть двенадцатая: быстрое прототипирование с FLUX.1 [dev]

Midjourney, являющаяся одной из ведущих компаний по разработке нейросетей для генерации изображений по текстовым описаниям, анонсировала тестирование новых функций, включая внешний редактор изображений, режим редактирования текстур и систему модерации на основе искусственного интеллекта новейшего поколения.

Источник изображения: midjourney.com

Новый ИИ-редактор позволяет загружать фотографии с компьютера и вносить в них изменения — расширять, обрезать, перерисовывать или добавлять объекты в сцену. Управление происходит с помощью текстовых подсказок (промптов) и выбора областей на изображении. Также поддерживается персонализация ИИ-моделей, референсные персонажи и автоматические подсказки на основе заданных изображений.

Источник изображения: midjourney.com

Не менее интересным оказался режим смены текстур, который анализирует форму сцены и изменяет освещение, материалы и текстуру изображения. Это позволяет кардинально трансформировать внешний вид изначальной картинки, создавая новые визуальные эффекты, не изменяя при этом основную композицию.

Источник изображения: midjourney.com

Midjourney также представила более тонкую и интеллектуальную систему модерации V2 на основе ИИ. Этот «модератор» анализирует не только текстовые запросы, но и сами изображения, маски для рисования и полученные результаты. «Мы считаем, что это самый интеллектуальный ИИ-модератор из всех существующих на сегодня. — с гордостью заявляют разработчики компании. — Надеемся, что некоторые его аспекты в будущем будут внедрены в стандартные конвейеры генерации, чтобы уменьшить количество ложных срабатываний и предоставить пользователям больше свободы».

Источник изображения: midjourney.com

На данный момент новые функции доступны для тех пользователей, которые сгенерировали более 10 000 изображений, имеют годовую подписку или ежемесячную на протяжении последних 12 месяцев. Отметим, что разработчики признают наличие некоторых проблем, таких как некорректная работа с небольшими участками изображения, и просят пользователей отнестись с пониманием к этим временным трудностям, наслаждаясь тестированием новых возможностей.

Midjourney запустит веб-инструмент, способный редактировать любые изображения с помощью генеративного ИИ. Новинка позволит, сохраняя форму редактируемых объектов, изменять их текстуры, цвета и другие детали в зависимости от текстовых запросов пользователя. Это открывает путь не только к большим творческим возможностям, но и к возможным злоупотреблениям.

Источник изображений: Midjourney

На прошлой неделе генеральный директор компании Дэвид Хольц (David Holtz) опубликовал на сервере Midjourney в Discord подробности о новом ИИ-редакторе изображений. Новый инструмент позволит пользователям загружать изображения из интернета и использовать последние достижения в области ИИ-технологий для их редактирования. «Он сохраняет форму сцены и объектов, но перерисовывает все текстуры, цвета и детали в соответствии с вашим запросом», — объяснил Хольц.

Источник изображения: Midjourney / Discord

Появление такого инструмента открывает перед пользователями большие возможности для творчества, однако вызывает и серьёзные вопросы о злоупотреблениях. Например, инструмент может быть использован для массового создания дипфейков или нарушений авторских прав. Несмотря на то, что в США на федеральном уровне по-прежнему отсутствует закон, криминализирующий создание дипфейков, как минимум дюжина штатов уже приняли законы против ИИ-имитаций, и многие другие штаты рассматривают возможность последовать их примеру.

Хольц осознаёт риски, связанные с вероятным злоупотреблением новым инструментом, и заявил, что на начальном этапе доступ к сервису будет ограничен небольшим числом пользователей. Компания Midjourney разрабатывает системы мониторинга, включающие как человеческий контроль, так и ИИ, чтобы минимизировать потенциальные нарушения. Однако конкретные механизмы реализации этих ограничений пока не определены, и компания собирает обратную связь от пользователей, чтобы решить, кто должен получить ранний доступ к инструменту.

Следует подчеркнуть, что Midjourney уже внедрила стандарты метаданных IPTC Digital Source Type, позволяющие маркировать изображения, созданные с использованием ИИ. Однако компания пока отстаёт от других лидеров рынка, таких как Adobe, которые применяют более продвинутые технологии отслеживания происхождения изображений, например, стандарт C2PA. Эта технология обеспечивает возможность проследить полную историю редактирования изображения, что существенно повышает прозрачность и ответственность в процессе его создания и обработки.

В августе текущего года Midjourney также запустила обновлённый веб-сайт, который позволяет любому пользователю создавать изображения с помощью ИИ, зарегистрировавшись через Google-аккаунт. Первоначально предоставляется бесплатный пробный период, по окончании которого пользователи могут оформить платную подписку, чтобы продолжить пользоваться сервисом генерации изображений на постоянной основе.

Данные берутся из публикации ИИтоги сентября 2024 г.: реалисты против оптимистов

Разработчики популярного приложения Procreate для работы с графикой и создания иллюстраций на iPad отказались внедрять генеративный ИИ, выразив солидарность с художниками, обеспокоенными профессиональными и этическими последствиями технологии. Генеральный директор Procreate Джеймс Куда (James Cuda) осудил «воровство» и «бесплодное будущее», которые, по его мнению, несёт за собой генеративный ИИ в сфере искусства.

Источник изображения: Procreate

Команда разработчиков Procreate заявила: «Генеративный ИИ вырывает человечность из вещей. Построенная на основе воровства, эта технология ведёт нас к бесплодному будущему. Мы считаем машинное обучение убедительной технологией со множеством достоинств, но путь, по которому идёт генеративный ИИ, для нас и в нашей сфере неправилен».

Это заявление вызвало волну одобрения со стороны творческого сообщества, обеспокоенного стремительным распространением инструментов генеративного ИИ. Главные опасения художников связаны с тем, что ИИ-модели обучаются на их работах без согласия и какой-либо компенсации, а также с тем, что широкое внедрение технологии может значительно сократить возможность трудоустройства для художников.

В целом Procreate противопоставляет себя другим компаниям, которые, по мнению многих художников, не справились с наплывом инструментов генеративного ИИ. Например, Clip Studio Paint, конкурент Procreate, отказался от планов по внедрению функций генерации изображений после того, как это решение вызвало шквал критики со стороны пользователей. Wacom (производитель графических планшетов) и Wizards of the Coast (владелец Magic: The Gathering) также принесли извинения за непреднамеренное использование сгенерированных ИИ изображений в своих продуктах после негативной реакции сообщества.

Даже Adobe, которая пыталась придерживаться более «этического» подхода к созданию инструментов генеративного ИИ, столкнулась с критикой. Компания утверждала, что её модели Firefly обучаются на лицензированном или свободном от авторских прав контенте. Однако многие художники считают, что Adobe отвернулась от независимых авторов, в том числе благодаря своей политике непопулярных изменений, внесённых за последние годы, таких как покупка приложений на основе ежемесячной аренды.

На этом фоне Procreate пользуется большим спросом у художников. Компания придерживается модели одноразовой покупки за $13 вместо того, чтобы переходить на подписку, как это сделали Adobe и Clip Studio Paint. Procreate также постоянно расширяет список своих инструментов, в том числе и для настольных компьютеров. Твёрдое обязательство не внедрять генеративный ИИ стало истинным подарком для художников, которые чувствуют, что альтернатив становится всё меньше.

«Мы не знаем точно, куда приведёт эта история и чем она закончится, но мы верим, что находимся на правильном пути, поддерживая творчество людей», — сказал Джеймс Куда.

Прогресс в области генеративного искусственного интеллекта открывает новые перспективы для индустрии видеоигр, но в то же время порождает опасения о будущем различных профессий разработчиков. По мнению Павла Саско (Pawel Sasko), ведущего дизайнера квестов в ролевой игре Cyberpunk 2077, несмотря на потенциал ИИ, существует огромный разрыв между авторским и сгенерированным контентом.

Источник изображения: cyberpunk.net

Текущее развитие генеративного ИИ предвещает значительные изменения в художественных и технических аспектах создания видеоигр. Создатели новейших технологий ИИ утверждают, что они могут расширить горизонты разработчиков с помощью инструментов для автоматизации создания диалогов и разработки квестов. Такие инновации, теоретически, могут обеспечить более глубокую интерактивность и погружение в игровой процесс.

Источник изображения: cyberpunk.net

Вопреки оптимистичным ожиданиям, реальные результаты, достигнутые сегодня в области ИИ, как в проектах стартапа Convai, так и в игре Covert Protocol, разработанной при поддержке Nvidia, свидетельствуют о том, что путь к созданию по-настоящему убедительных игровых продуктов на базе ИИ ещё весьма долгий. Неестественность генерируемых ИИ сценариев ещё слишком очевидна для конечных пользователей.

Источник изображения: cyberpunk.net

Профессионалы игровой индустрии, основываясь на своём многолетнем опыте, скептически относятся к текущим достижениям ИИ. Саско, ведущий дизайнер квестов в CD Projekt Red, считает, что использование ИИ может повысить реактивность и аутентичность реакций NPC. Однако он подчёркивает, что в областях написания сценариев и озвучивания персонажей перед ИИ стоит ещё множество препятствий. Разрыв между индивидуально созданным контентом и тем, что предлагает ИИ, остаётся колоссальным.

Источник изображения: thewitcher.com

На примере Phantom Liberty и его ключевых персонажей Саско подчеркнул, что качественное преодоление разрыва между авторским контентом и продукцией ИИ пока что представляется лишь мечтой. «Разница в качестве — огромная, это как каньон», — сказал он, подчеркнув значимость человеческого вклада в создание игровых миров. На текущем этапе использование ИИ в индустрии разработки видеоигр преимущественно ограничено сферами, касающимися оптимизации процессов, автоматизации рутинных задач, улучшения процедур поиска и обработки данных.

Источник изображения: thewitcher.com

В то же время, передовые исследования, проводимые ведущими компаниями в этой области, такими как Nvidia и Epic Games, с использованием продвинутых инструментов, например, Metahumans и Omniverse, демонстрируют значительный потенциал ИИ для радикального трансформирования всех аспектов создания видеоигр в будущем.

Исследователи из Массачусетского технологического института (MIT) смогли заметно ускорить создание изображений по текстовым описаниям с помощью генеративного искусственного интеллекта. Новый метод позволяет генерировать изображения высокой чёткости в 30 раз быстрее существующих.

Источник изображения: pixabay.com

Обычно в генеративных ИИ применяется техника так называемой «диффузии», когда создаётся максимально размытая картинка, а затем она детализируется до окончательного результата, максимально соответствующего тому, что ИИ может выдать в ответ на запрос пользователя. Диффузия занимает довольно много времени, поэтому исследователи MIT поставили цель её ускорить.

Источник изображений: tianweiy.github.io

Исследователи из Лаборатории компьютерных наук и искусственного интеллекта MIT свели генерацию изображений к единственному проходу, а новый метод назвали «дистилляцией с согласованным распределением» (distribution matching distillation). Очевидно, что генерация картинки в один проход заметно быстрее, чем за типичные для диффузионных моделей 30–50 шагов. Так, на современном оборудовании Stable Diffusion 1.5 создаёт изображение за 1,5 секунды, в то время как новая модель на основе DMD справляется за 0,05 секунды.

Это не первая попытка дистилляции диффузионных моделей для ускорения генерации изображений. В Instaflow и LCM пытались применить похожий подход, но результаты не впечатляли. Компания Stability AI также пыталась ускорить диффузионные модели и добилась некоторых успехов, выпустив Stable Diffusion Turbo, создающую картинку с разрешением до 1 мегапикселя за один проход, однако сгенерированные в несколько проходов изображения всё равно получались заметно лучше.

Владельцы настольной ролевой игры «Подземелья и Драконы» (Dungeons & Dragons) объявили, что больше не позволят художникам использовать ИИ для создания иллюстраций своих персонажей и сценариев. Решение было принято после того, как фанаты заметили странности в изображении одного из гигантов, вооружённого топором, и начали задавать вопросы о его происхождении.

Источник изображения: D&D Beyond

Владельцы D&D Beyond объявили, что до субботы не знали, что художник, с которым компания работает почти 10 лет, использовал ИИ для создания иллюстраций. В Hasbro уточнили, что обсудили этот вопрос с художником и скорректировали свои правила.

«В дальнейшем художник не будет использовать ИИ для работы над проектами Wizards. Мы пересматриваем наши подходы и обновляем руководство для художников, чтобы дать ясно понять, что использование ИИ в создании иллюстраций для D&D недопустимо», — говорится в сообщении D&D Beyond в X, ранее известном как Twitter. Иллюстрации, созданные с помощью ИИ, часто демонстрируют характерные ошибки, такие как искажённые конечности, что и привлекло внимание бдительных фанатов D&D.

Иллюстрация, вызвавшая дискуссии, опубликована в бумажном врианте книги «Бигби представляет: Слава Гигантов» (Bigby Presents: Glory of the Giants). Это сборник описаний и легенд о монстрах, который будет доступен в цифровом и печатном форматах по цене $59,95 на официальном сайте D&D с 15 августа.

Применение ИИ в области творчества вызвало тревогу в отношении авторских прав во многих сферах искусства. Это привело к забастовкам в Голливуде, вынудило Академию звукозаписи (NARAS) пересмотреть свои подходы к вручению премии «Грэмми» и даже привело к тому, что некоторые художники и писатели подали иски против компаний, разрабатывающих ИИ, и обвинили их в незаконном использовании своих работ.

Решение владельцев D&D Beyond запретить использование ИИ для создания иллюстраций подчёркивает ценность человеческого творчества. Несмотря на то, что ИИ способен упростить некоторые аспекты творческого процесса, он также может вызвать проблемы, связанные с авторством и оригинальностью. Это напоминает нам о необходимости соблюдения баланса между использованием новых технологий и сохранением ценности и уникальности человеческого творчества.

OpenAI запустила бета-тестирование функции «Пользовательские инструкции» (Custom Instructions), с помощью которой пользователь может сообщить чат-боту сведения о себе и определить настройки сервиса, пишет The Verge. Функция доступна с сегодняшнего дня по подписке для участников программы ChatGPT Plus во всех странах, кроме Великобритании и ЕС.

Источник изображения: Pixabay

Новая функция позволит устранить необходимость в постоянной преамбуле к вопросам, задаваемым чат-боту. Вместо того чтобы формировать длинный вопрос для ChatGPT со всем необходимым контекстом и информацией, можно просто добавить этот контекст и информацию в свои пользовательские инструкции, чтобы не повторять их каждый раз. Например, если вы сообщите системе, что преподаёте в третьем классе, ответы на запросы будут адаптироваться ИИ-ботом с учётом нужной возрастной группы учащихся.

Настройки пользовательских инструкций подчиняются тем же правилам, что и сам ИИ-бот, поэтому попытки спровоцировать его неэтичное или неприемлемое поведение будут безрезультатными. ChatGPT также удаляет личную информацию, которая может быть использована для идентификации пользователя.

Следует отметить, что OpenAI представляет новую функцию как способ упростить составление запросов, а не как первый шаг к всеобъемлющему личному помощнику на основе ИИ.