«Яндекс» показал нейросеть YandexART

Изображения создаются методом каскадной диффузии. Сначала нейросеть генерирует изображения и кадры в соответсткии с запросом, а потом поэтапно увеличивает их разрешение, добавляя детали.

В компании отметили, что новая нейросеть создает более реалистичную и детализированную графику по сравнению с предыдущим поколением диффузионной модели. Результаты оказались лучше в 60% случаев. Для улучшения качества работы размер обучающего набора данных увеличили в 1,5 раза до 330 миллионов картинок с текстовым описанием.

Изображения для обучения модели отбирают с помощью трех режимов фильтрации. Также нейросеть «качественнее прорабатывает особенности лиц, глаз и рук, что позволяет ей делать фотореалистичные портреты». Для улучшения генерации специалисты отсматривают сгенерированный контент и выбирают удачные и неудачные варианты.