Новая версия нейросети Kandinsky 2.2 научилась создавать фотореалистичные изображения с более высоким разрешением и изменять соотношение сторон при генерации.
Как сообщили в пресс-службе Сбера, значительного прироста качества удалось достигнуть при создании портретов. Для дообучения нейросети использовался датасет в размере 1,5 млрд пар «текст — изображение». Это на 300 млн больше, чем в предыдущей версии — Kandinsky 2.1.
Кроме того, новая версия модели научилась генерировать стикеры, из которых можно собирать полноценные стикерпаки в Telegram. Также бот нейросети теперь способен изменять по текстовому описанию отдельные объекты или элементы на изображениях, сохраняя композицию исходной иллюстрации. Это стало возможным благодаря внедрению в модель специального структурного блока управляемых изменений — ControlNet.
«Мы продолжаем совершенствовать нашу нейросеть для создания уникального контента. Новая версия даёт пользователям ещё больше возможностей, при этом она генерирует изображения в ещё лучшем качестве. Нейросеть уже не просто пытается подражать творчеству человека, а способна создавать новые художественные смыслы и интерпретации. Как и предыдущая версия, Kandinsky 2.2 находится в открытом доступе, так что протестировать её можно совершенно бесплатно», — сообщил первый заместитель Председателя Правления Сбербанка Александр Ведяхин.
Он добавил, что новая версия нейросети понимает запросы на русском и английском языках, умеет рисовать более чем в 20 стилях, смешивать несколько рисунков, стилизовать изображение по текстовому описанию, генерировать изображения, похожие на заданные, дорисовывать недостающие части картинки, создавать картины в режиме бесконечного полотна.
Отметим, нейросеть разработали и обучили исследователи Sber AI при поддержке учёных из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices. Напомним, что предыдущая модель — Kandinsky 2.1 — стала самой быстрорастущей нейросетью в мире, набрав миллион пользователей всего за 4 дня после выхода.
Фото: Пресс-служба Сбера