24.11.2022 01:19
Консультации.
Просмотров всего: 5763; сегодня: 3.

Сбер представил Kandinsky 2.0

Сбер представил Kandinsky 2.0

Сбер представил Kandinsky 2.0 — первую российскую диффузионную модель для генерации изображений по тексту на разных языках.

На международной конференции по искусственному интеллекту (ИИ) Artificial Intelligence Journey Сбер представил Kandinsky 2.0 — первую российскую мультиязычную диффузионную модель для генерации изображений по текстовому описанию с 2 млрд параметров.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке ученых из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices из 1 млрд пар «текст — изображение». Увидеть, как она рисует, можно на сайте FusionBrain, а также при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют.

FusionBrain.ai – открытый портал для демонстрации моделей, приближающих мир к созданию AGI (Artificial General Intelligence, сильный искусственный интеллект) от Института AIRI, который Сбер решил поддержать, первым выложив свою модель на ресурсе. В будущем на сайте FusionBrain.ai будут доступны как генеративные, так и передовые мультимодальные и мультизадачные модели.

В Kandinsky 2.0 разработчики использовали набирающий популярность диффузионный подход, поскольку модели подобной архитектуры, в отличие от трансформеров, дают хорошие результаты почти во всех задачах генерации мультимедийного контента по текстовому описанию (синтез изображений, видео, 3D и аудио).

Модель способна одинаково быстро и качественно обрабатывать запросы на 101 языке. Среди них как распространённые русский и английский, так и более редкие, например, монгольский. Система поймёт задачу, даже если в одном запросе будут слова на разных языках. 

Kandinsky 2.0 отличается от своего предшественника более сочной, глубокой и реалистичной картинкой и расширенными возможностями. На сайте FusionBrain изображения можно генерировать в 20 различных стилях, среди которых ренессанс, классицизм, мультипликация, Новый год и даже хохлома. В модели также реализованы функции inpainting (замена любой части изображения и любого объекта на изображении на сгенерированные нейросетью) и outpainting (возможность дорисовывать готовое изображение и фон вокруг картинки).

Кроме того, в Kandinsky 2.0 пользователи могут оценить, как одинаковые с точки зрения смысла лингвистические конструкции и понятия отличаются в зависимости от языка и культурной окраски. Например, если сформулировать запрос «национальное блюдо» на русском языке, нейросеть чаще всего рисует щи, а на японском это будет мисо суп и суши.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка:

«Мы продолжаем развивать решения для автоматической генерации изображений по описанию на естественном языке — так называемый креативный ИИ. Kandinsky 2.0, который пришёл на смену первой версии модели, — прорыв в этой сфере. Наша модель позволяет за несколько секунд получить уникальную картинку под конкретную задачу и свободно распространять её без лицензии, что очень актуально для бизнеса. Генеративные модели развиваются очень быстро: ещё четыре года назад даже постановку такой задачи сложно было представить, а сегодня мы имеем работающую модель, которая понимает 101 язык и рисует реалистичные изображения, которые зачастую неотличимы от тех, что создают люди».

Для справки: 

ПАО Сбербанк — один из крупнейших банков в России и один из ведущих глобальных финансовых институтов. На долю Сбербанка приходится около трети активов всего российского банковского сектора. Сбербанк является ключевым кредитором для национальной экономики и занимает одну из крупнейших долей на рынке вкладов. Основным акционером ПАО Сбербанк является Российская Федерация в лице Министерства финансов Российской Федерации, владеющая 50% уставного капитала ПАО Сбербанк плюс 1 голосующая акция. Оставшимися 50% минус 1 голосующая акция от уставного капитала банка владеют российские и международные инвесторы. Банк располагает обширной филиальной сетью в России: около 14 тысяч точек обслуживания. Генеральная лицензия Банка России на осуществление банковских операций № 1481 от 11.08.2015.


Ньюсмейкер: TT Finance — 433 публикации
Сайт: www.ttfinance.ru/news.php?id=54224
Поделиться:

Интересно:

Опубликован календарь рабочих и праздничных дней на 2025 год
25.07.2024 16:51 Новости
Опубликован календарь рабочих и праздничных дней на 2025 год
Минтруд России подготовил для общественного обсуждения проект постановления Правительства РФ, закрепляющего порядок переноса выходных дней в 2025 году. Перенос необходим, чтобы установить рациональный баланс рабочего времени и возможностей для полноценного отдыха граждан. «Ежегодно Правительством...
МСП поддержат при открытии бизнеса на туристических автомаршрутах
25.07.2024 13:03 Новости
МСП поддержат при открытии бизнеса на туристических автомаршрутах
Корпорация МСП с Минэкономразвития и регионами по поручению Президента в сентябре запустит специальную программу поддержки для предпринимателей, которые хотят открыть свой бизнес по пути следования туристических автомаршрутов — их сейчас разрабатывают регионы. Поддержка МСП будет оказываться для...
«Морская почта» стартовала в Санкт-Петербурге
25.07.2024 12:37 Мероприятия
«Морская почта» стартовала в Санкт-Петербурге
В канун Дня ВМФ вновь заработала «Морская почта» - открытку в любую точку страны можно отправить с Якорной площади Кронштадта. Об этом сообщил глава Санкт-Петербурга Александр Беглов.  В сердце Кронштадта - на Якорной площади в канун Дня ВМФ сегодня вновь начинает работу «Морская почта»...
Песни - это отражение событий ВОВ, сформированные многими поколениями
25.07.2024 12:09 Новости
Песни - это отражение событий ВОВ, сформированные многими поколениями
Государственная Дума приняла в первом чтении законопроект, позволяющий сохранить для граждан России возможность исполнять и слушать военные песни в День Победы и другие памятные даты.  «Песни, как и памятники, — это отражение событий, эмоций и той...
К 2030 году количество турпоездок на авто вырастет с 26 млн до 50 млн
25.07.2024 11:11 Новости
К 2030 году количество турпоездок на авто вырастет с 26 млн до 50 млн
Первые 50 маршрутов для автопутешественников по 47 регионам России размещены на национальном туристическом портале «Путешествуем.РФ». Такие путеводители подробно рассказывают о маршруте и его ключевых достопримечательностях, а также содержат карту автопутешествия...