24.11.2022 01:19
Консультации.
Просмотров всего: 5682; сегодня: 2.

Сбер представил Kandinsky 2.0

Сбер представил Kandinsky 2.0

Сбер представил Kandinsky 2.0 — первую российскую диффузионную модель для генерации изображений по тексту на разных языках.

На международной конференции по искусственному интеллекту (ИИ) Artificial Intelligence Journey Сбер представил Kandinsky 2.0 — первую российскую мультиязычную диффузионную модель для генерации изображений по текстовому описанию с 2 млрд параметров.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке ученых из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices из 1 млрд пар «текст — изображение». Увидеть, как она рисует, можно на сайте FusionBrain, а также при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют.

FusionBrain.ai – открытый портал для демонстрации моделей, приближающих мир к созданию AGI (Artificial General Intelligence, сильный искусственный интеллект) от Института AIRI, который Сбер решил поддержать, первым выложив свою модель на ресурсе. В будущем на сайте FusionBrain.ai будут доступны как генеративные, так и передовые мультимодальные и мультизадачные модели.

В Kandinsky 2.0 разработчики использовали набирающий популярность диффузионный подход, поскольку модели подобной архитектуры, в отличие от трансформеров, дают хорошие результаты почти во всех задачах генерации мультимедийного контента по текстовому описанию (синтез изображений, видео, 3D и аудио).

Модель способна одинаково быстро и качественно обрабатывать запросы на 101 языке. Среди них как распространённые русский и английский, так и более редкие, например, монгольский. Система поймёт задачу, даже если в одном запросе будут слова на разных языках. 

Kandinsky 2.0 отличается от своего предшественника более сочной, глубокой и реалистичной картинкой и расширенными возможностями. На сайте FusionBrain изображения можно генерировать в 20 различных стилях, среди которых ренессанс, классицизм, мультипликация, Новый год и даже хохлома. В модели также реализованы функции inpainting (замена любой части изображения и любого объекта на изображении на сгенерированные нейросетью) и outpainting (возможность дорисовывать готовое изображение и фон вокруг картинки).

Кроме того, в Kandinsky 2.0 пользователи могут оценить, как одинаковые с точки зрения смысла лингвистические конструкции и понятия отличаются в зависимости от языка и культурной окраски. Например, если сформулировать запрос «национальное блюдо» на русском языке, нейросеть чаще всего рисует щи, а на японском это будет мисо суп и суши.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка:

«Мы продолжаем развивать решения для автоматической генерации изображений по описанию на естественном языке — так называемый креативный ИИ. Kandinsky 2.0, который пришёл на смену первой версии модели, — прорыв в этой сфере. Наша модель позволяет за несколько секунд получить уникальную картинку под конкретную задачу и свободно распространять её без лицензии, что очень актуально для бизнеса. Генеративные модели развиваются очень быстро: ещё четыре года назад даже постановку такой задачи сложно было представить, а сегодня мы имеем работающую модель, которая понимает 101 язык и рисует реалистичные изображения, которые зачастую неотличимы от тех, что создают люди».

Для справки: 

ПАО Сбербанк — один из крупнейших банков в России и один из ведущих глобальных финансовых институтов. На долю Сбербанка приходится около трети активов всего российского банковского сектора. Сбербанк является ключевым кредитором для национальной экономики и занимает одну из крупнейших долей на рынке вкладов. Основным акционером ПАО Сбербанк является Российская Федерация в лице Министерства финансов Российской Федерации, владеющая 50% уставного капитала ПАО Сбербанк плюс 1 голосующая акция. Оставшимися 50% минус 1 голосующая акция от уставного капитала банка владеют российские и международные инвесторы. Банк располагает обширной филиальной сетью в России: около 14 тысяч точек обслуживания. Генеральная лицензия Банка России на осуществление банковских операций № 1481 от 11.08.2015.


Ньюсмейкер: TT Finance — 430 публикаций
Сайт: www.ttfinance.ru/news.php?id=54224
Поделиться:

Интересно:

Что надо знать о камеральной проверке
21.06.2024 18:12 Консультации
Что надо знать о камеральной проверке
Камеральная налоговая проверка – это проверка соблюдения налогоплательщиком законодательства о налогах и сборах. Ее проходят все предприниматели после сдачи декларации, отчета или расчета. В большинстве случаев проверка проводится без участия предпринимателя. Для ее начала не требуется какого-либо...
Как следили за качеством продуктов в лавках Москвы в XVIII и XIX веках
21.06.2024 12:17 Новости
Как следили за качеством продуктов в лавках Москвы в XVIII и XIX веках
Торговля пищевыми продуктами всегда привлекала внимание городских властей в Москве. Особую важность они придавали хорошему качеству товара, так как от этого зависело здоровье горожан, предотвращение эпидемий дизентерии, тифа и многих других инфекционных болезней. Поэтому проверки условий хранения и...
Как СССР помогал Северному Вьетнаму в войне против США
20.06.2024 16:35 Новости
Как СССР помогал Северному Вьетнаму в войне против США
5 августа 1964 года американская авиация впервые нанесла воздушные удары по территории Демократической Республики Вьетнам (ДРВ или Северный Вьетнам). Спустя полгода США начали операцию «Раскаты грома», развязав тем самым уже полномасштабную воздушную войну против этой азиатской страны.   ...
«Краснодарский спрут» и прокурор Найдёнов
20.06.2024 15:37 Аналитика
«Краснодарский спрут» и прокурор Найдёнов
Автор: Александр Звягинцев С первых дней работы в прокуратуре меня поражало убеждение большинства сограждан нашей великой страны, что разобраться и наказать виновных прокурору ничего не стоит — было бы желание. Люди считали, что закон торжествует сам собой, надо только, чтобы прокурор отдал...
Большинство россиян этим летом выбрали отдых внутри страны
20.06.2024 14:57 Аналитика
Большинство россиян этим летом выбрали отдых внутри страны
73% туристов, отправляющихся на отдых в летние месяцы воздушным транспортом, выбрали поездки по стране. Среди самых популярных направлений — Сочи и Санкт-Петербург: 21 и 14% от внутренних бронирований россиян соответственно. Каждое четвертое бронирование...