16+
	array(0) {
}
	array(0) {
}
	NULL
Больше новостей
Больше опросов

Сбер представил нейросеть Kandinsky 2.1

Специалисты Сбера представили нейросеть, способную генерировать изображения

Сбер представил нейросеть Kandinsky 2.1
Фото: Сбер

Новая генеративная модель Сбера — Kandinsky 2.1 — способна всего за несколько секунд создавать высококачественные изображения по их текстовому описанию на естественном языке. Она также может смешивать несколько рисунков, изменять их по текстовому описанию, генерировать изображения, похожие на заданное, дорисовывать недостающие части картинки и формировать изображения в режиме бесконечного полотна (inpainting/outpainting). Модель понимает запросы на 101 языке (включая русский и английский) и умеет рисовать в различных стилях.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке учёных из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices.

Новая модель Kandinsky 2.1 унаследовала веса предыдущей версии, обученной на 1 млрд пар «текст — изображение», и была дополнительно обучена на 170 млн пар «текст — изображение» высокого разрешения. Затем она дообучалась на отдельно собранном датасете из 2 млн пар качественных изображений. В данный сет попали картинки с описаниями в таких традиционно сложных для нейросетей областях, как тексты и лица людей.

Нейросеть также была усовершенствована за счёт новой обученной модели автоэнкодера, которая используется в том числе в качестве декодера векторных представлений изображений. Это кардинально улучшило генерацию изображений в высоком разрешении: лица, сложные объекты и так далее. Благодаря этому новая модель содержит 3,3 млрд параметров вместо 2 млрд в Kandinsky 2.0.

Кроме того, Kandinsky 2.1 использует не только закодированное текстовое описание, но и специальное представление изображения моделью CLIP. В таком виде нейросеть формирует представление картинки на основе текстовой информации и подаёт его на вход основной генеративной модели.

Модель умеет визуализировать любой контент и может применяться в различных отраслях. К примеру, в банковской сфере её можно использовать для создания персонализированных маркетинговых решений, ярких образов продуктов, привлечения и удержания внимания клиентов.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка:

«Обучая Kandinsky 2.1, мы учли мнения пользователей и реализовали смелую гипотезу, изучив самые передовые концепции. В результате мы разработали мощное универсальное решение для широкого круга задач на уровне лучших мировых аналогов. Оно открывает колоссальные возможности как для бизнеса, так и для населения. По сути, это ещё один важный шаг к AGI — сильному искусственному интеллекту. Думаю, у каждого найдётся задача для Kandinsky 2.1, и поэтому улучшенная модель, как и её предыдущая версия, находится в открытом доступе: протестировать её может любой желающий, причём бесплатно».

Оценить возможности нейросети можно на промо-странице модели, при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют и на платформе ML Spaceв хабе предобученных моделей и датасетов DataHub. Модель также доступна для использования на платформе FusionBrainи в Telegram-боте.

Sber AI — подразделение Сбера, отвечающее за развитие технологий искусственного интеллекта и их внедрение в различные сферы жизни и бизнеса.



04 апреля 2023 в 16:29, просмотров: 3856, комментариев: 0 реклама на siapress.ru


Комментариев пока нет.

Комментарии могут оставлять только зарегистрированные пользователи.

Вы можете войти на сайт

	array(0) {
}
	array(0) {
}
	NULL
	array(0) {
}
	array(0) {
}
	NULL
	array(0) {
}
	array(0) {
}
	NULL

	array(0) {
}
	array(0) {
}
	NULL

Топ 10

  1. ​Трагедия на Оби: первые вопросы 1009
  2. ​Следователи заинтересовались инцидентом с гибелью женщины на протоке Черная в Сургуте 692
  3. ​Максим Слепов заделал дыры в Сургуте // КАРТОЧКИ 658
  4. Мигрантам в России рекомендуют не свистеть и не цокать 531
  5. В Нефтеюганске зарегистрировали два факта мошенничества за выходные 510
  6. ​В Югре готовы поддержать новые идеи в сфере IT-технологий 503
  7. ​Сургутяне удивились борщевику на Барсовой горе 494
  8. ​В Сургуте вынесли приговор убийце тестя 493
  9. ​Сургут попал в тройку аутсайдеров по объему ввода жилья 489
  10. ​Пьяная вартовчанка уронила собаку при выходе из самолета 473
  1. ​Самолет, летящий из Нижневартовска в Минводы, совершил аварийную посадку 2684
  2. ​«Где мужчины?»: в Совете Федерации осудили мужчин, ходящих в спортзалы и следящих за собой 2568
  3. ​Пьяная сургутянка утонула на протоке Черная 2449
  4. ​В Сургуте появились электровелосипеды на прокат 2235
  5. ​Куда сходить в Сургуте на выходных 13-14 июля? // АФИША 1621
  6. ​Дребеденьги 1495
  7. ​В ТЦ Нижневартовска произошло кровавое самоубийство 1483
  8. ​Как развивается бизнес в Сургуте? // ОБЗОР СИА-ПРЕСС 1297
  9. В Сургуте на мосту через Обь введут реверсивное движение 1280
  10. ​Глава Сургута назвал причину провала грунта на центральной площади 1258
  1. ​Лето, солнце, грозы: что приготовила Сургуту небесная канцелярия? 6403
  2. ​На Аэрофлотской в Сургуте одновременно произошло два ДТП с летальным исходом 4560
  3. ​«Головоломка 2» // Впервые вижу 4063
  4. ​В Ханты-Мансийске стартовал очередной IT-форум. Главная тема – доверие в цифровом мире 3900
  5. Гулянье на Черной 3776
  6. Время, вперёд! 3380
  7. Из наследия Ивана Захарова. Такие милые просторы… 3360
  8. ​Семья из Сургута разбилась на трассе в Свердловской области 3336
  9. По улицам Сургута поехали новые автобусы большого класса 3136
  10. Какие имена выбирают для детей родители в ХМАО? 2986