Суперкомпьютеры «Кристофари»
Christofari ( до 2021 г. — «Кристофари») — суперкомпьютеры Christofari (2019), Christofari Neo (2021) от Сбербанка на основе оборудования корпорации Nvidia. Основное предназначение — обучение нейросетей, также применяется для научно-исследовательских и коммерческих расчётов[1]. Названы в честь Николая Кристофари — первого клиента Сбербанка, открывшего в нём сберегательную книжку[2]. Входят в рейтинг Топ-500.
Разработка
[править | править код]Сбербанк представлял суперкомпьютеры совместно с дочерней компанией SberCloud[3][4]. В декабре 2019 года Сбербанк и SberCloud запустили в коммерческую эксплуатацию суперкомпьютер Christofari[5]. Через год мощности Christofari легли в основу облачной платформы ML Space, заточенной под работу с моделями машинного обучения, которую Сбербанк и SberCloud анонсировали в декабре 2020[6].
Более мощный суперкомпьютер Christofari Neo был представлен на международной конференции AI Journey в ноябре 2021 года CTO Сбербанка и исполнительным вице-президентом Давидом Рафаловским [4]. В 2022 году инициатор создания суперкомпьютеров покинул группу компаний Сбер[7].
Применение
[править | править код]Суперкомпьютеры предназначены для научно-исследовательских, коммерческих и государственных организаций, работающих в различных отраслях экономики. Основное их предназначение — работа с ИИ-алгоритмами, обучение нейросетей и инференс различных моделей[8].
Сбер использует Christofari для внутренних задач (распознаёт речь и генерирует голос автоответчика в колл-центре[9]) и сервиса по распознаванию снимков компьютерной томографии лёгких[10]. А команды SberDevices и Sber AI первыми получили доступ к Christofari Neo и разработали первый сервис на основе нейросети DALL-E, который создаёт изображения по запросу на русском языке[11].
Мощности суперкомпьютеров также предоставляются другим организациям при подключении услуг облачной платформы SberCloud ML Space[12].
Christofari
[править | править код]В основе — узлы Nvidia DGX-2[англ.]*, оснащённые графическими ускорителями Tesla V100[13][14], для межсоединения используется сеть Infiniband на базе оборудования Mellanox. Эффективная производительность — порядка 6,7 петафлопса, что сделало систему (на момент пуска в эксплуатацию 8 ноября 2019 года) 40-й в мире, седьмой в Европе и первой в России по мощности[15] (показатели предыдущего российского лидера — системы «Ломоносов-2» — превзойдены более, чем вдвое). Отмечается как первый в мире суперкомпьютер финансовой организации, доступный для использования сторонними пользователями. Также является первым суперкомпьютером, аттестованным в России для работы с персональными данными[16].
Характеристики отдельного узла DGX-2
[править | править код]- энергопотребление пиковое — 10 кВт;
- ЦПУ — 2× Intel Xeon Platinum 8168, 2,7 ГГц, 24 ядра;
- графические ускорители — 16× Nvidia Tesla v100 32 Гбайт;
- память графических ускорителей — 512 Гбайт
- ядра CUDA — 81920
- тензорные ядра — 10240
- ОЗУ — 1,5 Тбайт[17]
Для межсоединения использованы 36-портовые коммутаторы Mellanox, поддерживающие до четырёх соединений InfiniBand EDR со скоростью 100 Гбит/с[18].
Почти весь используемый стек машинного обучения ориентируется на операционную систему Ubuntu как на базовую платформу, в связи с чем применена специализированная серверная версия Ubuntu 18.04 LTS, поддерживаемая Nvidia, включая драйверы для графических ускорителей, стек сетевого программного обеспечения, необходимые инструменты для обслуживания и диагностики машины. Также в комплекте идёт проприетарное программное обеспечение от Nvidia CUDA Toolkit, cuDNN, NCCL, а также Docker Engine Utility для GPU Nvidia (весь основной стек для машинного обучения запускается в контейнерах).
Расположен в центре обработки данных Сбербанка в инновационном центре «Сколково». Занимает один машинный зал[19], был построен менее чем за год[20].
Позиции в рейтингах
[править | править код]- март 2022 — 5 место среди 50 самых мощных суперкомпьютеров СНГ[21];
- июнь 2022 — 80 место среди 500 самых мощных суперкомпьютеров мира[22].
- июнь 2023 — 96 место среди 500 самых мощных суперкомпьютеров мира[23].
Christofari Neo
[править | править код]Суперкомпьютер также создан на базе технологий Nvidia и оснащен графическими процессорами Nvidia A100 с 80 Гб памяти[24]. Для межсоединения используется высокоскоростная коммутирующая сеть Infiniband, обеспечивающая скорость обмена данными до 1600 Гбит/с на каждый вычислительный узел и минимальные задержки. Эффективная производительность составляет 11,95 петафлопс[25][26] .
Характеристики отдельного процессора DGX A100
[править | править код]- энергопотребление пиковое — 6, 5 кВт;
- ЦПУ — 2× AMD Rome 7742, 128 ядер, 2.25 ГГц (база), 3.4 ГГц (максимум);
- графические ускорители — 8× Nvidia A100, 80 Гбайт;
- память графических ускорителей — 640 Гбайт;
- ОЗУ — 2 Тбайт[27].
Позиции в рейтингах
[править | править код]- март 2022 — 4 место среди 50 самых мощных суперкомпьютеров СНГ[21];
- июнь 2022 — 46 место среди 500 самых мощных суперкомпьютеров мира[22].
- июнь 2023 — 55 место среди 500 самых мощных суперкомпьютеров мира[23].
Примечания
[править | править код]- ↑ Несколько десятков компаний начали работу на запущенном Сбербанком суперкомпьютере . ТАСС (16 декабря 2019). Дата обращения: 16 декабря 2019. Архивировано 19 декабря 2019 года.
- ↑ Сбербанк представил самый мощный в России суперкомпьютер «Кристофари» . Дата обращения: 8 ноября 2019. Архивировано 8 ноября 2019 года.
- ↑ Сбербанк объявил о создании самого мощного в России суперкомпьютера . РБК. Дата обращения: 8 февраля 2022. Архивировано 8 февраля 2022 года.
- ↑ 1 2 «Сбер» представил второй суперкомпьютер . Ведомости. Дата обращения: 8 февраля 2022. Архивировано 8 февраля 2022 года.
- ↑ В России запустили самый мощный суперкомпьютер «Кристофари» . Известия (17 декабря 2019). Дата обращения: 8 февраля 2022. Архивировано 8 февраля 2022 года.
- ↑ Сбербанк и SberCloud открыли свое суперкомпьютерное облако для всех разработчиков . CNews.ru. Дата обращения: 8 февраля 2022. Архивировано 28 октября 2021 года.
- ↑ Из «Сбера» ушел отвечавший за высокие технологии вице-президент Рафаловский . www.kommersant.ru (26 февраля 2022). Дата обращения: 29 марта 2022. Архивировано 29 марта 2022 года.
- ↑ Несколько десятков компаний начали работу на запущенном Сбербанком суперкомпьютере . ТАСС. Дата обращения: 8 февраля 2022. Архивировано 17 июня 2022 года.
- ↑ Давид Рафаловский: «Весь мир уже в облаке, и Россия там будет» : РБК Тренды. Дата обращения: 8 апреля 2020. Архивировано 7 апреля 2020 года.
- ↑ СберЗдоровье и SberCloud запускают бесплатный сервис искусственного интеллекта по распознаванию снимков КТ (рус.) (14 июля 2020). Дата обращения: 15 июля 2020. Архивировано 15 июля 2020 года.
- ↑ Нейросеть Сбера создаст картинки на заданную тему - Газета.Ru | Новости . Газета.Ru. Дата обращения: 8 февраля 2022. Архивировано 11 января 2022 года.
- ↑ Тарифы и услуги . SberCloud (2021). Дата обращения: 8 февраля 2022. Архивировано 8 февраля 2022 года.
- ↑ Сбербанк создал самый мощный в России суперкомпьютер . Дата обращения: 8 ноября 2019. Архивировано 8 ноября 2019 года.
- ↑ SberCloud | TOP500 Supercomputer Sites . www.top500.org. Дата обращения: 18 марта 2020. Архивировано 3 января 2020 года.
- ↑ TOP500 List - November 2019 | TOP500 Supercomputer Sites . www.top500.org. Дата обращения: 18 марта 2020. Архивировано из оригинала 27 мая 2020 года.
- ↑ Суперкомпьютер «Кристофари» первым в РФ аттестовали для работы с персональными данными . ТАСС. Дата обращения: 8 апреля 2020. Архивировано 23 апреля 2020 года.
- ↑ Nvidia. Nvidia DGX-2 . Nvidia.com. Дата обращения: 8 апреля 2020. Архивировано 25 декабря 2021 года.
- ↑ NVIDIA. THE WORLD’S MOST POWERFUL DEEP LEARNING SYSTEM FOR THE MOST COMPLEX AI CHALLENGES (англ.). NVIDIA (2018). Дата обращения: 8 апреля 2020. Архивировано 25 декабря 2021 года.
- ↑ 808. Это самый мощный компьютер в России .
- ↑ Forbes. Давид Рафаловский: мощности суперкомпьютера Cristofari доступны всем . Forbes.ru (15 ноября 2019). Дата обращения: 19 марта 2020. Архивировано 19 марта 2020 года.
- ↑ 1 2 Top50 | Суперкомпьютеры . top50.supercomputers.ru. Дата обращения: 8 февраля 2022. Архивировано 31 октября 2020 года.
- ↑ 1 2 June 2022 | TOP500 . www.top500.org. Дата обращения: 6 июня 2022. Архивировано 29 мая 2022 года.
- ↑ 1 2 June 2023 | TOP500 . Дата обращения: 3 июня 2023. Архивировано 24 июля 2023 года.
- ↑ Сбербанк запустил самый мощный в России суперкомпьютер . CNews.ru. Дата обращения: 7 февраля 2022. Архивировано 7 февраля 2022 года.
- ↑ Christofari Neo - NVIDIA DGX A100, AMD EPYC 7742 64C 2.25GHz, NVIDIA A100 80GB, Infiniband | TOP500 . www.top500.org. Дата обращения: 7 февраля 2022. Архивировано 24 января 2022 года.
- ↑ «Сбер» представил свой новый суперкомпьютер . secretmag.ru. Дата обращения: 7 февраля 2022. Архивировано 11 января 2022 года.
- ↑ NVIDIA DGX A100 | The Universal System for AI Infrastructure (англ.). NVidia (2020). Дата обращения: 7 февраля 2022. Архивировано 7 февраля 2022 года.