Группа Тинькофф создала суперкомпьютер «Колмогоров»
02 апреля 2019, 12:59

Группа Тинькофф построила собственный суперкомпьютер в рамках стратегии AI First и развития платформы для машинного обучения и искусственного интеллекта. Компьютер «Колмогоров» предназначен для быстрого обучения моделей на больших массивах данных, накопленных Тинькофф за все годы существования. Быстрые соединения между вычислительными узлами позволяют эффективнее использовать вычислительные ресурсы для распределенного обучения на огромных массивах данных. Об этом 2 апреля 2019 года, сообщила пресс-служба компании. 

«Колмогоров» позволяет намного быстрее решать такие связанные с машинным обучением и искусственным интеллектом задачи, как: распределенное обучение нейросетевых моделей для распознавания речи, синтеза речи и обработки естественного языка; обучение классических моделей machine learning для задач скоринга, привлечения и предиктивной аналитики.

Благодаря кластеру «Колмогоров» задачи по обучению нейросетей выполняются в сотни раз быстрее: например, для задачи по оптимизации исходящих звонков за сутки была переобучена модель, предсказывающая вероятность продажи финансовых продуктов на всем объеме накопленных за 13 лет данных. Переобучение модели традиционными способами заняло бы около 6 месяцев. Использование кластера позволяет бизнесу быстрее и эффективнее проверять гипотезы, улучшать сервисы и выводить новые продукты на рынок.

Суперкомпьютер «Колмогоров» имеет пиковую производительность 658,5 терафлопс при вычислениях с плавающей точкой двойной точности. Система состоит из 10 узлов, оснащенных передовыми вычислителями NVIDIA Tesla V100 со специализированными тензорными ядрами для ускорения задач искусственного интеллекта. Вычислительные узлы суперкомпьютера объединены современной высокоскоростной сетью 100 Гигабит с поддержкой технологии RoCE.

Сочетание технологий обеспечило выход системы в лидеры рейтинга самых быстрых суперкомпьютеров страны. В «Колмогорове» установлены точно такие же ускорители, как и в самом быстром суперкомпьютере в мире Summit (OLCF-4). Кроме того, он является самым мощным суперкомпьютером в рейтинге по показателю производительности на узел, то есть каждый его сервер отличается высокой эффективностью (41,9 TFlop/s).

Кластер «Колмогоров» стал частью платформы для машинного обучения и искусственного интеллекта. Платформа включает в себя: инфраструктуру для сбора, хранения и обработки данных, их последующей разметки и извлечения признаков; Инструменты для обучения моделей, перебора параметров и предсказания результатов; Программные и графические интерфейсы для визуализации результатов и управления артефактами обучения; Систему для автоматического развёртывания, мониторинга и менеджмента ресурсов.

Суперкомпьютер - это объединение вычислительных серверов, связанных высокоскоростной сетью. Такое устройство может решать конкретную задачу одномоментно. Существующие облачные решения используют распределенную систему серверов, на которых одновременно решается много небольших задач меньшими мощностями. Кроме того, суперкомпьютер способен выполнять симуляцию и моделирование физических и химических процессов.