Суперкомпьютеры

Облачная платформа AI Cloud, предназначенная для решения задач в области искусственного интеллекта, получила аттестат соответствия требованиям безопасности, предъявляемым к информационным системам персональных данных (ИСПДн) при обеспечении второго уровня защищенности персональных данных. Это дает клиентам платформы возможность использовать суперкомпьютер «Кристофари» для работы с любыми — биометрическими, специальными, общедоступными и иными — категориями персональных данных и создавать новые сервисы на основе ИИ-алгоритмов с применением передовой медицинской диагностики, распознавания лиц, голосовой биометрии и других инновационных технологий.

Таким образом, «Кристофари» стал первым и единственным в мире суперкомпьютером, на котором можно обрабатывать персональные данные в соответствии с требованиями со стороны российских регуляторов.

Как отмечают в SberCloud, до сих пор у российских компаний и госструктур не было возможности использовать суперкомпьютеры при обработке персональных данных. Сервисы AI Cloud позволят не только быстро обучить программные модели искусственного интеллекта, но и использовать для обучения дата-сеты, содержащие персональные данные.

Архитектура и вычислительные мощности суперкомпьютера позволяют в рекордные сроки решать задачи обучения моделей, основанных на глубоких нейронных сетях. Использование ресурсов суперкомпьютера повысит эффективность решения задач в широком спектре областей, например, обработка естественного языка, компьютерное зрение, автоматизированное принятие решений, оценка и управления рисками, выявление мошенничества, предиктивная аналитика, создание голосовых помощников и чат-ботов, а также в других направлениях.

Суперкомпьютер создан на основе высокопроизводительных узлов NVIDIA DGX-2, оснащенных вычислительными ускорителями Tesla V100. Его производительность в проведенных тестах LINPACK достигла 6,7 PFLOPs. Специализированные вычислители для ускорения новых типов нейронных сетей в сочетании с масштабируемой архитектурой позволяют эффективно работать с большими и сложными моделями. Как отмечают создатели, скорость обучения нейросетей возрастает кратно.

Ресурсы Christofari будут доступны пользователям облачного сервиса компании SberCloud с 12 декабря 2019 года. Предоставление ресурсов суперкомпьютера в облаке даст пользователям возможность максимально удобно и быстро разрабатывать и использовать алгоритмы искусственного интеллекта.

«Колмогоров» позволит намного быстрее решать такие связанные с машинным обучением и искусственным интеллектом задачи, как распределенное обучение нейросетевых моделей для распознавания речи, синтеза речи и обработки естественного языка, а также обучение классических моделей machine learning для задач скоринга, привлечения и предиктивной аналитики.

Благодаря построенному кластеру задачи по обучению нейросетей выполняются в сотни раз быстрее: например, для задачи по оптимизации исходящих звонков удалось за сутки переобучить модель, предсказывающую вероятность продажи финансовых продуктов на всем объеме накопленных за 13 лет данных. Переобучение модели традиционными способами заняло бы, по расчетам специалистов, около 6 месяцев. Использование кластера позволяет бизнесу быстрее и эффективнее проверять гипотезы, улучшать сервисы и выводить новые продукты на рынок.

Суперкомпьютер «Колмогоров» имеет пиковую производительность 658,5 терафлопс при вычислениях с плавающей точкой двойной точности. Система состоит из 10 узлов, оснащенных передовыми вычислителями NVIDIA Tesla V100 со специализированными тензорными ядрами для ускорения задач искусственного интеллекта. Вычислительные узлы суперкомпьютера Тинькофф объединены высокоскоростной сетью 100 Гигабит с поддержкой технологии RoCE. Сочетание передовых технологий позволило кластеру достичь производительности 418,9 терафлопс в тесте Linpack, что обеспечило выход системы в лидеры рейтинга самых быстрых суперкомпьютеров страны. «Колмогоров» занял 8 место в рейтинге TOP50 суперкомпьютеров России — самое высокое место среди коммерческих компаний, заявленных в рейтинге.

Кластер «Колмогоров» стал частью платформы «Тинькофф» для машинного обучения и искусственного интеллекта. Платформа включает в себя следующие элементы:

• инфраструктуру для сбора, хранения и обработки данных, их последующей разметки и извлечения признаков;
• инструменты для обучения моделей, перебора параметров и предсказания результатов;
• программные и графические интерфейсы для визуализации результатов и управления артефактами обучения;
• систему для автоматического развёртывания, мониторинга и менеджмента ресурсов.

«Мы не планировали строить систему с приставкой ‘супер’: в целом, это совсем небольшая часть нашей инфраструктуры, но полученные характеристики позволили кластеру войти в топ суперкомпьютеров России», — отметил Вячеслав Цыганов, директор по ИТ «Тинькофф». По его словам, платформа создана в рамках стратегии AI First, при которой все продукты, выпускаемые банком на рынок, содержат встроенный искусственный интеллект. Цель данной платформы – развивать культуру работы с данными, снизить порог входа в эту область для команд и сделать машинное обучение доступным для каждого аналитика и разработчика компании.