Nvidia усиливает открытый ИИ: покупка SchedMD и запуск семейства моделей Nemotron 3 для суперкомпьютеров

Американский технологический гигант Nvidia на днях сообщил о новом шаге в направлении открытых технологий: компания официально завершила сделку по приобретению SchedMD, создателя популярного планировщика рабочих нагрузок с открытым исходным кодом Slurm. Этот программный продукт широко распространён в среде высокопроизводительных вычислений и становится всё более востребованным для организации крупных кластеров, обслуживающих задачи искусственного интеллекта.

Slurm является ключевым инструментом для распределения вычислительных ресурсов, организации очередей и управления сложными параллельными рабочими процессами во множестве сфер — его внедряют как исследовательские лаборатории, так и облачные компании, стартапы в области автономного транспорта, здравоохранения, финансов, производства, энергетики и даже госсектора. Система задействована в большинстве суперкомпьютеров мирового рейтинга TOP500: по данным Nvidia, ей доверяют владельцы более половины из числа 10 и 100 наиболее мощных вычислительных машин на планете.

Nvidia заверяет, что после слияния Slurm останется самостоятельным программным обеспечением, продолжит поддерживать совместимость с самым разным оборудованием и не ограничится только решениями Nvidia. Всё текущее сообщество и существующие клиенты могут рассчитывать на сохранение и развитие платформы — она и в дальнейшем будет призвана решать задачи широкого спектра вычислений, в том числе построенные на алгоритмах ИИ.

На фоне этой сделки Nvidia представила свежую линейку открытых моделей искусственного интеллекта Nemotron 3, включающую решения Nano, Super и Ultra. Вся серия ориентирована на разные сценарии — от эффективной работы с малыми задачами (Nano), до поддержки взаимодействия сразу нескольких ИИ-агентов (Super), а также управления чрезвычайно сложными многоступенчатыми процессами (Ultra).

Компания не только публикует открытые модели, но и предлагает разработчикам специальные наборы обучающих данных объёмом в три триллиона токенов для этапов предварительного обучения, посттренинга и обучения с подкреплением. В распоряжении пользователей оказываются библиотеки для обучения, среды NeMo Gym, инструментарий оценки моделей и вопросы безопасности с помощью NeMo RL и NeMo Evaluator.

Nemotron 3 оптимизированы для работы на ускоренных вычислительных кластерах и рабочих станциях Nvidia, а также могут быть интегрированы с проприетарными решениями в рамках мультиагентных сценариев с использованием как корпоративных, так и облачных инфраструктур.

Nvidia активно делится своими наработками: полный спектр моделей, библиотек и датасетов с открытым исходным кодом размещён на GitHub и Hugging Face, что делает их доступными для всех заинтересованных разработчиков. Первыми новые инструменты для работы с искусственным интеллектом уже оценили представители индустрии по производству ПО, кибербезопасности, цифровых медиа и облачных сервисов.

Глава компании Дженсен Хуанг особо подчеркнул, что поддержка открытых инноваций лежит в основе развития всей сферы ИИ: «С помощью Nemotron мы превращаем передовой искусственный интеллект в открытую платформу, давая разработчикам инструменты прозрачности и масштабирования, необходимые для построения современных агентных систем».

Напомним, что за новостями и публикациями об искусственном интеллекте, высоких технологиях и свежих релизах от Nvidia можно следить на ряде профильных площадок, включая популярные социальные сети и технические порталы. Евгений Ивченко