Microsoft и Nvidia сотрудничают для создания в облаке суперкомпьютера с искусственным интеллектом
Новое соглашение между компаниями делает сервис Azure первым общедоступным облаком, которое включает в себя полный стек решений для искусственного интеллекта (ИИ) от Nvidia — графические процессоры, сетевое ПО и программное обеспечение для ИИ.
Благодаря расширению инфраструктуры Azure с помощью полного пакета решений искусственного интеллекта от Nvidia, все больше предприятий смогут обучать, внедрять и масштабировать искусственный интеллект, включая большие сложные модели ИИ.
«Развитие и внедрение технологий искусственного интеллекта ускоряются», - говорится в заявлении Манувира Даса, вице-президента Nvidia по корпоративным вычислениям. «Прорыв в области фундаментальных моделей вызвал бурную волну исследований, способствовал появлению новых стартапов и позволил создавать новые корпоративные приложения».
«ИИ подпитывает следующую волну автоматизации на предприятиях и в промышленных вычислениях, позволяя организациям делать больше с меньшими затратами, преодолевая экономическую неопределенность», — заявил Скотт Гатри, исполнительный вице-президент группы облачных вычислений и искусственного интеллекта Microsoft. «Наше сотрудничество с Nvidia открывает самую масштабируемую в мире суперкомпьютерную платформу на базе Microsoft Azure, которая предоставляет каждому предприятию самые современные возможности искусственного интеллекта».
Первые образцы компьютеров с искусственным интеллектом в Azure уже оснащены графическими процессорами Nvidia A100 в сочетании с сетью Nvidia Quantum 200 Гбит/с InfiniBand. Будущие экземпляры будут интегрированы с графическими процессорами Nvidia H100 и сетью Nvidia Quantum-2 400 Гбит/с InfiniBand.
Между тем, программный пакет Nvidia AI Enterprise сертифицирован и поддерживается на экземплярах Microsoft Azure с графическими процессорами A100. Поддержка экземпляров Azure с графическими процессорами H100 будет добавлена в следующем релизе программного обеспечения.
Корпоративные клиенты Azure также получат доступ к полному стеку рабочих процессов ИИ и комплектов разработки программного обеспечения от Nvidia, оптимизированных для Azure. Microsoft и Nvidia также будут сотрудничать для оптимизации программного обеспечения Microsoft DeepSpeed.
DeepSpeed — это библиотека оптимизации глубокого обучения с открытым исходным кодом для PyTorch. Библиотека предназначена для снижения вычислительной нагрузки и использования памяти, а также для обучения больших распределенных моделей с лучшим параллелизмом на существующем компьютерном оборудовании.
Также, новая сделка дает Nvidia возможность использовать виртуальные машины Azure для продвижения своих исследований в области генеративного ИИ.
Возросший спрос на мощную инфраструктуру для обучения ИИ привел к своего рода гонке среди поставщиков облачных технологий и оборудования. Буквально на этой неделе Cerabras представила суперкомпьютер с искусственным интеллектом под названием Andromeda на 13,5 миллионов ядер, который, как утверждается, может выполнять более 1 экзафлопса вычислений. Google и Amazon продолжают инвестировать в свои собственные решения, предлагая специализированные чипы для ускорения обучения ИИ в облаке.