NVIDIA Megatron Core

Библиотека от NVIDIA для эффективного обучения больших языковых моделей.

Обновление добавляет поддержку оптимизаторов высшего порядка: Muon, MOP и REKLS. Это позволяет ускорить сходимость и повысить эффективность тренинга. Инструмент ориентирован на разработчиков, работающих с масштабными нейросетями.

Источник: @NVIDIAAI, 05-05-2026