Michael JohnsonКоли навчання моделі сповільнюється, причина може бути поза межами GPU: у мережі, накопичувачі, планувальнику завдань або іншому компоненті, від якого залежить обчислювальне завдання. 22 жовтня 2026 року NVIDIA представила Minerva — платформу AIOps, яка пов’язує телеметрію інфраструктури з даними про виконувані навантаження ШІ. Компанія позиціонує її як інструмент для підвищення доступності та продуктивності своїх фабрик ШІ.
Minerva збирає сигнали з GPU, мережевого обладнання, сховищ, планувальників і робочих навантажень. Потім платформа будує динамічний граф зв’язків між компонентами та завданнями. За описом NVIDIA, такий контекст допомагає простежити, як апаратна аномалія впливає на конкретне завдання навчання, і об’єднувати пов’язані події в один інцидент із імовірною першопричиною. Платформа аналізує мільярди точок телеметрії за годину — це характеристика системи, заявлена NVIDIA.
Що змінюється в розслідуванні інцидентів
Типова проблема моніторингу великих кластерів — окремі представлення обчислень, мережі та експлуатації. Minerva намагається пов’язати ці рівні: відхилення мережевого інтерфейсу можна розглядати поруч зі станом GPU та продуктивністю завдання, яке використовує цей маршрут. Практична мета — скоротити шлях від набору сигналів до локалізації вузького місця.
Платформа має вбудованого ШІ-помічника для запитань природною мовою та підключення до зовнішніх агентних інструментів. Оператор може досліджувати стан кластера за актуальною телеметрією й отримувати рекомендації щодо усунення проблем. NVIDIA описує варіант, за якого працівник застосовує виправлення вручну, а також можливість підключити автоматизацію через API інфраструктури та зовнішні системи.
Для експлуатації це розділяє діагностику та дію. Зіставлення сигналів може допомогти швидше визначити, де шукати причину, тоді як автоматична зміна інфраструктури залишається окремим рішенням команди. Під час впровадження корисно заздалегідь визначити, які рекомендації можна виконувати автоматично, для яких потрібне підтвердження та де фіксуються результати. Це практичний висновок з описаного NVIDIA розмежування між рекомендаціями, ручним виправленням і підключеною автоматизацією.
Кому доступна платформа
NVIDIA повідомила, що IREN уже використовує Minerva; ще вісім організацій, зокрема IBM, Lambda і Tesla, планують розгортання. Dell Technologies, Lenovo та Supermicro, за даними компанії, пропонуватимуть Minerva у складі своїх портфелів рішень для фабрик ШІ. В анонсі перелічено поточні та заплановані впровадження, але немає незалежних порівняльних вимірювань ефекту для операторів.
На сторінці продукту NVIDIA наведено варіанти розгортання — від збирання телеметрії з передаванням даних до зовнішніх інструментів, наприклад Grafana, до повноцінної платформи AIOps. Документація також описує збирання сигналів із різних компонентів та інтеграції з інструментами експлуатації. Перш ніж оцінювати продукт, команді варто зіставити перелік підтримуваних джерел із власною інфраструктурою, перевірити охоплення телеметрії та зафіксувати вихідні показники: доступність кластера, втрачені години роботи GPU, час діагностики та відновлення.
Minerva призначена для організацій, яким доводиться розслідувати інциденти на перетині обчислень, мережі та завдань ШІ. Її практичний сенс — зібрати ці сигнали в спільний контекст; цінність для конкретного кластера можна оцінити за тим, наскільки добре система знаходить причини реальних збоїв і скорочує час відновлення.