utkuozdemir/nvidia_gpu_exporter

Nvidia GPU exporter for prometheus using nvidia-smi binary OR using NVML

Обучение⭐ 1 581Goпоследний релиз: v1.17.0

Что это за инструмент

nvidia_gpu_exporter — это Prometheus-экспортер для сбора метрик видеокарт NVIDIA, работающий через утилиту nvidia-smi или напрямую через библиотеку NVML.

Зачем нужен

Инструмент решает задачу мониторинга состояния GPU (загрузка, память, температура, энергопотребление) в средах, где установка тяжеловесных стеков вроде NVIDIA GPU Operator нецелесообразна. Он полезен для обеспечения видимости работы видеокарт в Kubernetes, на edge-устройствах и в домашних лабораториях.

Что можно реализовать

Мониторинг потребительских и профессиональных GPU (GeForce/RTX) в небольших кластерах или homelabs
Сбор метрик в виртуализированных средах или ограниченных контейнерах, где доступны только базовые данные через nvidia-smi
Наблюдение за состоянием GPU на игровых станциях во время работы
Унифицированный мониторинг смешанных парков старых и новых видеокарт без установки сложного ПО

Ключевые возможности

Работает на Windows, Linux и MacOS, не требуя сборки C-биндингов, так как использует бинарный файл nvidia-smi
Поддержка нативного бэкенда NVML для получения расширенных метрик: XID-ошибки, энергия, PCIe-трафик и метрики MIG-инстансов
Возможность удаленного выполнения команд nvidia-smi и фоновый сбор данных по таймеру
Наличие официальных Grafana-дашбордов для детального просмотра каждой GPU и общего обзора кластера
Демо-режим для тестирования без наличия физического GPU или драйверов

👤 Кому подойдёт: DevOps-инженеры, SRE и энтузиасты, управляющие небольшими Kubernetes-кластерами, edge-устройствами, homelabs или смешанными парками GPU, которым нужен легкий мониторинг без избыточных зависимостей.

Релизы

v1.17.0minor

🕐 4 дн назад · релиз на GitHub ↗

Релиз v1.17.0: добавлена поддержка видеокодировщиков, метрик процессов, FIPS 140-3 и нативного NVML на Windows, а также исправлена работа с драйверами старше 550.

Added: Добавлены панели мониторинга видеокодировщика/декодировщика, метрики графических процессов (--collect.graphics-apps) и утилизации на уровне процессов.
Added: Включена поддержка нативного бэкенда nvml.dll для Windows, сбор метрик GPM, NVLink, PCIe replay и построение бинарников в режиме FIPS 140-3.
Fixed: Исправлена работа с драйверами версии ниже 550 для запросов версий, PCI, памяти и часов в бэкендах nvidiasmi и nvml.
Added: Контейнеры теперь содержат OCI-метаданные, а systemd-юнит работает в песочнице; добавлены лейблы рабочей идентичности для метрик процессов.
Added: Обновлены зависимости, включая Go-модули prometheus/common и образы Docker, а также добавлены тестовые снимки для GPU NVIDIA GB10.

v1.16.0minor

🕐 11 дн назад · релиз на GitHub ↗

Бэкенд NVML стал стабильным, добавлена поддержка DRA и новых событий reliability, обновлены зависимости.

Added: Бэкенд NVML официально выведен из экспериментального статуса.
Added: В Helm-чарте добавлена поддержка pod resourceClaims для DRA.
Added: Добавлена поддержка событий board_limit и reliability clock в NVML.
Fixed: Исправлены тесты GPU parity для корректной обработки pstates и deferred families.
Fixed: Устранены уязвимости в процессах выпуска и улучшена воспроизводимость сборок.

v1.15.1patch

🕐 2 мес назад · релиз на GitHub ↗

Исправлена сборка архивов релиза для обеспечения воспроизводимости результатов на разных сборочных стендах.

Fixed: Исправлена проблема с воспроизводимостью архивов релиза при сборке на разных машинах.

v1.14.0minor

🕐 2 мес назад · релиз на GitHub ↗

Релиз v1.14.0: контейнеры на базе distroless, улучшены дашборды и метрики, обновлены зависимости.

Added: Образы контейнеров переписаны на минималистичную базу distroless без оболочки.
Fixed: Исправлены визуальные артефакты в дашбордах: устранено смешение цветов и обрезка панелей.
Fixed: Улучшена логика отображения отсутствующих данных: теперь корректно различаются отсутствие датчиков и пропуски в данных.
Added: Добавлена генерация изображений дашбордов непосредственно в README.
Fixed: Исправлено формирование чистых имён метрик для полей с неизвестными единицами измерения.