Плагин inference-host
Inference host bring-up + tuning suite — Linux/GPU bare-metal host work that sits beneath any inference framework (vLLM, sglang, TensorRT-LLM). Two phases. Bring-up (nvidia-datacenter-bringup): Ubuntu 24.04 LTS from clean OS to gpu-operator cuda-validator passing — B300/B200/H100/A100/L40S/L4 driver + fabricmanager + NVLSM + DOCA-OFED install order, NVIDIA CUDA repo + DOCA repo + air-gap mirror, MOK + DKMS sign-on-build under Secure Boot, Dell PowerEdge XE9780/XE9785 baseboard firmware via iDRAC Redfish DellOemChassis.ExtendedReset, gpu-operator pre-installed-driver-mode integration. Tuning (gpu-host-tuning): read-only snapshot of CPU power state, C-states, NUMA topology, PCIe link state, GPU settings, kernel boot params, sysctl, ulimits, IRQ affinity, container runtime; optional pinned-host↔GPU memcpy bench (torch + numactl); per-lever cheat-sheets to flip settings (governor, EPP, cpuidle, persistence, ECC, hugepages, intel_iommu, NCCL env, tuned-adm profiles, BIOS guidance for Dell X
Как установить плагин inference-host
Выполните обе команды в Claude Code. Первая один раз добавляет маркетплейс; вторая устанавливает плагин.
/plugin marketplace add air-gapped/skills
/plugin install inference-host@air-gapped-marketplaceЧто внутри inference-host
2 части прочитано из файлов самого плагина.
Skills 2
Claude загружает это при соответствии задачи- gpu-host-tuning
Audits and tunes Linux host configurations to optimize performance for GPU-based inference frameworks.
- nvidia-datacenter-bringup
Brings up NVIDIA HGX/DGX GPU hosts on Ubuntu 24.04 LTS, including driver, fabricmanager, and DOCA-OFED installation for air-gapped or connected environments.
Использование inference-host в Claude Code
Skills не требуют команд. Claude считывает их, когда ваш запрос соответствует их описанию.
Обновить, выключить или удалить
- Обновить плагин (shell)
- claude plugin update inference-host@air-gapped-marketplace
- Обновить marketplace
- /plugin marketplace update air-gapped-marketplace
- Временно выключить
- /plugin disable inference-host@air-gapped-marketplace
- Удалить
- /plugin uninstall inference-host@air-gapped-marketplace
Навыки в inference-host
- gpu-host-tuningair-gapped/skills
Audits and tunes Linux host configurations to optimize performance for GPU-based inference frameworks.
15 файлов6звёзд - nvidia-datacenter-bringupair-gapped/skills
Brings up NVIDIA HGX/DGX GPU hosts on Ubuntu 24.04 LTS, including driver, fabricmanager, and DOCA-OFED installation for air-gapped or connected environments.
20 файлов6звёзд
Вопросы о плагине inference-host
Как установить плагин inference-host?
В Claude Code выполните /plugin marketplace add air-gapped/skills, затем /plugin install inference-host@air-gapped-marketplace.
Что включает плагин inference-host?
inference-host объединяет 2 навыка.
Как обновить или удалить плагин inference-host?
Обновите его с помощью claude plugin update inference-host@air-gapped-marketplace в вашем shell или на вкладке Installed в /plugin. Удалите его с помощью /plugin uninstall inference-host@air-gapped-marketplace.
Под какой лицензией распространяется плагин inference-host?
MIT, как указано в манифесте плагина.