inference-cache 플러그인
Inference KV-cache and transport suite — LMCache multiprocess (MP) standalone-server mode (DaemonSet + Deployment K8s pattern, ZMQ connector, L1 + L2 NIXL/POSIX/GDS/HF3FS/fs/s3/mooncake adapters) and NVIDIA NIXL transfer library (UCX/GDS/Mooncake/libfabric/HF3FS/S3 plugins, agent API, telemetry) used by Dynamo/vLLM/SGLang. Pairs with the vllm-caching skill in the `vllm` suite and sglang-hicache in the `sglang` suite.
inference-cache 플러그인 설치 방법
두 명령을 모두 Claude Code 안에서 실행하십시오. 첫 번째는 마켓플레이스를 한 번 추가하고, 두 번째는 플러그인을 설치합니다.
/plugin marketplace add air-gapped/skills
/plugin install inference-cache@air-gapped-marketplaceinference-cache 구성 요소
플러그인 파일에서 읽어온 2개의 항목입니다.
Skills 2
작업이 일치하면 Claude가 로드합니다- lmcache-mp
Enables a standalone LMCache server in a separate process or pod that vLLM connects to via ZMQ for shared KV-cache and process isolation.
- nvidia-nixl
Provides a transport abstraction for point-to-point KV-cache and tensor transfers in distributed inference environments.
Claude Code에서 inference-cache 사용하기
Skills는 명령어가 필요하지 않습니다. 요청이 설명과 일치하면 Claude가 이를 읽습니다.
업데이트, 비활성화 또는 삭제
- 플러그인 업데이트 (shell)
- claude plugin update inference-cache@air-gapped-marketplace
- marketplace 새로고침
- /plugin marketplace update air-gapped-marketplace
- 일시적으로 비활성화
- /plugin disable inference-cache@air-gapped-marketplace
- 삭제
- /plugin uninstall inference-cache@air-gapped-marketplace
inference-cache의 스킬
- lmcache-mpair-gapped/skills
Enables a standalone LMCache server in a separate process or pod that vLLM connects to via ZMQ for shared KV-cache and process isolation.
8개 파일6스타 - nvidia-nixlair-gapped/skills
Provides a transport abstraction for point-to-point KV-cache and tensor transfers in distributed inference environments.
12개 파일6스타
inference-cache 플러그인 질문
inference-cache 플러그인은 어떻게 설치하나요?
Claude Code에서 /plugin marketplace add air-gapped/skills를 실행한 다음 /plugin install inference-cache@air-gapped-marketplace을 실행하십시오.
inference-cache 플러그인에는 무엇이 포함되나요?
inference-cache은(는) 2개 스킬을(를) 묶습니다.
inference-cache 플러그인을 어떻게 업데이트하거나 삭제하나요?
shell에서 claude plugin update inference-cache@air-gapped-marketplace를 사용하여 업데이트하거나 /plugin의 Installed 탭에서 수행하세요. 삭제하려면 /plugin uninstall inference-cache@air-gapped-marketplace을 사용하세요.
inference-cache 플러그인의 라이선스는 무엇인가요?
플러그인 manifest에 명시된 대로 MIT입니다.