Nerf Watch MCP server
2026년 10월 21일 커밋코드 기반의 프라이빗 평가 스위트에서 제공하는 일일 모델 성능 점수 및 히스토리 트렌드에 대한 읽기 전용 액세스를 제공합니다.
다른 이름 stdcmms-lang/tokenusage-codex-mcp, nerfwatch
- 스타
- 0
- Tools
- 2
- 다운로드, 30일
- —
- 최신 버전
- 1.0.0
- 마지막 커밋
- 2026년 10월 21일
- 라이선스
- MIT
Nerf Watch MCP란?
코드 기반의 프라이빗 평가 스위트에서 제공하는 일일 모델 성능 점수 및 히스토리 트렌드에 대한 읽기 전용 액세스를 제공합니다. 2개 도구를 제공합니다. 예: get_nerfwatch_scores, get_nerfwatch_history.
프로젝트 README에서 생성된 요약
Nerf Watch MCP server 정보
Nerf Watch는 코드 기반의 프라이빗 평가 스위트에서 추출한 공개 성능 점수와 히스토리 트렌드에 대한 읽기 전용 액세스를 제공합니다. 개발자는 이 Hosted MCP server를 사용하여 API 키, 계정 또는 로그인 과정 없이 모델 성능 데이터를 모니터링할 수 있습니다. streamable HTTP 엔드포인트를 통해 연결되므로 Claude Code, Codex 및 mcpServers HTTP format을 지원하는 다른 클라이언트와 호환됩니다.
이 서버는 데이터 조회를 위해 두 가지 특정 도구를 제공합니다. get_nerfwatch_scores 도구는 모델 ID를 포함하여 최신 공개 점수, 이전 실행 기록, 변경 사항, 베이스라인 및 트렌드를 제공합니다. get_nerfwatch_history 도구는 사용자가 특정 모델 ID에 대해 보관된 히스토리를 오래된 순서부터 최신 순서로 가져올 수 있게 합니다. 두 도구 모두 데이터 액세스를 효율적으로 관리하기 위해 서버 인스턴스당 하나의 300초 읽기 캐시를 공유합니다.
활용 사례
- 1최신 모델 성능 모니터링AI에게 다양한 모델에 대한 가장 최근의 공개 점수와 베이스라인 트렌드를 조회하도록 요청합니다.
- 2모델 히스토리 트렌드 분석특정 모델의 전체 히스토리 데이터를 요청하여 시간에 따라 성능이 어떻게 변화했는지 확인합니다.
- 3모델 성능 변화 식별서버를 사용하여 특정 스위트 버전 내의 모델 점수에서 최근 발생한 변경 사항을 찾습니다.
프로젝트의 README를 바탕으로 작성되었습니다. 모든 활용 사례는 해당 내용의 인용문과 대조하여 확인합니다.
Nerf Watch MCP 설치 방법
형식 확인: 2026년 11월 10일Cursor에 추가Goose에 추가Claude Code에 Nerf Watch MCP 설치
$ claude mcp add --transport http nerfwatch https://tokenusage.dev/mcp/nerfwatchCursor에 Nerf Watch MCP 설치
~/.cursor/mcp.json
{
"mcpServers": {
"nerfwatch": {
"url": "https://tokenusage.dev/mcp/nerfwatch"
}
}
}VS Code에 Nerf Watch MCP 설치
.vscode/mcp.json
{
"servers": {
"nerfwatch": {
"type": "http",
"url": "https://tokenusage.dev/mcp/nerfwatch"
}
}
}VS Code CLI에 Nerf Watch MCP 설치
$ code --add-mcp '{"name":"nerfwatch","type":"http","url":"https://tokenusage.dev/mcp/nerfwatch"}'Codex에 Nerf Watch MCP 설치
$ codex mcp add nerfwatch --url https://tokenusage.dev/mcp/nerfwatchCodex config.toml에 Nerf Watch MCP 설치
~/.codex/config.toml
[mcp_servers.nerfwatch] url = "https://tokenusage.dev/mcp/nerfwatch"
Gemini CLI에 Nerf Watch MCP 설치
$ gemini mcp add -s user --transport http nerfwatch https://tokenusage.dev/mcp/nerfwatchGemini settings.json에 Nerf Watch MCP 설치
~/.gemini/settings.json
{
"mcpServers": {
"nerfwatch": {
"url": "https://tokenusage.dev/mcp/nerfwatch",
"type": "http"
}
}
}Nerf Watch MCP 도구 2
README에서 감지됨get_nerfwatch_scoresget_nerfwatch_history
| get_nerfwatch_scores | — | |
| get_nerfwatch_history | — |
자동 검사
2026년 11월 14일에 실행됨전체 보고서 →아직 인증되지 않았습니다. 서버는 80점 이상의 점수, 심각한 결함 없음, 그리고 검사에 충분한 데이터를 갖추어야 합니다. 검사 방식 · 점수를 높이기 위해 수정할 항목
- 소스 저장소 연결 및 접근 가능stdcmms-lang/tokenusage-codex-mcp is public and reachablegithub.com/stdcmms-lang/tokenusage-codex-mcp ↗통과
- 패키지가 이 저장소를 소스로 명시검사되지 않음
- 빌드 출처(Sigstore 증명)검사되지 않음
- 오픈 소스 라이선스 (OSI)MITspdx.org/licenses/MIT.html ↗통과
- 최근 1년 내 커밋 또는 릴리스Last commit or release 2026-10-21github.com/stdcmms-lang/tokenusage-codex-mcp ↗통과
- OpenSSF Scorecard검사되지 않음
- 패키지 이름이 인기 패키지와 유사하지 않음검사되지 않음
- 패키지 및 해당 종속성에 중요한 보안 권고 없음검사되지 않음
- 모델에 대한 숨겨진 지침 없음2 tool descriptions and the README read; no override phrases, credential paths or hidden characters통과
- 파괴적인 도구에 라벨 표시됨No tool named like delete, drop or exec통과
- 원격 엔드포인트가 MCP 핸드셰이크에 응답initialize answered with protocol 2025-06-18 in 230 ms통과
README
GitHub에서 보기Nerf Watch MCP server
A hosted, read-only MCP server for the public scores and history behind Nerf Watch.
A lower score is a lower score on this suite, not proof that a provider changed a model.
Runs are noisy, and a provider's defaults, the endpoint or the runner itself can change.
Data: tokenusage.dev linked to https://tokenusage.dev/nerfwatch.
- Endpoint:
https://tokenusage.dev/mcp/nerfwatch(Streamable HTTP) - No API key, account or sign-in
- Read-only public score data
- Both tools share one 300-second read cache per server instance
This directory contains client documentation and Registry metadata. The hosted implementation source is not in this repository.
Tools
| Tool | Arguments | Result |
|---|---|---|
get_nerfwatch_scores |
none | Latest public scores, previous runs, changes, baselines and trends; model ids are included. |
get_nerfwatch_history |
required model id from get_nerfwatch_scores |
That model's retained history, oldest first, with each point's suite version. |
Missing days are missing, not zero. Scores and changes are rounded to two decimals. Comparisons are within one suite version. Retention and baseline settings come from the responses. Evidence answers, grader check lines and test questions are not returned.
Install
Claude Code:
claude mcp add --transport http nerfwatch https://tokenusage.dev/mcp/nerfwatch
Codex:
codex mcp add nerfwatch --url https://tokenusage.dev/mcp/nerfwatch
For Claude Code project scope, add this to .mcp.json. Other clients that accept
this HTTP mcpServers format can use the same entry:
{
"mcpServers": {
"nerfwatch": {
"type": "http",
"url": "https://tokenusage.dev/mcp/nerfwatch"
}
}
}
Discovery
- Registry name:
dev.tokenusage/nerfwatch - Manifest: server.json
- Server card: https://tokenusage.dev/mcp/nerfwatch/server-card
- AI catalog: https://tokenusage.dev/.well-known/ai-catalog.json
- Fields, caching and access: https://tokenusage.dev/developers
The separate Codex reset server remains at https://tokenusage.dev/mcp.
Credit and terms
When showing this data to other people, show Data: tokenusage.dev linked to
https://tokenusage.dev/nerfwatch on the same screen or in the same message.
Personal use needs no visible credit. Relays retain the source URL and pass
on this credit condition.
Please poll no faster than every five minutes and retain the score qualification above.
Terms: https://tokenusage.dev/terms
Privacy: https://tokenusage.dev/privacy
Questions and corrections: https://tokenusage.dev/contact
Unofficial; not affiliated with OpenAI or Anthropic.
Nerf Watch MCP 질문
Nerf Watch MCP를 Claude Code에 추가하려면 어떻게 하나요?
터미널에서 claude mcp add --transport http nerfwatch https://tokenusage.dev/mcp/nerfwatch를 실행합니다. 모든 프로젝트에서 사용할 수 있게 하려면 --scope user를 추가합니다.
Nerf Watch MCP를 Cursor에 추가하려면 어떻게 하나요?
~/.cursor/mcp.json를 열고 mcpServers 아래에 서버를 추가합니다. 위 설치 섹션에 표시된 Cursor 구성을 사용합니다.
Nerf Watch MCP는 어떤 도구를 제공하나요?
2개 도구를 제공합니다. 예: get_nerfwatch_scores, get_nerfwatch_history.
서버에서 어떤 데이터를 제공하나요?
최신 공개 점수, 이전 실행 기록, 변경 사항, 베이스라인, 트렌드 및 모델 히스토리를 제공합니다.
이 서버를 사용하려면 API 키가 필요한가요?
아니요, 이 서버는 API 키, 계정 또는 로그인 절차를 요구하지 않습니다.
서버를 얼마나 자주 호출해야 하나요?
5분보다 더 자주 호출하지 않는 것이 좋습니다.
점수가 낮아지면 모델이 변경되었다는 뜻인가요?
아니요, 점수가 낮아진 것은 해당 평가 스위트에서의 점수가 낮아진 것일 뿐이며, 모델 변경을 확정하는 증거는 아닙니다.