PinchBench, Mac Studio M3 Ultra에서 Qwen과 Nemotron 순위 발표: Nemotron Super, 코딩 99.2% 달성

✍️ OpenClawRadar📅 게시일: September 24, 2026🔗 Source
Ad

PinchBench는 OpenClaw 로컬 모델 벤치마킹 도구입니다. 한 개발자가 Mac Studio M3 Ultra(256GB RAM, 60코어 GPU)에서 온도 0.8, 지원되는 경우 컨텍스트 창을 200,000 토큰으로 설정하고 6개 모델을 실행한 결과를 게시했습니다. 아래 순위는 해당 게시물에서 그대로 가져온 것으로, 일상적으로 사용할 모델을 고르기 전에 고려해야 할 격차도 포함되어 있습니다.

전체 결과

#모델디스크 크기최대 토큰 창전체 / 코딩
1Qwen3.6 35B A3B20.4 GB262k87.9% / 92.6%
2QWEN3-Coder-next-Q884.8 GB262k85.5% / 97.9%
3Qwen3.5-122B-a10b-uncensored-hauhaucs-aggressive78.7 GB262k83.5% / 91.7%
4Nemotron-3-super86.1 GB1.05M78.2% / 99.2%
5QWEN3.8-flash-next95.43 GB262k71.2% / 79.2%
6Nemotron-3-nano-30b-a3b-mlx33.6 GB262k65.8% / 65.1%

게시물에는 또한 Dolphin-Mistral-24b-venice-edition-mlx-8b가 25.1 GB, 131k 토큰 창으로 나열되어 있지만, 원문에서 벤치마크 총점이 잘려 있습니다. 기록된 대로는 결과를 사용할 수 없습니다.

Ad

주목할 점

  • Qwen3.6 35B A3B가 균형에서 승리합니다. 최고 총점(87.9%)과 강력한 코딩 점수 92.6%를 기록했으며 디스크 용량은 20.4 GB에 불과합니다. 작성자의 일상용 모델이기도 합니다.
  • QWEN3-Coder-next-Q8은 코딩 전문가입니다. 코딩 97.9%지만 전체 점수는 85.5%로 더 낮고, 디스크 용량은 84.8 GB로 35B A3B의 네 배가 넘습니다. 작성자는 이번 테스트 전까지 사용해 본 적이 없으며 앞으로 사용해 볼 것이라고 합니다.
  • Nemotron-3-super는 코딩 점수가 99.2%로 가장 높습니다, 하지만 전체 점수 78.2%는 상위 4개 중 가장 낮습니다. 또한 이 분야에서 가장 큰 컨텍스트 창(1.05M 토큰)을 가지고 있으며, 이는 Qwen 모델들의 4배입니다.
  • Nemotron Super와 Nano의 격차가 큽니다. 코딩 99.2% 대 65.1%, 전체 78.2% 대 65.8%입니다. Nano는 크기가 절반 이하(33.6 GB 대 86.1 GB)로, 이는 격차의 일부를 설명합니다.
  • QWEN3.8-flash-next는 크기에 비해 저조한 성능을 보였습니다. 테스트된 모델 중 가장 큰 95.43 GB임에도 불구하고 71.2% / 79.2%를 기록해 Qwen3.5-122B(78.7 GB)보다 낮았습니다.

작성자가 언급한 두 가지 주의사항

첫째, Mac에서 QWEN3.8에 대한 효과적인 설정을 찾지 못했으며 작동하는 설정을 묻고 있다고 합니다. QWEN3.8-flash-next의 낮은 점수는 이 문제가 해결되기 전까지 모델의 한계로 해석해서는 안 됩니다.

둘째, 모든 수치는 M3 Ultra 하드웨어에서 온도 0.8로 단일 머신, 단일 실행한 결과입니다. 순위는 자체 PinchBench 실행을 위한 출발점으로 삼아야 하며, 특히 85-95 GB의 디스크를 다운로드에 투자하기 전에는 최종 판단으로 받아들이지 마세요.

이 정보가 유용한 대상

Apple Silicon에서 30-120B 모델을 로드할 수 있는 충분한 통합 메모리(64GB 이상)를 갖추고 OpenClaw나 유사한 에이전트에서 로컬 모델을 실행하는 모든 분에게 유용합니다. 32GB 이하라면 이 목록에서 현실적으로 선택할 수 있는 모델은 20.4 GB Qwen3.6 35B A3B뿐인데, 이 모델이 어쨌든 최고 점수를 기록했습니다.

📖 전체 원문 읽기: r/openclaw

Ad

👀 See Also

하마 v0.21.0: 다중 도구 지원 AI 에이전트를 위한 생물학적 영감 메모리
Tools

하마 v0.21.0: 다중 도구 지원 AI 에이전트를 위한 생물학적 영감 메모리

Hippo v0.21.0는 Claude Code, OpenCode, OpenClaw, Codex, Cursor, Pi를 포함한 여러 AI 코딩 도구를 위한 원-커맨드 설정을 도입합니다. 메모리 시스템은 런타임 의존성 없이 감쇠, 검색 강화, 통합 기능을 제공합니다.

OpenClawRadar
MemRosetta는 한 줄 명령어 설정으로 Claude Code에 영구 메모리를 추가합니다.
Tools

MemRosetta는 한 줄 명령어 설정으로 Claude Code에 영구 메모리를 추가합니다.

MemRosetta v0.2.4는 단일 npm 설치 명령으로 Claude Code에 세션 간 메모리를 제공합니다. 이 도구에는 6개의 메모리 도구가 있는 MCP 서버, 자동 세션 캡처, Cursor와 공유할 수 있는 로컬 SQLite 저장소가 포함되어 있습니다.

OpenClawRadar
코드사이트: AI 컨텍스트 엔진으로 클로드 코드 세션에서 3만~6만 토큰 절약
Tools

코드사이트: AI 컨텍스트 엔진으로 클로드 코드 세션에서 3만~6만 토큰 절약

Codesight는 AI 코딩 에이전트에 구조화된 컨텍스트를 제공하여 토큰 낭비를 줄이기 위해 코드베이스를 분석하는 오픈소스 도구입니다. 한 개발자가 유지 관리자와 협력하여 Next.js와 Prisma용 AST 파싱, 평가 스위트, 토큰 원격 측정, Claude Code 및 Cursor용 프로필을 추가했습니다.

OpenClawRadar
피아스트 게이트: LLM 데이터 익명화를 위한 오픈소스 API 프록시
Tools

피아스트 게이트: LLM 데이터 익명화를 위한 오픈소스 API 프록시

Piast Gate는 민감한 데이터를 LLM에 전송하기 전 익명화하고 응답에서 원본 데이터를 복원하는 오픈소스 API 프록시입니다. 현재 MVP는 Google Gemini API, 폴란드어, 로컬 실행을 지원하며, LLM 처리 없이 텍스트나 Word 문서를 익명화할 수 있습니다.

OpenClawRadar