Omnicoder-9B 성능 검토: 속도 대 도구 호출 문제

기술 개요

Omnicoder-9B는 Tesslate가 개발한 Qwen 3.5 아키텍처 기반의 코딩 전용 모델입니다. Opus 4.6, GPT 5.4, GPT 5.3 Codex, Gemini 3.1 Pro를 포함한 여러 모델의 출력을 사용하여 Qwen3.5 9B를 기반으로 미세 조정되었습니다.

성능 특성

이 모델은 중급 하드웨어에서 강력한 성능을 보입니다. 12GB VRAM으로 사용자들은 컨텍스트 크기가 100k로 설정된 상태에서도 15 토큰/초의 일관된 토큰 생성을 보고합니다. 프롬프트 처리 속도는 약 265 토큰/초로 특히 빠릅니다. 모델은 시스템 충돌이나 성능 저하 없이 실행됩니다.

제한 사항 및 문제점

속도 장점에도 불구하고, Omnicoder-9B는 실제 코딩 시나리오에서 몇 가지 제한 사항을 보입니다:

• 원샷 프롬프트로 독립형 HTML 파일에 완전한 슈퍼 마리오 클론을 생성하지 못함
• MCP 서버와의 도구 호출 실패, 데이터 가져오기 중 MCP 오류 발생
• Claude Code에서 쓰기 도구 호출 실행 문제(호환성 요인 포함 가능)

IDE 통합 테스트

개발 환경에서의 테스트 결과는 혼재되었습니다:

• LM Studio와 Roo Code에서: 토큰 크기가 4k로 증가하면 연결이 끊어짐(통합 문제로 보이며 모델 특정 문제는 아님)
• 모델은 2-3k 토큰 크기의 작은 스크립트를 성공적으로 업데이트하거나 작성함
• 4k 이상 토큰에 대한 API 요청은 오류 메시지 없이 실패함
• Claude Code에서: 토큰 생성이 Roo Code에 비해 느리게 느껴지며, 출력 생성 후 쓰기 도구 호출 실행 실패

사용자는 Continue 및 다른 테스트 옵션 중에서 Roo Code가 로컬 LLM에 가장 효과적인 확장 프로그램이라고 언급합니다.