160개 프롬프트 코드 A/B 테스트: 플라시보 효과와 7개 핵심 코드

Samarth(clskillshub.com의 창시자)는 3개월 동안 통제된 테스트 장비(동일한 작업 배터리, 신규 컨텍스트, 블라인드 평가된 출력)를 사용하여 160개의 Claude 프롬프트 코드를 A/B 테스트했습니다. 주요 발견 사항은 다음과 같습니다:

1. 대부분의 프롬프트 코드는 플라시보 효과

ULTRATHINK, GODMODE, ALPHA, UNCENSORED와 같은 코드는 접두사가 없는 기준과 비교하여 추론, 길이 또는 품질에서 측정 가능한 변화를 전혀 보이지 않았습니다. Claude의 장황한 출력을 개선으로 오인하는 경우가 많습니다.

2. 일관되게 추론을 변화시키는 코드는 약 7개

L99 (모호함 제거기) — 여전히 주력 코드이며, Sonnet 4.6/Opus 4.7에서 더 선명함
/skeptic — 전제에 이의를 제기하도록 강제하며, 코드 리뷰 시 L99와 함께 사용
/blindspots — 고려하지 않은 검사(예: CI-vs-로컬 대소문자 구분 경로 버그)를 표면화
/decompose — 모호한 작업 분해
OODA — 시간 압박이 있는 결정에만 작동하며, 개방형 전략에서는 실패
ARTIFACTS — 최신 Claude 버전이 기본적으로 출력을 구조화하므로 사용 빈도 감소

3. 3개 이상의 코드를 쌓으면 모델이 혼란스러워짐

2026년 기준, 모델은 하나의 코드를 부분적으로 존중하고 나머지는 무시합니다. 최대 2개의 코드 스택으로 유지하세요. Samarth의 일상 사용 조합: L99 + /skeptic.

4. 프롬프트 코드는 노후화됨 — 재테스트 필요

모델 업데이트는 동작을 변경합니다. 2025년 10월에 작동했던 코드가 오늘날에는 동일하지 않습니다. 소스가 "2025년 테스트 완료"라고 표시되고 업데이트되지 않았다면 역사적인 자료로 취급하세요.

5. Claude Code에서는 프롬프트 코드보다 스킬 파일이 우수

~/.claude/skills/에 있는 자동 활성화 스킬 파일은 재프롬프트 없이 YAML 설명을 통해 도메인 컨텍스트를 제공합니다. 프롬프트 코드는 추론 모드를 강제하고, 스킬 파일은 컨텍스트를 제공합니다. 다른 문제, 다른 해결책입니다.

Samarth는 Claude Code를 사용하여 테스트 장비, 분류 코드 및 프론트엔드를 구축했으며, 자신의 스택에 맞는 스킬 파일을 제공합니다. 무료 라이브러리에는 100개의 프롬프트 코드, 40페이지 분량의 Claude 가이드, 1,545개의 커뮤니티 기여 스킬 파일(MIT/Apache, 전체 저작자 표시)이 포함되어 있습니다: clskillshub.com/prompts, clskillshub.com/guide, clskillshub.com/free. 유료 등급이 있지만 아래의 모든 것을 사용하는 데 필수는 아닙니다.

Claude Code를 매일 사용하는 개발자를 위한 실행 가능한 결론: 과장된 프롬프트 코드를 버리고, 직접 테스트하고, 컨텍스트를 위해 스킬 파일에 투자하세요.

📖 전체 소스 읽기: r/ClaudeAI