클로드가 실시간 파이썬 코딩 챌린지에서 제미나이, 챗GPT, 그록을 능가합니다

로봇 단어 레이서 토너먼트 설정

한 개발자가 Claude, Gemini, ChatGPT, Grok이라는 네 가지 AI 코딩 어시스턴트를 테스트하기 위해 '로봇 단어 레이서'라는 경쟁적 코딩 챌린지를 만들었습니다. 각 AI는 동일한 프롬프트를 받았으며, 표준 라이브러리만 사용하여 완전한 Python 3.10 클라이언트를 작성하도록 요청받았습니다.

챌린지 메커니즘

토너먼트에는 다음과 같은 특정 제약 조건이 적용되었습니다:

• 네 개의 AI 생성 봇이 동시에 TCP 서버에 연결됩니다
• 각 봇은 15×15 글자 격자판을 받습니다
• 봇들은 서로보다 먼저 유효한 단어를 찾아 제출하기 위해 경쟁합니다
• 단어는 격자판에서 인접하게(수평, 수직 또는 대각선으로) 추적되어야 합니다
• 타일은 단어당 재사용할 수 없습니다
• 최소 단어 길이는 세 글자입니다
• 점수 공식: 글자 수 − 6 (짧은 단어는 점수를 잃고, 긴 단어는 점수를 얻습니다)
• 사전에 없거나 격자판에서 추적할 수 없는 단어를 제출하면 즉시 실격 처리됩니다
• 각 라운드는 10초 동안 지속됩니다

결과

출처에 따르면, Claude가 토너먼트에서 압도적으로 승리했습니다. 개발자는 "Claude가 승리했고, 그 격차는 크지 않았다"고 언급하며, 이 특정 실시간 코딩 챌린지에서 Claude와 다른 AI 어시스턴트 간에 상당한 성능 차이가 있음을 지적했습니다.