Claudeは、リアルタイムのPythonコーディングチャレンジにおいて、Gemini、ChatGPT、Grokを上回る性能を発揮します。

ロボットワードレーサートーナメントの設定

開発者は「ロボットワードレーサー」と呼ばれる競争的コーディングチャレンジを作成し、4つのAIコーディングアシスタント（Claude、Gemini、ChatGPT、Grok）をテストしました。各AIは同じプロンプトを受け取り、標準ライブラリのみを使用して完全なPython 3.10クライアントを書くように求められました。

チャレンジの仕組み

トーナメントには以下の特定の制約がありました：

• 4つのAI生成ボットがTCPサーバーに同時に接続
• 各ボットは15×15の文字グリッドを受け取る
• ボットは互いに競い合い、有効な単語を先に見つけて提出する
• 単語はグリッド上で隣接してトレースされなければならない（水平、垂直、または斜め）
• タイルは単語ごとに再利用できない
• 最小単語長は3文字
• スコアリング式：文字数 − 6（短い単語はポイントを失い、長い単語は得点となる）
• 辞書にない単語やグリッド上でトレースできない単語を提出すると即時失格
• 各ラウンドは10秒間続く

結果

ソースによると、Claudeがトーナメントで圧倒的に勝利しました。開発者は「Claudeが勝ち、その差は歴然だった」と述べ、この特定のリアルタイムコーディングチャレンジにおいて、Claudeと他のAIアシスタントの間に大きなパフォーマンスの差があったことを示しました。