LLMマトリックス：コミュニティ投票によるモデル比較、Claude Codeで構築

開発者がLLM Matrixというウェブサイトを作成しました。このツールは、複数の次元で大規模言語モデルを閲覧し投票できるようにし、中央集権的なベンチマークサイトへの懸念に対処するために、コミュニティ主導のランキングを実装しています。

LLM Matrixの機能

• 2からN次元でLLMスコアを同時に閲覧
• ユーザーがモデルに投票し、その投票がランキングを形成
• 初期データは公開インターネットソースから集計したスコアに基づき、モデルごとにわずか20票でシード
• 残りの投票とランキングはコミュニティの入力によって決定

開発詳細

このプロジェクト全体はClaude Codeを使用して構築されました。開発者は特に、開発に不可欠だった2つのプラグインを挙げています：

• production-gradeプラグイン：https://github.com/nagisanzenin/claude-code-production-grade-plugin
• claude-memプラグイン：https://github.com/thedotmack/claude-mem

このサイトは現在llm-matrix.vercel.appでホストされており、潜在的に偏った中央集権的な指標よりもコミュニティの合意を優先する、LLM評価への代替的アプローチを表しています。