BotCost.dev：免费分析工具，查看AI机器人对您网站的成本影响

BotCost.devは無料の分析ツールで、Nginx、Apache、Cloudflare、Vercelのログファイルを貼り付けるだけで、どのAIボットがサイトをクロールしているか、それらがどれだけの帯域幅を消費しているかを即座に確認できます。アカウント登録やアップロードは不要で、すべての処理はブラウザ内で完結します。

仕組み

1. ログファイルをドロップ — access.log、access.csv、vercel-logs.jsonに対応。すべての処理はクライアント側で行われます。
2. 分析 — ツールが各リクエストをGPTBot、ClaudeBot、Bytespider、CCBot、Perplexityなど18種類の既知のボットフィンガープリントと照合し、推定帯域幅コストをドルで計算します。
3. ブロック — Cloudflare、Nginx、Next.js用のWAFルールやrobots.txtのスニペットを即座に出力。コピーしてすぐにデプロイできます。

ソースからの主要データ

• 現在、全ウェブトラフィックの38%は非人間で、そのほとんどがAIスクレイパーです。
• 月間5万訪問者の典型的なサイトでは、AIボットによる帯域幅コストは推定月額180ドルに上ります。
• BotCostの検証レイテンシは10ms未満で、Cloudflareのエッジで動作し、実際のユーザーへの影響はゼロです。

なぜこれが重要なのか

公開コンテンツを運営するサイトでは、GPTBotやClaudeBotなどのボットが多大な帯域幅コストを発生させる可能性があります。このツールは具体的な金額を示すため、それらをブロックすべきかどうかを判断できます。一行のWAFルールを使用することで、複雑な設定をすることなく、数分でコストの流出を止められます。