BotCost.dev: Бесплатный анализатор для оценки затрат на ИИ-ботов для вашего сайта

BotCost.dev — это бесплатный анализатор, позволяющий вставить файл лога Nginx, Apache, Cloudflare или Vercel и сразу увидеть, какие AI-боты обходят ваш сайт и сколько трафика они расходуют. Без регистрации и загрузки — всё остаётся в вашем браузере.

Как это работает

1. Загрузите лог-файл — поддерживаются access.log, access.csv и vercel-logs.json. Вся обработка происходит на стороне клиента.
2. Анализируйте — инструмент сверяет каждый запрос с 18 известными сигнатурами ботов, включая GPTBot, ClaudeBot, Bytespider, CCBot и Perplexity. Вычисляется примерная стоимость трафика в долларах.
3. Блокируйте — на выходе вы получаете готовое WAF-правило для Cloudflare, Nginx, Next.js или фрагмент robots.txt. Скопируйте и сразу примените.

Ключевые цифры из источника

• 38% всего веб-трафика сегодня — нечеловеческий, в основном AI-скраперы.
• Для типового сайта с 50 000 посетителей в месяц AI-боты обходятся примерно в $180 в месяц за трафик.
• Задержка проверки BotCost составляет менее 10 мс, выполняясь на периферии Cloudflare без какого-либо влияния на реальных пользователей.

Почему это важно

Если у вас сайт с публичным контентом, такие боты, как GPTBot и ClaudeBot, могут накручивать значительные расходы на трафик. Этот инструмент даёт конкретную цифру в долларах, чтобы вы могли решить, блокировать их или нет. Подход с однострочным WAF-правилом позволяет остановить утечку за минуты без сложных настроек.