BotCost.dev: Бесплатный анализатор для оценки затрат на ИИ-ботов для вашего сайта
BotCost.dev — это бесплатный анализатор, позволяющий вставить файл лога Nginx, Apache, Cloudflare или Vercel и сразу увидеть, какие AI-боты обходят ваш сайт и сколько трафика они расходуют. Без регистрации и загрузки — всё остаётся в вашем браузере.
Как это работает
- Загрузите лог-файл — поддерживаются access.log, access.csv и vercel-logs.json. Вся обработка происходит на стороне клиента.
- Анализируйте — инструмент сверяет каждый запрос с 18 известными сигнатурами ботов, включая GPTBot, ClaudeBot, Bytespider, CCBot и Perplexity. Вычисляется примерная стоимость трафика в долларах.
- Блокируйте — на выходе вы получаете готовое WAF-правило для Cloudflare, Nginx, Next.js или фрагмент robots.txt. Скопируйте и сразу примените.
Ключевые цифры из источника
- 38% всего веб-трафика сегодня — нечеловеческий, в основном AI-скраперы.
- Для типового сайта с 50 000 посетителей в месяц AI-боты обходятся примерно в $180 в месяц за трафик.
- Задержка проверки BotCost составляет менее 10 мс, выполняясь на периферии Cloudflare без какого-либо влияния на реальных пользователей.
Почему это важно
Если у вас сайт с публичным контентом, такие боты, как GPTBot и ClaudeBot, могут накручивать значительные расходы на трафик. Этот инструмент даёт конкретную цифру в долларах, чтобы вы могли решить, блокировать их или нет. Подход с однострочным WAF-правилом позволяет остановить утечку за минуты без сложных настроек.
📖 Читать полный источник: HN AI Agents
👀 Смотрите также
Использование pre-commit для повышения качества и безопасности кода, созданного с помощью ИИ.
Разработчик делится своей конфигурацией pre-commit для проектов на Go и Java, используя инструменты вроде golangci-lint, govulncheck и checkov для выявления уязвимостей и проблем с качеством в коде, сгенерированном ИИ, перед коммитом.
GoModel: Легковесный шлюз искусственного интеллекта с открытым исходным кодом, написанный на Go
GoModel — это открытый шлюз искусственного интеллекта, который предоставляет унифицированный API, совместимый с OpenAI, для множества провайдеров, включая OpenAI, Anthropic, Gemini, Groq, xAI и Ollama. Он отличается образом Docker размером 17 МБ, что в 44 раза меньше, чем у LiteLLM, с конфигурацией на основе переменных окружения и встроенной наблюдаемостью.
Представляем Aionic Anthology: Фреймворк для структурирования задач ИИ Клода.
Фреймворк Aionic Anthology организует задачи ИИ Клода, разделяя контекст на категории и добавляя систему оценки рисков для улучшения выполнения задач.
Сервер MCP индексирует кодовые базы в граф знаний для 10-кратного сокращения токенов
Новый MCP-сервер под названием codebase-memory-mcp анализирует кодовые базы в постоянный граф знаний с помощью tree-sitter, сокращая использование токенов как минимум в 10 раз для структурных запросов. Протестировано на 35 реальных репозиториях; он заменяет исследование файл за файлом на запросы к графу.