Исследовательские результаты Claude варьируются в зависимости от языка: один запрос, разные источники

Пользователь Reddit протестировал Claude на пяти языках, используя одинаковый структурированный исследовательский запрос. Модели включали Claude (точная версия не указана), запущенный на английском, китайском, русском, испанском и хинди.

Основные выводы

• Не разница в качестве — выводы на английском и других языках были одинаково связными, но представленная информация отличалась.
• Claude на хинди выдал источники и события, которые никогда не появлялись в английском запуске — та же модель, та же структура запроса, иная картина реальности.
• Пользователь отмечает, что это указывает на влияние языка запроса на то, что модель считает релевантным, что может искажать результаты исследований.

Последствия для разработчиков

Если вы используете Claude (или любую LLM) для исследований, выполнение одного и того же запроса на нескольких языках может выявить разные источники и точки зрения. Это особенно актуально для глобальных тем, где неанглоязычные источники могут быть недостаточно представлены в запросах только на английском.

Тест не включал точную версию модели, настройки температуры или полный текст запроса, но основное наблюдение стоит проверить на собственных запросах.