Исследователи используют проекты Claude для академического обзорного анализа: преимущества и ограничения

Claude в роли помощника исследователя в академическом обзоре

Исследователи провели рецензируемое обзорное исследование, опубликованное в журнале Artificial Intelligence in Education (Emerald, открытый доступ), используя Claude Projects для анализа 39 качественных интервью из 20 стран о том, как студенты воспринимают генеративный ИИ в высшем образовании.

Что сработало хорошо

• Перекрестное сопоставление тем между статьями на основе структурированных табличных данных
• Усиление человеческой памяти при работе с большим набором данных
• Предложение аналитических категорий, которые исследователи не рассматривали
• Роль "критического коллеги" для итеративного тематического анализа

Что сработало не так хорошо

• Ранний анализ CSV был неточным и неполным
• Склонность к "галлюцинациям", когда выводы не проверялись строго по исходной таблице
• Мог быть "ленивым", не полностью выполняя запросы
• Угодливые ответы требовали явных указаний на необходимость критики
• Кривая обучения означала, что в целом это не было более эффективным (парадокс продуктивности)

Детали реализации

Исследователи не загружали полные статьи из-за авторских прав и этических соображений. Вместо этого они загрузили свои структурированные заметки в Claude Projects. Производительность значительно улучшилась с добавлением поддержки .xls и снова с Sonnet 3.7.

Исследователи пришли к выводу, что Claude был полезен как помощник исследователя, но требовал такого же контроля, как и компетентному, но ненадежному коллеге. Каждый вывод приходилось проверять по исходным данным. Они планируют использовать его снова, но только потому, что теперь понимают его конкретные режимы сбоев.

Статья доступна в открытом доступе по лицензии CC BY 4.0 по адресу https://doi.org/10.1108/AIIE-06-2025-0151.