Данные HN подтверждают снижение доли научных статей на arXiv: пик хайпа вокруг LLM уже позади?

Дилан Кастильо хотел подтвердить, видит ли он меньше статей с arXiv на первых страницах Hacker News, поэтому он использовал Claude для быстрого анализа набора данных BigQuery HN. Результаты показывают четкую тенденцию: доля историй с arXiv на HN резко снижается за последние несколько месяцев.

Он также изучил исторические пики. Первый пик в 2019 году был вызван статьями по глубокому обучению — 41% из 100 самых популярных по голосам постов arXiv в том году были посвящены глубокому обучению. В период 2023–2026 годов наблюдалась еще более сильная концентрация на ИИ: 59% из 100 самых популярных историй arXiv были посвящены LLM или ИИ. В 2019 году выдающимися статьями были MuZero (161 балл), EfficientNet (119 баллов), XLNet (79 баллов), статья PyTorch для NeurIPS (113 баллов) и статья Шолле "Об измерении интеллекта" (80 баллов).

Для периода 2023–2026 годов Кастильо попросил Claude угадать, какие статьи останутся актуальными. Выбор: DeepSeek-R1 (1351 балл, открытый рецепт рассуждений в стиле o1 с помощью RL), Generative Agents (391 балл, статья "Smallville"), Эра 1-битных LLM / BitNet b1.58 (1040 баллов), Differential Transformer (562 балла) и кластер LK-99 (2408 + 1690 баллов в сумме, важная веха в открытой науке и репликации). Полный анализ включает графики распределения тем и доли arXiv с течением времени.