HNのデータは、arXiv論文のシェアが減少していることを確認しており、LLM（大規模言語モデル）への過熱感はピークを過ぎたのだろうか？

Dylan Castilloは、Hacker NewsのトップページでarXivの論文を目にする機会が減っていることを確認したかったため、Claudeを使ってBigQuery HNデータセットを簡単に分析した。その結果、明確な傾向が示された。HNにおけるarXivストーリーの割合は、ここ数ヶ月で急激に減少しているのだ。

彼は過去のピークも調べた。2019年の最初のピークは深層学習論文によるものだった。その年、トップ100の高評価arXiv投稿の41%が深層学習に関するものだった。2023〜2026年の期間はさらにAIへの集中が激しく、トップ100の高評価arXivストーリーの59%がLLMまたはAIに関するものだった。2019年の注目すべき論文には、MuZero（161ポイント）、EfficientNet（119ポイント）、XLNet（79ポイント）、PyTorch NeurIPS論文（113ポイント）、Cholletの「知能の測定について」（80ポイント）などがあった。

2023〜2026年の期間について、CastilloはClaudeにどの論文が長く価値を保つかを推測させた。選ばれたのは、DeepSeek-R1（1,351ポイント、RLによるo1スタイルの推論のためのオープンレシピ）、Generative Agents（391ポイント、「スモールビル」論文）、1ビットLLMの時代/BitNet b1.58（1,040ポイント）、Differential Transformer（562ポイント）、そしてLK-99クラスター（合計2,408 + 1,690ポイント、オープンサイエンス再現性の画期的成果）である。完全な分析には、トピック分布と時間経過に伴うarXivシェアのグラフが含まれている。