HN 데이터가 arXiv 논문 점유율 하락을 확인하며, LLM 과대광고의 정점은 이미 지난 것일까?

Dylan Castillo는 Hacker News 프런트 페이지에서 arXiv 논문을 덜 보게 된 것이 맞는지 확인하고 싶었습니다. 그래서 그는 Claude를 사용하여 BigQuery HN 데이터셋에 대한 빠른 분석을 실행했습니다. 결과는 명확한 추세를 보여줍니다: HN에서 arXiv 스토리의 비율이 최근 몇 달간 급격히 감소하고 있다는 것입니다.

그는 또한 역사적 정점을 살펴보았습니다. 2019년의 첫 번째 정점은 딥러닝 논문에 의해 주도되었는데, 그 해에 가장 많은 투표를 받은 arXiv 상위 100개 게시물 중 41%가 딥러닝에 관한 것이었습니다. 2023~2026년 기간에는 AI에 대한 집중도가 더욱 높아져, 상위 100개 중 59%가 LLM 또는 AI에 관한 것이었습니다. 2019년의 주목할 만한 논문으로는 MuZero(161점), EfficientNet(119점), XLNet(79점), PyTorch NeurIPS 논문(113점), Chollet의 "On the Measure of Intelligence"(80점) 등이 있습니다.

2023~2026년 기간에 대해, Castillo는 Claude에게 어떤 논문이 오래도록 가치 있을지 추측해 달라고 요청했습니다. 선정된 논문은 다음과 같습니다: DeepSeek-R1(1,351점, RL을 통한 o1 스타일 추론의 공개 레시피), Generative Agents(391점, "Smallville" 논문), The Era of 1-bit LLMs / BitNet b1.58(1,040점), Differential Transformer(562점), 그리고 LK-99 클러스터(2,408 + 1,690점 합계, 오픈 사이언스 재현의 이정표). 전체 분석에는 주제 분포와 시간에 따른 arXiv 비율에 대한 차트가 포함되어 있습니다.