Угроза блокировки Internet Archive ставит под угрозу сохранение истории веб-пространства.
Что происходит с доступом к Internet Archive
The New York Times начала блокировать Internet Archive от сканирования своего веб-сайта с помощью технических мер, выходящих за рамки традиционных правил robots.txt. Другие газеты, включая The Guardian, похоже, следуют этому подходу. Такая блокировка рискует лишить доступа к историческим веб-записям, на которые десятилетиями полагались журналисты, исследователи и суды.
Почему это важно для исторического сохранения
Internet Archive управляет Wayback Machine, которая содержит более одного триллиона сохранённых веб-страниц. Почти тридцать лет она сохраняет новостные сайты в их первоначальном онлайн-виде. Когда статьи редактируются, изменяются или удаляются, Архив часто становится единственным источником для просмотра этих оригинальных версий. Блокировка этих краулеров крупными издателями означает, что историческая запись начинает исчезать.
Связь с ИИ и правовой контекст
Издатели ссылаются на опасения по поводу скрапинга новостного контента компаниями ИИ как на мотивацию для блокировки Архива. The New York Times и другие подают в суд на компании ИИ по вопросу о том, нарушает ли закон обучение моделей на защищённом авторским правом материале. Однако Internet Archive не создаёт коммерческие системы ИИ — она сохраняет исторические записи. В статье утверждается, что блокировка некоммерческих архивистов — это неправильная реакция на опасения по поводу обучения ИИ.
С правовой точки зрения, обеспечение возможности поиска материала является устоявшимся добросовестным использованием. Суды признали, что создание поисковых индексов часто требует создания копий исходного материала. Когда Google скопировал целые книги для создания поисковой базы данных, суды признали это добросовестным использованием, поскольку это служило преобразовательной цели — обеспечению обнаружения и исследований. Те же принципы применимы к веб-архивированию.
Практическое влияние на исследования и журналистику
Только Wikipedia ссылается на более чем 2,6 миллиона новостных статей, сохранённых в Internet Archive, охватывающих 249 языков. Бесчисленные блогеры, исследователи и репортёры зависят от Архива как от стабильного, авторитетного свидетельства того, что было опубликовано в сети. Если крупные издатели продолжат блокировать доступ, будущие исследователи могут обнаружить, что значительные части веб-истории исчезли.
📖 Прочитать полный источник: HN AI Agents
👀 Смотрите также
ИИ экономит около 3% часов, почти ничего не доходит до зарплаты
Датское исследование с участием 25 000 работников показало, что ИИ экономит около 3% рабочего времени (1 час в неделю), но лишь 3–7% этой экономии отражается на заработке. Лабораторное ускорение на 40% исчезает в реальных условиях, если не использовать сэкономленное время целенаправленно.
Стратегия Mistral с открытыми весами: оценка в $14 млрд на суверенитете, а не на бенчмарках
Mistral построил империю ИИ стоимостью $14 млрд, предлагая модели с открытым весом для правительств и предприятий, стремящихся к независимости от американских и китайских технологий. Выручка достигла $200 млн в 2025 году, с целью $80 млн в месяц к декабрю 2026 года.
Atlassian сокращает 10% сотрудников для финансирования инвестиций в ИИ.
Atlassian сокращает 1600 рабочих мест (10% персонала) для самостоятельного финансирования инвестиций в ИИ и укрепления своего финансового профиля, при этом затронуты 900 позиций в разработке программного обеспечения. Генеральный директор Майк Кэннон-Брукс заявляет, что ИИ не заменяет людей, но меняет требования к навыкам.
Ухудшение качества контекста в ИИ-агентах: Уровень галлюцинаций растет с увеличением количества токенов
Тестирование показывает, что уровень галлюцинаций увеличивается с ~3% при 10 тыс. токенов до ~28% при 200 тыс. токенов, при этом точность воспроизведения информации из начала сессии падает ниже 90%, как только контекст превышает 50 тыс. токенов.