Перейти к основному содержимому

Национальные веб-архивы других стран

Национальный веб-архив обычно ведёт национальная библиотека или государственный архив: по закону об обязательном экземпляре или по собственному мандату на сохранение. Такой архив глубже покрывает сайты своей страны, чем общий обход Internet Archive. Открыть сохранённую страницу при этом часто можно только в читальном зале.

Практический вопрос для читателя — режим доступа. Ниже он и служит оглавлением. Длинный перечень остальных программ, с цифрами разной свежести, — в статье Википедии List of Web archiving initiatives.

Как устроен сбор​

Один и тот же архив обычно совмещает три приёма:

  • Обход домена — автоматический снимок национальной зоны (.uk, .se, .at) раз в год или несколько раз в год.
  • Выборочный сбор — сайты, которые кураторы считают важными: ведомства, СМИ, университеты, культурные организации. Их обходят чаще.
  • Сбор по событию — выборы, пандемия, катастрофа: плотная съёмка на коротком промежутке.

Парольные разделы, потоковое видео и соцсети в рутинный обход обычно не входят. Австрийская национальная библиотека прямо пишет, что не архивирует стриминг и берёт публичные профили в соцсетях только точечно, под тему. Датский Netarkivet отдельно и часто собирает новостные сайты, выбранные профили в соцсетях и ролики YouTube.

Где страницу можно открыть​

АрхивДоступЧто искать в первую очередь
Arquivo.pt (Португалия)Открытые полнотекстовый поиск, просмотр и APIПортугальский веб; сервис ищет и по другим доменам
Vefsafn (Исландия)Открытый просмотрИсландские домены, материалы с 1996 года
UK Government Web ArchiveОткрытые полнотекстовый поиск и просмотрСайты центрального правительства Великобритании, соцсети, с 1996 года
Government of Canada Web ArchiveОткрытый порталФедеральные веб-ресурсы Канады
Australian Web Archive в TroveПоиск и просмотр через TroveЗона .au, сайты правительства Австралии, выборочная коллекция PANDORA
PADICAT (Каталония)Открытый просмотрЗона .cat и сайты Каталонии
EU Web ArchiveОткрытый поиск и просмотрСайты институтов, агентств и органов ЕС
WARP (Япония)Открытый порталСайты органов власти по закону о Национальной парламентской библиотеке
Webarchiv (Чехия)В интернете — копии по договору с издателем; весь архив — с компьютеров в здании библиотекиЧешский веб с 2001 года

Совместные тематические коллекции IIPC (климат, пандемия, война в Украине, Олимпиада 2024 года — примеры, которые называет Немецкая национальная библиотека) открыты по всему миру, даже когда национальная коллекция той же библиотеки закрыта для удалённого просмотра.

Португалия — Arquivo.pt​

Arquivo.pt — исследовательская инфраструктура научной сети FCCN-FCT. Сервис хранит миллиарды файлов, собранных с веба с 1996 года, и даёт открытый полнотекстовый поиск, поиск по картинкам и историю версий URL. Интерфейс есть и на английском.

Публичный TextSearch API отдаёт JSON. Короткий запрос:

https://arquivo.pt/textsearch?q=lisboa&from=20100101&to=20101231

Параметры q, from, to (дата в виде YYYYMMDD), type и siteSearch описаны в материалах самого Arquivo.pt. Датская королевская библиотека рекомендует Arquivo.pt тем, кому закрыт доступ к национальному архиву Дании: в португальском архиве находятся и зарубежные страницы.

Исландия — Vefsafn​

Национальная и университетская библиотека Исландии несколько раз в год снимает исландские домены и чаще собирает новостные и быстро меняющиеся сайты. Просмотр открыт на vefsafn.is: библиотека описывает коллекцию как открытый доступ к исландскому вебу с 1996 года по настоящее время.

Великобритания — два разных архива​

UK Government Web Archive ведёт Национальный архив (The National Archives). Это открытый архив сведений центрального правительства: сайты, изображения, видео и каналы в соцсетях с 1996 года. Есть список A–Z и полнотекстовый поиск. Тот же Национальный архив поддерживает реестр форматов PRONOM и инструмент DROID.

UK Web Archive — общий архив шести библиотек обязательного экземпляра: Британской библиотеки, Национальной библиотеки Шотландии, Национальной библиотеки Уэльса, Бодлианских библиотек Оксфорда, Библиотеки Кембриджского университета и Библиотеки Тринити-колледжа Дублина. С 2013 года, по Legal Deposit Libraries (Non-Print Works) Regulations, они ежегодно снимают опознаваемые сайты Великобритании. Британская библиотека оценивает такой снимок как не менее четырёх миллионов сайтов и нескольких миллиардов файлов. Основной массив обязательного экземпляра смотрят в читальных залах этих библиотек. Удалённо открыта меньшая часть — сайты, на публикацию которых владельцы дали разрешение; Бодлианская библиотека пишет о более чем 19 тысячах таких сайтов.

Сайт UK Web Archive сейчас недоступен

На октябрь 2026 года webarchive.org.uk сообщает, что публичный доступ не работает: Британская библиотека восстанавливает сервисы после кибератаки октября 2023 года. Сбор сайтов по закону об обязательном экземпляре библиотека продолжает. Пока портал закрыт, открытые копии британских страниц ищут в UK Government Web Archive и в Internet Archive.

Канада​

Library and Archives Canada по своему закону собирает канадские веб-ресурсы и соцсети и публикует их в Government of Canada Web Archive. Портал федерального веба открыт в интернете.

Австралия​

Australian Web Archive Национальной библиотеки Австралии состоит из трёх частей:

  • PANDORA — выборочная архивация с 1996 года, в том числе по событиям вроде избирательных кампаний (публикация #33);
  • Australian Government Web Archive — сайты правительства Содружества, их снимают несколько раз в год;
  • Australian Domain Harvest — ежегодный обход зоны .au; по оценке библиотеки это больше 80 % объёма архива.

Искать по URL, ключевому слову и теме библиотека предлагает через Trove. Цифровые публикации входят в обязательный экземпляр с расширением Copyright Act в 2016 году.

Каталония — PADICAT​

PADICAT (Patrimoni Digital de Catalunya) с 2005 года ведёт Библиотека Каталонии при техническом участии консорциума университетских сервисов CSUC. Это открытый архив: зона .cat не реже раза в год, более частый сбор сайтов вокруг событий и сайты по соглашениям с организациями.

Европейский союз​

EU Web Archive хранит сайты институтов, агентств и органов ЕС. В 2013 году сбор начала Историческая архивная служба ЕС, с 2018 года сервис ведёт Бюро публикаций. Основная коллекция — 250 сайтов на europa.eu, их снимают регулярно. Рядом лежат тематические собрания, включая Brexit и председательства в Совете ЕС.

Япония — WARP​

Национальная парламентская библиотека ведёт Web Archiving Project (WARP). По закону о библиотеке она регулярно собирает сайты государственных органов: от правительства и парламента до местного самоуправления и государственных университетов. Портал открыт для поиска в интернете.

Чехия — Webarchiv​

Webarchiv Национальной библиотеки Чехии совмещает обход национального домена, выборочный сбор и тематические коллекции. Первый сайт собран 3 сентября 2001 года. На 13 октября 2026 года сайт архива указывает 740 ТБ данных и 4777 договоров с издателями. По описанию библиотеки в интернете свободны копии, на которые есть лицензия издателя; весь архив открывают с отведённых компьютеров в здании библиотеки в Праге.

Где страницу можно найти, но не открыть из дома​

У этих архивов каталог или поиск по URL часто работает в интернете. Сама сохранённая страница открывается в библиотеке или по заявке исследователя.

АрхивКак устроен доступ
Webarchiv ÖsterreichПоиск по URL и неполный полнотекст — онлайн. Просмотр — в Австрийской национальной библиотеке и в уполномоченных библиотеках
Archives de l'internet, BnFЧитальные залы BnF и региональные библиотеки обязательного экземпляра
Webarchiv der DNBКак правило, читальные залы в Лейпциге и Франкфурте; отдельные сайты с согласия правообладателя открыты снаружи
Kulturarw³, ШвецияОтдельный компьютер в Национальной библиотеке в Стокгольме, поиск по URL
Netarkivet, ДанияИсследователи и аспиранты датских научных организаций по заявке
Веб-коллекция KB, НидерландыЧитальный зал библиотеки для владельцев читательского билета

Австрийская национальная библиотека прямо описывает рабочий обход ограничения: найти снимок в своём каталоге, а открытую копию той же страницы поискать в Internet Archive.

Австрия​

С 1 марта 2009 года поправка к Mediengesetz (§ 43b) разрешает Австрийской национальной библиотеке собирать австрийский веб. По FAQ архива полный обход зоны .at и географических зон вроде .wien идёт раз в два года; сайты на других доменах, СМИ, ведомства и события вроде выборов кураторы отбирают отдельно. Сбор идёт на NetarchiveSuite, программе датского веб-архива. Закон разрешает смотреть сохранённые страницы в библиотеке. В вебе можно сохранить закладку и открыть её уже на терминале в библиотеке на Хельденплац (публикация #21).

Франция — BnF​

С 2006 года обязательный экземпляр во Франции распространяется на сообщения, доведённые до публики электронными средствами. Национальная библиотека регулярно снимает французский веб и пишет, что с начала 2000-х её боты покрывают его глубже, чем Internet Archive.

По закону об интеллектуальной собственности коллекции смотрят в исследовательских залах площадок BnF (нужен исследовательский билет) и в региональных библиотеках обязательного экземпляра, которые дают такой доступ. Поиск по URL есть для всего архива. Полнотекст — у отдельных коллекций: новости, Covid-19, теракты 2015 года, ранний французский веб, выборы 2002–2010 годов, литературные сайты проекта LifraNum.

Германия — DNB​

Немецкая национальная библиотека собирает сайты по содержательным критериям: федеральные ведомства, университеты, блоги, темы вроде истории и литературы, события вроде выборов в бундестаг. Архив разбит по темам и даёт полнотекстовый поиск. Библиотека ведёт такой сбор с 2012 года. Из-за авторского права большинство срезов открыто в читальных залах Лейпцига и Франкфурта. Региональные библиотеки, на которых тоже лежит обязанность веб-архивации, делают с DNB общие коллекции — например, веб-архив Тюрингии.

Швеция — Kulturarw³​

Kulturarw³ Национальной библиотеки Швеции — один из старейших национальных обходов: по данным библиотеки, смотреть можно материалы с 1997 года, всего более 500 миллионов шведских веб-страниц. Зону .se снимают один или два раза в год долгими обходами; сайты газет и партий — чаще, вплоть до ежедневного сбора. Искать можно по адресу страницы. Коллекция лежит на лентах, поэтому после запроса страница может открываться несколько минут. Смотреть её можно на специальном компьютере в здании библиотеки в Стокгольме.

Дания — Netarkivet​

С 2005 года Королевская библиотека по закону об обязательном экземпляре собирает датскую часть интернета: опубликованное на датском, датчанами или для датской аудитории. Четыре стратегии библиотека сочетает так:

  • поперечный снимок датских доменов до четырёх раз в год;
  • частый выборочный сбор новостей, партий, министерств, отдельных профилей в соцсетях и роликов YouTube;
  • два-три событийных сбора в год;
  • специальные сборы по запросам исследований.

На конец 2024 года в архиве было около 1320 ТБ и более 45 миллиардов объектов. Из-за персональных данных коллекцию открывают для исследования: заявка исследователя или аспиранта датской научной организации, ответ за два-три рабочих дня. Для отдельных проектов библиотека готовит выгрузки. Тем, кому заявка недоступна, она сама указывает Internet Archive, совместные коллекции IIPC и Arquivo.pt.

Нидерланды — выборочная веб-коллекция KB​

Веб-коллекция KB с 2007 года хранит сайты о нидерландском языке, культуре и истории. На странице коллекции указаны 25 130 сайтов; их снимают один-два раза в год. Смотреть собрание можно в читальном зале с читательским билетом (так с 2011 года). Исследователям при определённых условиях открывают и сами данные.

Закона, который обязывал бы KB архивировать весь нидерландский веб, нет, и каждого владельца сайта библиотека уведомляет о съёмке. В марте 2026 года в зоне .nl было зарегистрировано более 6 миллионов доменов. Рядом работают другие архивы: местные, архив сайтов партий Archipol, архив публичных вещателей института Beeld & Geluid. KB ведёт национальный реестр таких веб-архивов.

Delpher — отдельный поиск по оцифрованным газетам, книгам и журналам.

Другие национальные порталы​

  • Эстонский веб-архив — Национальная библиотека Эстонии, в составе цифровой библиотеки DIGAR.
  • New Zealand Web Archive — Национальная библиотека Новой Зеландии: сайты Новой Зеландии и тихоокеанского региона в National Digital Heritage Archive (коллекции библиотеки Александра Тёрнбулла).

США​

В США нет одного архива «всего американского веба» при национальном архиве. Роли разделены:

IIPC​

IIPC (International Internet Preservation Consortium) с 2003 года объединяет библиотеки, архивы и другие организации, которые сохраняют интернет. На сайте консорциума — участники из более чем 35 стран. IIPC ведёт ежегодные Web Archiving Conference и Генеральную ассамблею, рабочие группы и совместные тематические коллекции.

Общий инструментальный слой консорциума — формат WARC (стандарт ISO 28500), краулер Heritrix и рекомендация воспроизводить архивы через pywb. Список инструментов сообщества — Awesome Web Archiving; обзор таких подборок есть в каталогах.

Как искать, если страна неизвестна​

  1. Открыть URL в Wayback Machine. Для многих стран это единственная копия, которую можно посмотреть не выходя из дома.
  2. Если сайт государственный, проверить открытый правительственный архив этой страны: UKGWA, канадский GCWA, японский WARP.
  3. Для полнотекста и программного доступа по португальскому и части зарубежного веба — Arquivo.pt.
  4. Спросить сразу несколько архивов через Memento (агрегатор MemGator) или расширение PastPage. TimeGate UK Web Archive из списка MemGator сейчас упирается в закрытый портал Британской библиотеки.
  5. Если национальный каталог показывает, что снимок есть, а открыть его можно только в читальном зале, искать ту же дату в Internet Archive. Так советует и Австрийская национальная библиотека.

Что из этого следует для России​

В России нет государственного веб-архива и нет обязанности долго хранить сайты органов власти. Как устроены отдельные ведомственные остатки, разобрано в обзоре сохранённых правительственных ресурсов.

Из чужой практики для такой задачи важны пять выводов:

  1. Закон о сборе и закон о показе — разные нормы. Франция, Швеция, Австрия и Дания широко собирают национальный веб, а из интернета читателю доступна малая часть коллекции или она закрыта целиком. Для сайтов власти полезнее отдельный открытый архив по образцу UK Government Web Archive и канадского GCWA.
  2. Один контур доступа ломается целиком. Шесть библиотек ведут UK Web Archive вместе, но публичный сайт зависит от Британской библиотеки. После кибератаки октября 2023 года на октябрь 2026 года читатели им всё ещё не пользуются, хотя съёмка продолжается.
  3. Поиск и API делают архив инструментом. Arquivo.pt устроен как исследовательский сервис: полнотекст, история URL, JSON API. Закрытый Netarkivet при этом сам отправляет остальных читателей в открытые архивы.
  4. Без обязанности по закону остаётся выборка. KB в Нидерландах за двадцать лет собрала около 25 тысяч сайтов при миллионах доменов .nl и прямо пишет, что архивировать всё пока нельзя.
  5. Совместные открытые коллекции закрывают дыры. Тематические сборы IIPC доступны там, где национальный обязательный экземпляр сидит в читальном зале.

См. также​