Перейти к основному содержимому

Планы архивации

Национальный цифровой архив состоит из множества проектов, связанных общей идеей архивации современного цифрового наследия: государство, СМИ, культура, история, наука и другие направления.

Коллекции готовятся как планы архивации и сохраняются по мере того, как ресурс попадает в зону риска. В план попадает то, что одновременно общественно значимо и с высокой вероятностью скоро исчезнет. Политическая и идеологическая направленность на отбор не влияет (#5).

Критерии из поста 14.03.2022 (#16):

  1. Ресурс представляет общественную ценность — даже для небольшой группы людей.
  2. У ресурса есть существенный риск исчезновения в ближайшее время — от дней до месяцев.

Типичные поводы: ликвидация организации, блокировка, смена платформы или дизайна, объявление о закрытии, заброшенность сайта.

Как ресурс попадает в план​

Порядок на март 2022 года (#5):

  1. Становится известно, что сайт или другой цифровой ресурс может исчезнуть.
  2. Его вносят в план архивации и заполняют карточку.
  3. Выбирают способ сбора и сразу запускают выгрузку.
  4. Готовые файлы кладут в онлайн-хранилище проекта, в облако Backblaze и в офлайн-копию.

На тот момент проект архивировал сайты, каналы Telegram, аккаунты Instagram и Twitter и, ограниченно, другие социальные сети. Веб-архивы отдаются как warc.gz. WARC открывается в ReplayWeb.page, ZIP и GZ — обычным архиватором (#5).

Если сайт уже исчез, в том же посте предложены два пути: попросить копию у владельцев или написать в @ruarxivechat. При большой значимости копию пробуют собрать из других источников, в том числе из Internet Archive.

Списки кампаний 2021–2022 годов ведут в Airtable. Архивы более ранних лет выложены общим CSV: allarchives.csv (#5). Подтверждённые объёмы отдельных коллекций — на странице «Статистика: снимок».

План архивации на 2021 год​

Папка Google Drive: drive.google.com/drive/folders/0B5haFpvgzsyhWXVXQXlhdDJtXzA. На 13.10.2026 она открывается после входа в аккаунт Google.

К перезапуску проекта в марте 2022 года в таблице Airtable уже лежали две предыдущие кампании — сайты Роснано и сайты «Мемориала» (#5).

КампанияЧто известноГде смотреть
Сайты «Мемориала», ноябрь 202167 сайтов: блоги, сайты проектов и организаций, формат WARC (#56, 30.05.2022)каталог в Airtable, разбор кампании
Сайты Роснано, 2021Повод — новости о смене руководства. Девять сайтов: edunano.ru, en.rusnano.com, fiop.site, nanocertifica.ru, rusnano-dmm.ru, schoolnano.ru, startbase.ru, thesaurus.rusnano.com, www.rusnano.com (#110, 04.10.2023)webcollect2021/rusnano2021, разбор кампании

План архивации на 2022 год​

Общая таблица, в канале она называется «План архивации»: airtable.com/shrO1hise7WgURXg5 (#7, #16).

Перечень сайтов и других ресурсов 2021–2022 годов — по прямой ссылке на таблицу (#31). В карточках есть статус и ссылки на архивы (поля status, storage_url, cloud_url).

У части кампаний список вёлся отдельно. Эти таблицы ниже, в разделе «Отдельные списки».

Кампании 2022 года​

Цифры в таблице — из поста на указанную дату. Итог сбора, если он опубликован позже, лежит на странице коллекции.

КогдаКампанияЧто сказано в каналеПодробнее
03.03.2022«Эхо Москвы»Первоочередная задача перезапуска: сайт, затем медиаархив и соцсети (#3)«Эхо Москвы»
03–05.03.2022«Новая газета»Telegram-канал, сайт и спецпроекты. Сайт перезапущен в конце марта из-за защиты от DDoS и закончен к 05.04 (#7, #31, #39)«Российские СМИ»
14–23.03.2022Заблокированные СМИ«Бумага», Colta, TJournal, The Insider, DOXA, «Агентура». К 23.03 сохранены colta.ru, theins.ru, paperpaper.ru, agentura.ru, news.doxajournal.ru, около 100 ГБ (#16, #18, #23)«Российские СМИ»
15.03.2022CoubЗакрытие сервиса с 1 апреля. К 17.03 выгружены 1 952 ролика раздела Hot, 55 ГБ; сбор по категориям продолжался (#17, #18)Coub
23–31.03.2022Культурные сайтыКампания начата 23.03; к 31.03 шла архивация нескольких сотен сайтов учреждений и проектов (#23, #31)таблица плана
23–28.03.2022Instagram официальных лиц171 аккаунт, 1,4 ГБ (#23, #27)«Консервированное государство»
25.03.2022НКО и научное издание«Частный корреспондент», «Троицкий вариант», «Друзья Балтики», КАФ и проекты КАФ: blago.ru, philantropy.ru, givingthursday.ru (#26)«Российские СМИ» — для изданий
31.03.2022Точечные сборыЗакончен сайт Сергея Белановского (sbelan.ru). Начат сайт Росавиации (favt.gov.ru) (#31)таблица плана
05.04.2022Комитеты и комиссии ГосдумыПовод — переход на единый дизайн (#39)«Консервированное государство»
05.04.2022Популяризация наукиФонд «Эволюция», сайт Комитета по лженауке при Президиуме РАН (klnran.ru), «Думай Казань» и другие. Повод — сайты несколько лет не обновлялись (#39)таблица плана
08.04–20.05.2022Порталы открытых данныхК 20.05 собраны 37 сайтов, 43 ГБ в сжатом виде, около 320 ГБ в распакованном. Крупнейшие — opendata.mkrf.ru (15 ГБ) и data.gov.ru (14 ГБ) (#43, #55)порталы открытых данных
23.06.2022СМИ, медиа и культурные инициативыКампания продолжалась; карточки — в открытой таблице плана (#60)«Российские СМИ»
05.07.2022Сайты ИКМОСайты избирательных комиссий муниципальных образований. На старте — 144 ресурса, список собрал Константин Косенков (#63)кампании 2022–2025
15.07.2022ПФР и ФССОбъявлена архивация общедоступных ресурсов перед вхождением обеих организаций в Социальный фонд России с 01.01.2023 (#66)кампании 2022–2025
20.10.2022РостуризмСрочная архивация из-за ликвидации агентства. В каталоге госдоменов на тот момент: russiatourism.ru, last.russiatourism.ru, opendata.russiatourism.ru, opendata2.russiatourism.ru, reestr.russiatourism.ru, rgo.russiatourism.ru, www2.russiatourism.ru (#78)кампании 2022–2025
03.11.2022ИА REGNUMСодержание сайта исчезло. Своей копии на эту дату не было; её собирались восстанавливать из кэша поисковых систем (#81)«Российские СМИ»
02.12.2022Отчёты Счётной палаты4,2 ГБ в сжатом виде, около 5 ГБ в распакованном; apibackuper, копия в Internet Archive (#89)кампании 2022–2025

После 2022 года​

С июня 2023 года проект работает в режиме оперативного сохранения: сообщество сообщает, что ресурс может исчезнуть, и копию делают сразу. Отдельный годовой план после 2022 года не публиковался (#105).

15.12.2023 анонсирована кампания на январь–март 2024 года: официальные сайты Правительства и федеральных органов власти перед возможным обновлением состава Правительства, по образцу сбора 2017 года перед сменой Правительства 2018 года. Для неё в посте названы четыре критерия: значимость, риск исчезновения контента, наличие технологии сбора и сложность барьеров. Пример барьера — анти-DDoS на government.ru (#112). Отдельного отчёта о завершении этой кампании в канале нет. 18.02.2025 в канале снова сказано, что кампанию по сайтам российских госорганов предстоит начать: Internet Archive многие из них не сохраняет (#150).

Кампании, которые в канале названы начатыми:

КогдаКампанияЧто сказано в каналеПодробнее
14.04.2024polit.ruАрхивация после блокировки Роскомнадзором, на случай исчезновения контента или разделегирования домена (#125)реестр исчезающих ресурсов
14–28.06.2024Большая российская энциклопедия82 228 статей old.bigenc.ru (1,4 ГБ в сжатом виде) и 224 556 статей bigenc.ru (6,9 ГБ); ZIP на hubofdata. Сбор WARC на 18.06 — 35 ГБ, 425 тысяч файлов, работа продолжалась (#129, #130, #131)разбор кампании
19.05.2025Росстат и ЕМИССПревентивная архивация общедоступных ресурсов Росстата, ЕМИСС (fedstat.ru) и территориальных органов: ЕМИСС планировали вывести из эксплуатации до конца 2025 года (#159)кампании 2022–2025

К уже собранному возвращались без новой кампании. 04.10.2023, на новостях о возможном банкротстве Роснано, опубликован архив 2021 года (#110). 22.04.2025, когда стал недоступен aisup.economy.gov.ru, указана копия восьмилетней давности, 33 ГБ WARC (#155). Свежие случаи исчезновения, в том числе без новой копии, собраны в реестре.

Отдельные списки​

СписокЧто в нёмИсточник
План 2021–2022Карточки ресурсов этих лет: статус и ссылки на файлы#31
Каталог сайтов «Мемориала»67 сайтов кампании ноября 2021 года#56
Порталы открытых данныхЧто собрано и что ещё в плане. Основа списка — каталог Datacatalogs.ru. К 11.04.2022 были систематизированы data.gov.ru, data.mos.ru, opendata.mkrf.ru и раздел открытых данных Росстата; архив fedstat.ru к этой дате был готов#43, #44
Сайты ИКМОСтартовый список из 144 ресурсов#63
allarchives.csvОбщий список файлов архивов за прошлые годы#5

Код выгрузки порталов открытых данных — ruarxive/rudatarchive. Слепок data.gov.ru от 02.02.2022 и региональные порталы 2017 года указаны в посте о старте кампании (#43).

Как предложить ресурс​

Если вы знаете, какой сайт или ресурс может исчезнуть, отправьте запрос на архивацию через GitHub или напишите в @ruarxivechat. В марте 2022 года заявки принимали формой Airtable (#5, #16); сейчас запросы идут через GitHub.

Перед запросом имеет смысл проверить, нет ли ресурса в таблице сохранённых проектов или в поиске на главной странице.

Связанные материалы​