Arctic code vault contributor что это
Стал участником арктического хранилища GitHub.
Приятный сюрприз – на днях заглянув в свой профиль на GitHub, обнаружил звёздочку, которой там раньше не было и надпись «Arctic Code Vault Contributor». Как оказалось, речь идёт о новом проекте по созданию арктического хранилища открытого кода.
2 февраля 2020 года GitHub объявил о воплощении проекта по созданию архива открытых исходных текстов, размещённого в арктическом хранилище Arctic World Archive, способного уцелеть в случае наступления глобальной катастрофы.
Арктическое хранилище кода создано на базе Arctic World Archive (AWA) на глубине 250 метров в вечной мерзлоте. Архив находится в бывшей угольной шахте на архипелаге Шпицберген, что не очень далеко от Северного полюса. Глобальное потепление затронет всего несколько метров вечной мерзлоты и не угрожает шахте в ближайшее время (несколько тысяч лет). Шпицберген регулируется международным договором как демилитаризованная зона. Это одно из самых отдалённых и геополитически стабильных человеческих поселений на Земле, считает GitHub. Там же неподалёку располагается знаменитое Всемирное семенохранилище, главная надежда человечества на случай апокалипсиса.
186 плёночных накопителей piqlFilm, которые содержат фотоснимки информации и позволяют сохранять информацию более 1000 лет (по другим данным срок службы составляет 500 лет), успешно размещены в подземном хранилище. Данные будут храниться на 3500-футовых плёночных катушках, предоставленных норвежской компанией Piql, которая специализируется на длительном хранении данных. Согласно измерениям ISO, эта плёнка с галогенидами серебра в полиэфире имеет срок жизни 500 лет. Тесты имитационного старения показали, что плёнка Piql сохраняет информацию как минимум вдвое дольше.
В архиве сохранено около 21 ТБ информации, представляющей код многих открытых проектов, размещённых на GitHub. Разработчики, код которых попал в архив, помечены в профиле на GitHub специальной меткой «Arctic Code Vault Contributor». На случай возникновения проблем с хранилищем «Arctic World Archive», рассматривается возможность создания дублирующих архивов длительного хранения.
По какому критерию отбирался код, нигде не сообщается. Из моих разработок Github оценил три — мини-движок блога на Laravel, задание для компании Egamings по оптимизации обработки крупных баз данных, и хранилище резюме на Java. Так что, теперь есть и мой небольшой вклад в коллективный разум человечества, так сказать, на случай Апокалипсиса.
GitHub разместил свой архив в арктическом хранилище Arctic World Archive
Компания GitHub рассказала в своем блоге, что 8 июля 2020 года архив открытых исходных кодов сервиса был успешно размещен в арктическом хранилище Arctic World Archive на острове Шпицберген.
Чтобы заархивировать и перевести на физических носителях весь GitHub понадобилось более пяти месяцев кропотливой работы. 2 февраля 2020 года специалисты компании сделали копию всего открытого исходного кода, хранившегося на сервисе — это вклад работы более 37 миллионов пользователей, который включает около 100 миллионов активных публичных репозиториев.
Разработчики, код которых попал в текущую версию архива, помечены в профиле на GitHub специальной меткой «Arctic Code Vault Contributor». Проверьте свои аккаунты в GitHub, вы можете быть приятно удивлены этой ачивке.
Объем архива составил 21 ТБ. Далее эти данные были перенесены в виде фотоснимков на 186 пленочных накопителей piqlFilm. Это 3500-футовые (1066-метровые) пленочные катушки с галогенидами серебра в полиэфире, которые созданы специально норвержской компанией Piql. Они могут хранить без потерь большие объемы информации сотни лет, максимум заявлено — 1000 лет.
Предполагалось, что команды GitHub полетит в Норвегию, где должна была присоединиться в городе в Драммен к специалистам Piql, чтобы вместе сопровождать перевозку столь ценного груза до подземного хранилища. Однако, из-за пандемии, пришлось изменить часть этого плана, а также отодвинуть сроки отправки. Только в начале июля 2020 года 9 больших коробок с 186 пленочными барабанами были отправлены в аэропорт Осло, а затем были доставлены на Шпицберген. Далее архив GitHub оказался в городке Лонгйире, где местная логистическая компания оказала услуги по его промежуточному безопасному хранению. Фактически, только 8 июля 2020 года архив с пленками GitHub был успешно депонирован в арктическое хранилище в бывшей угольной шахте на глубине 250 метров в вечной мерзлоте.
Piql приложила к архиву специальное руководство, которое позволяет определить местоположение каждого проекта и объясняет, как восстановить данные. Каждая катушка включает в себя копию руководства по кодовому хранилищу GitHub на пяти разных языках мира. Одна катушка содержит техническую историю и культурную ценность содержимых сведений. Кроме того, в архиве представлены работы, в деталях объясняющие основы современной информатики, вычислений и разработки открытого кода. По словам инициаторов проекта, это позволит будущим поколениям понять, каким был современный мир, и даже воссоздать компьютеры и технологии в случае необходимости.
На случай возникновения проблем с хранилищем «Arctic World Archive», GitHub рассматривает возможность создания дублирующих архивов длительного хранения.
GitHub создал тысячелетнее хранилище, в котором сохранит Open Source-репозитории для потомков
Бывшая угольная шахта, в которой размещатся хранилище Arctic World Archive. Фото: Guy Martin / Bloomberg Businessweek
Свободное программное обеспечение — краеугольный камень современной цивилизации и общее наследие всего человечества. Миссия программы GitHub Archive — сохранить этот код для будущих поколений, чтобы история Александрийской библиотеки никогда не повторилась.
Для этого GitHub заведёт много резервных копий на разных носителях, в том числе долгосрочное хранилище Arctic Code Vault на Шпицбергене. Оно размещается в бывшей угольной шахте на глубине 250 метров в вечной мерзлоте и рассчитано на срок хранения минимум 1000 лет.
Снимок программного кода человечества сделают 2 февраля 2020 года.
Проект долговременного хранения данных запущен совместно с Long Now Foundation, Интернет-архивом, Фондом наследия программного обеспечения, Arctic World Archive и другими партнёрами.
Проект LOCKSS
Жизненно важный сегодня код со временем может быть забыт или потерян. Самое страшное, если в случае глобальной катастрофы мы потеряем всю информацию, которая сохранялась на «эфемерных» носителях: HDD, SSD, CD и DVD, рассчитанных на несколько десятилетий, на лентах, у которых условный срок службы 30 лет предполагает строгий контроль температуры и влажности.
Решение проблемы — дубликация резервных копий, то есть архивирование программного обеспечения несколькими организациями и в разных формах. Этот проект под названием LOCKSS стартовал ещё почти 20 лет. В мае 2019 года была представлена программа LOCKSS 2.0-alpha — первый прототип ПО для распределённого сохранения данных на длительное время с поддержкой множества участников и внешних хранилищ.
Разработчики системы исходят из того, что аппаратные средства могут быть гораздо более долговечными, чем эфемерные носители: поэтому «существует целый ряд возможных вариантов будущего, в которых рабочие современные компьютеры существуют, но их программное обеспечение в значительной степени потеряно».
GitHub напоминает о множестве потерянных технологий, которые могли быть полезными: римский бетон (его рецепт был заново открыт только в 2014 году), противомалярийный препарат DFDT, утерянные чертежи ракеты «Сатурн-5». Легко представить себе будущее, в котором сегодняшнее программное обеспечение будет рассматриваться как причудливая и давно забытая ненужность, пока не возникнет неожиданная потребность в нём: «Как и любая резервная копия, архивная программа GitHub также предназначена для непредвиденного будущего», — говорится на сайте программы GitHub Archive.
GitHub Archive
GitHub Archive предусматривает три уровня резервных копий:
Кроме того, организован рекурсивное индексирование краулером GHTorrent, который будет выкладывать архивы на ежедневной или ежемесячной основе. Через GH Archive снимки из архива можно получать запросами BigQuery. Другие копии кода размещаются в хорошо известной «Машине времени» для Интернет-архива, которая хранит копии в нескольких местах. Наконец, Фонд наследия программного обеспечения (Software Heritage Foundation) будет регулярно сканировать GitHub и добавлять свои публичные репозитории в свой архив, для которого есть публичный API.
Арктическое хранилище GitHub
2 февраля 2020 года GitHub сделает копию всех активных публичных репозиториев — и поместит их в Арктическое хранилище GitHub.
Данные будут храниться на 3500-футовых плёночных катушках, предоставленных норвежской компанией Piql, которая специализируется на длительном хранении данных. Согласно измерениям ISO, эта плёнка с галогенидами серебра в полиэфире имеет срок жизни 500 лет. Тесты имитационного старения показали, что плёнка Piql сохраняет информацию как минимум вдвое дольше.
Кроме того, GitHub Archive сотрудничает с исследователи проекта Microsoft Silica, чтобы записать все публичные репозитории на кварцевые стеклянные пластины с помощью фемтосекундного лазера. Этот носитель обеспечит сохранность данных более 10 000 лет.
Арктическое хранилище кода GitHub создаётся на базе Arctic World Archive (AWA) на глубине 250 метров в вечной мерзлоте. Архив находится в бывшей угольной шахте на архипелаге Шпицберген, что не очень далеко от Северного полюса. Глобальное потепление затронет всего несколько метров вечной мерзлоты и не угрожает шахте в ближайшее время (несколько тысяч лет).
Шпицберген регулируется международным договором как демилитаризованная зона. Это одно из самых отдалённых и геополитически стабильных человеческих поселений на Земле, считает GitHub. Там же неподалёку располагается знаменитое Всемирное семенохранилище, главная надежда человечества на случай апокалипсиса.
Всемирное семенохранилище на Шпицбергене
AWA — совместная инициатива между норвежской государственной горнодобывающей компанией Norske Spitsbergen Kulkompani (SNSK) и провайдером цифрового сохранения Piql AS. Там уже сохраняются исторические и культурные данные из Италии, Бразилии, Норвегии, Ватикана и других стран.
Фото: Guy Martin / Bloomberg Businessweek
Катушки с кодом GitHub будут храниться в контейнере со стальными стенками внутри герметичной камеры. В снимок 02.02.2020 года попадут все активные репозитории GitHub и значительная часть неактивных (судя по звёздам, зависимостям и др.), все бинарные файлы до 100 КБ. Каждый репозиторий в отдельном файле tar. Всё должно поместиться на 200 катушек по 120 ГБ.
Вместе с архивом положат человекочитаемый каталог и технические руководства по декодированию QR, форматам файлам, кодировкам символов и другие важным метаданным, чтобы потомки преобразовать данные обратно в исходный код.
В архив также включат общее руководство Tech Tree на тот случай, если у будущих читателей не останется работающих компьютеров и им придётся восстанавливать технологии с нуля.
GitHub ушёл под лёд: 21 Тбайт открытого кода спрятано в арктическом хранилище
Как вы можете помнить, купленная компанией Microsoft платформа GitHub планировала создать защищённый архив открытого кода во льдах Арктики. Точнее, в специально оборудованной под хранилище шахте на острове Шпицберген, в условиях вечной мерзлоты. Снимок для архива был сделан 2 февраля 2020 года, но из-за пандемии COVID-19 архив достиг хранилища только в этом месяце.
Открытый код будет храниться на «тёплой ламповой» плёнке (GitHub)
Как сообщается в блоге GitHub, 2 февраля сделана копия наиболее важного или связанного с ним открытого исходного кода (почти всего, как утверждают в GitHub, но это вряд ли). «Отправленный в GitHub Arctic Code Vault снимок архива от 02/02/2020 охватывает все активные публичные репозитории GitHub, в дополнение к существенным, но бездействующим репозиториям».
Вид на вход в арктическую шахту (GitHub)
Снимок включает каждый репозиторий с коммитами между объявлением в GitHub 13 ноября 2019 года и 2 февраля 2020 года, каждый репозиторий с минимум 1 звездой и коммитами за год до снимка (с 02/03/2019 по 02/02/2020), а также каждый репозиторий с 250 и более звёзд. Но на практике право попасть в арктический архив получил даже код без звёзд, что затрудняет дать полную оценку правилам выбора права на хранение. Добавим, пользователи GitHub, чей код попал в арктический архив, получили ярлычки с записью «Arctic Code Vault Contributor».
Пример бейджика «Arctic Code Vault Contributor» (GitHub)
Всего для архива было отобрано 21 Тбайт данных, которые были записаны на специальные ленты в бобинах компании Piql. Это полиэфирная плёнка на основе галогенидов серебра. В каждой катушке чуть больше километра плёнки (1066 метров). Всего записано 186 таких катушек, и все они в девяти больших коробках доставлены в хранилище на острове Шпицберген в Норвегии. Пандемия не позволила команде GitHub лично сопровождать архив до хранилища на глубине в несколько сотен метров, но, как сообщают в компании, архив успешно доставлен и помещён в шахту 8 июля.
Коробки с архивом (Github)
Компания Piql, которой принадлежит арктическое хранилище, гарантирует сохранность данных на ленте в течение 500 лет. Искусственное старение ленты показало, что данные с ленты можно считать даже после 1000 лет хранения. Остаётся надеяться, что к тому времени на Земле останутся средства считывания таких архивов, а то ведь всякое может случиться. Сохранить ― это одно, а понять, зачем оно нужно и что с ним делать ― это совсем другое.
Компания GitHub создала 1000-летнее хранилище цифровой информации в Арктике
В прошлом году GitHub объявила о своем плане хранить все свое программное обеспечение с открытым исходным кодом в арктическом хранилище в рамках своей программы архивирования. Это что-то вроде хранилища «Судного дня», только вместо семян растений, в бункере будут храниться цифровые данные.
Теперь платформа для размещения данных, под названием Arctic Code Vault готова, чтобы будущие поколения могли получить к ним доступ, даже если цивилизация рухнет в течение следующих 1000 лет. В своем блоге, посвященном успеху предприятия, директор GitHub по стратегическим программам Джулия Меткалф рассказала, что данная коллекция была помещена в хранилище 8 июля 2020 года после задержек, вызванных пандемией коронавируса.
Партнер GitHub по архивам Piql записал 21 ТБ данных на 186 барабанов piqlFilm, которые представляют из себя цифровую светочувствительную архивную пленку, которую можно прочитать с помощью компьютера или человека с увеличительным стеклом. Это будет очень полезно в возможном случае отсутствия электроэнергии. Служба изначально надеялась выполнить поставленную задачу к февралю, но пришлось ждать, пока команда не сможет отправиться на норвежский архипелаг Шпицберген, который лишь недавно вновь открыл свои границы. Также пришлось отказаться от планов по отправке собственной команды в Арктику.
Коллекция теперь находится в камере, внутри выведенной из эксплуатации угольной шахты, под сотнями метров вечной мерзлоты. Чтобы подробнее узнать о проекте, можно пройти по ссылке на официальный сайт.