Internet Archive

Internet Archive — это некоммерческая цифровая библиотека, основанная в 1996 году американским программистом и предпринимателем Брюстером Кейлом. Организация ставит своей целью предоставление всеобщего доступа к знаниям, сохраняя цифровые копии веб-страниц, книг, аудиозаписей, видео, программного обеспечения и других материалов. Internet Archive управляет рядом крупных проектов, наиболее известным из которых является Wayback Machine — архив веб-страниц, позволяющий просматривать сохранённые версии сайтов за разные периоды времени. Штаб-квартира организации находится в Сан-Франциско, Калифорния.

История

Основание и ранние годы

Internet Archive был основан в 1996 году Брюстером Кейлом, который ранее разработал поисковую систему WAIS (Wide Area Information Server). Первоначально проект был сосредоточен на архивировании веб-страниц, чтобы сохранить их для будущих поколений. Первая версия Wayback Machine была запущена в 2001 году, предоставив пользователям доступ к миллиардам сохранённых веб-страниц.

Развитие проектов

В 2005 году Internet Archive начал проект Open Library, направленный на создание единой цифровой библиотеки всех книг мира. В 2006 году была запущена программа Archive-It, позволяющая учреждениям (библиотекам, университетам, архивам) самостоятельно создавать и управлять собственными коллекциями веб-архивов. В 2016 году Internet Archive объявил о запуске проекта «Архив интернета» для сохранения цифровых копий книг, аудио и видео, доступных для бесплатного чтения и прослушивания.

Юридические споры и ограничения

В 2020 году, в разгар пандемии COVID-19, Internet Archive запустил «Национальную аварийную библиотеку» (National Emergency Library), временно сняв ограничения на количество одновременных читателей для оцифрованных книг. Это вызвало судебный иск со стороны четырёх крупных издательств (Hachette, HarperCollins, John Wiley & Sons и Penguin Random House), которые обвинили организацию в нарушении авторских прав. В марте 2023 года суд Нью-Йорка вынес решение в пользу издательств, признав, что практика Internet Archive по оцифровке и предоставлению доступа к книгам без разрешения правообладателей нарушает закон об авторском праве. В ответ Internet Archive объявил, что будет обжаловать решение. В 2024 году апелляционный суд оставил решение в силе.

Проекты и сервисы

Wayback Machine

Wayback Machine — это наиболее известный сервис Internet Archive, который сохраняет копии веб-страниц с момента их создания. Пользователи могут вводить URL-адрес и просматривать сохранённые версии сайта за разные даты. На 2024 год архив содержит более 860 миллиардов веб-страниц. Сервис широко используется исследователями, журналистами и юристами для проверки фактов, восстановления утраченного контента и анализа изменений в веб-пространстве.

Open Library

Open Library — это проект, направленный на создание «одной веб-страницы для каждой когда-либо опубликованной книги». Пользователи могут читать книги в цифровом формате, добавлять свои рецензии и редактировать метаданные. На платформе доступны миллионы оцифрованных книг, многие из которых находятся в общественном достоянии. Open Library также предоставляет API для интеграции с другими сервисами.

Archive-It

Archive-It — это платная услуга для учреждений, позволяющая создавать собственные архивы веб-контента. Клиенты (библиотеки, университеты, государственные органы) могут управлять своими коллекциями, задавать параметры сбора данных и предоставлять доступ к архивам. Archive-It используется, например, для сохранения веб-сайтов правительственных учреждений, научных проектов и культурных событий.

Другие проекты

• Audio Archive: коллекция аудиозаписей, включая музыку, подкасты, радиопередачи и лекции.
• Video Archive: архив видеофайлов, включая фильмы, телепередачи и документальные фильмы.
• Software Archive: коллекция старых программ и игр, доступных для запуска в эмуляторах.
• Image Archive: архив изображений, включая фотографии, открытки и иллюстрации.
• TV News Archive: архив телевизионных новостей, записанных с эфирных каналов США.

Технические аспекты

Хранение данных

Internet Archive использует распределённую систему хранения данных на основе собственных серверов, расположенных в нескольких дата-центрах. Общий объём хранимых данных на 2024 год превышает 100 петабайт. Для обеспечения долговременной сохранности применяются технологии репликации и резервного копирования.

Индексация и поиск

Архив использует собственные алгоритмы для индексации веб-страниц и других материалов. Поиск по Wayback Machine осуществляется по URL-адресам, но также доступен текстовый поиск по содержимому некоторых страниц. Для Open Library и других проектов используются специализированные поисковые системы.

Эмуляция

Для запуска старых программ и игр Internet Archive использует эмуляторы, такие как MAME (Multiple Arcade Machine Emulator) и DOSBox. Пользователи могут запускать эти приложения прямо в браузере без необходимости установки дополнительного программного обеспечения.

Критика и контроверсии

Нарушение авторских прав

Основная критика в адрес Internet Archive связана с его практикой оцифровки и предоставления доступа к книгам, защищённым авторским правом, без разрешения правообладателей. Издательства и авторы утверждают, что это подрывает рынок книг и лишает их законного дохода. В ответ Internet Archive заявляет, что его деятельность аналогична работе традиционных библиотек, предоставляющих книги в ограниченном доступе.

Политическая нейтральность

Internet Archive неоднократно подвергался критике за сохранение контента, который может считаться оскорбительным или незаконным в некоторых юрисдикциях. Например, в архиве сохраняются страницы с экстремистскими материалами, хотя организация заявляет, что не поддерживает их содержание. В некоторых странах доступ к Wayback Machine был ограничен из-за наличия такого контента.

Цензура и блокировки

В некоторых странах, таких как Китай, Иран и Россия, доступ к Internet Archive может быть ограничен или заблокирован. В России в 2023 году было принято решение о блокировке ряда страниц Internet Archive за распространение информации, признанной запрещённой, в том числе материалов, содержащих призывы к экстремизму и терроризму. Организация признана нежелательной на территории РФ? На момент написания статьи Internet Archive не входит в реестр нежелательных организаций, однако отдельные страницы могут быть заблокированы по решению суда.

Значение и влияние

Internet Archive играет важную роль в сохранении цифрового наследия. Его проекты используются учёными, журналистами, библиотекарями и обычными пользователями для доступа к историческим материалам, восстановления утраченной информации и проведения исследований. Wayback Machine является незаменимым инструментом для проверки фактов и анализа изменений в веб-пространстве. Несмотря на юридические споры, организация продолжает расширять свои коллекции и разрабатывать новые сервисы, стремясь к своей цели — «всеобщему доступу к знаниям».

Источники

• Официальный сайт Internet Archive (archive.org)
• Решение суда по делу Hachette v. Internet Archive (2023)
• Статья «Internet Archive» в англоязычной Википедии
• Публикации Брюстера Кейла о целях и методах архивирования
• Отчёты о блокировках контента в различных странах