Сегодня 01 августа 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → internet archive

Архивировать интернет становится всё сложнее: Wayback Machine и Wikimedia страдают от дефицита HDD

Архивирование данных интернета оказывается всё более неподъёмной задачей из-за дефицита накопителей и роста цен на них. Жёсткие диски подорожали втрое, потому что оказались востребованными крупными компаниями. Это сильно осложняет работу таких проектов как Wayback Machine и Wikimedia.

 Источник изображения: Patrick Lindenberg / unsplash.com

Источник изображения: Patrick Lindenberg / unsplash.com

Некоммерческая организация Internet Archive, которая ставит своей целью обеспечить «доступ ко всем знаниям для всех», оказалась одной из организаций, пострадавших от кризиса. В её распоряжении хранилище объёмом около 210 Пбайт, и ещё 100 Тбайт ежедневно требует сервис Wayback Machine. Бум искусственного интеллекта превратил этот проект в «проблему, отнимающую у нас время и деньги», признаются его руководители. Для этой задачи идеально подходят жёсткие диски объёмом 28–30 Тбайт, но они часто отсутствуют на складах или продаются по сильно завышенным ценам. Отчасти эти проблемы помогают смягчить спонсоры проекта и сообщество — последнее, правда, только советами.

Ответственный за «Википедию» некоммерческий фонд Wikimedia испытывает сложные проблемы: 65 млн статей на платформе требует внушительных ресурсов, а главное — тщательно спланированного распределения бюджета, и текущая ситуация лишь усугубила эту проблему. Организация ощутила кризис при «закупке памяти и жёстких дисков, а также в отношении сроков поставки серверов и нашей способности размещать будущие заказы».

Ещё одна проблема состоит в том, что усложнились механизмы архивирования информации. Большие языковые модели ИИ обучаются на огромных массивах данных, которые подчас добываются незаконным путём — из-за этого владельцы многих сайтов блокируют доступ для средств сбора данных, не проводя различия между ИИ-ботами и добросовестными сервисами, которые собирают эту информацию в образовательных целях. Из-за подобных блокировок и роста цен на накопители не только крупные некоммерческие организации, но и одиночные энтузиасты вынуждены либо сокращать масштабы деятельности, либо вообще приостанавливать её — в ожидании, когда ситуация стабилизируется.

Активность архива интернета Wayback Machine резко рухнула в этом году, но скоро всё придёт в норму

Служба Wayback Machine проекта Internet Archive, занимающаяся созданием и хранением копий интернет-страниц, сейчас переживает своего рода спад — за последний год число создаваемых копий резко сократилось, обнаружили в Niemen Lab.

 Источник изображения: archive.org

Источник изображения: archive.org

С 1 января по 15 мая 2025 года сервис Wayback Machine сохранил 1,2 млн страниц со 100 крупных новостных сайтов, а с 17 мая по 1 октября текущего года с тех же 100 сайтов были сохранены всего 148 628 копий страниц, что соответствует сокращению на 87 %. Причиной тому стал «сбой у ряда отдельных проектов архивирования, из-за которого было создано меньше архивов для некоторых сайтов», сообщил директор сервиса Wayback Machine Марк Грэм (Mark Graham). Он добавил, что некоторые сохранённые после 16 мая материалы пока не появились на сайте, «поскольку ещё не созданы соответствующие индексы».

В подробности господин Грэм предпочёл не вдаваться, ограничившись упоминанием «различных операционных причин», связанных с «распределением ресурсов». Но причина сбоя, по его словам уже устранена, и скоро сайт продолжит работать в прежнем режиме. За последние несколько лет у проекта Internet Archive возникали проблемы и юридического характера: некоммерческая организация проиграла апелляцию в судебном разбирательстве, связанном с оцифровкой книг; а звукозаписывающие компании потребовали у неё $700 млн за проект, в рамках которого в открытый доступ выкладывались оцифровки старых виниловых пластинок.

Архив интернета вновь оштрафовали за неудаление запрещённого контента — на 3,5 млн рублей

В Москве прошло заседание Таганского суда, который признал некоммерческую организацию Internet Archive виновной в административном правонарушении, выразившемся в неудалении запрещённого российским законодательством контента, в связи с чем назначил ей штраф в размере 3,5 млн рублей.

 Источник изображения: Pixabay

Источник изображения: Pixabay

«Internet Archive признана виновной в административном правонарушении, предусмотренном ч.2 ст. 13.41 КоАП (неудаление запрещённого контента), организации назначен штраф в размере 3,5 млн рублей», — сообщили корреспонденту агентства «Интерфакс» в пресс-службе суда.

До этого Internet Archive уже штрафовали несколько раз на 800 тысяч рублей за неудаление запрещённого в России контента, в том числе страниц с описанием рецепта изготовления «коктейля Молотова» и взрывных устройств, а также статей, признанных экстремистскими, с контентом, направленным на разжигание ненависти, страниц с экстремистской литературой и антисемитскими материалами.

На прошлой неделе её сервис Wayback Machine подвергся мощной DDoS-атаке, а также был взломан хакерами, которым удалось похитить данные 31 млн пользователей. Ответственность за DDoS-атаку на платформу взяла на себя хакерская группировка SN_Blackmeta. Как утверждает ресурс xakep.ru, за взломом платформы и DDoS-атакой стоят разные злоумышленники.

Internet Archive всё ещё не работает после взлома — на восстановление уйдёт ещё несколько дней

На этой неделе хакеры взломали сервис Wayback Machine, который принадлежит некоммерческой организации Internet Archive и позволяет пользователям просматривать сохранённые когда-то в прошлом страницы веб-сайтов. Во время DDoS-атаки на платформу злоумышленникам удалось похитить данные 31 млн пользователей сервиса, включая логины, адреса электронной почты и пароли в зашифрованном виде. Работоспособность Internet Archive будет восстановлена в течение нескольких дней.

 Источник изображения: pexels.com

Источник изображения: pexels.com

«Данные в безопасности. Сервисы отключены от сети, пока мы их изучаем и совершенствуем. Извините, но это необходимо. Сотрудники @internetarchive работают не покладая рук. Ориентировочные сроки: дни, а не недели», — заявил основатель платформы Брюстер Кейл (Brewster Kahle).

О взломе Internet Archive стало известно в середине недели. Посетители сайта archive.org обратили внимание на появление уведомления, которое оставили злоумышленники и в котором говорилось о взломе площадки. Позднее основатель Have I Been Pwned Трой Хант (Troy Hunt) сообщил, что в его распоряжение попал файл с украденными данными пользователей. Согласно имеющимся данным, последняя запись в украденной базе данных датирована 28 сентября 2024 года. Зарегистрированные на сайте Ханта пользователи могут получить предупреждение, если связанная с ними информация присутствует в украденной базе данных.


window-new
Soft
Hard
Тренды 🔥
OpenAI сообщила, что её сервисами теперь пользуются более миллиарда человек и свыше двух миллионов компаний 2 ч.
Вложив ещё $50 млрд в OpenAI, Amazon теперь владеет 5 % её капитала 5 ч.
Новая статья: Halo: Campaign Evolved — по третьему кругу. Рецензия 11 ч.
Издатель апокалиптического вестерна Guns of Eschaton показал последнее предсмертное интервью арт-директора Half-Life 2 Виктора Антонова 16 ч.
Вредоносное ПО научилось использовать ИИ прямо во время атаки — ESET предупредила о новых угрозах 16 ч.
Эмуляция PS5 покорила новый рубеж: отдельные 3D-игры показали вполне комфортные 30 FPS 16 ч.
«Худшее, что можно было сделать с игрой»: создатели Stellar Blade: Blood Rain возмутили фанатов сгенерированным ИИ музыкальным клипом с главной героиней 17 ч.
Многие игры на физических носителях не защищены от цифрового будущего — половина дисков для Xbox Series X не будет полноценно работать без интернета 18 ч.
Тим Кук намекнул на платную подписку Apple для активных пользователей ИИ 19 ч.
Китайская MiniMax выпустила генератор видео H3 19 ч.
Физики нашли способ резко снизить потребление компьютерной памяти —  решение лежало на поверхности 42 мин.
Катастрофического роста цен на видеокарты пока не было, но всё ещё впереди 2 ч.
NASA повысило шансы на спасение падающей на Землю обсерватории Swift — беспорядочное вращение буксира стабилизируется 3 ч.
Пятёрка производителей памяти за прошлый квартал накопила $90 млрд свободных денежных средств 4 ч.
Keychron показала концепт сверхкомпактной игровой мыши — она весит 30 граммов и подразумевает управление кончиками пальцев 6 ч.
Слухи о неуёмной прожорливости чёрных дыр оказались слишком преувеличенными 13 ч.
Sony продала в прошлом квартале на 36 % меньше игровых консолей PlayStation 5, чем годом ранее 13 ч.
Asus и XFX выпустили свои варианты Radeon RX 9050 — Asus разогнала свою до 2,77 ГГц 13 ч.
Новейшие китайские электромобили способны зарядиться на 70 % менее чем за пять минут 13 ч.
С 2023 года техногиганты потратили на инфраструктуру более $1 трлн 13 ч.