Сегодня 01 ноября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → бекап

GIF с танцем Рейчел из «Друзей» разросся до сотен гигабайт и сломал бэкапы Discourse

Discourse — широко используемая платформа для обсуждений, которая в настоящее время поддерживает более 22 000 онлайн-сообществ. Резервное копирование сайта было нарушено из-за GIF-файла размером 1,6 Мбайт, который был скопирован пользователями 246 173 раза, что превысило лимит файловой системы Linux ext4 на жёсткие ссылки. В результате анимация танца радости Рейчел из сериала «Друзья» в исполнении Дженнифер Энистон (Jennifer Aniston) заняла в бэкапе 377 Гбайт.

 Источник изображений: warnerbros.com

Источник изображений: warnerbros.com

Платформа Discourse позволяет пользователям вставлять эмодзи и GIF-изображения в свои обсуждения. «Когда файл перемещается между контекстами безопасности (например, из личного сообщения в публикацию), система создаёт новую копию со случайным SHA1, — пояснил технический блогер Discourse Джейк Голдсборо (Jake Goldsborough). — Исходное содержимое идентично, но Discourse рассматривает его как новый файл».

Таким образом, популярное изображение или GIF-реакция распространяется по постам, репостам и личным сообщениям, и каждый контекст создаёт ещё одну копию файла. Файл, создавший 377 Гбайт избыточного размера бэкапа — это Рейчел из сериала «Друзья», танцующая свой танец радости. Эта GIF-анимация, по словам Discourse, «постоянно использовалась в постах, личных сообщениях, повсюду».

Первая попытка Discourse решить проблему перегрузки системы дубликатами заключалась в отслеживании оригинального контента по его хешу. Во время резервного копирования загрузки группировались по хешу, и загружался только первый файл в каждой группе. Для всех дубликатов создавались жёсткие ссылки.

Это казалось элегантным решением, пока компания не столкнулась с ограничением файловой системы ext4 на примерно 65 000 жёстких ссылок на один индексный дескриптор (inode). В результате, по словам Discourse, «вместо одной загрузки для всех 246 173 дубликатов мы получили одну загрузку плюс 181 000 резервных загрузок после достижения лимита».

Discourse всё же удалось найти решение. Оно начинается так же, как и старое, с создания жёстких ссылок. Но когда файловая система выдаёт сообщение об ошибке EMLINK («превышение лимита жёстких ссылок»), следующая копия файла становится «основной», пока снова не будет достигнут лимит. Эта новая мера, по словам Discourse, «работает на любой файловой системе, никакой настройки не требуется».

«Теперь мы знаем, что Дженнифер Энистон может проводить стресс-тестирование инфраструктуры», — с иронией прокомментировала ситуацию Discourse в своём блоге.


window-new
Soft
Hard
Тренды 🔥
Новая статья: Gamesblender № 800: битва за Mass Effect, «тяжелый» реализм GTA VI и триумф Phantom Blade Zero 2 ч.
Хоррор Black Lake про заброшенный приют и «бескрайний чёрный океан» обзавёлся первым геймплейным тизером 3 ч.
Binance возобновила вывод средств и возместила 95 % украденных $6,3 млрд 6 ч.
Одно SMS — и смартфон не работает: в Android нашли опасную уязвимость, и в старых версиях её не исправили 11 ч.
Новая статья: Clive Barker’s Hellraiser: Revival — игра, вызывающая приятную боль. Рецензия 24 ч.
Квартальный объём мирового рынка облачных инфраструктур вырос в полтора раза 31-10 23:04
Binance закрыла 90 % дыры после кражи $6,3 млрд — вывод средств обещают вернуть 1 ноября 31-10 21:28
GamesVoice озвучила последний трейлер GTA VI и намекнула, что русский дубляж игры может появиться «когда-нибудь потом» 31-10 20:21
Apple Intelligence на следующей неделе доберётся до Китая — с Qwen от Alibaba, но без новой Siri 31-10 10:29
Новая статья: Gears of War: E-Day — как заводилась бензопила. Рецензия 31-10 00:08
Проект ЦОД Project Blue в Аризоне обострил спор о распределении дефицитных водных ресурсов 11 ч.
Память стала золотой жилой ИИ: Samsung, SK hynix и Micron заработали больше Apple, Microsoft и Amazon 11 ч.
SpaceX не смогла отделаться от иска NAACP по поводу загрязнения воздуха в Мемфисе 12 ч.
Meta тайно создала прототип человекоподобного робота для дома — помогли китайцы 24 ч.
Прогноз Kioxia разочаровал инвесторов — компания отметила снижение темпов роста стоимости флеш-памяти 24 ч.
Орбитальный ЦОД Google Suncatcher вышел на связь и написал хайку 31-10 23:11
Альтман приехал к Samsung выпрашивать память для ИИ на фоне усиления дефицита 31-10 16:56
Подорожают и камеры: Canon готовится переложить рост затрат на покупателей 31-10 13:35
Инвесторы отрезали OpenAI от денег — компания не собрала и половины от $30 млрд, на которые рассчитывала 31-10 10:39
GeForce RTX 5080 исчезла из интернет-магазина Nvidia — в рознице за неё просят уже больше $2000 31-10 10:26