Сегодня 23 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → бекап

GIF с танцем Рейчел из «Друзей» разросся до сотен гигабайт и сломал бэкапы Discourse

Discourse — широко используемая платформа для обсуждений, которая в настоящее время поддерживает более 22 000 онлайн-сообществ. Резервное копирование сайта было нарушено из-за GIF-файла размером 1,6 Мбайт, который был скопирован пользователями 246 173 раза, что превысило лимит файловой системы Linux ext4 на жёсткие ссылки. В результате анимация танца радости Рейчел из сериала «Друзья» в исполнении Дженнифер Энистон (Jennifer Aniston) заняла в бэкапе 377 Гбайт.

 Источник изображений: warnerbros.com

Источник изображений: warnerbros.com

Платформа Discourse позволяет пользователям вставлять эмодзи и GIF-изображения в свои обсуждения. «Когда файл перемещается между контекстами безопасности (например, из личного сообщения в публикацию), система создаёт новую копию со случайным SHA1, — пояснил технический блогер Discourse Джейк Голдсборо (Jake Goldsborough). — Исходное содержимое идентично, но Discourse рассматривает его как новый файл».

Таким образом, популярное изображение или GIF-реакция распространяется по постам, репостам и личным сообщениям, и каждый контекст создаёт ещё одну копию файла. Файл, создавший 377 Гбайт избыточного размера бэкапа — это Рейчел из сериала «Друзья», танцующая свой танец радости. Эта GIF-анимация, по словам Discourse, «постоянно использовалась в постах, личных сообщениях, повсюду».

Первая попытка Discourse решить проблему перегрузки системы дубликатами заключалась в отслеживании оригинального контента по его хешу. Во время резервного копирования загрузки группировались по хешу, и загружался только первый файл в каждой группе. Для всех дубликатов создавались жёсткие ссылки.

Это казалось элегантным решением, пока компания не столкнулась с ограничением файловой системы ext4 на примерно 65 000 жёстких ссылок на один индексный дескриптор (inode). В результате, по словам Discourse, «вместо одной загрузки для всех 246 173 дубликатов мы получили одну загрузку плюс 181 000 резервных загрузок после достижения лимита».

Discourse всё же удалось найти решение. Оно начинается так же, как и старое, с создания жёстких ссылок. Но когда файловая система выдаёт сообщение об ошибке EMLINK («превышение лимита жёстких ссылок»), следующая копия файла становится «основной», пока снова не будет достигнут лимит. Эта новая мера, по словам Discourse, «работает на любой файловой системе, никакой настройки не требуется».

«Теперь мы знаем, что Дженнифер Энистон может проводить стресс-тестирование инфраструктуры», — с иронией прокомментировала ситуацию Discourse в своём блоге.


window-new
Soft
Hard
Тренды 🔥
Галактическая холодная война, наследие Шепарда и матриарх Лиара: блогер рассказал, чего лишились игроки из-за отмены Mass Effect: Universe 10 мин.
Студия разработчиков Marvel’s Blade, Deathloop и Dishonored оказалась под угрозой закрытия — на поиск покупателя у Arkane осталось три недели 2 ч.
iPod исполнилось 25 лет — сегодня легендарный плеер появился в Apple Music с нарезкой из 1029 песнями 3 ч.
Для Metro 2033 Redux и Metro: Last Light Redux выпущены обновления с поддержкой нейронного рендеринга DLSS 5 3 ч.
ИИ-компании испугались биржи: Anthropic осталась последним претендентом на IPO этой осенью 5 ч.
Аудитория Warhammer 40,000: Space Marine 2 выросла до 15 млн человек — шутер будет получать обновления ещё минимум год 6 ч.
«Чёрный октябрь» для интернета: ИИ находит дыры в защите быстрее, чем их успевают латать 7 ч.
Google Cloud представила Agent Compute Engine — сервис для запуска ИИ-агентов 8 ч.
Microsoft закрыла «Гараж» — площадку для личных разработок сотрудников и проведения хакатонов 8 ч.
ИИ-агенты добрались до банковских счетов людей — и начали делать то, о чём их не просили 9 ч.
Solidigm отказалась от IPO, но не от планов построить фабрику SSD в США 16 мин.
Представлена Sigma FP2 — самая лёгкая полнокадровая беззеркалка в мире, которую можно доработать под свои задачи 3 ч.
Dell представила системы на NVIDIA Vera и первую стойку для инференса на чипах Groq 3 LPU 4 ч.
Китайская YMTC готовит серийное производство LPDDR5X со скоростью 9600 МТ/с и компоновкой 4F2 4 ч.
NVIDIA научилась разворачивать ИИ-ЦОД за две недели вместо полугода 5 ч.
Micron перепрыгнет через поколение и выпустит 3D NAND с более чем 400 слоями в следующем году — она будет на 50 % быстрее 5 ч.
DeepSeek за два года устранит зависимость от Nvidia — основными станут ИИ-ускорители Huawei 6 ч.
Western Digital увеличила квартальную выручку и прибыль в полтора раза 6 ч.
Космический телескоп Roman впечатлил учёных первыми тестами — впереди грандиозная охота за тайнами Вселенной 6 ч.
Era4 раскрыла подробности о гигаваттном ЦОД гиперскейл-уровня на месте бывшего металлургического завода в Уэльсе 8 ч.