Сегодня 07 августа 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Cloudflare обвинила Perplexity в тотальном сборе данных для ИИ в обход любых запретов

Компания Cloudflare обвинила стартап Perplexity в массовом скрапинге веб-сайтов, которые явным образом запрещают сбор данных. Согласно исследованию Cloudflare, опубликованному 4 августа, боты Perplexity игнорировали технические ограничения, установленные в файле robots.txt, и продолжали извлекать и копировать контент с десятков тысяч доменов, создавая миллионы запросов ежедневно.

 Источник изображения: Štefan Štefančík/Unsplash

Источник изображения: Štefan Štefančík/Unsplash

Как утверждает Cloudflare, Perplexity изменяла названия своих ботов в поле User-Agent и использовала разные автономные системы (ASN) для обхода блокировок, включая имитацию браузера Google Chrome на macOS. По информации TechCrunch, Cloudflare выявила эту активность после жалоб клиентов, которые уже внесли правила в robots.txt и установили дополнительные блокировки для известных ботов Perplexity. В результате Cloudflare, применив комбинацию методов машинного обучения и сетевых сигналов, исключила ботов Perplexity из своего официального списка доверенных краулеров и внедрила дополнительные механизмы их блокировки.

Представитель Perplexity Джесси Двайер (Jesse Dwyer) назвал публикацию Cloudflare маркетинговой инициативой, заявив, что представленные скриншоты не подтверждают факт доступа к контенту. В последующем письме он добавил, что упомянутый в отчёте бот не принадлежит компании. Однако Cloudflare настаивает на достоверности своих данных.

Ранее Cloudflare уже выступала с критикой агрессивного скрапинга со стороны ИИ-компаний, а глава Cloudflare Мэтью Принс (Matthew Prince) неоднократно заявлял, что массовый сбор данных подрывает экономику интернета, особенно для новостных издательств. В связи с этим компания выпустила бесплатный инструмент для защиты от копирования контента в целях обучения моделей. Также на фоне происходящего Cloudflare, как и обещала в сентябре 2024 года, запустила торговую платформу, позволяющую владельцам сайтов взимать плату с ИИ-разработчиков за доступ к данным.

Это уже не первое обвинение в адрес Perplexity. В прошлом году издания, в том числе Wired, обвиняли стартап в воспроизведении их материалов без должного указания источника. А на конференции Disrupt 2024 генеральный директор Perplexity Аравинд Сринивас (Aravind Srinivas) затруднился дать чёткое определение плагиату, когда его об этом спросил журналист TechCrunch Девин Колдеви (Devin Coldewey).

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
В Yandex Cloud AI Studio появились открытые модели OpenAI 13 мин.
Над PUBG Mobile нависла угроза блокировки в России из-за нарушения закона «о приземлении» 2 ч.
В Apple расцвёл кризис кадров: компанию массово покидают ИИ-специалисты 2 ч.
Влияние Resident Evil, продолжительность и никаких творческих ограничений: разработчики гротескного хоррора Ill ответили на вопросы игроков 4 ч.
Анонсирована Nutmeg! — необычная футбольная стратегия, где вы будете рады получить карточку 4 ч.
«Слишком велика, чтобы провалиться»: Activision внимательно следит за Battlefield 6, но за Call of Duty не переживает 4 ч.
GitHub преждевременно «представил» ИИ-модели OpenAI GPT-5 5 ч.
ChatGPT превратили в похитителя конфиденциальных данных одним файлом и без единого клика 6 ч.
В Google Pixel 10 появится ИИ-советчик по фотосъёмке и голосовое редактирование снимков 6 ч.
Объём мирового рынка IaaS в 2024 году превысил $170 млрд 6 ч.