Skip to content
Электроника и Гаджеты

Электроника и Гаджеты

  • Главная
  • Гаджеты
  • Автоаксессуары
  • Безопасность дома
  • Бытовой электроинструмент
  • Климат-контроль
  • Умная кухня
  • Умное освещение
  • Новости
  • Toggle search form

Проблема с нагрузкой от ИИ-краулеров: владельцы сайтов бьют тревогу

Posted on 06.10.2025 By

Некоторые владельцы веб-ресурсов выражают недовольство из-за значительного числа ботов, особенно краулеров, работающих с ИИ, которые создают серьезную нагрузку на серверы. Согласно данным отчета Fastly, нагрузка от таких ботов может достигать 39 тысяч запросов в минуту. В 2025 году количество запросов от скраперов увеличилось на 87%, при этом основной поток идет от RAG-скраперов. На сегодняшний день ИИ-краулеры составляют около 80% всего трафика ИИ-ботов, в то время как фетчеры отвечают за серьезные всплески нагрузки, как, например, ClaudeBot от Anthropic, который отправил более миллиона запросов к iFixit.com за сутки. В ответ на это владельцы сайтов применяют различные методы защиты, включая капчи и ограничение по количеству запросов. Более креативные подходы, такие как система Anubis, создают дополнительные вычислительные задачи для краулеров, что нагружает их дата-центры. Тем не менее, критики утверждают, что эффективность таких мер сомнительна, а новые ИИ-краулеры нередко игнорируют директивы robots.txt. В условиях, когда боты генерируют более 50% нагрузки, веб-мастера вынуждены прибегать к деструктивным мерам, несмотря на потенциальный вред экологии веба.

Новости

Навигация по записям

Предыдущая запись: Топ-3 смарт-браслета на 2025 год до 5000 рублей
Следующая запись: Немецкая полиция задержала любителя дронов у аэропорта Франкфурта

Новости

Слухи о ценах на новую консоль Valve от Smarty.cz Новости
Возвращение Counter-Strike: Global Offensive в Steam Новости
ИИ успешно решает ЕГЭ по информатике и математике Новости
Новый подход к восстановлению старой пленки с помощью нейросетей Новости
Фильм «Москва слезам не верит»: анализ финала и судьб героинь Новости
Переход владельцев PlayStation 4 на Nintendo Switch 2 вместо PS5 Новости

Copyright © 2026 Электроника и Гаджеты .

Работает на PressBook Masonry Dark