Инженер, владелец нового сайта Brain Baking, обнаружил, что его ресурс страдает от атак парсеров, которые исчерпали ресурсы сервера. При попытке зайти на сайт он заметил значительные задержки, что заставило его проверить систему. В процессе выяснилось, что экземпляр Gitea и Fail2ban загружают процессор до предела. Несмотря на попытки отключить Gitea, ситуация не изменилась, так как журналы доступа Nginx были переполнены записями с IP-адресов ботов.
Разработчик отметил, что несмотря на наличие средств для блокировки вредоносных ботов, пользовательский агент, используемый парсерами, трудно идентифицировать как «вредный». Он временно заблокировал некоторые IP-адреса, но атакующие диапазоны оставались прежними. Используя ipinfo.io, инженер выявил источник угрозы, связанный с Alibaba (US) Technology Co., и заблокировал весь диапазон адресов. Он также обратил внимание на рост трафика с подозрительных рефереров.
Инженер намерен перенести Gitea и рассматривает использование инструмента Anubis для защиты своего сервера от ботов. В то же время, другой разработчик создал инструмент Nepenthes для запутывания ИИ-сканеров на своем сайте.
