HeadlinesBriefing favicon HeadlinesBriefing.com

Anubis Proof-of-Work блокирует AI-скраперы

Hacker News •
×

Вы видите это, потому что администратор этого веб-сайта настроил Anubis для защиты сервера от нашествия AI-компаний, агрессивно скрапящих веб-сайты. Это может и вызывает простои сайтов, делая их ресурсы недоступными для всех. Anubis — это компромисс. Anubis использует схему Proof-of-Work в духе Hashcash, предложенной схемы доказательства работы для уменьшения спама в электронной почте. Идея в том, что на индивидуальном уровне дополнительная нагрузка пренебрежимо мала, но на уровне массовых скраперов она накапливается и делает скрапинг намного более дорогим. В конечном счете, это решение-заглушка, чтобы можно было уделить больше времени отпечаткам пальцев и идентификации headless-браузеров (например, через то, как они рендерят шрифты), так что страница вызова доказательства работы не нужно показывать пользователям, которые с гораздо большей вероятностью являются легальными. Обратите внимание, что Anubis требует использования современных функций JavaScript, которые плагины вроде JShelter отключат. Пожалуйста, отключите JShelter или другие подобные плагины для этого домена.