HeadlinesBriefing favicon HeadlinesBriefing.com

Anubis のワークプローフ保護による AI スクレイピング対策

Hacker News •
×

あなたはこれを見ているのは、このウェブサイトの管理者が、AI 企業によるウェブサイトの積極的なスクレイピングという害からサーバーを保護するために Anubis を設定したからです。これはウェブサイトのダウンタイムを引き起こす可能性があり、実際に引き起こしており、その結果、ウェブサイトのリソースが誰もアクセスできなくなります。Anubis は妥協案です。Anubis は、メールスパムを減らすために提案されたワークプローフスキームである Hashcash と同様のワークプローフスキームを使用します。その考え方は、個人レベルでは追加の負荷は無視できるほど小さいが、大規模スクレイパーのレベルではそれが蓄積され、スクレイピングがはるかに高コストになるということです。最終的に、これは一時的な解決策であり、より多くの時間を費やしてフィンガープリントングとヘッドレスブラウザーの識別(たとえば、フォントレンダリングの方法による)に充てることができ、それによって、正当なユーザーである可能性が高いユーザーにワークプローフチャレンジページを提示する必要がなくなります。Anubis は、JShelter などのプラグインが無効にする最新の JavaScript 機能を必要とすることに注意してください。このドメインについては、JShelter または同様のプラグインを無効にしてください。