একজন ডেভেলপার sprinklz.io তৈরি করেছেন, একটি কাস্টমাইজযোগ্য ফিড রিডার যা LLM-এর মতো বিষয়গুলোর অগ্রাধিকার কমাতে পারে। তিনি প্রকল্পটি Hacker News-এ পোস্ট করেন, যা প্রায় একশত আপভোট পায়, এবং ব্যবহারকারীরা AI কনটেন্ট ফিল্টার করে উপভোগ করছিলেন বলে মনে হয়, যা দেখিয়েছে এমন একটি টুল কেন কার্যকর।
এর কিছুক্ষণ পরেই ওয়েবসাইটটি অসহনীয়ভাবে ধীর হয়ে যায়। ডেভেলপার প্রথমে ভেবেছিলেন অতিরিক্ত মনোযোগই এর কারণ, কিন্তু পোস্ট লাইভ হওয়ার কয়েক দিন পরও ধীরগতি চলতে থাকে এবং আরও খারাপ হয়। প্রতিটি এন্ডপয়েন্ট লগ করে দেখা যায় যে বেশিরভাগ অনুরোধ আদৌ সংবাদ নিবন্ধ আনার চেষ্টা করেনি। সাইটটি একটি সিঙ্গেল-পেজ অ্যাপ্লিকেশন হওয়ায়, এসব অনুরোধের বেশিরভাগই পেজ রেন্ডার করার জন্য প্রয়োজনীয় JavaScript চালায়নি।
NGINX লগ দেখায় যে প্রায় অর্ধেক ট্রাফিক একজন ব্যবহারকারী থেকে এসেছে, একটি সেবা যা নিজেকে ওয়েবসাইট পরিবর্তনের উপর নজর রাখে এবং সেগুলোকে AI-জেনারেটেড নিউজলেটারে সারসংক্ষেপ করে বলে বর্ণনা করে। এটি প্রতি মিনিটে সাইটটিকে বহুবার প্রশ্ন করছিল, এবং ডেভেলপার সেটি ব্লক করেন। অন্য উৎসগুলো ছিল Claude, OpenAI এবং Google-এর সার্চ ইনডেক্সারের স্ট্যান্ডার্ড ক্রলার, যারা নিজেদের পরিচয় দিয়েছিল। কয়েকটি দুর্বলতা-স্ক্যানারও দেখা যায়, যার একটি WordPress ফাইল খুঁজছিল, যদিও সাইটটি WordPress চালায় না।
ডেভেলপার বেশিরভাগ AI স্ক্যানারকে নিরুৎসাহিত করতে robots.txt আপডেট করেন, তবে Googlebot এবং অন্যান্য সার্চ ট্রাফিককে অনুমতি দেন, এবং যুক্তিসঙ্গত রেট লিমিট যোগ করেন। মূল শিক্ষা ছিল একটি দ্রুততর ও আরও স্কেলযোগ্য সাইটের প্রয়োজনীয়তা। পরের কয়েক সপ্তাহে ডেভেলপার কয়েকটি অবকাঠামোগত উন্নতি করেন, যা সব ব্যবহারকারীর জন্য উল্লেখযোগ্য কর্মক্ষমতার উন্নতি আনবে বলে আশা করা যায়।
উৎস: Hacker News · সারাংশ: HeadlinesBriefing