ক্লাউডফ্লেয়ার এআই বট ব্যবস্থাপনা পুনর্গঠন করেছে
ক্লাউডফ্লেয়ার ঘোষণা করেছে যে ওয়েবসাইট মালিকরা কীভাবে এআই বট ট্রাফিক পরিচালনা করতে পারেন তাতে একটি গুরুত্বপূর্ণ পরিবর্তন এসেছে। জুলাই ২০২৪ থেকে, ক্লাউডফ্লেয়ার গ্রাহকরা একটি ক্লিকে সমস্ত এআই ক্রলার ব্লক করতে সক্ষম ছিলেন। এখন, ব্ল্যাঙ্কেট ব্লকের পরিবর্তে, সাইট মালিকরা তিনটি বিভাগের মধ্যে বেছে নিতে পারেন: সার্চ, ট্রেনিং এবং এজেন্ট। এই পরিবর্তন ওয়েবসাইটগুলির সাথে এআই বটগুলি কীভাবে ইন্টারঅ্যাক্ট করে তার উপর আরও সূক্ষ্ম নিয়ন্ত্রণ প্রদান করে।
নতুন গ্রানুলার নিয়ন্ত্রণ
ক্লাউডফ্লেয়ার ড্যাশবোর্ডের নতুন এআই বট নিয়ন্ত্রণগুলি সাইট মালিকদের সার্চ, ট্রেনিং এবং এজেন্ট বটগুলির জন্য পৃথকভাবে অ্যাক্সেস পরিচালনা করতে দেয়। সার্চ সার্চ ইঞ্জিন ইন্ডেক্সিং কভার করে, ট্রেনিং এআই মডেল প্রশিক্ষণের জন্য ডেটা সংগ্রহ কভার করে এবং এজেন্ট ব্যবহারকারীদের পক্ষে কাজ করা বটগুলি যেমন ChatGPT কভার করে। ১৫ সেপ্টেম্বর, ২০২৬ থেকে, বিজ্ঞাপন বহনকারী পৃষ্ঠাগুলিতে ট্রেনিং এবং এজেন্ট বটগুলি ডিফল্টভাবে ব্লক করা হবে, যেহেতু বিজ্ঞাপন ইঙ্গিত দেয় যে একটি সাইট মানব দর্শক চায়। সার্চ ক্রলারদের এখনও অনুমতি দেওয়া হবে। Googlebot-এর মতো মাল্টি-পারপাস ক্রলার যারা সার্চ এবং ট্রেনিং উভয়ই করে, তাদের সবচেয়ে কঠোর নিয়ম অনুসারে চিকিত্সা করা হবে। নতুন বিকল্পগুলি ফ্রি প্ল্যানের ব্যবহারকারীদের জন্যও উপলব্ধ।
বট অপারেটরদের ক্রলার বিভক্ত করতে উৎসাহিত করা
ক্লাউডফ্লেয়ার বট অপারেটরদের তাদের ক্রলারগুলিকে উদ্দেশ্য অনুসারে বিভক্ত করতে চাপ দিচ্ছে। ক্লাউডফ্লেয়ারের সিইও ম্যাথিউ প্রিন্স আগে Google-কে তার সার্চ ক্রলারকে তার এআই ক্রলারের সাথে বান্ডেল করার জন্য সমালোচনা করেছিলেন। জুন ২০২৬-এ, প্রিন্স উল্লেখ করেছিলেন যে বট ট্রাফিক প্রথমবারের মতো ইন্টারনেটে মানব ট্রাফিককে ছাড়িয়ে গেছে, একটি মাইলফলক যা তিনি মূলত ২০২৭ সালের শেষের দিকে আশা করেননি।
BotBase: এন্টারপ্রাইজ বট ডাটাবেস
এন্টারপ্রাইজ গ্রাহকদের জন্য, ক্লাউডফ্লেয়ার BotBase চালু করছে, যা ড্যাশবোর্ডে নির্মিত সমস্ত পরিচিত বটের একটি অনুসন্ধানযোগ্য ডাটাবেস। এটি দেখায় যে প্রতিটি বট কীভাবে শ্রেণীবদ্ধ করা হয়েছে এবং এটি কীভাবে সামগ্রী ব্যবহার করে, এটি শুধুমাত্র পৃষ্ঠাগুলির লিঙ্ক দেয় বা সম্পূর্ণরূপে পুনরুত্পাদন করে কিনা। ক্লাউডফ্লেয়ার যাচাইকৃত বটগুলির নিয়মও পরিবর্তন করছে। পূর্বে, সমস্ত যাচাইকৃত বট স্বয়ংক্রিয়ভাবে অনুমোদিত ছিল। এখন থেকে, একটি বটের বিভাগ নির্ধারণ করে যে এটি অ্যাক্সেস পায় কিনা। 'যাচাইকৃত' লেবেল একা আর যথেষ্ট হবে না: বট অপারেটরদের প্রমাণ করতে হবে যে তারা সততার সাথে নিজেদের পরিচয় দেয় এবং তাদের দেওয়া অ্যাক্সেসের অপব্যবহার করে না।
ওয়েবসাইট মালিকদের জন্য প্রভাব
এই আপডেট ওয়েবসাইট মালিকদের এআই বট ট্রাফিক পরিচালনায় আরও নমনীয়তা দেয়। বটগুলিকে বিভাগে বিভক্ত করে, সাইট মালিকরা বিজ্ঞাপন-সমর্থিত পৃষ্ঠাগুলিতে ট্রেনিং এবং এজেন্ট বট ব্লক করার সময় সার্চ ইন্ডেক্সিং অনুমতি দিতে পারেন। এটি অনুমতি ছাড়া এআই প্রশিক্ষণের জন্য সামগ্রী ব্যবহার থেকে রক্ষা করতে সাহায্য করে যখন সার্চ ইঞ্জিনগুলিকে সাইটটি ইন্ডেক্স করতে দেয়। বিজ্ঞাপন-সমর্থিত পৃষ্ঠাগুলির জন্য ট্রেনিং এবং এজেন্ট বটগুলির ডিফল্ট ব্লক একটি গুরুত্বপূর্ণ পরিবর্তন যা বিজ্ঞাপন রাজস্বের উপর নির্ভরশীল প্রকাশকদের স্বার্থের সাথে সামঞ্জস্যপূর্ণ।
এআই কোম্পানিগুলির উপর প্রভাব
এআই কোম্পানিগুলি যারা প্রশিক্ষণ বা এজেন্ট কাজের জন্য ক্রলার ব্যবহার করে তাদের এই নতুন নিয়ন্ত্রণগুলির সাথে খাপ খাইয়ে নিতে হবে। সাইট মালিকদের পছন্দ মেনে চলতে তাদের ক্রলারগুলিকে বিভিন্ন উদ্দেশ্যে পৃথক বটে বিভক্ত করতে হতে পারে। ক্লাউডফ্লেয়ারের পদক্ষেপ অন্যান্য ইন্টারনেট অবকাঠামো প্রদানকারীদের উপরও চাপ সৃষ্টি করে একই ধরনের গ্রানুলার নিয়ন্ত্রণ অফার করতে।
উপসংহার
ক্লাউডফ্লেয়ারের নতুন এআই বট নিয়ন্ত্রণগুলি ওয়েবসাইট মালিকদের তাদের সামগ্রী কীভাবে এআই দ্বারা ব্যবহার করা হয় তার উপর আরও নিয়ন্ত্রণ দেওয়ার ক্ষেত্রে একটি বড় পদক্ষেপ। গ্রানুলার বিকল্প এবং বিজ্ঞাপন-সমর্থিত পৃষ্ঠাগুলির জন্য ট্রেনিং এবং এজেন্ট বটগুলির ডিফল্ট ব্লক প্রদান করে, ক্লাউডফ্লেয়ার সামগ্রী স্রষ্টা এবং এআই ডেভেলপারদের চাহিদার মধ্যে ভারসাম্য বজায় রাখতে সহায়তা করছে। এন্টারপ্রাইজ গ্রাহকদের জন্য BotBase চালু করা স্বচ্ছতা এবং নিয়ন্ত্রণ আরও বাড়িয়ে তোলে।
এই নিবন্ধটি The Decoder-এর রিপোর্টিংয়ের উপর ভিত্তি করে তৈরি। মূল নিবন্ধটি পড়ুন।
Originally published on the-decoder.com