క్లౌడ్ఫ్లేర్ AI బాట్ మేనేజ్మెంట్ను పునర్నిర్మించింది

క్లౌడ్ఫ్లేర్ వెబ్సైట్ యజమానులు AI బాట్ ట్రాఫిక్ను ఎలా నిర్వహించవచ్చనే దానిలో గణనీయమైన మార్పును ప్రకటించింది. జూలై 2024 నుండి, క్లౌడ్ఫ్లేర్ కస్టమర్లు ఒకే క్లిక్తో అన్ని AI క్రాలర్లను బ్లాక్ చేయగలిగారు. ఇప్పుడు, బ్లాంకెట్ బ్లాక్కు బదులుగా, సైట్ యజమానులు మూడు వర్గాల మధ్య ఎంచుకోవచ్చు: సెర్చ్, ట్రైనింగ్ మరియు ఏజెంట్. ఈ మార్పు AI బాట్లు వెబ్సైట్లతో ఎలా ఇంటరాక్ట్ అవుతాయనే దానిపై మరింత సూక్ష్మమైన నియంత్రణను అందిస్తుంది.

కొత్త గ్రాన్యులర్ కంట్రోల్స్

క్లౌడ్ఫ్లేర్ డ్యాష్బోర్డ్లోని కొత్త AI బాట్ కంట్రోల్స్ సైట్ యజమానులు సెర్చ్, ట్రైనింగ్ మరియు ఏజెంట్ బాట్లకు ప్రాప్యతను విడిగా నిర్వహించడానికి అనుమతిస్తాయి. సెర్చ్ సెర్చ్ ఇంజిన్ ఇండెక్సింగ్ను కవర్ చేస్తుంది, ట్రైనింగ్ AI మోడల్ ట్రైనింగ్ కోసం డేటా సేకరణను కవర్ చేస్తుంది మరియు ఏజెంట్ ChatGPT వంటి వినియోగదారుల తరపున పనిచేసే బాట్లను కవర్ చేస్తుంది. సెప్టెంబర్ 15, 2026 నుండి, ప్రకటనలను కలిగి ఉన్న పేజీలలో ట్రైనింగ్ మరియు ఏజెంట్ బాట్లు డిఫాల్ట్గా బ్లాక్ చేయబడతాయి, ఎందుకంటే ప్రకటనలు ఒక సైట్ మానవ సందర్శకులను కోరుకుంటుందని సూచిస్తాయి. సెర్చ్ క్రాలర్లను ఇప్పటికీ అనుమతించబడతాయి. Googlebot వంటి మల్టీ-పర్పస్ క్రాలర్లు సెర్చ్ మరియు ట్రైనింగ్ రెండింటినీ చేస్తాయి, వాటికి ఏ నియమం కఠినమైనదో దాని ప్రకారం చికిత్స చేయబడతాయి. కొత్త ఎంపికలు ఉచిత ప్లాన్లోని వినియోగదారులకు కూడా అందుబాటులో ఉన్నాయి.

బాట్ ఆపరేటర్లు క్రాలర్లను విభజించడానికి ప్రోత్సహించబడ్డారు

క్లౌడ్ఫ్లేర్ బాట్ ఆపరేటర్లను వారి క్రాలర్లను ప్రయోజనం ద్వారా విభజించడానికి ప్రోత్సహిస్తోంది. క్లౌడ్ఫ్లేర్ CEO మాథ్యూ ప్రిన్స్ గతంలో Google దాని సెర్చ్ క్రాలర్ను దాని AI క్రాలర్తో కలిపినందుకు విమర్శించారు. జూన్ 2026లో, ప్రిన్స్ బాట్ ట్రాఫిక్ మొదటిసారిగా ఇంటర్నెట్లో మానవ ట్రాఫిక్ను అధిగమించిందని పేర్కొన్నారు, ఇది అసలు 2027 చివరి వరకు ఆశించని మైలురాయి.

బాట్బేస్: ఎంటర్ప్రైజ్ బాట్ డేటాబేస్

ఎంటర్ప్రైజ్ కస్టమర్ల కోసం, క్లౌడ్ఫ్లేర్ బాట్బేస్ను కూడా ప్రారంభిస్తోంది, ఇది డ్యాష్బోర్డ్లో నిర్మించిన అన్ని తెలిసిన బాట్ల శోధించదగిన డేటాబేస్. ఇది ప్రతి బాట్ ఎలా వర్గీకరించబడిందో మరియు అది కంటెంట్ను ఎలా ఉపయోగిస్తుందో, అది పేజీలకు లింక్ చేస్తుందా లేదా వాటిని పూర్తిగా పునరుత్పత్తి చేస్తుందా అని చూపిస్తుంది. క్లౌడ్ఫ్లేర్ ధృవీకరించబడిన బాట్ల కోసం నియమాలను కూడా మారుస్తోంది. గతంలో, అన్ని ధృవీకరించబడిన బాట్లు స్వయంచాలకంగా అనుమతించబడ్డాయి. ఇకపై, బాట్ యొక్క వర్గం దానికి ప్రాప్యత లభిస్తుందో లేదో నిర్ణయిస్తుంది. 'ధృవీకరించబడిన' లేబుల్ మాత్రమే ఇకపై సరిపోదు: బాట్ ఆపరేటర్లు వారు నిజాయితీగా తమను తాము గుర్తించారని మరియు వారికి మంజూరు చేసిన ప్రాప్యతను దుర్వినియోగం చేయరని నిరూపించాల్సి ఉంటుంది.

Cloudflare's new AI bot controls in the dashboard let site owners manage access for Search, Training, and Agent bots separately. | Image: Cloudflare
Cloudflare's new AI bot controls in the dashboard let site owners manage access for Search, Training, and Agent bots separately. | Image: Cloudflare

వెబ్సైట్ యజమానులకు చిక్కులు

ఈ అప్డేట్ వెబ్సైట్ యజమానులకు AI బాట్ ట్రాఫిక్ను నిర్వహించడంలో మరింత సౌలభ్యాన్ని ఇస్తుంది. బాట్లను వర్గాలుగా వేరు చేయడం ద్వారా, సైట్ యజమానులు ప్రకటనలతో కూడిన పేజీలలో ట్రైనింగ్ మరియు ఏజెంట్ బాట్లను బ్లాక్ చేస్తూ సెర్చ్ ఇండెక్సింగ్ను అనుమతించవచ్చు. ఇది అనుమతి లేకుండా AI ట్రైనింగ్ కోసం కంటెంట్ ఉపయోగించబడకుండా రక్షించడంలో సహాయపడుతుంది, అదే సమయంలో సెర్చ్ ఇంజిన్లు సైట్ను ఇండెక్స్ చేయడానికి అనుమతిస్తుంది. ప్రకటనలతో కూడిన పేజీల కోసం ట్రైనింగ్ మరియు ఏజెంట్ బాట్లపై డిఫాల్ట్ బ్లాక్ అనేది ప్రకటనల ఆదాయంపై ఆధారపడే ప్రచురణకర్తల ప్రయోజనాలతో సమలేఖనం చేసే ముఖ్యమైన మార్పు.

AI కంపెనీలపై ప్రభావం

ట్రైనింగ్ లేదా ఏజెంట్ పనుల కోసం క్రాలర్లను ఉపయోగించే AI కంపెనీలు ఈ కొత్త నియంత్రణలకు అనుగుణంగా ఉండాలి. సైట్ యజమానుల ప్రాధాన్యతలను పాటించడానికి వారు తమ క్రాలర్లను వివిధ ప్రయోజనాల కోసం ప్రత్యేక బాట్లుగా విభజించాల్సి రావచ్చు. క్లౌడ్ఫ్లేర్ యొక్క చర్య ఇతర ఇంటర్నెట్ ఇన్ఫ్రాస్ట్రక్చర్ ప్రొవైడర్లపై కూడా ఇలాంటి గ్రాన్యులర్ కంట్రోల్స్ అందించడానికి ఒత్తిడి తెస్తుంది.

ముగింపు

క్లౌడ్ఫ్లేర్ యొక్క కొత్త AI బాట్ కంట్రోల్స్ వెబ్సైట్ యజమానులకు వారి కంటెంట్ AI ద్వారా ఎలా ఉపయోగించబడుతుందనే దానిపై మరింత నియంత్రణ ఇవ్వడంలో ఒక ప్రధాన ముందడుగును సూచిస్తాయి. గ్రాన్యులర్ ఎంపికలను మరియు ప్రకటనలతో కూడిన పేజీల కోసం ట్రైనింగ్ మరియు ఏజెంట్ బాట్లపై డిఫాల్ట్ బ్లాక్ను అందించడం ద్వారా, క్లౌడ్ఫ్లేర్ కంటెంట్ సృష్టికర్తలు మరియు AI డెవలపర్ల అవసరాలను సమతుల్యం చేయడానికి సహాయపడుతోంది. ఎంటర్ప్రైజ్ కస్టమర్ల కోసం బాట్బేస్ ప్రవేశపెట్టడం పారదర్శకత మరియు నియంత్రణను మరింత మెరుగుపరుస్తుంది.

ఈ కథనం ది డీకోడర్ నివేదిక ఆధారంగా రూపొందించబడింది. అసలు కథనాన్ని చదవండి.

Originally published on the-decoder.com