CloudFlare अब नई साइटों पर डिफ़ॉल्ट रूप से AI बॉट को ब्लॉक करेगा प्रौद्योगिकी समाचार

Author name

02/07/2025

CloudFlare, जो वैश्विक स्तर पर सभी वेबसाइटों के लगभग 20% की रक्षा करता है, यह बदल रहा है कि AI कंपनियां खुली वेब के साथ कैसे बातचीत करती हैं। कंपनी अब सभी नई ऑनबोर्ड वेबसाइटों पर डिफ़ॉल्ट रूप से एआई क्रॉलर को ब्लॉक करेगी, एआई फर्मों को प्रशिक्षण या खोज के लिए साइट सामग्री तक पहुंचने से पहले स्पष्ट सहमति प्राप्त करने के लिए मजबूर करेगी।

यह कदम सामग्री स्क्रैपिंग को रोकने के लिए CloudFlare का नवीनतम प्रयास है, जिसमें अनुमति के बिना AI बॉट का उपयोग करके वेबसाइटों से स्वचालित रूप से डेटा निकालना और आमतौर पर दुर्भावनापूर्ण इरादे के लिए शामिल है।

यह परिवर्तन एक नए उत्पाद के लॉन्च के साथ आता है जिसे पे प्रति क्रॉल कहा जाता है, एक बाज़ार जो वेबसाइट के मालिकों और मीडिया प्रकाशकों को अपनी सामग्री को स्क्रैप करने के लिए एआई बॉट्स चार्ज करने की अनुमति देता है।

कहानी इस विज्ञापन के नीचे जारी है

प्रकाशक उपयोग के मामले के आधार पर कस्टम मूल्य निर्धारण सेट कर सकते हैं-क्या डेटा का उपयोग बड़े भाषा मॉडल, पावर रियल-टाइम खोज परिणामों को प्रशिक्षित करने या स्वतंत्र बॉट की सहायता के लिए किया जाएगा। उत्पाद का उद्देश्य एआई फर्मों को डेटा प्राप्त करने में अधिक पारदर्शिता और निष्पक्षता पैदा करना है।

प्रमुख मीडिया आउटलेट्स जैसे कोंडे नास्ट, समय, और अटलांटिक पहले से ही कार्यक्रम में शामिल हो चुके हैं, एआई-जनित उत्तरों पर रेफरल ट्रैफ़िक में गिरावट को दोष देते हुए, मूल स्रोतों पर क्लिक करने के लिए उपयोगकर्ताओं की आवश्यकता को कम करते हैं।

ये प्रकाशक, दूसरों के बीच का तर्क देते हैं कि निष्पक्ष मुआवजे के बिना, एआई स्क्रैपिंग पत्रकारिता और सामग्री निर्माण को बनाए रखने की उनकी क्षमता को कम करता है।

CloudFlare ने तुलनात्मक क्रॉल-टू-क्रॉल अनुपात भी जारी किया जो उत्पन्न ट्रैफ़िक उत्पन्न और डेटा के बीच असंतुलन को उजागर करता है। Openai के क्रॉलर कथित तौर पर प्रति रेफरल 1,700 अनुरोध करते हैं, जबकि एन्थ्रोपिक 73,000 से 1 में एक चौंका देने वाला है। इसके विपरीत, Google का क्रॉल-टू-क्लिक अनुपात अधिक संतुलित 14-1 पर बैठता है।

कहानी इस विज्ञापन के नीचे जारी है

यह कदम AI डेटा अर्थव्यवस्था में निष्क्रिय बुनियादी ढांचे से सक्रिय वार्ताकार तक क्लाउडफ्लारे की भूमिका को फिर से परिभाषित करता है। जैसा कि एआई सहायक अधिक स्वतंत्र हो जाते हैं, और एआई-जनित उत्तर तेजी से पारंपरिक वेब ट्रैफ़िक को प्रतिस्थापित करते हैं, प्रति क्रॉल जैसे उपकरण यह निर्धारित कर सकते हैं कि किन साइटों को काफी मुआवजा मिलता है।

(इस लेख को अरफान जेलानी द्वारा क्यूरेट किया गया है, जो इंडियन एक्सप्रेस के साथ एक प्रशिक्षु है)

© IE ऑनलाइन मीडिया सर्विसेज प्राइवेट लिमिटेड