OpenAI, Google, Microsoft और Anthropic ने नया “पॉलिसी टोकन” पेश किया, जिससे प्रकाशकों को एआई स्क्रैपिंग से बाहर निकलने की सुविधा

सारांश

OpenAI, Google, Microsoft और Anthropic ने मिलकर एक मानक “पॉलिसी टोकन” बनाने की घोषणा की है, जिसे वेबसाइट के robots.txt फ़ाइल में जोड़कर प्रकाशक यह संकेत दे सकते हैं कि उनका कंटेंट एआई प्रशिक्षण में उपयोग नहीं होना चाहिए। Anthropic के मानक प्रमुख केविन केली ने इस प्रस्ताव को IETF के तहत तैयार किया है, जिससे अब प्रत्येक कंपनी को अलग‑अलग अनुरोध भेजने की जरूरत नहीं रहेगी।

टोकन कैसे काम करता है

• टोकन को robots.txt में एक साधारण पंक्ति के रूप में जोड़ा जाता है (उदाहरण: `AI-Training: no`)।
• सभी भागीदारी करने वाले एआई क्रॉलर पेज फ़ेच करने से पहले इस फ़ाइल को पढ़ेंगे।
• यदि टोकन मौजूद है, तो क्रॉलर को पेज को मॉडल प्रशिक्षण या ग्राउंडिंग के लिए उपयोग नहीं करना होगा।
• यह संकेत Bing या Google पर साइट की सर्च रैंकिंग को प्रभावित नहीं करता।

कंपनियों की प्रतिबद्धताएँ

• Anthropic ने पहले ही टोकन को मान्य किया है।
• Google और Microsoft ने कहा है कि वे अगले साल से इसे सपोर्ट करेंगे।
• OpenAI ने “आने वाले महीनों” में लागू करने की योजना बताई है।
• Meta ने सार्वजनिक रूप से समर्थन जताया है, लेकिन अभी तक कार्यान्वयन की पुष्टि नहीं की है।

प्रकाशकों के लिए महत्व

• एक ही जगह नियंत्रण: अब अलग‑अलग ई‑मेल या डैशबोर्ड सेट करने की जरूरत नहीं।
• कानूनी स्पष्टता: उद्योग‑व्यापी संकेत के कारण कॉपीराइट या लाइसेंस विवाद में दस्तावेज़ी साक्ष्य मिल सकता है।
• संभावित आय: टोकन को Really Simple Licensing (RSL) मॉडल के साथ जोड़कर वैध क्रॉलिंग के लिए शुल्क लिया जा सकता है।

टोकन लागू करने के व्यावहारिक कदम

1. अपनी साइट की robots.txt फ़ाइल खोलें।
2. `AI-Training: no` (या IETF ड्राफ्ट में बताए गए सटीक स्वरूप) जोड़ें।
3. फ़ाइल सार्वजनिक रूप से उपलब्ध है, यह जांचें (उदा., `https://example.com/robots.txt`)।
4. क्रॉलर लॉग देखें; प्रमुख एआई प्रदाता अब अनुपालन रिपोर्ट प्रकाशित करते हैं।

अभी भी अनिश्चित बातें

• Meta की भागीदारी: केवल समर्थन का संकेत है, कार्यान्वयन समय‑सीमा नहीं दी गई।
• अनुपालन की गारंटी: यह मानक स्वैच्छिक है; तकनीकी रूप से टोकन को अनदेखा किया जा सकता है।
• सूक्ष्म नियंत्रण: Microsoft ने “ग्राउंडिंग” की अनुमति देते हुए प्रशिक्षण को ब्लॉक करने की भविष्य की योजना बताई है, लेकिन विवरण अभी विकसित हो रहे हैं।

घोषणा की पुष्टि कैसे करें

• IETF ड्राफ्ट रिपॉज़िटरी में आधिकारिक “policy token” विनिर्देश देखें।
• OpenAI, Google, Microsoft और Anthropic की ब्लॉग या प्रेस रिलीज़ पढ़ें।
• Search Engine Roundtable और विश्वसनीय टेक समाचार साइटों के अपडेट फॉलो करें।

--- *ऊपर दिया गया विवरण कंपनियों के सार्वजनिक बयानों पर आधारित है और भविष्य में कार्यान्वयन की कोई गारंटी नहीं देता।*