बड़े भाषा मॉडलों के प्रशिक्षण के लिए उपलब्ध डेटा की मात्रा में तेजी से विस्तार से प्रेरित होकर, Google ने 'उभरते एआई और अनुसंधान उपयोग के मामलों के लिए वेब प्रकाशक की पसंद और नियंत्रण के लिए मशीन-पठनीय विधि' की तत्काल आवश्यकता पर प्रकाश डाला है। यह सुझाव उन क्लासिक robots.txt फ़ाइलों के समान है जिनका उपयोग वेबसाइटों द्वारा खोज इंजनों के लिए अपनी ऑनलाइन दृश्यता को प्रबंधित करने के लिए कई दशकों से किया जाता रहा है।
यह प्रस्तावित विकास वेब प्रकाशकों की स्वायत्तता का विस्तार करना चाहता है, जिससे उन्हें डिजिटल परिदृश्य में अपनी सामग्री पर अधिक अधिकार मिल सके। यह कार्यप्रणाली एक गतिशील और मजबूत पारिस्थितिकी तंत्र को संरक्षित करने का एक अभिन्न अंग है, जो robots.txt फ़ाइलों के उद्देश्य को प्रतिबिंबित करती है, जो वेबसाइटों को खोज इंजन से उनकी सामग्री को प्राप्त होने वाले एक्सपोज़र की डिग्री निर्धारित करने में सक्षम बनाती है।
एआई प्रशिक्षण के लिए नियंत्रण के इस नए स्तर को बढ़ावा देने की अपनी खोज में, Google अकादमिक, नागरिक समाज, वेब प्रकाशकों और अन्य से विशेषज्ञता प्राप्त करते हुए, अंतरराष्ट्रीय सहयोगियों के साथ संबंध विकसित करने की कोशिश कर रहा है। इन वैश्विक प्रयासों का उद्देश्य एआई-ईंधन वाले भविष्य की उभरती मांगों को पूरा करने के लिए विनम्र robots.txt फ़ाइल के स्थापित तर्क को विकसित करना है। ऐसा करते हुए, Google योजना उस सरलता और पारदर्शिता को बनाए रखने की है जो लगभग 30 साल पुराने वेब मानक का ट्रेडमार्क रहा है।
वर्तमान में, Google अपने टूलबॉक्स में सर्च जेनरेटिव एक्सपीरियंस और बार्ड समाधानों का दावा करता है और वर्तमान में अपने अगली पीढ़ी के मूलभूत मॉडल, जेमिनी को प्रशिक्षित करने की प्रक्रिया में है। टूल का यह सूट एआई प्रशिक्षण के लिए विशिष्ट robots.txt के आधुनिक संस्करण के विकास का नेतृत्व करने की उसकी इच्छा को रेखांकित करता है।
इस चर्चा के शुरुआती चरणों को चिह्नित करते हुए, Google एक सार्वजनिक चर्चा की सुविधा प्रदान कर रहा है, एक मेलिंग सूची लॉन्च कर रहा है ताकि इच्छुक पार्टियों को इस उपन्यास तंत्र के विकास में भाग लेने के अपने इरादे को पंजीकृत करने की अनुमति मिल सके। कंपनी आने वाले महीनों में एआई और अनुसंधान के क्षेत्र में वेब प्रकाशक की पसंद और नियंत्रण के भविष्य को आकार देने के लिए सहयोगात्मक प्रयासों की शुरुआत करते हुए प्रासंगिक हितधारकों को बुलाने की योजना बना रही है।
दिलचस्प बात यह है कि पिछले कुछ वर्षों में, एआई प्रौद्योगिकियों के उदय को देखते हुए, ऐपमास्टर जैसे कई स्केलेबल, no-code प्लेटफॉर्म पहले से ही अपने स्वयं के पारिस्थितिकी तंत्र में समान नियंत्रण लागू करने पर काम कर चुके हैं। जैसे-जैसे एआई प्रशिक्षण का विकास जारी है, यह देखना दिलचस्प होगा कि आधुनिक robots.txt समकक्ष के लिए यह ड्राइव कथा को कैसे आकार देती है।
