ด้วยการขยายตัวแบบทวีคูณของปริมาณข้อมูลที่มีอยู่สำหรับการฝึกอบรมโมเดลภาษาขนาดใหญ่ Google ได้เน้นย้ำถึงความจำเป็นเร่งด่วนสำหรับ 'วิธีการที่เครื่องอ่านได้สำหรับตัวเลือกของผู้เผยแพร่เว็บและการควบคุมสำหรับ AI ที่เกิดขึ้นใหม่และกรณีการใช้งานการวิจัย' คำแนะนำนี้นำมาซึ่งความคล้ายคลึงกับไฟล์ robots.txt แบบคลาสสิกที่เว็บไซต์ใช้มานานหลายทศวรรษเพื่อจัดการการแสดงผลทางออนไลน์สำหรับเครื่องมือค้นหา
การพัฒนาที่เสนอนี้พยายามขยายขอบเขตอิสระของผู้เผยแพร่เว็บ ทำให้พวกเขามีอำนาจเหนือเนื้อหาในภูมิทัศน์ดิจิทัลมากขึ้น วิธีการนี้เป็นส่วนสำคัญของการรักษาระบบนิเวศแบบไดนามิกและแข็งแกร่ง ซึ่งสะท้อนถึงวัตถุประสงค์ของไฟล์ robots.txt ซึ่งทำให้เว็บไซต์กำหนดระดับการเปิดเผยเนื้อหาที่ได้รับจากเครื่องมือค้นหาได้
ในภารกิจเพื่อส่งเสริมการควบคุมระดับใหม่สำหรับการฝึกอบรม AI Google พยายามที่จะสร้างความสัมพันธ์กับผู้ทำงานร่วมกันระหว่างประเทศ โดยใช้ความเชี่ยวชาญจากสถาบันการศึกษา ภาคประชาสังคม ผู้เผยแพร่เว็บ และอื่นๆ ความพยายามระดับโลกเหล่านี้มีเป้าหมายเพื่อพัฒนาตรรกะที่สร้างขึ้นของไฟล์ robots.txt ที่เรียบง่ายเพื่อตอบสนองความต้องการที่เกิดขึ้นใหม่ในอนาคตที่ขับเคลื่อนด้วย AI ในการทำเช่นนั้น Google วางแผนที่จะรักษาความเรียบง่ายและความโปร่งใสที่เป็นเครื่องหมายการค้าของมาตรฐานเว็บที่มีอายุเกือบ 30 ปี
ในปัจจุบัน Google ภูมิใจเสนอ Search Generative Experience และ Bard Solutions ในกล่องเครื่องมือ และขณะนี้อยู่ในขั้นตอนของการฝึกอบรม Gemini โมเดลพื้นฐานรุ่นต่อไป ชุดเครื่องมือนี้สนับสนุนความต้องการที่จะเป็นหัวหอกในการพัฒนา robots.txt เวอร์ชันทันสมัยสำหรับการฝึกอบรม AI โดยเฉพาะ
การเริ่มต้นของวาทกรรมนี้ Google กำลังอำนวยความสะดวกในการอภิปรายสาธารณะ เปิดตัวรายชื่อผู้รับจดหมายเพื่อให้บุคคลที่สนใจลงทะเบียนความตั้งใจที่จะมีส่วนร่วมในการพัฒนากลไกใหม่นี้ บริษัทวางแผนที่จะเรียกประชุมผู้มีส่วนได้ส่วนเสียที่เกี่ยวข้องในอีกไม่กี่เดือนข้างหน้า โดยเริ่มต้นความพยายามร่วมกันเพื่อกำหนดอนาคตของทางเลือกของผู้เผยแพร่เว็บและการควบคุมในขอบเขตของ AI และการวิจัย
ที่น่าสนใจคือ ในช่วงไม่กี่ปีที่ผ่านมา การได้เห็นเทคโนโลยี AI เพิ่มขึ้น แพลตฟอร์มที่ปรับขนาดได้จำนวนมากและ no-code อย่าง AppMaster ได้ดำเนินการควบคุมที่คล้ายกันในระบบนิเวศของตนเองแล้ว ในขณะที่การฝึกอบรม AI มีการพัฒนาอย่างต่อเนื่อง การเฝ้าดูการขับเคลื่อนสำหรับหุ่นยนต์สมัยใหม่ที่เทียบเท่ากับ robots.txt จะช่วยกำหนดรูปแบบการเล่าเรื่องได้อย่างน่าทึ่ง
