Google, Microsoft, OpenAI, Anthropic ร่วมใช้บรรทัดเดียวใน robots.txt ให้เว็บปฏิเสธการเทรน AI
ทั้ง 4 บริษัทตกลงอ่านโค้ดเดียวกันในไฟล์ robots.txt เพื่อให้เว็บไซต์บอกปัดการนำเนื้อหาไปเทรนโมเดล AI แต่ยังไม่มีผลห้ามบอทเข้ามาเก็บข้อมูล และแต่ละค่ายก็เริ่มใช้งานจริงกันคนละเวลา
AI ภาพสร้างด้วย AI ไม่ใช่ภาพถ่ายจริงGoogle และ Microsoft ประกาศเข้าร่วมกับ OpenAI และ Anthropic ในการใช้บรรทัดเดียวกันในไฟล์ robots.txt เพื่อบอกว่าเว็บไซต์ยินยอมหรือไม่ให้นำเนื้อหาไปใช้เทรนโมเดล AI
ก่อนหน้านี้เว็บมาสเตอร์ต้องเขียนกฎแยกทีละบอทของแต่ละบริษัท บางทีบริษัทเดียวกันยังมีหลายบอทให้ตั้งค่าแยกกันอีก สัญญาณร่วมตัวนี้จึงมาแทนที่ความยุ่งยากนั้นด้วยบรรทัดเดียวที่ทุกค่ายอ่านแบบเดียวกัน
แต่ต้นฉบับจาก TechRadar บอกชัดว่านี่ไม่ใช่การห้ามบอทเข้ามาเก็บข้อมูล (crawl) เป็นแค่การบอก preference เรื่องการใช้งานเนื้อหา และไม่มีผลย้อนหลังกับข้อมูลที่ถูกเก็บไปแล้วก่อนหน้านี้ ตัวมาตรฐานเองก็ยังไม่ได้รับการอนุมัติจาก IETF อย่างเป็นทางการด้วย
แต่ละบริษัทก็เริ่มใช้งานคนละเวลา Anthropic เริ่มใช้แล้ว ส่วน OpenAI สัญญาว่าจะทำตามในอีกไม่กี่เดือนข้างหน้าแต่ยังไม่ให้วันที่ชัดเจน Microsoft จะเริ่มใช้ตั้งแต่วันที่ 1 กุมภาพันธ์ 2027 ขณะที่ Google เล็งเป้าไว้ที่ปี 2027 เช่นกัน ส่วน Meta ยังไม่ได้ให้คำมั่นว่าจะทำตาม แม้จะบอกว่าสนับสนุนแนวคิดนี้
Google ยังระบุด้วยว่าถ้าเว็บไซต์ใช้สัญญาณร่วมนี้แต่ไม่ได้ตั้งค่า Google-Extended แยกไว้ จะถือว่าเว็บนั้นปฏิเสธ Google-Extended ไปด้วย ซึ่ง Google-Extended เกี่ยวข้องกับการอ้างอิงเนื้อหาใน Gemini Apps ด้วย เว็บที่ต้องการแค่ห้ามเทรนโมเดลอาจเสียการถูกอ้างอิงและคลิกจาก Gemini ไปพร้อมกัน
ที่มาของข่าว
- สำนักข่าว
- TechRadar
- พาดหัวต้นฉบับ
- Google and Microsoft among those signing up to OpenAI's plan for a new website crawling standard — including opting-out of internet scraping
- เผยแพร่ต้นทาง
- 9 พ.ย. 2569 00:05 น.
