Cloudflare บริการที่ช่วยให้เว็บไซต์มีประสิทธิภาพและปลอดภัย ได้เปิดตัว AI Labyrinth เครื่องมือช่วยจัดการกับบอตที่คอยเข้ามาจัดเก็บข้อมูลในเว็บไซต์เพื่อนำไปเทรนเอไอโดยไม่ได้รับอนุญาต โดยการสับขาหลอกให้บอตเข้าไปยังลิงก์ของเว็บเพจเนื้อหาปลอมที่สร้างขึ้นโดยเอไอ ซึ่งจะทำให้บอตหลงทางอยู่ในดงเนื้อหาปลอม จนทำให้ระบบของบอตทำงานช้า สิ้นเปลืองทรัพยากร และได้ข้อมูลไร้ค่าไปฝึกเอไอ
บอตเก็บข้อมูลจากเว็บไซต์ (Web-Crawling Bots) จะเข้ามาในเว็บไซต์และเดินไปตามลิงก์เข้าไปสู่เว็บต่าง ๆ เพื่อนำข้อมูลไปรวบรวมสร้างเป็นดัชนีสำหรับการค้นหาของเสิร์ชเอนจิน ซึ่งเจ้าของเว็บไซต์จะเปิดรับบอตให้เข้ามาเก็บข้อมูลเพื่อจะได้อยู่ในอันดับการค้นหาดี ๆ และสามารถปิดการเข้ามาเก็บข้อมูลในส่วนที่สำคัญ เช่น เนื้อหามีลิขสิทธิ์ โดยจะกำหนดในไฟล์ robots.txt ว่าต้องการอนุญาตหรือไม่อนุญาตให้บอตเข้าไปในโฟลเดอร์ใดบ้าง
ปัจจุบันยุคของเอไอที่มีความต้องการข้อมูลจำนวนมากมาใช้ฝึกเอไอ เช่น เว็บข่าว บทความวิชาการ และอื่น ๆ ซึ่งแม้ว่าเจ้าของเว็บจะแจ้งว่าไม่อนุญาตให้บอตเข้ามาเก็บข้อมูล แต่บริษัทเอไอกลับโนสนโนแคร์ปล่อยบอตย่องเข้ามา เช่น บริษัท Anthropic และ Perplexity AI ถูกกล่าวหาว่าไม่สนการปิดกั้น ซึ่งพบว่ามีการพยายามให้บอตส่งคำขอเนื้อหาของหน้าเว็บมากกว่า 50,000 ล้านคำขอต่อวัน ทั้งที่รู้ว่ามีเครื่องมือตรวจจับหรือบล็อกคำขอที่อันตราย แต่ก็ยังดันทุรังส่งเข้ามามากมายตลอดเวลา
การที่บอตเข้ามาเก็บข้อมูลและส่งคำขอข้อมูลต่อเซิร์ฟเวอร์จำนวนมาก ก็จะส่งผลเสียทำให้เซิร์ฟเวอร์ล่าช้า แต่ที่หนักกว่านั้นเข้าไปเก็บบทความ รูปภาพ และข้อมูลของผู้ใช้นำไปฝึกเอไอ นำไปขาย หรือนำไปสร้างเนื้อหาเป็นเว็บอื่น ๆ จนเกิดเนื้อหาซ้ำ ทำให้เว็บหล่นจากอันดับการค้นหา นอกจากนี้ทำให้ทราฟิกหรือการจราจรในเว็บไซต์หนาแน่นจนรบกวนให้ผู้ใช้ตัวจริงเข้ามาใช้บริการไม่ได้ และยังเพิ่มค่าเช่าโฮสต์ที่จะเก็บเพิ่มตามแบนด์วิดท์ที่ใช้ไปด้วย
เครื่องมือ AI Labyrinth ของ Cloudflare จะไม่ใช้วิธีปิดกั้นการเข้ามาของบอต เพราะบอตมักถูกพัฒนามาอย่างดี แต่จะใช้วิธีเปิดทางให้บอตเข้ามาและเดินไปตามลิงก์เข้าสู่เว็บเนื้อหาปลอมที่ดูดีมีค่าน่านำไปใช้งาน และจะมีลิงก์วกไปมาวนให้บอตติดอยู่ในข้อมูลปลอมเหล่านี้ เมื่อบอตเก็บข้อมูลปลอมไปใช้ฝึกเอไอ แทนที่จะทำให้โมเดลเอไอฉลาด มันกลับเพี้ยนไม่แม่นยำ นอกจากนี้วิธีนี้ไม่มีผลกระทบต่อผู้ใช้ที่เป็นมนุษย์ (เพราะไม่ได้คลานไปตามลิงก์เหมือนกับบอต)
เว็บมาสเตอร์เว็บไซต์ต่าง ๆ สามารถเข้ามาใช้ฟีเจอร์ AI Labyrinth ได้ โดยไปที่ส่วนตั้งค่าในแดชบอร์ดของ Cloudflare จากนั้นไปที่ Bot Management และเปิดใช้งาน AI Labyrinth
