ระบบค้นหาข้อมูลใหม่ของ Meta ก่อให้เกิดความกังวลเรื่องการเก็บรวบรวมข้อมูล

Key takeaway

• Meta เปิดตัว Web Crawler ใหม่ 2 ตัว คือ Meta External Agent และ Meta External Fetcher เพื่อรวบรวมข้อมูลสำหรับพัฒนา AI และผลิตภัณฑ์อื่นๆ
• Bot ใหม่ของ Meta มีความสามารถขั้นสูงในการหลีกเลี่ยงการถูกบล็อก ทำให้เกิดความกังวลด้านความเป็นส่วนตัวและการใช้ข้อมูลโดยไม่ได้รับอนุญาต
• เกิดการถกเถียงเรื่องจริยธรรมของการดึงข้อมูลขนาดใหญ่เพื่อฝึก AI และความจำเป็นในการให้เจ้าของเว็บไซต์ควบคุมการใช้ข้อมูลของตนได้มากขึ้น
• Meta ตอบสนองโดยสัญญาว่าจะให้ตัวเลือกในการควบคุมข้อมูลแก่เจ้าของเว็บไซต์มากขึ้น แต่ยังคงมีคำถามเกี่ยวกับความเป็นส่วนตัวและความเป็นเจ้าของเนื้อหา

Meta ได้เปิดตัว Web Crawler คู่ใหม่ ได้แก่ Meta External Agent และ Meta External Fetcher ซึ่งกำลังก่อให้เกิดความขัดแย้งในหมู่เจ้าของเว็บไซต์และผู้เชี่ยวชาญในอุตสาหกรรม เนื่องจาก Bot เหล่านี้ ได้รับการออกแบบมาเพื่อรวบรวมข้อมูลจากทั่วอินเทอร์เน็ตเพื่อปรับปรุง AI model และผลิตภัณฑ์อื่น ๆ ของ Meta แต่วิธีการเก็บรวบรวมข้อมูลที่ซับซ้อน ได้ก่อให้เกิดความกังวลด้านความเป็นส่วนตัวอย่างมาก

Bot ใหม่ที่มีความสามารถขั้นสูง

Meta External Agent ซึ่งเปิดตัวเมื่อเดือนที่แล้ว ได้รับการตั้งโปรแกรมให้รวบรวมข้อมูลที่เปิดเผยต่อสาธารณะจากแหล่งข้อมูลออนไลน์ที่หลากหลาย ซึ่งรวมถึงบทความข่าว, Forum Online และเนื้อหาสาธารณะประเภทอื่น ๆ ข้อมูลที่ Bot นี้รวบรวมจะถูกนำไปใช้ในการฝึก AI Model ช่วยให้ Meta ปรับปรุงผลิตภัณฑ์และบริการ

นอกจากนี้ Meta ได้ปล่อย Meta External Fetcher ควบคู่กันไป ซึ่งมุ่งเน้นไปที่การรวบรวมลิงก์เว็บเพื่อสนับสนุนเครื่องมือ AI assistant ของบริษัท Bot ทั้งสองนี้จึงมีความสำคัญต่อกลยุทธ์ของ Meta ในการพัฒนาเทคโนโลยี AI

เปรียบเทียบ Bot ของ Meta กับคู่แข่งในอุตสาหกรรม

Bot ใหม่ของ Meta นั้นคล้ายคลึงกับที่ใช้โดยยักษ์ใหญ่ด้านเทคโนโลยีอื่น ๆ เช่น OpenAI ที่มี GPTBot ซึ่งก็ดึงข้อมูลจากเว็บต่างๆในการฝึก AI เช่นกัน ตามรายงานของ Dark Visitors ซึ่งเป็นบริษัทที่ติดตาม Web Scraper ระบุว่า bot ของ Meta ทำงานคล้ายกับเครื่องมือของ OpenAI ทั้งสองได้รับการออกแบบมาเพื่อรวบรวมข้อมูลออนไลน์จำนวนมาก ซึ่งมีความสำคัญต่อการพัฒนาระบบ AI ที่มีประสิทธิภาพ

อย่างไรก็ตาม bot ของ Meta ได้รับการติดตั้งคุณสมบัติขั้นสูงที่ทำให้เจ้าของเว็บไซต์บล็อกได้ยากขึ้น สิ่งนี้นำไปสู่ความไม่สบายใจที่เพิ่มขึ้นในหมู่ผู้สร้างเนื้อหาที่กังวลเกี่ยวกับการเก็บรวบรวมข้อมูลโดยไม่ได้รับอนุญาต

ความท้าทายในการบล็อก Web Scraper

เป็นเวลาหลายทศวรรษแล้วที่เจ้าของเว็บไซต์ใช้ไฟล์ `robots.txt` เพื่อจำกัดการเข้าถึงเนื้อหาของ bot อัตโนมัติ โปรโตคอลนี้เป็นวิธีมาตรฐานในการจัดการดูดข้อมูลจากเว็บไซต์ อย่างไรก็ตาม ความต้องการข้อมูลคุณภาพสูงที่เพิ่มขึ้น ทำให้บางบริษัทละเลยหรือหลีกเลี่ยงกฎเหล่านี้ และในช่วงไม่กี่เดือนที่ผ่านมา มีการเปิดเผยว่า OpenAI และ Anthropic ได้หาวิธีหลีกเลี่ยงข้อจำกัดของ `robots.txt` ซึ่งเน้นย้ำถึงช่องโหว่ที่อาจเกิดขึ้นในระบบ ซึ่งBot ใหม่ของ Meta ก็ท้าทายสิ่งนี้เช่นกัน

ปฏิกิริยาและความกังวลของอุตสาหกรรม

การเปิดตัว Bot ใหม่ของ Meta ก่อให้เกิดการถกเถียงเกี่ยวกับจริยธรรมของการดึงข้อมูลขนาดใหญ่เพื่อการฝึก AI "Jon Gillham" CEOของ Originality.ai ซึ่งเป็นบริษัทที่ระบุเนื้อหาที่สร้างโดย AI แสดงความกังวลเกี่ยวกับตัวเลือกที่จำกัด สำหรับเจ้าของเว็บไซต์ เขาเน้นย้ำถึงความจำเป็นสำหรับบริษัทอย่าง Meta ในการให้วิธีแก่ผู้สร้างเนื้อหา ในการควบคุมวิธีการใช้ข้อมูลของพวกเขา ในขณะเดียวกันก็ยังคงอนุญาตให้เว็บไซต์ของพวกเขาปรากฏแก่ผู้ใช้

การตอบสนองของ Meta ต่อคำวิจารณ์

เพื่อตอบสนองต่อความกังวลเหล่านี้ Meta ได้แสดงความมุ่งมั่นในการให้การควบคุมข้อมูลมากขึ้น แก่เจ้าของเว็บไซต์ โฆษกของ Meta รับรองว่าบริษัทกำลังดำเนินการเพื่อให้ผู้เผยแพร่จัดการเนื้อหาของตนเองได้ง่ายขึ้น ในส่วนที่เกี่ยวข้องกับการฝึก AI ซึ่งรวมถึงการอนุญาตให้ผู้ดูแลระบบเว็บเลือกบล็อก Bot ได้

แม้จะมีการรับประกันเหล่านี้ แต่ความก้าวหน้าอย่างรวดเร็วของ AI Web Crawler ยังคงก่อให้เกิดคำถามเกี่ยวกับความเป็นส่วนตัวของข้อมูลและความเป็นเจ้าของเนื้อหา ในขณะที่ Meta และยักษ์ใหญ่ด้านเทคโนโลยีอื่น ๆ รวมถึง Google และ Anthropic พัฒนาเทคโนโลยี AI ของพวกเขา จึงมีความจำเป็นเร่งด่วนที่จะต้องมีแนวทางและการปกป้องที่ชัดเจนยิ่งขึ้นสำหรับเจ้าของเว็บไซต์

Why it matters

ข้อมูลอ้างอิงจาก Meta’s New Web Crawlers Raise Concerns Over Data Collection