All posts tagged in AI crawlers

1Article

AI1 week ago

“Perplexity บริษัทสตาร์ตอัปด้าน AI Search ถูก Cloudflare กล่าวหาว่า พยายามหลีกเลี่ยงข้อจำกัดบางเว็บไซต์ที่บล็อกไม่ให้ AI crawlers เข้าไปเก็บช้อมูล ด้วยใช้เทคนิค “พรางตัว” โดยทางเจ้าของเว็บไซต์ไม่ยินยอม ตามปกติแล้วเว็บไซต์ต่าง ๆ จะสามารถเลือกได้ว่าจะยอมให้ AI crawlers ผ่านเข้ามาเก็บข้อมูล หรือบล็อกด้วยการใช้ไฟล์ robots.txt และ Web Application Firewall (WAF) ซึ่งเมื่อเร็ว ๆ นี้

Advertisement

Sidebar Search
Popular Now
Loading

Signing-in 3 seconds...

Signing-up 3 seconds...