ai crawler

Cloudflare tố Perplexity “lách luật” scraping dữ liệu trái phép, còn Perplexity phản pháo rằng Cloudflare hiểu sai và làm yếu thế chính mình. Cloudflare cáo buộc Perplexity lách luật để thu thập dữ liệu từ các website dù đã bị chặn bằng robots.txt và tường lửa WAF. Perplexity bị cho là giả mạo...

Cloudflare, một trong những công ty hạ tầng Internet lớn nhất thế giới, vừa công bố một động thái mang tính tiên phong: chặn mặc định toàn bộ các trình thu thập dữ liệu của AI (AI crawler) truy cập vào các trang web mới sử dụng dịch vụ của họ. Quyết định này được xem là một bước đi quan trọng...