Shoal Research: Robot chiếm khoảng 60% yêu cầu HTML

Cơ quan nghiên cứu Shoal Research đã phát hành báo cáo cho biết, robot trên mạng Cloudflare chiếm khoảng 60% trong các yêu cầu HTTP nội dung HTML, trong khi con người chỉ chiếm 38,2%. Giám đốc điều hành Cloudflare Matthew Prince đã dự đoán rằng lưu lượng robot sẽ vượt qua con người vào năm 2027, sau đó thông báo rằng sự gia tăng lưu lượng của các tác nhân thông minh đã khiến robot vượt qua lưu lượng của con người.

Báo cáo cho biết, ứng dụng AI giữ người dùng ở lại giao diện trò chuyện và tóm tắt nội dung, thay vì dẫn lưu trở lại trang gốc. Robot AI thu thập và tỷ lệ quay lại cao hơn nhiều so với Googlebot, ClaudeBot trong năm qua trung bình mỗi lần quay lại thu thập khoảng 4200 trang. Nghiên cứu của Pew cho thấy, tóm tắt AI đã làm giảm tỷ lệ nhấp chuột từ 15% xuống 8%.

robots.txt và mô hình đổi nội dung lấy lưu lượng khó duy trì. Kiện tụng và cấp phép cá nhân là giải pháp tạm thời. Thanh toán theo yêu cầu được chia thành thị trường đóng có khóa, cũng như giao thức mở sử dụng HTTP 402 và stablecoin như x402 và MPP. Hầu hết các trang web vẫn cung cấp miễn phí hoặc chặn.