Cloudflare và OpenAI thử nghiệm, ChatGPT chỉ mục hàng triệu trang web mới

Công ty hạ tầng mạng Cloudflare và OpenAI đã khởi động một thử nghiệm nghiên cứu vào tháng 7 năm 2026, nhằm kiểm tra xem tín hiệu mạng của Cloudflare có thể giúp người dùng ChatGPT phát hiện nội dung mới một cách hiệu quả hơn hay không. Cả hai bên cho biết kết quả ban đầu là tích cực, thử nghiệm đã đưa các trang trước đây chưa biết vào chỉ mục tìm kiếm của OpenAI, giúp ChatGPT có nhiều nguồn tài liệu để tham khảo hơn.

Thử nghiệm sử dụng khoảng 1% hàng đợi tham gia toàn mạng của Cloudflare, giúp OpenAI phát hiện và lập chỉ mục hàng triệu trang web mới. OpenAI đã tự đánh giá và sắp xếp theo mức độ liên quan và tính hữu ích, ChatGPT Search cho phép người dùng xem nội dung gốc và bên phát hành thông qua liên kết ngược. Quan sát cho thấy, lưu lượng tự động có thể khiến các trang không tồn tại trở nên đáng chú ý, một số trang sẽ chuyển hướng bất kỳ địa chỉ nào về trang chính, cũng có địa chỉ chỉ đến nội dung trùng lặp. Cả hai bên cũng đang thử nghiệm các tín hiệu để nhận diện các trang tiềm ẩn có hại, chẳng hạn như các trang đăng nhập giả được cài vào trên các trang hợp pháp, và khẳng định đánh dấu từng trang thay vì toàn bộ miền.

Các tín hiệu liên quan cũng được sử dụng để lọc các trang không tồn tại hoặc có thể chuyển hướng, và xác định xem các trang không thay đổi có đáng để truy cập lại hay không. Tín hiệu trang không cấu thành quyền truy cập, nghiên cứu này sử dụng siêu dữ liệu trang web cho tìm kiếm và phát hiện, chứ không phải sử dụng nội dung trang cho việc huấn luyện mô hình. Chủ sở hữu trang web có thể thông qua AI Crawl Control của Cloudflare để hiểu và quản lý cách hệ thống AI truy cập vào trang web của họ. Giai đoạn tiếp theo sẽ cải thiện việc lựa chọn trang và thử nghiệm các tín hiệu thay đổi nhanh hơn, đáng tin cậy hơn.