Chương trình nghiên cứu và mô hình thanh toán mới để tối ưu AI search, giảm crawl không cần thiết
"Cloudflare announced a research program and related payment initiatives aimed at making AI search more efficient and compensating content owners. The program uses freshness, quality, and change signals to reduce unnecessary crawling and improve answer engine relevance, while Pay Per Crawl is being evolved into Pay Per Use with experiments involving Ceramic.ai and You.com to pay publishers when content is actually used in search results."
Tác động bảo mật ở mức trung bình, chủ yếu liên quan quản trị truy cập bot và giảm tải hạ tầng. Điểm cần lưu ý là kiểm soát bot/traffic, giảm crawl lại trang không đổi và minh bạch cơ chế trả tiền theo mức sử dụng có thể hỗ trợ giảm hành vi thu thập không hiệu quả.
Tác động kinh doanh đáng kể vì hướng tới mô hình doanh thu gắn với giá trị thực của nội dung và cải thiện khả năng hiển thị trong AI results. Trọng tâm là Pay Per Use thay cho Pay Per Crawl, cùng báo cáo AEO để tối ưu discoverability và giảm chi phí vận hành do crawl không cần thiết.
Một chương trình nghiên cứu và các sáng kiến thanh toán liên quan đến AI search vừa được công bố nhằm làm cho hệ thống trả lời tìm kiếm hiệu quả hơn, đồng thời bù đắp cho chủ sở hữu nội dung. Theo thông tin được nêu, chương trình sẽ khai thác các tín hiệu như freshness, quality và change signals để giúp answer engine ưu tiên nội dung phù hợp hơn và giảm việc thu thập lại các trang không thay đổi.
Bài viết cũng dẫn dữ liệu nghiên cứu: năm 2025, nghiên cứu của Pew Research Center cho thấy khi Google hiển thị AI summary, tỷ lệ người dùng bấm vào kết quả truyền thống chỉ khoảng 8% và bấm vào liên kết trong phần tóm tắt khoảng 1%. Điều này làm gia tăng áp lực cho các trang web khi lưu lượng do crawl có thể không còn chuyển hóa như trước.
Về kinh tế, sáng kiến Pay Per Crawl đang được phát triển thành Pay Per Use. Các thí nghiệm được nhắc tới gồm Ceramic.ai và You.com, hướng tới việc trả tiền khi nội dung thực sự xuất hiện/được dùng trong kết quả tìm kiếm. Ngoài ra, chương trình với Ceramic còn cung cấp báo cáo để hỗ trợ AEO (ví dụ truy vấn dẫn đến nội dung xuất hiện, trang và snippet, thứ hạng trung bình). Khuyến nghị cho doanh nghiệp: rà soát chính sách bot, theo dõi tín hiệu thay đổi nội dung và chuẩn bị cơ chế đo lường giá trị nội dung theo “use” thay vì chỉ theo “crawl”.