Cloudflare đặt một mốc mới cho quan hệ giữa website và các hệ thống trí tuệ nhân tạo. Từ 15/9/2026, tên miền mới đưa lên mạng lưới của hãng nhận cấu hình mặc định khác trước.
Hãng chia bot thành ba loại. Loại phục vụ tìm kiếm vẫn được cho qua. Loại thu thập dữ liệu huấn luyện và loại tác nhân thì bị chặn — nhưng chỉ trên những trang có hiển thị quảng cáo. Lý lẽ của Cloudflare gọn: một mẩu quảng cáo là dấu hiệu cho thấy chủ trang muốn có người thật ghé vào, không phải máy.
Điều kiện "trang có quảng cáo" là chỗ dễ đọc lướt qua. Nó thu hẹp phạm vi rất nhiều: trang tài liệu kỹ thuật, trang giới thiệu công ty, blog không chạy quảng cáo đều nằm ngoài mặc định mới. Cấu hình sẵn có của khách hàng cũ cũng giữ nguyên.
Đổi cách tính tiền: từ lượt quét sang lượt được dùng
Đi kèm là việc đổi cách thu tiền. Cơ chế cũ ra mắt tháng 7/2025, tính theo lượt quét: chủ trang đặt giá, bot trả tiền mỗi lần ghé đọc.
Cơ chế mới tính theo lượt nội dung thực sự được dùng. Chủ website nhận tiền khi nội dung của họ xuất hiện trong câu trả lời của trợ lý AI, không phải khi bot đi qua. Cloudflare giải thích bằng một quan sát khó cãi. Một trang có thể bị quét đúng một lần rồi được trích dẫn hàng nghìn lần. Trang khác bị quét liên tục mà chẳng bao giờ được nhắc tới.
Chợ giao dịch mở cùng hai đối tác đầu tiên. Ceramic.ai trả theo lượt truy vấn, khi nội dung của bên tham gia xuất hiện trong kết quả. You.com cho phép mua nội dung trả tiền theo nhu cầu, không cần cam kết trước.
Con số đứng sau quyết định
Cloudflare đưa ra một tỉ lệ để giải thích vì sao phải làm bây giờ. Trong tháng 6/2026, lưu lượng do bot AI tạo ra chiếm 52% tổng số yêu cầu quét mà hãng nhìn thấy. Mùa xuân 2025 con số đó mới là 22%. Chưa tới một năm rưỡi, tỉ lệ tăng hơn gấp đôi.
Nhưng con số đắt nhất nằm ở chỗ khác: tỉ lệ giữa số trang bị quét và số lượt khách được trả về. Bot của Anthropic quét 38.000 trang mới giới thiệu lại một lượt truy cập cho chủ trang. Của OpenAI là 1.091 trang cho một lượt.
Hai con số đó phá vỡ thoả thuận ngầm đã giữ web chạy suốt hai mươi năm. Máy tìm kiếm đọc trang của bạn, đổi lại nó đẩy người đọc về. Trao đổi ấy công bằng vì hai chiều gần cân nhau. Ở tỉ lệ 38.000 đổi 1 thì không còn là trao đổi, mà là một chiều.
Ông Matthew Prince là tổng giám đốc kiêm đồng sáng lập Cloudflare. Ông nói khi phần lớn lưu lượng Internet không còn là con người, công ty phải đi xa hơn và nhanh hơn. Cloudflare hiện đứng trước hơn 20% lưu lượng web, nên một thay đổi mặc định của họ có sức nặng thật. Mặc định là thứ tuyệt đại đa số không bao giờ đụng tới.
Chủ website đứng ở cả hai phía
Doanh nghiệp Việt Nam nằm ở cả hai phía của chuyện này. Ở phía chủ website, lần đầu có một cơ chế rõ ràng để nội dung mình viết ra không bị lấy đi miễn phí. Với trang tin, blog chuyên ngành hay thư viện tài liệu kỹ thuật, đó là tin tốt.
Nhưng có mặt trái ít người để ý. Ngày càng nhiều khách hàng tìm nhà cung cấp qua trợ lý AI thay vì gõ vào máy tìm kiếm. Nội dung bị chặn khỏi các hệ thống đó thì thương hiệu cũng vắng mặt theo — vắng ngay trong những câu trả lời khách hàng tiềm năng đang đọc. Với website làm nhiệm vụ giới thiệu năng lực, bị bỏ qua có thể tốn kém hơn bị lấy nội dung.
Cách phân loại ba nhóm bot của Cloudflare chính là chỗ để cân hai mặt đó. Chặn bot huấn luyện mà vẫn mở cho bot tìm kiếm và bot trả lời là một lựa chọn có thật, không phải chuyện được ăn cả ngã về không. Nhưng phân biệt được ba nhóm ấy đòi hỏi ai đó ngồi đọc và cấu hình, chứ không nằm sẵn trong tệp robots.txt viết từ năm ngoái.
Ở phía ngược lại, các đội đang dựng công cụ trên dữ liệu web cần chuẩn bị cho việc nhiều nguồn sẽ đóng lại hoặc thu phí. Thời kỳ thu thập dữ liệu tự do đang khép lại nhanh hơn nhiều người dự tính.
Câu hỏi của năm nay không còn là chặn hay không chặn bot. Là chặn nhóm nào, mở nhóm nào, và ai trong công ty chịu trách nhiệm biết sự khác nhau giữa chúng.
