Cuộc Cách Mạng "Pay Per Crawl": Cách Các Nhà Xuất Bản… · ELECTE

Kỷ nguyên thu thập nội dung miễn phí từ web đang đến hồi kết. Đây là cách các nền tảng mới đang biến bot AI từ những vị khách không trả tiền thành khách hàng thực thụ.

Vấn đề: Khi AI phá vỡ thỏa thuận với các nhà xuất bản

Mô hình Google: Sự cân bằng hiệu quả

Trong hơn hai mươi năm, web đã vận hành dựa trên một thỏa thuận bất thành văn: Google và các công cụ tìm kiếm khác lập chỉ mục nội dung của các nhà xuất bản miễn phí, hiển thị đoạn trích và tóm tắt trên trang của họ, nhưng đổi lại đưa lượng truy cập khổng lồ về các trang web gốc. Các nhà xuất bản chấp nhận việc "sử dụng" nội dung của mình như vậy vì họ nhận được sự hiện diện, độc giả và, do đó, doanh thu quảng cáo.

Google Tin tức đã hoàn thiện mô hình này: nó tổng hợp tin tức từ hàng ngàn nguồn, hiển thị tiêu đề và trích đoạn ngắn, nhưng mỗi lần nhấp chuột sẽ đưa người dùng trở lại trang web gốc. Một sự cân bằng đôi bên cùng có lợi đã hỗ trợ hệ sinh thái tin tức kỹ thuật số.

AI phá vỡ sự cân bằng

Giờ hãy tưởng tượng bạn đang điều hành một trang tin tức và phát hiện ra rằng mỗi ngày hàng nghìn bot AI quét qua các bài viết của bạn, sử dụng nội dung để huấn luyện mô hình của chúng và đưa ra câu trả lời đầy đủ cho người dùng, mà không bao giờ đưa traffic trở lại trang web của bạn. AI không tạo ra liên kết, và không tạo ra click: nó trả lời trực tiếp. Chào mừng đến với thực tế năm 2025.

Theo dữ liệu của Cloudflare, đến giữa năm 2025, 80% hoạt động crawl AI được dùng để huấn luyện mô hình, trong khi lượng traffic giới thiệu tới các nhà xuất bản (đặc biệt từ Google) đang giảm mạnh. Mô hình đã vận hành hiệu quả suốt hai mươi năm đang sụp đổ: chính Google, với AI Overviews của mình, cũng đang gửi ngày càng ít traffic về các trang web gốc. Tỷ lệ "crawl-to-refer" cho thấy những con số gây sốc: Anthropic có tỷ lệ 38.000 lượt quét cho mỗi một lượt truy cập được gửi về trang web, trong khi OpenAI đạt tỷ lệ 1.700:1.

Nhưng điều gì sẽ xảy ra nếu các bot có thể trở thành khách hàng trả tiền thay vì chỉ đơn thuần là những kẻ tiêu thụ nội dung miễn phí? Đã đến lúc cần một thỏa thuận mới: nếu AI không còn đảm bảo được lượng traffic quay lại như Google từng làm, thì ít nhất nó phải trả tiền để được truy cập nội dung.

Giải pháp: Thanh toán theo lượt thu thập thông tin và thanh toán vi mô bằng AI

Cloudflare bắt đầu bữa tiệc

Vào tháng 7/2025, Cloudflare đã thông báo rằng họ trở thành công ty hạ tầng internet đầu tiên chặn crawler AI theo mặc định, đồng thời ra mắt hệ thống "Pay Per Crawl". Điểm mới là gì? Mỗi tên miền mới đăng ký với Cloudflare giờ đây sẽ được hỏi rõ ràng liệu có muốn cho phép crawler AI truy cập nội dung hay không.

Nhưng điều thực sự tạo nên bước ngoặt là marketplace nơi các nhà xuất bản có thể yêu cầu thù lao từ các công ty AI mỗi khi một trang của họ bị quét. Không còn chỉ là "cho phép" hoặc "chặn", mà có thêm lựa chọn thứ ba: "bắt trả phí".

TollBit: Nhà tiên phong về thanh toán vi mô bằng AI

Trước cả Cloudflare, TollBit đã bắt đầu xây dựng hạ tầng này. Startup này, vừa gọi vốn được $24 triệu ở vòng Series A, đã tạo ra một nền tảng nơi các bot AI có thể trả tiền trực tiếp cho các trang web để sử dụng nội dung của họ.

TIME và Adweek nằm trong số những khách hàng đầu tiên đang thử nghiệm mô hình này, và họ nhận ra rằng AI đại diện cho một loại khách hàng mới với những nhu cầu riêng biệt.

Những con số: Bạn thực sự có thể kiếm được bao nhiêu?

Dự báo TollBit

Theo một phân tích chi tiết, TollBit có thể đã đang tạo ra khoảng $71 triệu mỗi năm cho các đối tác xuất bản của mình. Cách tính như sau:

Traffic tăng trưởng theo cấp số nhân: Lượng traffic bot AI đến các trang khách hàng của TollBit đã tăng gấp đôi mỗi quý
Q4 2024: 2,75 triệu lượt truy cập bot mỗi ngày
Q1 2025: 6,5 triệu lượt truy cập
Dự báo Q2 2025: 13 triệu lượt truy cập

Với CPM điển hình $15 dành cho các trang nội dung, con số này tương đương $195.000 mỗi ngày doanh thu tiềm năng cho hệ sinh thái TollBit, tức hơn $71 triệu mỗi năm.

Mô hình định giá

TollBit đề xuất hai mức giá:

Mức phí tóm tắt (summarization rate): Dành cho các bot muốn tóm tắt nội dung
Mức phí phân phối lại (syndication rate): Cao hơn nhiều, dành cho các bot muốn hiển thị toàn bộ bài viết

Sự khác biệt có thể rất đáng kể, khiến đây trở thành mô hình đặc biệt thú vị đối với nội dung cao cấp và chuyên biệt.

Dữ liệu thực tế từ hiện trường

Một phân tích của TollBit trên 160 trang web cho thấy các công ty AI đã quét trung bình 2 triệu lần trong Q4 2024. Mỗi trang được quét trung bình 7 lần.

Toshit Panigrahi, đồng sáng lập TollBit, giải thích: "Lượng traffic bot mà các nền tảng AI này tạo ra gần như tương đương với lượng traffic bot của các công cụ tìm kiếm đã tồn tại 20 năm nay, điều đó thật đáng kinh ngạc."

Hệ sinh thái đang phát triển

DataDome: Bảo vệ và kiếm tiền

DataDome đã hợp tác với cả TollBit lẫn các nền tảng khác để cung cấp một giải pháp tích hợp: bảo vệ theo thời gian thực trước các bot độc hại và thu phí các bot tuân thủ quy định.

Dữ liệu của họ cho thấy traffic AI đã tăng gấp ba chỉ trong sáu tháng, từ 2,6% lên 8,2% tổng lượng traffic bot đã được xác minh.

Skyfire: Mạng lưới thanh toán AI

Skyfire đại diện cho một cách tiếp cận khác, xây dựng cả một mạng lưới thanh toán dành cho các agent AI tự động. Với $8,5 triệu đã huy động được và các quan hệ đối tác với những công ty như DataDome, Skyfire hướng đến việc trở thành hạ tầng thanh toán chuẩn cho nền kinh tế AI.

Tác động đối với các nhà xuất bản: Cơ hội và thách thức

Ưu điểm của bê tông

Nguồn doanh thu mới: Đa dạng hóa ngoài quảng cáo truyền thống
Kiểm soát chi tiết: Khả năng chọn bot nào được truy cập và với mức giá nào
Khả năng theo dõi đầy đủ: Bảng điều khiển chi tiết về ai truy cập nội dung và tần suất bao nhiêu
Thù lao trực tiếp: Thanh toán ngay lập tức không qua trung gian quảng cáo

Những thách thức thực tế

Mức độ chấp nhận còn hạn chế: Không phải công ty AI nào cũng sẽ đồng ý trả tiền
Định giá phức tạp: Khó xác định giá trị đúng cho từng loại nội dung
Thực thi quy định: Nhiều bot vẫn sẽ tiếp tục phớt lờ quy tắc (từ 3,3% năm 2024 lên 13% vào tháng 3/2025)
Cần đạt quy mô: Các khoản vi thanh toán chỉ trở nên đáng kể khi có khối lượng lớn

Dự báo thực tế cho các nhà xuất bản

Ngưỡng tiện lợi: Chặn không phải lúc nào cũng thuận tiện

Trước khi phân tích các con số, cần nhấn mạnh rằng Pay Per Crawl không có lợi cho tất cả mọi người. Với các trang có traffic hạn chế, việc cho phép bot AI truy cập miễn phí có thể mang lại lợi ích chiến lược lớn hơn: tăng khả năng được phát hiện của nội dung trong các hệ thống AI, xây dựng quan hệ với các nền tảng mới nổi và định vị trang web là "thân thiện với AI" trước những cơ hội trong tương lai.

Kiếm tiền trực tiếp chỉ trở nên hấp dẫn khi khối lượng giao dịch biện minh cho sự phức tạp trong quản lý và chi phí thực hiện.

Dành cho các trang web nhỏ (10.000 lượt truy cập/tháng)

Traffic bot ước tính: 500-1.000 lượt truy cập AI/tháng
Doanh thu tiềm năng: $5-50/tháng (tùy thuộc vào CPM và tỷ lệ chấp nhận)
Tác động: Không đáng kể, thường tốt hơn nếu giữ mở để có sự hiện diện
Khuyến nghị: Theo dõi và cân nhắc cho phép truy cập miễn phí có chiến lược

Đối với các trang web trung bình (100 nghìn lượt truy cập/tháng)

Lưu lượng bot ước tính: 5.000-15.000 lượt truy cập AI/tháng
Doanh thu tiềm năng: $75-750/tháng
Tác động: Ngưỡng bắt đầu có ý nghĩa để cân nhắc việc kiếm tiền
Khuyến nghị: Thử nghiệm với nội dung premium trả phí

Dành cho các nhà xuất bản lớn (1 triệu lượt truy cập/tháng)

Lưu lượng bot ước tính: 50.000-200.000+ lượt truy cập AI/tháng
Doanh thu tiềm năng: $750-10.000+/tháng
Tác động: Tiềm năng cho một dòng kinh doanh mới đáng kể
Khuyến nghị: Khuyến nghị triển khai ngay lập tức

Tương lai của cấp phép nội dung

Prashanth Chandrasekar, CEO của Stack Overflow, tóm gọn hoàn hảo tình hình: "Các nền tảng cộng đồng nuôi dưỡng các LLM nên được đền bù cho những đóng góp của họ để có thể tái đầu tư vào cộng đồng của mình."

Với thương mại AI-to-AI dự kiến đạt 46 tỷ USD trong ba năm tới, các nhà xuất bản định vị sớm trong hệ sinh thái này có thể tìm thấy một lợi thế cạnh tranh đáng kể.

Kết luận: Đã đến lúc hành động chưa?

"Pay Per Crawl" không còn là khoa học viễn tưởng, mà là thực tế đang vận hành. Đối với các nhà xuất bản, câu hỏi không phải là liệu mô hình này có được khẳng định hay không, mà là liệu và khi nào họ có thể thích ứng để nắm bắt giá trị của nó.

Sự thật khó chịu: không phải ai cũng nên kiếm tiền ngay lập tức. Đối với các trang web có lưu lượng truy cập hạn chế (<50K lượt truy cập/tháng), duy trì quyền truy cập tự do cho các bot AI có thể có lợi hơn về mặt chiến lược, xây dựng khả năng hiển thị và các mối quan hệ cho các cơ hội tương lai. Ngưỡng thuận lợi để kiếm tiền trực tiếp thường đạt được với khối lượng lưu lượng truy cập đáng kể.

Các dự báo cho thấy tiềm năng doanh thu hấp dẫn cho các nhà xuất bản vừa và lớn, đặc biệt là đối với nội dung chất lượng và lưu lượng truy cập đáng kể. Tuy nhiên, thành công sẽ phụ thuộc vào khả năng:

Đánh giá ngưỡng thuận lợi của riêng mình (khối lượng so với độ phức tạp quản lý)
Chọn chiến lược phù hợp (truy cập tự do, chặn hoàn toàn, hoặc kiếm tiền)
Chọn nền tảng phù hợp (Cloudflare, TollBit, hoặc các giải pháp tích hợp)
Thiết lập giá cạnh tranh nhưng vẫn có lợi nhuận
Duy trì chất lượng nội dung đủ để biện minh cho các khoản thanh toán nhỏ
Giám sát và tối ưu hóa liên tục cách tiếp cận

Đối với các nhà xuất bản có lưu lượng truy cập đáng kể sẵn sàng thử nghiệm, năm 2025 có thể là năm mà AI ngừng chỉ là một chi phí và cuối cùng trở thành một cơ hội kinh doanh. Đối với tất cả những người khác, đây có thể là thời điểm để xây dựng nền tảng nhằm nắm bắt cơ hội này trong tương lai.

Nguồn chính:

Cuộc cách mạng trả tiền cho mỗi lượt thu thập thông tin: Cách các nhà xuất bản có thể kiếm tiền từ lưu lượng truy cập AI

Tóm tắt bài viết này bằng AI