Bài công khaiNguồn: developers.cloudflare.com1 phút đọc
Crawl toàn bộ trang web chỉ với một lệnh gọi API bằng Browser Rendering
Bài viết giới thiệu về endpoint /crawl mới của Browser Rendering, cho phép thu thập dữ liệu từ toàn bộ trang web bằng một lệnh gọi API duy nhất. Endpoint này tự động khám phá, hiển thị và trả về nội dung ở nhiều định dạng như HTML, Markdown hoặc JSON, đồng thời tuân thủ robots.txt và AI Crawl Control.
Tín hiệu0đánh giá có chiều sâu
Thảo luận0bình luận dưới bài
Chủ đề2nhánh tri thức liên quan
Nguồn gốcdevelopers.cloudflare.comhttps://developers.cloudflare.com/changelog/post/2026-03-10-br-crawl-endpoint/
Tóm tắt nhanh
Bài viết giới thiệu về endpoint /crawl mới của Browser Rendering, cho phép thu thập dữ liệu từ toàn bộ trang web bằng một lệnh gọi API duy nhất. Endpoint này tự động khám phá, hiển thị và trả về nội dung ở nhiều định dạng như HTML, Markdown hoặc JSON, đồng thời tuân thủ robots.txt và AI Crawl Control.
Điểm chính
- Endpoint /crawl cho phép crawl toàn bộ website chỉ với một API call.
- Hỗ trợ nhiều định dạng đầu ra: HTML, Markdown và JSON.
- Tôn trọng robots.txt và AI Crawl Control để tuân thủ quy tắc của website.
Góc nhìn từ cộng đồng
Hãy là người đầu tiên thêm một góc nhìn hữu ích để mạch đọc này trở nên sâu hơn.