Google-CloudVertexBot
Thu thập theo yêu cầu của chủ site để dựng Vertex AI Agent.
Nên cho phép
Đây là bot lập chỉ mục thông thường. Không có lý do cụ thể thì không nên chặn.
Chặn nó thì mất gì
Google ghi nó không ảnh hưởng Google Search.
Dòng robots.txt cần viết
User-agent: Google-CloudVertexBot
Allow: /User-agent: Google-CloudVertexBot
Disallow: /Đặt đoạn này trước nhóm User-agent: * để chắc chắn nó được áp dụng.
Cần cả file chứ không chỉ hai dòng này? Công cụ tạo file robots.txt dựng sẵn file hoàn chỉnh, đối chiếu với cả thư viện bot rồi mới xuất ra.
Thông tin nhanh
- Nhà vận hành
- Nhóm
- Trợ lý AI & mô hình ngôn ngữ
- Mức độ quan trọng
- Tuỳ chọn — chặn hay mở đều hợp lý
- Tuân thủ robots.txt
- Có
- Được tính trong điểm kiểm tra
- Không, chỉ hiển thị
Google-CloudVertexBot có đọc được website của bạn không?
Kiểm tra trong 10 giây — không cần đăng ký. Công cụ chỉ ra đúng dòng luật đang quyết định điều đó.
Kiểm tra website của tôiBot khác của Google
KHÔNG phải crawler. Là cờ trong robots.txt quyết định Google có được dùng nội dung của bạn cho Gemini hay không.
Crawler chính của Google Search, và cũng là nguồn của AI Overviews và AI Mode.
Lập chỉ mục hình ảnh cho Google Images.
Lập chỉ mục cho Google News.
Kiểm tra trang thương mại điện tử cho Google Shopping.
Công cụ kiểm tra URL trong Google Search Console.
Crawler chung của các nhóm sản phẩm Google, dùng cho thu thập nội bộ và nghiên cứu.
Chấm điểm chất lượng trang đích cho Google Ads.
Bot khác nhóm Trợ lý AI & mô hình ngôn ngữ
Thu thập nội dung để huấn luyện mô hình của OpenAI.
OAI-SearchBotXây chỉ mục tìm kiếm cho ChatGPT Search.
Kiểm tra trang đích được gửi làm quảng cáo trên ChatGPT có đúng chính sách không.
Tải trang của bạn ngay lúc người dùng hỏi ChatGPT về nó.
Thu thập nội dung có thể dùng để huấn luyện mô hình của Anthropic.
Tải trang theo yêu cầu trực tiếp của người dùng Claude.