GoogleOther
Crawler chung của các nhóm sản phẩm Google, dùng cho thu thập nội bộ và nghiên cứu.
Nên cho phép
Đây là bot lập chỉ mục thông thường. Không có lý do cụ thể thì không nên chặn.
Chặn nó thì mất gì
Google ghi nó không gắn với sản phẩm cụ thể nào; chặn không ảnh hưởng Google Search.
Dòng robots.txt cần viết
User-agent: GoogleOther
Allow: /User-agent: GoogleOther
Disallow: /Đặt đoạn này trước nhóm User-agent: * để chắc chắn nó được áp dụng.
Cần cả file chứ không chỉ hai dòng này? Công cụ tạo file robots.txt dựng sẵn file hoàn chỉnh, đối chiếu với cả thư viện bot rồi mới xuất ra.
Thông tin nhanh
- Nhà vận hành
- Nhóm
- Công cụ tìm kiếm
- Mức độ quan trọng
- Tuỳ chọn — chặn hay mở đều hợp lý
- Tuân thủ robots.txt
- Có
- Được tính trong điểm kiểm tra
- Không, chỉ hiển thị
GoogleOther có đọc được website của bạn không?
Kiểm tra trong 10 giây — không cần đăng ký. Công cụ chỉ ra đúng dòng luật đang quyết định điều đó.
Kiểm tra website của tôiBot khác của Google
KHÔNG phải crawler. Là cờ trong robots.txt quyết định Google có được dùng nội dung của bạn cho Gemini hay không.
Crawler chính của Google Search, và cũng là nguồn của AI Overviews và AI Mode.
Lập chỉ mục hình ảnh cho Google Images.
Lập chỉ mục cho Google News.
Kiểm tra trang thương mại điện tử cho Google Shopping.
Công cụ kiểm tra URL trong Google Search Console.
Thu thập theo yêu cầu của chủ site để dựng Vertex AI Agent.
Chấm điểm chất lượng trang đích cho Google Ads.
Bot khác nhóm Công cụ tìm kiếm
Lập chỉ mục cho Bing.
Crawler của Apple, phục vụ Siri và Spotlight.
Crawler của Petal Search (Huawei).
Crawler của Yahoo Search.
Crawler của DuckDuckGo.
Crawler của Baidu (Trung Quốc).