Google
Nên cho phép
Đây là bot lập chỉ mục thông thường. Không có lý do cụ thể thì không nên chặn.
Dòng robots.txt cần viết
Cho phép
User-agent: Google-InspectionTool
Allow: /Chặn
User-agent: Google-InspectionTool
Disallow: /Đặt đoạn này trước nhóm User-agent: * để chắc chắn nó được áp dụng.
Thông tin nhanh
- Nhà vận hành
- Nhóm
- Công cụ tìm kiếm
- Mức độ quan trọng
- Tuỳ chọn — chặn hay mở đều hợp lý
- Tuân thủ robots.txt
- Có
- Được tính trong điểm kiểm tra
- Không, chỉ hiển thị
Google-InspectionTool có đọc được website của bạn không?
Kiểm tra trong 10 giây — không cần đăng ký. Công cụ chỉ ra đúng dòng luật đang quyết định điều đó.
Kiểm tra website của tôiBot khác của Google
KHÔNG phải crawler. Là cờ trong robots.txt quyết định Google có được dùng nội dung của bạn cho Gemini hay không.
Crawler chính của Google Search.
Lập chỉ mục hình ảnh cho Google Images.
Lập chỉ mục cho Google News.
Kiểm tra trang thương mại điện tử cho Google Shopping.
Chấm điểm chất lượng trang đích cho Google Ads.
Bot khác nhóm Công cụ tìm kiếm
Lập chỉ mục cho Bing.
Crawler của Apple, phục vụ Siri và Spotlight.
Crawler của Petal Search (Huawei).
Crawler của Yahoo Search.
Crawler của DuckDuckGo.
Crawler của Baidu (Trung Quốc).