Nên cho phép
Đây là bot lập chỉ mục thông thường. Không có lý do cụ thể thì không nên chặn.
Chặn nó thì mất gì
Chặn nó là tự xoá mình khỏi Google. Gần như không bao giờ là điều bạn muốn.
Dòng robots.txt cần viết
User-agent: Googlebot
Allow: /User-agent: Googlebot
Disallow: /Đặt đoạn này trước nhóm User-agent: * để chắc chắn nó được áp dụng.
Thông tin nhanh
- Nhà vận hành
- Nhóm
- Công cụ tìm kiếm
- Mức độ quan trọng
- Quan trọng cho tìm kiếm truyền thống
- Tuân thủ robots.txt
- Có
- Được tính trong điểm kiểm tra
- Có
Googlebot có đọc được website của bạn không?
Kiểm tra trong 10 giây — không cần đăng ký. Công cụ chỉ ra đúng dòng luật đang quyết định điều đó.
Kiểm tra website của tôiBot khác của Google
KHÔNG phải crawler. Là cờ trong robots.txt quyết định Google có được dùng nội dung của bạn cho Gemini hay không.
Lập chỉ mục hình ảnh cho Google Images.
Lập chỉ mục cho Google News.
Kiểm tra trang thương mại điện tử cho Google Shopping.
Công cụ kiểm tra URL trong Google Search Console.
Chấm điểm chất lượng trang đích cho Google Ads.
Bot khác nhóm Công cụ tìm kiếm
Lập chỉ mục cho Bing.
Crawler của Apple, phục vụ Siri và Spotlight.
Crawler của Petal Search (Huawei).
Crawler của Yahoo Search.
Crawler của DuckDuckGo.
Crawler của Baidu (Trung Quốc).