Nên cho phép
Đây là nhóm quyết định website của bạn có được trợ lý AI trích dẫn hay không. Chặn nó không ngăn được ai sao chép nội dung — chỉ khiến bạn vắng mặt trong câu trả lời, trong khi đối thủ vẫn được nêu tên.
Chặn nó thì mất gì
Quyết định nội dung của bạn có nằm trong dữ liệu của Claude hay không.
Dòng robots.txt cần viết
User-agent: ClaudeBot
Allow: /User-agent: ClaudeBot
Disallow: /Đặt đoạn này trước nhóm User-agent: * để chắc chắn nó được áp dụng.
Cần cả file chứ không chỉ hai dòng này? Công cụ tạo file robots.txt dựng sẵn file hoàn chỉnh, đối chiếu với cả thư viện bot rồi mới xuất ra.
Thông tin nhanh
- Nhà vận hành
- Anthropic
- Nhóm
- Trợ lý AI & mô hình ngôn ngữ
- Mức độ quan trọng
- Quyết định việc bạn có được AI trích dẫn hay không
- Tuân thủ robots.txt
- Có
- Được tính trong điểm kiểm tra
- Có
ClaudeBot có đọc được website của bạn không?
Kiểm tra trong 10 giây — không cần đăng ký. Công cụ chỉ ra đúng dòng luật đang quyết định điều đó.
Kiểm tra website của tôiBot khác của Anthropic
Tải trang theo yêu cầu trực tiếp của người dùng Claude.
Phục vụ tính năng tìm kiếm web của Claude.
Token cũ của Anthropic.
Token cũ của Anthropic.
Bot khác nhóm Trợ lý AI & mô hình ngôn ngữ
Thu thập nội dung để huấn luyện mô hình của OpenAI.
OAI-SearchBotXây chỉ mục tìm kiếm cho ChatGPT Search.
Tải trang của bạn ngay lúc người dùng hỏi ChatGPT về nó.
Lập chỉ mục cho Perplexity.
Tải trang khi người dùng Perplexity yêu cầu.
Thu thập nội dung cho các sản phẩm AI của Meta.