Chỉ cho phép Google CSE và không cho phép tìm kiếm tiêu chuẩn của Google trong ROBOTS.txt

Question

Tôi có trang web mà tôi đang sử dụng Công cụ tìm kiếm tùy chỉnh của Google. Tôi muốn Google CSE thu thập thông tin trang web của tôi nhưng tôi muốn nó không nằm trong kết quả tìm kiếm thông thường của Google. Tôi đặt này trong tệp robots.txt của tôi hy vọng rằng google CSE chương trình sẽ bỏ qua nó vì tôi đã chỉ định các trang tôi muốn Google CSE để thu thập thông trong các thiết lập

User-agent: * 
Disallow:/

Tôi đoán bots Google CSE cũng phải tuân theo các robot. txt. Vì vậy, có một cách để có được trang của tôi ở lại ra khỏi tìm kiếm công cụ tìm kiếm nhưng đối với Google CSE vẫn có thể lập chỉ mục nó? TIA!

Answer 1

Không có giải pháp cho câu hỏi này phù hợp với những gì bạn muốn. Tôi cũng có tình huống tương tự, nơi tôi chỉ cần tìm kiếm tùy chỉnh. Thật không may, danh sách của Google crawlers không hiển thị bot cụ thể cho tìm kiếm tùy chỉnh của google. Chặn Googlebot cả hai sẽ giết tìm kiếm gốc và tìm kiếm tùy chỉnh.