Tìm kiếm lời ngắn với Solr

Question

Tôi đang sử dụng Solr cùng với NGramTokenizerFactory để giúp tạo ra thẻ tìm kiếm chuỗi con của lời

NGramTokenizer được cấu hình với chiều dài từ tối thiểu 3

Điều này có nghĩa rằng tôi có thể tìm kiếm ví dụ "không" và sau đó đối sánh với từ "không thể tin được".

Tuy nhiên, tôi gặp sự cố với các từ ngắn như "I" và "in". Chúng không được lập chỉ mục bởi SOLR (Tôi nghi ngờ nó là do NGramTokenizer) và do đó tôi không thể tìm kiếm chúng.

Tôi không muốn giảm độ dài từ tối thiểu xuống 1 hoặc 2, vì điều này tạo ra chỉ mục tìm kiếm lớn. Nhưng tôi muốn SOLR bao gồm toàn bộ các từ có độ dài thấp hơn mức tối thiểu này.

Tôi có thể làm như thế nào?

/Carsten

Answer 1

Trước hết, cố gắng tìm hiểu lý do tại sao lời nói của bạn không được lập chỉ mục bởi Solr bằng cách sử dụng "Phân tích Tool"

http://localhost:8080/solr/admin/analysis.jsp 

Chỉ cần đặt các lĩnh vực và các văn bản mà bạn đang tìm kiếm cho và xem máy phân tích nào đang lọc ngắn hạn của bạn. Tôi đề nghị bạn làm như vậy bởi vì bạn nói rằng bạn chỉ có một "nghi ngờ" và bạn phải chắc chắn về máy phân tích nào lọc dữ liệu của bạn.

Sau đó, tại sao bạn không chỉ đơn giản là sao chép thuật ngữ trong một trường khác mà không có trình phân tích đó?

Bằng cách này, các cụm từ của bạn sẽ được lập chỉ mục hai lần và sẽ xuất hiện dưới dạng chính xác từ và dưới dạng n-gram. Sau đó, bạn phải đối phó với điểm số của hai lĩnh vực khác nhau.

Tôi hy vọng điều này đã giúp bạn theo một cách nào đó.

Một số liên kết cho tập hợp và copyfield thuộc tính:

Indexing data in multiple fields

Using copy field tag