Solr chậm khi lập chỉ mục

Question

Tôi có thêm 100 tệp CSV có 10.000 hàng mà tôi đang lập chỉ mục. Và sau đó truy vấn chính tả là chính tả tương tự. Trong khi thực hiện chỉ mục này thì rất chậm.

Tôi đã tìm thấy một số giải pháp tốt

1. Master-nô lệ nơi chủ Index và nô lệ được sử dụng để truy vấn. How to index records in Solr faster (and not impact ColdFusion web server)? Two JVM?

2. Sử dụng Tri-Phạm vi http://www.lucidimagination.com/blog/2009/05/13/exploring-lucene-and-solrs-trierange-capabilities/

Tôi biết hai giải pháp này là khác nhau tôi muốn một số ý kiến ​​cần được ưu tiên cao hơn? Liệu giải pháp thứ hai phù hợp với vấn đề của tôi? Và nếu có nhiều giải pháp cho vấn đề kiểm tra lỗi chính tả của tôi.

Cảm ơn trước

Answer 1

Lập chỉ mục thường sẽ làm cho truy vấn chậm. Nếu bạn có đĩa nhanh, chỉ mục sẽ sử dụng 100% CPU, nếu không, nó sẽ sử dụng 100% băng thông đĩa. Dù bằng cách nào, truy vấn sẽ chậm.

Cấu hình chính/phụ là giải pháp chuẩn cho việc này. Các máy chủ nô lệ được dành riêng cho các truy vấn tìm kiếm. Thời gian duy nhất họ làm chậm là sau khi nhân rộng, khi người tìm kiếm mới với bộ đệm mới được tạo ra.

Cấu hình chính/phụ có thể không lập chỉ mục nhanh hơn nhiều, nhưng nó sẽ tránh hiệu suất truy vấn chậm. Đã có công việc về lập chỉ mục đa luồng, vì vậy bạn có thể muốn thử nghiệm nhiều tác vụ lập chỉ mục cùng một lúc. Điều này sẽ không giúp đỡ nếu nút cổ chai là đĩa IO, chỉ khi nó đang sử dụng 100% của một CPU.

Trường Trie thật tuyệt vời cho các truy vấn phạm vi. Tôi nghi ngờ họ sẽ có nhiều ảnh hưởng đến tốc độ lập chỉ mục.

Cuối cùng, bạn có thể muốn điều chỉnh các tùy chọn đề xuất chính tả của mình. Đề xuất chính tả có thể là rất nhiều công việc và bạn có thể có được kết quả tốt với các tùy chọn khác nhau, ít tốn kém hơn.