Tôi đang thêm hàng tỷ hàng vào chỉ mục Lucene, mỗi hàng gần như là 6000 byte. Có giới hạn về số hàng tối đa có thể được thêm vào Lucene Index không? Bao nhiêu không gian sẽ có hàng tỷ 6000 byte chiếm trên Lucene Index. Có giới hạn nào cho kích thước này không?Giới hạn không gian của Lucene Index là gì?
6
A
Trả lời
7
Xem Lucene tài liệu cho limitations của nó, nó không thể có nhiều hơn
- ~ 274 tỷ ngữ riêng biệt,
- ~ 2,1 tỷ tài liệu.
Đối với các tập dữ liệu lớn như vậy, thường chỉ nên sử dụng Lucene cho chỉ mục đảo ngược của nó và lưu trữ nội dung thực tế của tài liệu ở nơi khác. Bạn có thể mong đợi kích thước chỉ mục là ~ 30% kích thước của tài liệu gốc của tài liệu (miễn là đây là tài liệu thông thường, tài liệu được tạo bằng máy tính với nhiều cụm từ duy nhất sẽ tạo ra chỉ mục lớn hơn nhiều).
Các vấn đề liên quan
- 1. Giới hạn của Sinatra là gì?
- 2. C# string split - index ngoài giới hạn
- 3. Giới hạn Nak là gì?
- 4. SQLite: giới hạn thực tế là gì?
- 5. Bộ nhớ trong của Android - giới hạn là gì?
- 6. Giới hạn của WiX và WiX Toolset là gì?
- 7. Các giới hạn của suy luận kiểu là gì?
- 8. Giới hạn kích thước của yêu cầu đăng là gì?
- 9. Các giới hạn kỹ thuật của phoneGap/Cordova là gì?
- 10. BigInteger không có giới hạn nghĩa là gì?
- 11. Hashed Index là gì?
- 12. nginx auth_basic giới hạn thời gian
- 13. Giới hạn email trên Google Apps Script là gì?
- 14. localStorage Giới hạn kích thước ... Các tùy chọn là gì?
- 15. Giới hạn thời gian thực của Instagram API
- 16. Giới hạn tối ưu hóa sử dụng SIMD là gì?
- 17. Drools: Quy tắc giới hạn thời gian
- 18. Tối ưu hóa yêu cầu HTTP: Giới hạn là gì?
- 19. Giới hạn sử dụng API Google Drive là gì?
- 20. Các giới hạn của các chức năng đa curl của PHP là gì?
- 21. chỉ đặt giới hạn dưới của giới hạn cho ggplot
- 22. giới hạn random.shuffle Python của
- 23. Các giới hạn của MySQL
- 24. Mocking and Unit Testing Solr và Lucene Index
- 25. Giới hạn của API Wikipedia
- 26. là gì quá giới hạn hạn ngạch cho gọi Google Contacts v3 API
- 27. Giới hạn của lý luận trong số học định lượng trong SMT là gì?
- 28. Giới hạn lịch sự đối với API của Google là gì?
- 29. Các giới hạn của hệ thống kiểm tra loại và loại là gì?
- 30. Giới hạn bản ghi của câu lệnh chèn mở rộng MySQL là gì?
phần này biến mất khỏi tài liệu có thể không còn bất kỳ giới hạn nào về các cụm từ duy nhất http://lucene.apache.org/core/6_5_0/core/org/apache/lucene/codecs/lucene62/package-summary.html – yura