Trợ giúp cần tìm ra lý do cho maxClauseCount được đặt thành 1024 lỗi

Question

Tôi đã có hai bộ chỉ mục tìm kiếm. TestIndex (được sử dụng trong môi trường thử nghiệm của chúng tôi) và ProdIndex (được sử dụng trong môi trường SẢN XUẤT). Truy vấn tìm kiếm Lucene: + ngày: [20090410184806 TO 20091007184806] hoạt động tốt cho chỉ mục thử nghiệm nhưng cung cấp thông báo lỗi này cho chỉ mục Prod.

"maxClauseCount được thiết lập 1024"

Nếu tôi thực hiện sau dòng ngay trước khi thực hiện truy vấn tìm kiếm, sau đó tôi không nhận được lỗi này. BooleanQuery.SetMaxClauseCount (Int16.MaxValue); searcher.Search (myQuery, collector);

Tôi có thiếu thứ gì đó ở đây không? Tại sao không nhận được lỗi này trong chỉ mục thử nghiệm? Lược đồ cho hai chỉ mục giống nhau. Chúng chỉ khác nhau về số lượng hồ sơ/dữ liệu.PROD index có số lượng hồ sơ cao hơn (khoảng 1300) so với thử nghiệm (khoảng 950).

Cảm ơn bạn đã đọc.

Answer 1

Truy vấn phạm vi cơ bản được chuyển thành truy vấn boolean với một mệnh đề cho mọi giá trị có thể, HOẶC cùng nhau.

Ví dụ, truy vấn + giá: [10-13] được tranformed để truy vấn boolean

+(price:10 price:11 price:12 price:13) 

giả định tất cả các giá trị 10-13 tồn tại trong chỉ mục.

Tôi giả sử, tất cả giá trị 1300 của bạn nằm trong phạm vi bạn đã đưa ra. Vì vậy, truy vấn boolean có 1300 mệnh đề, cao hơn giá trị mặc định là 1024. Trong chỉ mục thử nghiệm, giới hạn 1024 không đạt được vì chỉ có 950 giá trị.

Answer 2

Tôi đã gặp vấn đề tương tự. Giải pháp của tôi là bắt BooleanQuery.TooManyClauses và tự động tăng maxClauseCount.

Dưới đây là một số mã tương tự với những gì tôi có trong quá trình sản xuất.

Good Luck, Randy

    private static Hits searchIndex(Searcher searcher, Query query) 
     throws IOException 
    { 
     boolean retry = true; 
     while (retry) 
     { 
      try 
      { 
       retry = false; 
       Hits myHits = searcher.search(query); 
       return myHits; 
      } 
      catch (BooleanQuery.TooManyClauses e) 
      { 
       // Double the number of boolean queries allowed. 
       // The default is in org.apache.lucene.search.BooleanQuery and is 1024. 
       String defaultQueries = Integer.toString(BooleanQuery.getMaxClauseCount()); 
       int oldQueries = Integer.parseInt(System.getProperty("org.apache.lucene.maxClauseCount", defaultQueries)); 
       int newQueries = oldQueries * 2; 
       log.error("Too many hits for query: " + oldQueries + ". Increasing to " + newQueries, e); 
       System.setProperty("org.apache.lucene.maxClauseCount", Integer.toString(newQueries)); 
       BooleanQuery.setMaxClauseCount(newQueries); 
       retry = true; 
      } 
     } 
    } 

Answer 3

tôi đã cùng một vấn đề này trong C# mã chạy với hệ thống quản lý nội dung web Sitecore. Tôi đã sử dụng câu trả lời của Randy ở trên, nhưng không thể sử dụng chức năng System get và set property. Thay vào đó tôi lấy số đếm hiện tại, tăng lên và đặt lại. Làm việc tuyệt vời!

catch (BooleanQuery.TooManyClauses e) 
{ 
    // Increment the number of boolean queries allowed. 
    // The default is 1024. 
    var currMaxClause = BooleanQuery.GetMaxClauseCount(); 
    var newMaxClause = currMaxClause + 1024; 
    BooleanQuery.SetMaxClauseCount(newMaxClause); 
    retry = true; 
} 

Answer 4

Chỉ cần đặt, BooleanQuery.setMaxClauseCount(Integer.MAX_VALUE); và thế là xong.