T-SQL - Làm cách nào để tôi có thể thực hiện truy vấn SELECT với nhiều mệnh đề LIKE nhanh hơn?

Question

Tôi đã có một chức năng tìm kiếm các bài báo mà trông như thế này (chứa hơn 5 mục tìm kiếm):

SELECT TOP 5 * 
FROM NewsArticles 
WHERE (headline LIKE '% sustainable %'OR 
headline LIKE '% sustainability %' OR 
headline LIKE '% conservation %' OR 
headline LIKE '% environmental % OR 
headline LIKE '% environmentally %') 
OR 
(body LIKE '% sustainable %'OR 
body LIKE '% sustainability %' OR 
body LIKE '% conservation %' OR 
body LIKE '% environmental % OR 
body LIKE '% environmentally %') 
ORDER BY publishDate DESC 

Truy vấn này được thiết kế để kéo ra 5 câu chuyện tin tức hàng đầu liên quan đến phát triển bền vững và ngồi trên trang chủ về tính bền vững chính của tôi. Tuy nhiên, phải mất một lúc để chạy và trang tải chậm. Vì vậy, tôi đang tìm cách để tăng tốc độ này. Có rất nhiều điều khoản NHƯ dường như cồng kềnh vì vậy tôi đã thử một cái gì đó với lệnh JOIN như thế này:

CREATE TABLE #SearchItem (Search varchar(255)) 

INSERT INTO #SearchItem VALUES 
('sustainable'), 
('sustainability'), 
('conservation'), 
('environmental'), 
('environmentally') 

SELECT TOP 5 * 
FROM NewsArticles as n 
JOIN #SearchItem as s 
ON n.headline COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' OR 
n.body COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' 
ORDER BY n.publishDate DESC 

Điều này dường như làm việc rất tốt cho hiệu suất, nhưng dường như đôi khi mang lại điều trùng lặp mà một trong các từ tìm kiếm xuất hiện trong cả cơ thể và tiêu đề (thường là trường hợp). Tôi đã thử sử dụng từ này bằng cách sử dụng 'SELECT DISTINCT TOP 5 *' nhưng điều này cho tôi một lỗi nói 'Loại dữ liệu ntext không thể được chọn là DISTINCT vì nó không thể so sánh được'. Có phải dừng việc này từ việc mang lại các bản sao mà không thực hiện 2 tìm kiếm riêng biệt và sử dụng UNION không?

Answer 1

Kể từ khi bạn nhận được nhiều lượt truy cập vào nhiều từ, bạn có thể sử dụng của chọn ID như một bộ lọc để lựa chọn thực tế các bài viết:

Select TOP 5 * 
from NewsArticles 
where ID in (SELECT ID 
    FROM NewsArticles as n 
    JOIN #SearchItem as s 
    ON n.headline COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' OR 
     n.body COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' 
) 
ORDER BY publishDate DESC 

Nó vẫn phải nhanh chóng hợp lý (so với truy vấn gốc) và không bị trùng lặp.

(như trong phản ứng Rawheiser, có một giả định rằng một trường ID thực sự tồn tại :))

Answer 2

Nếu có một chìa khóa tin tức Điều bạn có thể sử dụng một truy vấn để mà tham gia trở lại với chính nó như:

select top 5 * 
from NewsArticles as na 
join 
    ( 
     SELECT distinct idNo , publishDate 
     FROM NewsArticles as n 
     JOIN #SearchItem as s 
     ON n.headline COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' OR 
     n.body COLLATE DATABASE_DEFAULT LIKE '% ' + s.Search + ' %' 
    ) as sk 
     on sk.idNo = na.idNo 
ORDER BY sk.publishDate DESC 

Answer 3

Nếu bạn đang làm các loại tìm kiếm, bạn nên sử dụng tìm kiếm văn bản đầy đủ. Bạn cần phải đọc trong BOL về cách thiết lập điều này vì nó phức tạp. Tuy nhiên khi bạn có một ký tự đại diện là ký tự đầu tiên, thì máy chủ SQL không thể sử dụng các chỉ mục đó là lý do tại sao điều này là chậm.

Answer 4

Bạn cũng có thể thử Tìm kiếm toàn văn bản. Một cái gì đó như

SELECT TOP 5 * FROM NewsArticles 
WHERE CONTAINS((headline,body), 'FORMSOF(INFLECTIONAL, sustainable) OR conservation OR FORMSOF(INFLECTIONAL, environmental)') 

Nhưng, HLGEM cho biết, điều quan trọng là phải đọc khi thiết lập FTS. Chỉ cần tạo chỉ mục cho hai cột đó có thể là đủ vì bạn đang tìm kiếm các từ đơn lẻ, nhưng khi bạn thêm cụm từ bạn muốn bắt đầu chỉnh sửa các từ dừng và bộ ngắt và từ tiếng ồn.

Answer 5

tôi sẽ để một cái gì đó như thế này

Tôi muốn chương trình một trường hợp quá trình lập chỉ mục nhạy cảm mà có thể chạy ở đêm, điều đó sẽ:

• bài viết phân tích, chèn vào SEARCH_TERM bất kỳ từ mới nào tìm thấy
• chèn vào SEARCH_INDEX một bộ dữ liệu cho biết rằng một arti đã cho cle có một cụm từ tìm kiếm nhất định
• đánh dấu NEWS_ARTICLE như đã được lập chỉ mục.
• chạy tiếp theo sẽ chỉ số chỉ có điều THA chưa được idexed

Các truy vấn mẫu có thể được như thế này, và sẽ được thắp sáng nhanh vì bạn sẽ không thể sử dụng LIKE:

select 
    distinct n.headline 
from 
    search_item s 
    join search_index x on (s.id = x.search_item_id) 
    join news_article n on (x.news_article_id = n.id) 
where 
    s.term in ('sustainable','sustainability','conservation', 
       'environmental','environmentally') 

Sau đó, bạn có thể tạo từ đồng nghĩa cho cụm từ tìm kiếm và tạo chế độ xem trả về các cụm từ có từ đồng nghĩa của chúng, nếu bạn muốn thực hiện nhiều tìm kiếm ngữ nghĩa hơn trong tương lai.