Nhiều hàng với một INSERT duy nhất trong SQLServer 2008

Question

Tôi đang thử nghiệm tốc độ chèn nhiều hàng với một câu lệnh INSERT duy nhất.

Ví dụ: INSERT INTO [MyTable] GIÁ TRỊ (5, 'chó'), (6, 'mèo'), (3, 'cá)

này rất nhanh cho đến khi tôi vượt qua 50 hàng trên một tuyên bố duy nhất, sau đó tốc độ giảm đáng kể.

Chèn 10.000 hàng với các lô 50 mất 0,9 giây. Chèn 10.000 hàng với các lô 51 mất 5,7 giây.

Câu hỏi của tôi có hai phần:

1. Tại sao lại có sự sụt giảm hiệu suất cứng ở 50?
2. Tôi có thể dựa vào hành vi này và viết mã ứng dụng của mình để không bao giờ gửi các lô lớn hơn 50 không?

Thử nghiệm của tôi được thực hiện bằng C++ và ADO.

Chỉnh sửa: Dường như điểm thả không phải là 50 hàng, nhưng 1000 cột. Tôi nhận được kết quả tương tự với 50 hàng 20 cột hoặc 100 hàng của 10 cột.

Answer 1

Bạn cũng có so sánh với phương pháp "liên minh tất cả" được hiển thị ở đây không? http://blog.sqlauthority.com/2007/06/08/sql-server-insert-multiple-records-using-one-insert-statement-use-of-union-all/

Tôi nghi ngờ có bộ nhớ cache/chỉ mục nội bộ được sử dụng tối đa 50 hàng (đó là số thập phân tròn đẹp). Sau 50 hàng nó rơi trở lại trên một thuật toán chèn trường hợp tổng quát ít hiệu quả hơn, có thể xử lý số lượng đầu vào tùy ý mà không cần sử dụng bộ nhớ quá mức.

Answer 2

sự chậm lại có lẽ là phân tích cú pháp của các giá trị chuỗi: VALUES (5, 'dog'), (6, 'cat'), (3, 'fish) chứ không phải vấn đề INSERT.

thử một cái gì đó như thế này, mà sẽ chèn một hàng cho mỗi hàng được trả về bởi truy vấn:

INSERT INTO YourTable1 
    (col1, col2) 
    SELECT 
     Value1, Value2 
     FROM YourTable2 
     WHERE ...--rows will be more than 50 

và xem những gì sẽ xảy ra

Answer 3

Nếu bạn đang sử dụng SQL 2008, sau đó bạn có thể sử dụng giá trị bảng các tham số và chỉ cần thực hiện một câu lệnh chèn đơn.

cá nhân, tôi chưa bao giờ thấy sự chậm lại ở mức 50 bản ghi chèn ngay cả với các lô thông thường. Bất kể chúng tôi đã chuyển sang các thông số giá trị bảng có tốc độ tăng đáng kể cho chúng tôi.

Answer 4

suy nghĩ ngẫu nhiên:

• là nó hoàn toàn phù hợp khi chạy liên tục?
• bạn có đang kiểm tra các mục trùng lặp trong hàng 10k đầu tiên cho lần chèn 10k thứ 2 không?
• bạn có thử kích thước hàng loạt là 51 trước không?
• bạn có làm trống bảng giữa các lần kiểm tra không?

Answer 5

Nó cũng có thể liên quan đến kích thước của hàng. Bảng bạn sử dụng làm ví dụ dường như chỉ có 2 cột. Điều gì xảy ra nếu nó có 25 cột? Hiệu suất có giảm xuống ở 50 hàng không?

Answer 6

Để chèn khối lượng lớn và tần số cao, hãy xem xét sử dụng Bulk Inserts để tải dữ liệu của bạn. Không phải điều đơn giản nhất trong thế giới mà anh ta thực hiện và nó mang lại cho nó một bộ thách thức mới, nhưng nó có thể nhanh hơn nhiều so với thực hiện một INSERT.