Tôi có nên giới hạn tốc độ hoặc giảm các truy vấn cơ sở dữ liệu của mình không?

Question

Tôi đang tạo tập lệnh PHP để nhập một số dữ liệu từ tệp văn bản vào cơ sở dữ liệu MySQL. Các tệp văn bản này khá lớn, một tệp trung bình sẽ có 10.000 dòng trong đó mỗi tệp tương ứng với một mục mới mà tôi muốn trong cơ sở dữ liệu của mình. (Tôi sẽ không nhập tệp thường xuyên)

Tôi lo lắng rằng đọc một dòng từ tệp và sau đó thực hiện truy vấn INSERT, 10.000 lần liên tiếp có thể gây ra một số vấn đề. Có cách nào tốt hơn cho tôi để làm điều này? Tôi có nên thực hiện một truy vấn INSERT với tất cả 10.000 giá trị không? Hay điều đó cũng tệ như vậy?

Có thể tôi có thể tiếp cận một phương tiện và thực hiện khoảng 10 hoặc 100 mục cùng một lúc. Thực sự vấn đề của tôi là tôi không biết thực hành tốt là gì. Có lẽ 10.000 truy vấn liên tiếp là tốt và tôi chỉ lo lắng cho không có gì.

Mọi đề xuất?

Answer 1

có nó là

<?php 
$lines = file('file.txt'); 
$count = count($lines); 
$i = 0; 
$query = "INSERT INTO table VALUES "; 
foreach($lines as $line){ 
    $i++; 
    if ($count == $i) { 
     $query .= "('".$line."')"; 
    } 
    else{ 
     $query .= "('".$line."'),"; 
    } 
} 
echo $query; 

http://sandbox.phpcode.eu/g/5ade4.php

này sẽ làm cho một truy vấn duy nhất, đó là nhiều nhanh hơn so với phong cách một dòng-one-truy vấn!

Answer 2

Tôi sẽ làm điều đó trong một truy vấn lớn với tất cả các giá trị cùng một lúc. Tuy nhiên, hãy chắc chắn rằng bạn chạy START TRANSACTION; trước và COMMIT; để nếu xảy ra sự cố trong khi thực hiện truy vấn (có thể vì nó sẽ chạy trong một thời gian khá dài), cơ sở dữ liệu sẽ không bị ảnh hưởng.

Answer 3

Sử dụng câu lệnh đã chuẩn bị, được đề xuất bởi các tác giả của Hiệu suất cao MySQL. Nó tiết kiệm rất nhiều thời gian (tiết kiệm từ giao thức lãng phí và mã SQL ASCII).