python dict set min_size

Question

Tôi đang phân tích cú pháp hàng trăm triệu bản ghi JSON và lưu trữ các thành phần liên quan từ mỗi trong một dict. Vấn đề là bởi vì số lượng hồ sơ tôi đang xử lý, python đang bị buộc phải tăng kích thước của bảng băm cơ bản của dict nhiều lần. Điều này dẫn đến rất nhiều dữ liệu phải được phục hồi. Lượng hồi phục tuyệt đối dường như tốn rất nhiều thời gian. Vì vậy, tôi tự hỏi nếu có một cách để thiết lập một kích thước tối thiểu trên bảng băm cơ bản của dict để số lượng các hoạt động thay đổi kích thước được giảm thiểu.

Tôi đã đọc this khi tối ưu hóa số python dict, từ câu trả lời trên this question, nhưng không thể tìm thấy cách thay đổi kích thước ban đầu của bảng băm của dict. Nếu bất cứ ai có thể giúp tôi với điều này, tôi sẽ rất biết ơn.

Cảm ơn bạn

Answer 1

Nếu bạn làm điều này:

a = dict.fromkeys(range(n)) 

nó sẽ buộc các kích thước từ điển để chứa các mặt hàng n. Nó là khá nhanh sau đó, nhưng phải mất 3s để làm như vậy.