Có tốt hơn khi lưu trữ Khung dữ liệu Pandas trong từ điển hoặc trong Bảng điều khiển không?

Question

Tôi hy vọng điều này không có vẻ là một câu hỏi mở để thảo luận. Tôi sẽ đưa ra một số chi tiết cho trường hợp cụ thể của tôi.

Tôi mới dùng Pandas và tôi cần lưu trữ nhiều mảng 2D, trong đó các cột đại diện cho tần số và hàng đại diện cho chỉ đường (phổ sóng 2D, nếu bạn tò mò). Mỗi mảng đại diện cho một thời gian cụ thể.

Tôi đang lưu trữ các mảng như Pandas DataFrames, nhưng để giữ chúng trong một đối tượng duy nhất tôi nghĩ đến 2 lựa chọn:

1. Lưu trữ các DataFrames trong một cuốn từ điển mà quan trọng là tem thời gian.

2. Lưu trữ khung dữ liệu trong bảng điều khiển gấu trúc trong đó mục là dấu thời gian.

Tùy chọn đầu tiên có vẻ đơn giản và linh hoạt để lưu trữ các mảng với các kích thước, chỉ mục và tên cột khác nhau. Tùy chọn thứ hai có vẻ tốt hơn để xử lý dữ liệu, vì Bảng có các phương pháp cụ thể và cũng có thể dễ dàng được lưu hoặc xuất (ví dụ: csv hoặc pickle).

Lựa chọn nào trong số hai tùy chọn này phù hợp hơn về: tốc độ, sử dụng bộ nhớ, tính linh hoạt và phân tích dữ liệu?

Kính trọng

Answer 1

Tôi không nghĩ bạn cần một bảng điều khiển. Tôi khuyên bạn nên sử dụng một phương pháp dataframe lồng nhau.