hdfstore

5Nhiệt

1Trả lời

OK Tôi đang thử nghiệm với gấu trúc để tải xung quanh một tập tin csv 30GB với 40 triệu + hàng và 150 + cột vào HDFStore. Phần lớn các cột là chuỗi, theo sau là số và ngày tháng. Tôi chưa bao giờ thực

6Nhiệt

1Trả lời

Get loại dataframe suy ra lặp đi lặp lại sử dụng chunksize

Làm thế nào tôi có thể sử dụng pd.read_csv() để lặp đi lặp lại đoạn thông qua một tập tin và giữ lại dtype và meta-thông tin khác như thể tôi đọc trong toàn bộ bộ dữ liệu cùng một lúc? Tôi cần đọc tro

8Nhiệt

1Trả lời

Lấy danh sách các nội dung HDF5 (Pandas HDFStore)

Tôi không có vấn đề lựa chọn nội dung từ một bảng trong một HDF5 Store: with pandas.HDFStore(data_store) as hdf: df_reader = hdf.select('my_table_id', chunksize=10000) Làm thế nào tôi có thể nh

5Nhiệt

1Trả lời

Tôi có thể cập nhật HDFStore không?

Hãy xem xét những điều sau hdfstore và dataframes df và df2 import pandas as pd store = pd.HDFStore('test.h5') midx = pd.MultiIndex.from_product([range(2), list('XYZ')], names=list('AB')) df = pd

6Nhiệt

1Trả lời

HDFStore: sử dụng table.select và RAM

Tôi đang cố gắng chọn các hàng ngẫu nhiên từ bảng HDFStore khoảng 1 GB. Sử dụng RAM phát nổ khi tôi yêu cầu khoảng 50 hàng ngẫu nhiên. Tôi đang sử dụng gấu trúc 0-11-dev, python 2.7, linux64. Trong tr