Truy cập các tệp lớn trong C

Question

Tôi cần truy cập tệp lớn hơn 2gb bằng C. Trong một lần chạy chương trình, số byte sẽ được đọc từ tệp và vị trí của vị trí tiếp theo được lưu. Trong lần chạy tiếp theo của chương trình, vị trí tệp được đọc và một số byte được đọc bắt đầu từ vị trí đó. Các biến chứng là đôi khi tập tin có thể được 'nén' bằng cách sao chép nó vào một tệp mới, ít hơn bất kỳ byte nào đã được đọc (tôi nghĩ rằng sao chép là cách duy nhất để thực hiện điều đó). Số byte bị loại bỏ theo cách này cũng sẽ được lưu lại.

Tôi cần biết vị trí hiện tại của tệp từ khởi đầu ban đầu để đồng bộ hóa với một tệp khác. Điều này sẽ dễ dàng bởi vì nó chỉ là (current_offset + deleted_bytes).

Lý do không đơn giản là fseek chỉ sử dụng chỉ mục dài int giới hạn tệp thành 2gb và fsetpos sử dụng cấu trúc fpos_t cho chỉ mục vị trí, không phải là số và không thể chuyển đổi qua lại đến một. Tôi không biết bất kỳ cách nào để sử dụng một chỉ mục dài dài int cho định vị tập tin, đó sẽ là giải pháp lý tưởng.

Tôi phải làm gì?

Answer 1

Trên cửa sổ, bạn có thể sử dụng _lseeki64() để thực hiện tìm kiếm 64 bit.

Đối với khả năng tương thích với Linux, bạn cũng có thể thêm -D_FILE_OFFSET_BITS=64 tại thời gian biên dịch, và sau đó làm điều này trong một trong những tiêu đề của bạn:

#ifdef __MINGW32__ // or whatever you use to find out you're compiling on windows 
#define lseek _lseeki64 
#endif 

sau đó sử dụng lseek() ở khắp mọi nơi như bình thường. Điều này hoạt động vì các cửa sổ bỏ qua cờ _FILE_OFFSET_BITS và Linux sẽ không thấy định nghĩa lại của lseek.

Ngoài ra còn có _fseeki64() nếu bạn muốn có một phiên bản FILE*, và có tương đương 64 bit tell() và ftell() chức năng quá (_telli64() và _ftelli64()).

Answer 2

Thêm cờ biên soạn -D_FILE_OFFSET_BITS=64, làm cho fopen, fseek, off_t v.v. trở thành 64 bit và có thể sử dụng để thao tác các tệp có kích thước lớn hơn 2 GB. Xem Large File Support in Linux để biết thêm thông tin.