Chuyển tệp lớn qua SFTP bằng PHP

Question

Tôi có tệp lớn (200 MB trở lên). Tôi cần phải chuyển nó qua công việc cron PHP. Sử dụng Phpseclib cung cấp cho các lỗi sau:

Allowed memory size of 134217728 bytes exhausted (tried to allocate 4133 bytes) in /app/vendor/phpseclib/phpseclib/phpseclib/Net/SSH2.php

Có cách nào tôi có thể làm điều này với PHP cron job?

Mã này là đơn giản một dòng trong đó $ localFile là một tập tin CSV đã tồn tại

$sftp->put('/Import/coupons/coupons_import_test.csv', $localFile, NET_SFTP_LOCAL_FILE); 

PS. Điều này cần được thực hiện sau khi PHP tạo tệp đó trong thư mục /tmp để thời gian của tập lệnh chuyển phải được phát.

[Chỉnh sửa] Tôi không có ý định tăng giới hạn bộ nhớ vì các tệp sau có thể có kích thước cao hơn. Một giải pháp mà tôi có thể chuyển tệp ở các phần (chế độ nối thêm) hoặc sử dụng một số tập lệnh shell với PHP cron có thể đáng giá

Kích thước tệp trên máy chủ từ xa là 111,4 MB trong khi tệp thực tế lớn hơn nhiều ở cục bộ.

[Chỉnh sửa sau khi sửa chữa] Vấn đề này đã biến mất sau khi chuyển sang phiên bản 2.0.2 từ phiên bản 1.0 tôi đã phải sửa đổi mã cho đặt

$sftp->put('/Import/coupons/coupons_import.csv', $localFile, $sftp::SOURCE_LOCAL_FILE); 

Answer 1

Phpeclib chỉ nên chuyển các tệp lớn mà không cần tăng bộ nhớ khả dụng.

Tôi nghĩ bạn có thể đã gặp lỗi cũ "SSH2: không tính thời lượng dữ liệu so với kích thước cửa sổ". Bạn rất có thể có thể sử dụng phiên bản cũ của Phpseclib (Phiên bản bị lỗi cũ được đóng gói ngay cả với phần mềm tương đối mới như ví dụ Magento 1.9. *)

Kiểm tra phiên bản của bạn nếu không muốn nói là redownload mới nhất của nó từ https://github.com/phpseclib/phpseclib

Answer 2

Thay nhìn thấy mã mà bạn sử dụng dự đoán của tôi là bạn đang cố gắng tải tệp 200mb dưới dạng chuỗi và bạn đang cố gắng tải lên dưới dạng chuỗi. ví dụ. $sftp->put('filename.remote', file_get_contents('filename.local'));. Nếu vậy, hãy thử thay vào đó:

$sftp->put('filename.remote', 'filename.local', NET_SFTP_LOCAL_FILE); 

Answer 3

Điều này thực sự đã thay đổi một chút với phiên bản phpseclib> = 2.0.5. Bạn nên bao gồm không gian tên use phpseclib\Net\SFTP;, sau đó làm một cái gì đó như thế này:

$sftp->put('filename.remote', 'filename.local', SFTP::SOURCE_LOCAL_FILE);