Làm cách nào để bạn có thể tạo một tập lệnh Python song song?

Question

Giả sử tôi có một kịch bản python gọi my_parallel_script.py đó liên quan đến việc sử dụng multiprocessing parallelize một vài điều và tôi chạy nó với lệnh sau đây:

python -m cProfile my_parallel_script.py 

này tạo profiling đầu ra cho quá trình mẹ chỉ. Các cuộc gọi được thực hiện trong các tiến trình con không được ghi lại. Có thể cấu hình các tiến trình con không?

Nếu tùy chọn duy nhất là sửa đổi nguồn, thì cách đơn giản nhất để làm điều này là gì?

Answer 1

cProfile chỉ hoạt động trong một quy trình duy nhất, do đó bạn sẽ không tự động nhận được quá trình con được lược tả.

Tôi khuyên bạn nên tinh chỉnh mã quy trình con để bạn có thể gọi riêng nó dưới dạng một quy trình. Sau đó chạy nó dưới profiler. Bạn có thể không cần phải chạy hệ thống đa quy trình của bạn trong khi hồ sơ, và nó sẽ đơn giản hóa công việc để chỉ có một đứa trẻ đang chạy.