Mức sử dụng bộ nhớ Django tăng lên theo mọi yêu cầu

Question

Tôi đã chuyển dự án Django đầu tiên của mình từ DjangoEurope sang Webfaction và bắt đầu một vấn đề giống như rò rỉ bộ nhớ. Với mỗi yêu cầu sử dụng bộ nhớ duy nhất của quá trình máy chủ đi lên khoảng 500kb. Nó không bao giờ đi xuống. Điều này xảy ra cho đến khi Webfaction giết nó để sử dụng quá nhiều bộ nhớ.

Tôi có thể thấy rõ điều này khi tôi làm mới giao diện quản trị của Django trong trình duyệt của tôi (mặc dù điều này xảy ra với mỗi trang, không chỉ với giao diện quản trị - mặc dù giao diện quản trị sẽ là một trường hợp thử nghiệm tốt đẹp, vì không có mã trực tiếp ở đó). Với mỗi trình duyệt tải lại việc sử dụng bộ nhớ tăng lên vài trăm kilobyte.

tôi thử nghiệm bộ nhớ sử dụng một lệnh được đề xuất bởi Webfaction:

ps -u publica -o rss,etime,pid,command 

Thông tin thêm về thiết lập của tôi:

• Django 1.1 (ổn định)
• Mặc định Webfaction Django thiết lập sử dụng Apache và mod_wsgi
• DEBUG đặt thành False
• MySQLdb 1.2.2 từ Webfaction, nhưng sau khi nghe nó có một số vấn đề tôi đã thử phiên bản 1.2.3c. Không giúp được gì.

Edit: Tôi tạo ra một dự án Django trống - cấu hình mặc định Django cộng django.contrib.admin và cơ sở dữ liệu rỗng tươi (thử cả với mysql và postgresql). Tôi bắt đầu tải lại trình quản trị Django trong trình duyệt của mình và xem mức sử dụng bộ nhớ. Lúc đầu, tôi thấy vấn đề xảy ra - sử dụng bộ nhớ tăng sau mỗi lần tải lại. Nhưng rồi nó ổn định và ngừng phát triển. Đó là nhất quán với cách dự án ban đầu của tôi cư xử trên Django châu Âu. Thật không may trên Webfaction nó không bao giờ có vẻ ổn định (hoặc ít nhất là không nằm trong giới hạn của bộ nhớ có sẵn cho tài khoản của tôi). Lời khuyên nào?

Answer 1

Tôi e rằng mình không có bất kỳ câu trả lời rõ ràng nào. Lời khuyên của Graham Dumpleton rất hữu ích, nhưng tiếc là anh ta không trả lời (chỉ là bình luận), nên không có cách nào để chấp nhận câu trả lời của anh ta.

Mặc dù tôi vẫn chưa được giải quyết hoàn toàn vấn đề này, sau đây là một số lời khuyên cơ bản cho những người khác gặp phải vấn đề tương tự:

• tài liệu về đọc Webfaction:
  • Reducing Memory Usage in general
  • Reducing mod_wsgi Memory Consumption
  • Reducing Django Memory Consumption
• Hãy chắc chắn rằng các thiết lập DEBUG được thiết lập để False
• Không sử dụng mod_python, sử dụng mod_wsgi
• Hãy chắc chắn rằng bạn sử dụng phiên bản mới nhất od mod_wsgi (Webfaction có xu hướng cài đặt phiên bản cũ)
• Don't use Django to serve static content
• Thử chạy mod_wsgi trong chế độ daemon (Webfaction cài đặt nó ở chế độ nhúng theo mặc định) [nhờ Graham Dumpleton cho mẹo]
• Nếu bạn chạy ở chế độ được nhúng, bạn có thể chỉ định "không hoạt động-timeout = [giây s] "tùy chọn. Nó sẽ khởi động lại quá trình sau [giây] không hoạt động, giúp tăng mức sử dụng bộ nhớ. Read this forum post for detailed instructions.
• This script sẽ giúp bạn theo dõi việc sử dụng bộ nhớ của bạn dễ dàng hơn và chính xác hơn [nhờ ClaudioA for the tip]

Answer 2

Tôi gặp vấn đề tương tự với tính năng web.

Phương pháp tôi sử dụng và webfaction cho tôi biết tôi nên tiếp tục sử dụng, chạy một công việc định kỳ kiểm tra bộ nhớ sau mỗi 5 phút và khởi động lại mọi ứng dụng không thể kiểm soát được.

Trong số 4 ứng dụng python trên webfaction, tôi trung bình 4 lần khởi động lại mỗi ngày.

Answer 3

Tôi cũng gặp sự cố với bộ nhớ trên Webfaction - chúng không thực sự cắt cho đến khi tôi thêm ứng dụng thứ năm của mình. Tôi đã thử một vài chỉnh sửa để cấu hình apache của tôi, nhưng những gì cuối cùng đã làm việc cho tôi đã chỉ chuyển sang mod_wsgi.

Answer 4

• Bạn đã kiểm tra các mẹo này chưa? -> http://blog.webfaction.com/tips-to-keep-your-django-mod-python-memory-usage-down

• Chúng tôi đã triển khai một ứng dụng trong WebFaction và chúng tôi không gặp phải vấn đề đó.

• Bạn có đang phân phối các tệp tĩnh của mình là chúng đề xuất không?

• BTW này có thể hữu ích quá: http://fightingrabbits.com/archives/198

Answer 5

tôi muốn đề nghị không để đoán.

Hãy xem http://code.google.com/p/django-dowser/, đây là một ứng dụng rất hữu ích để phát hiện rò rỉ bộ nhớ và tìm ra những phần nào trong mã của bạn chịu trách nhiệm về mức tiêu thụ bộ nhớ.

Answer 6

Cả hai mô đun mod_python và mod_wsgi đều được tải vào apache chưa?

Tôi biết mod_wsgi không thích có mod_python trong tòa nhà của nó. Kiểm tra nó không được tải.

Answer 7

Kiểm tra xem phụ trợ bộ nhớ cache trong bộ nhớ có được bật hay không, nếu có, đó có thể là sự cố (mục nhập bộ nhớ cache mới theo từng yêu cầu).

Answer 8

Chúng tôi đã có một vấn đề tương tự trên Webfaction, nhưng nó bật ra đó không phải là vì họ ở tất cả . Có một lỗi trong Django về mức sử dụng bộ nhớ cao khi sử dụng sơ đồ trang web với nhiều yếu tố: http://code.djangoproject.com/ticket/11572

Khi chúng tôi xóa sơ đồ trang web, nó không quay lên 90 Mb vào thời gian đó nữa. Chỉ cần nghĩ rằng tôi nên đề cập đến nó vì nó mất một thời gian dài để sử dụng để khắc phục sự cố.