CasperJS/PhantomJS chậm hơn nhiều so với Curl

Question

Khi tôi thử curl www.yelp.com, mất 1,1 giây. Tuy nhiên việc truy xuất trang bằng cách sử dụng CasperJS mất hơn một phút!

Điều này có bình thường không? Làm thế nào để tìm hiểu những gì đang làm chậm casper/phantom xuống? Tôi nghi ngờ một số chuyển hướng HTTP mà casper không theo dõi?

var casper = require('casper').create(); 
var url = 'http://www.yelp.com'; 

casper.start(url); 
casper.then(function() { 
    console.log( this.getHTML()); 
    this.exit(); 
}); 

casper.run(); 

Answer 1

Bạn có trên Windows? Nếu có, có một vấn đề mạng bí ẩn khi proxy tự động đang được sử dụng. Xem ghi chú phát hành để biết thêm chi tiết: http://phantomjs.org/release-1.9.html.

Nói chung, hãy thử phân tích các yêu cầu và phản hồi mạng. Một cách rất đơn giản để theo dõi lưu lượng mạng:

page.onResourceRequested = function (request) { 
    console.log('Request ' + JSON.stringify(request, undefined, 4)); 
}; 
page.onResourceReceived = function (response) { 
    console.log('Receive ' + JSON.stringify(response, undefined, 4)); 
}; 

Bạn cần phải tinh chỉnh nó thêm nếu bạn muốn thời gian, vv Đọc tài liệu về vấn đề này Network Monitoring tính năng.