Nhiều yêu cầu HTTP trong C#

Question

Tôi cần gửi khoảng 200 yêu cầu HTTP song song với các máy chủ khác nhau và nhận phản hồi. Tôi sử dụng lớp HttpWebRequest trong C#. Nhưng tôi không thấy tăng cường thời gian tốt khi các yêu cầu được xử lý song song. Ví dụ nếu một yêu cầu cần 3 giây để nhận phản hồi, 2 yêu cầu song song - 6ec, 3 yêu cầu - 8 giây, 4 yêu cầu - 11 giây ... Không tốt, tôi hy vọng rằng sẽ có thời gian tốt nhất, khoảng 10 giây cho 200 yêu cầu. Dường như chỉ có 2-3 yêu cầu thực hiện song song, nhưng thời gian chờ bắt đầu ngay lập tức sau khi tạo đối tượng WebRequest. Tôi đã thử đặt các giá trị DefaultConnectionLimit và MaxServicePoints nhưng id không được trợ giúp. Khi tôi hiểu các thông số này cho số yêu cầu đến một trang web song song. Tôi cần các yêu cầu đến các trang web khác nhau.

Mã ví dụ mà tôi sử dụng để kiểm tra:

ArrayList a = new ArrayList(150); 

for (i = 50; i < 250; i++) 
{ 
    a.Add("http://207.242.7." + i.ToString() + "/"); 
} 

for (i = 0; i < a.Count; i++) 
{ 
    Thread t = new Thread(new ParameterizedThreadStart(performRequest)); 
    t.Start(a[i]); 
} 


static void performRequest(object ip) 
{ 
     HttpWebRequest req = (HttpWebRequest)WebRequest.Create((stirng)ip); 

     HttpWebResponse resp = (HttpWebResponse)req.GetResponse(); 
} 

Сan ai đã từng gặp phải một vấn đề như vậy? Cảm ơn bạn đã đề xuất.

Answer 1

Sử dụng các yêu cầu web không đồng bộ.

Edit: http://msdn.microsoft.com/en-us/library/86wf6409(VS.71).aspx

Answer 2

Thay vì khởi động đề của riêng bạn thử sử dụng các phương pháp không đồng bộ của HttpWebRequest như HttpWebRequest.BeginGetResponse và HttpWebRequest.BeginGetRequestStream.

Answer 3

này có thể giúp - http://social.msdn.microsoft.com/forums/en-US/netfxnetcom/thread/1f863f20-09f9-49a5-8eee-17a89b591007

Gợi ý có một giới hạn về số lượng kết nối TCP cho phép, nhưng mà bạn có thể tăng giới hạn

Answer 4

bạn có thể thử này:

try 
     { 
      List<Uri> uris = new List<Uri>(); 
      uris.Add(new Uri("http://www.google.fr")); 
      uris.Add(new Uri("http://www.bing.com")); 

      Parallel.ForEach(uris, u => 
      { 
       WebRequest webR = HttpWebRequest.Create(u); 
       HttpWebResponse webResponse = webR.GetResponse() as HttpWebResponse; 
      }); 
     } 
     catch (AggregateException exc) 
     { 
      exc.InnerExceptions.ToList().ForEach(e => 
       { 
        Console.WriteLine(e.Message); 
       }); 
     } 

Answer 5

Đây là mã ứng dụng Android của yêu cầu gửi. Làm thế nào chúng ta có thể sử dụng mã thượng như params.add (mới BasicNameValuePair ("key", "giá trị");

HttpPost yêu cầu = new HttpPost();

Danh sách params = new ArrayList();

params.add (BasicNameValuePair mới ("key", "giá trị"); // Làm thế nào chúng ta có thể cung cấp cho các giá trị trong định dạng này dạng

post.setEntity (UrlEncodedFormEntity mới (params));

httpClient.execute (yêu cầu);