C＃ - 200個のHTTP取得要求を実行して結果を出力する

Question

ユーザーがメニューオプション（1-5）を入力して機能を実行し、結果を出力するコンソールアプリケーションがあります。

いくつかのURLに200個のHTTP取得要求を実行し、すべての結果を戻し、いくつかの作業を行い、ユーザーに出力します。

この私の現在のコード：

 Parallel.For(0, 200, i => 
     { 
      String[] words = webApi.getSplittedClassName(); 
      for (int j = 0; j < words.Length; j++) 
      { 
       wordsList.Add(words[j]); 
      } 

     }); 

とgetSplittedClassName：

今

public string[] getSplittedClassName() 
    { 
     HttpResponseMessage response = null; 
     try 
     { 
      response = httpClient.GetAsync(url).Result; 
     } 
     catch (WebException e) 
     { 
      return null; 
     } 
     return parser.breakdownClassName(response); 
    } 

、ユーザがオプション番号を入力するので、プログラムが必要な機能をexecutessし、その後、私は入れては、出力、私は非同期でhttp作業を行うことのポイントがないと思ったので、すべての同期しています。

問題は、要求を行うのに多くの時間がかかっていることです。約30〜40秒です。意味がありますか？

基本的に3つの機能があります.1つの要求を実行し、3つの要求を行い、200の要求を実行します。

200リクエストを実行してすべての結果を待つ最良の方法は何ですか？ 1つのリクエストのみを送信するときと同じように同期する必要がありますか？

おかげ

Answer 1

Parallel.For()は、それはあなたのマシンが持っているどのように多くのCPUコアにチューニングされています並列度を使用しますので、あなたの操作は、主にCPUバウンドであることを前提とする傾向があります。しかし、HTTPリクエストはIOバウンドになる傾向があります。そのため、ほとんどの時間はターゲットマシンが情報を返すのを待っています。

これは、非同期処理を使用する良い機会であることを意味します。このような何かを試してみてください：

public async Task<string[]> getSplittedClassName() 
{ 
    HttpResponseMessage response = await httpClient.GetAsync(url); 
    return parser.breakdownClassName(response); 
} 

と、この：

var classNameTasks = Enumerable.Range(1, 200) 
     .Select(i => webApi.getSplittedClassName()) 
     .ToArray(); 
    wordList.AddRange(
     Task.WhenAll(classNameTasks).Result 
      .SelectMany(g => g)); 

説明：

1. getSplittedClassName()非同期ようにというよりは、それが同期必要なものを取得して、結果を返す作ります結果が利用可能になるとすぐに完了するTask<>を返します。
2. 私はすべての例外を食べるコードを削除しました。これは一般的には悪いことです。ここで例外があった場合、本当にやりたいことを考えなければなりません：リクエストをやり直すべきでしょうか？例外をスローするだけですか？このような問題を無視するのは、通常、悪い考えです。
3. Task.WhenAll()は、与えられたタスクのすべての結果を返すTask<>を返します。これらすべてのタスクが同期するのを待ってから、すべてをwordListにバッチとして追加することができます。これは、すべての項目が単一のスレッドでwordListに追加されるため、スレッドセーフです。元のコードには、同時にwordListに値を追加しようとするスレッドが複数ある可能性があります。

また、これは単なる宿題ですが、現実のシナリオであれば、同じURLに同時に200件のリクエストを行っているという事実は、大きな赤い旗。