python WebサーバーはGILをどのように克服しますか

Question

Webサーバーは、同時に多くの要求を処理する必要があります。 Pythonインタプリタは実際にGIL制約を持っているので、並行処理はどのように実装されていますか？

複数のプロセスを使用し、状態共有にIPCを使用していますか？

Answer 1

通常通り。 WebサービスはほとんどI/Oバウンドであり、GILはI/O操作中に解放されます。したがって、特別な調整なしでスレッド化が使用されるか、イベントループ（Twistedなど）が使用されます。

Answer 2

あなたは通常、独立した要求で派遣される多くの労働者（すなわち、ガンコン）を雇っています。他のすべて（並行性に関連する）はデータベースによって処理されるので、あなたから抽象化されます。すべての

あなたはIPCを必要としない、あなただけなど、RDBMS、キャッシュサーバ（Redisの、memcachedの）される、「真実の単一ソース」が必要

Answer 3

まず、要求が可能独立して処理されます。しかし、サーバはに同時にを処理したいので、最大時間で処理できる要求の数を維持する必要があります。

というコンセプトの実装は、同時実行性はWebサーバーによって異なります。

一部の実装では、要求を処理するスレッドまたはプロセスの数が固定されている場合があります。すべてが使用中の場合、追加の要求は処理されるまで待たなければなりません。

また、要求ごとにプロセスまたはスレッドが生成される可能性があります。要求ごとにプロセスを生成すると、不合理なメモリとCPUオーバーヘッドが発生します。軽量スレッドを生成するほうが優れています。そうすることで、毎秒何百ものクライアントにサービスを提供することができます。しかし、スレッドも管理上のオーバーヘッドをもたらし、高いメモリとCPU消費量に現れます。

非同期コルーチンに基づくイベントドリブンアーキテクチャは、何千ものクライアントにサービスを提供するために最先端のソリューションです。これにより、サーバーは数多くのスレッドを生成することなく、高速でクライアントにサービスを提供できます。 Wikipedia page of the so-called C10k problemには、Webサーバーのリストがあります。その中で、多くはこのアーキテクチャを利用しています。

コルーチンはPythonでも利用できます。 http://www.gevent.org/を見てください。そのため、たとえばuWSGI + geventに基づくPython WSGIアプリケーションは、非常に優れたソリューションです。