2017-12-12 9 views
1

4つのCPUコアを持つワーカーが1人いるとします。 Dataflowワーカーマシンで並列処理はどのように構成されていますか?私たちはコア数を超えて並列化しますか?Google Cloud Dataflowワーカースレッキング

このタイプの情報はどこで入手できますか?

答えて

2

コアごとに1つのワーカースレッドが使用され、各ワーカースレッドは独立して入力スペースのチャンクを処理します。

+0

したがって、4コア、並列処理を備えた1台のマシンは4台ですか?ありがとう – Mayumi

+0

また、この情報はドキュメントのどこかで見つけることができますか?スーパーヘルプになるだろう。 – Mayumi

+0

見ているうちに私はこれを見つけました。 8つのN1-standard-1 DataFlowワーカーでリモートで実行している場合と比べて、DataFlowジョブをローカルに、たとえばCPUが8つのCompute Engineインスタンス上で実行している場合と、明らかにAuto-Scalingは1つの違いですが、それ以外の場合はローカルとリモートのメリットとデメリットはありますか?特に並列処理に関連しています。ありがとう! –

関連する問題