2017-12-20 4 views
-1

GCコレクタがメモリ不足であるという私のpysparkにエラーがありました。 G1ガベージコレクタについての記事を読んでみてください。 pysparkアプリケーションでどのように設定しますか?私はそれについての指示を見つけることができませんでした..Pyspark G1 Garabageコレクタ

ありがとう!ここで覚えておくべき

答えて

0

主なポイントは、ガベージコレクション のコストは、Javaの数に比例しているということです。これはスタートです オブジェクト... 元本のconfを発見するために、スパークsee thissee thisによってそれを最適化するために、使用するパラメタ。

残りは経験です...