私はタスクインスタンスで1つのスクリプトを実行する必要があります。このためEMR内の特定のインスタンスグループでスクリプトを実行する方法
私の現在的アプローチ
、私は、クラスタの起動中にブートストラップアクションとしてスクリプトを渡しますが、それはすべてのマシン上でスクリプトを実行します。 (マスタ、コア、タスクインスタンスグループ)。
特定の(タスク)インスタンスグループに対してのみスクリプトを実行してもらえますか?
実際のタスクは、タスクインスタンスグループインスタンスで終了通知ポーリングスクリプトを実行することです。 - https://blog.fugue.co/2015-01-06-spot-termination-notices.html
起動時にそのスクリプトを実行する必要がありますか、いつでも実行できますか? – error2007s
@ error2007s私のユースケースは、(タスクインスタンスグループの下の)スポットインスタンスがすべてダウンすると、ただ新しいインスタンスに置き換えられます。 私が理解しているように、これをブートストラップアクションとして渡すと、新しいインスタンスも起動しても、常にすべてのタスクインスタンスで実行されます。 私が間違っている場合、私を訂正してください。 – devsda