Java APIを使用してApache Sparkにテキストファイル、イメージを格納する方法は？

Question

私はApache Sparkを初めて使用しています。私はWindows OSを使用しており、sparkはLinux OSにインストールされています。 Java APIを使用してSpark設定でIPアドレスとポートを追加することは可能ですか？ spark java exampleを共有してください。

ありがとうございます。

Answer 1

sparkで遊びたいのであれば、アプリケーションからローカルスパークを開始することをおすすめします。ここには、そのためのJavaの例（古い1.6構文）があります。

public static void trySparkTestClass() throws IOException { 
    SparkConf conf = new SparkConf() 
      .setMaster("local[*]") 
      .setAppName("TestSparkSample"); 

    JavaSparkContext jsc = new JavaSparkContext(conf); 
    HiveContext sqlContext = new HiveContext(jsc); 
    DataFrame myJson = sqlContext.read().json("myJson"); 
    jsc.stop(); 
}