MLlib Apache SparkライブラリをJAVA Eclpiseプロジェクトにインストールするにはどうすればよいですか？

Question

Javaプロジェクト用のSpark MLlibライブラリを使用して、いくつかの機械学習アルゴリズムを実装したいと考えています。私は成功なしにいくつかのチュートリアルを試してみました。

私は日食を使用するのに慣れていて、セットアップがとても難しいと驚いていました。私の前提は、ライブラリをhereからダウンロードし、ビルドパスにjarファイルを追加する必要があっただけですが、明らかに難しいようです。

Answer 1

mavenプロジェクトを作成し、以下の依存関係を追加します（最新の2.0.0 Sparkの場合）。 eclipseでJavaALSExample.javaのような単純なプログラムを実行することから始めることができます。

https://github.com/apache/spark/blob/master/examples/src/main/java/org/apache/spark/examples/ml/JavaALSExample.java

あなたが参照できるスパークgithubのリポジトリで利用できる多くのJavaのサンプルがあります。お役に立てれば。

<dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-core_2.11</artifactId> 
     <version>2.0.0</version> 
    </dependency> 
    <dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-mllib_2.11</artifactId> 
     <version>2.0.0</version> 
    </dependency> 
    <dependency> 
     <groupId>org.apache.spark</groupId> 
     <artifactId>spark-sql_2.11</artifactId> 
     <version>2.0.0</version> 
</dependency>