SparkとHbase 1.2.4を統合しようとしています。私は現在、hadoop 2.7.3を使用しています。 HBase 1.2.4と互換性のあるSparkのバージョンを教えていただけますか?スパークとHBaseのバージョンの互換性
0
A
答えて
0
私はHBaseのバージョン1.2とスパークバージョン1.6を使用しています。だから私はスパークバージョン1.6または1.6.xは間違いなくhbase 1.2.4で動作すると思います。
0
関連する問題
- 1. SparkとHbase-clientのバージョンの互換性
- 2. Apache Storm Hbaseのバージョン互換性、java.lang.NoSuchFieldError:HBASE_CLIENT_LIMIT
- 3. HBASE 0.94.1とhadoopとの互換性
- 4. 互換性のないバージョン
- 5. iosのバージョン互換性
- 6. C#バージョンの互換性
- 7. 3.7とのcassandraバージョンの互換性?
- 8. ブートストラップのバージョンとブラウザの互換性
- 9. JavaバージョンとのCacertsの互換性
- 10. Prism 6の旧バージョンとの互換性
- 11. ElasticSearchとKibanaのバージョンの互換性
- 12. アプリケーションエンハンサとのバージョン互換性エラー
- 13. JdeveloperとWeblogicのバージョン互換性
- 14. DNNパッケージ(モジュール)と旧バージョンの互換性
- 15. WebSocketのバージョンと下位互換性
- 16. .NET Frameworkとバージョンの互換性
- 17. LuceneとSolr間のバージョン非互換性
- 18. 誰もhadoop、sqoop、hbase、ハイブの互換性バージョンを提案できます
- 19. OTAバージョン12.21とALMバージョン11.52の互換性の問題
- 20. Javaバージョンの互換性の問題
- 21. protobufバージョン間のデータフォーマットの互換性
- 22. 互換性のないライブラリのバージョン
- 23. Thriftバージョン間のデータフォーマットの互換性
- 24. ライブラリのバージョン間のスウィフト互換性
- 25. .NETバージョンの互換性の問題
- 26. Berkley DBファイルのバージョン間の互換性
- 27. ルビー:互換性のないライブラリのバージョン
- 28. ICUのバージョン互換性のSymfony 3.1
- 29. Lucene - Solrのバージョンの互換性
- 30. 互換性のないバージョンでクロスコンパイル
私はSpark 1.6.3を設定しようとしましたが、エラーが発生しました:ERROR [main] spark.SparkContext:SparkContextを初期化中にエラーが発生しました。 java.net.ConnectException:master/10.0.0.1からマスタ:8021への呼び出しが接続例外で失敗しました。そして、私はhduser @ master:〜$ HBASE_PATH = '/ usr/local/hbase/hbase-1.2.4/bin/hbase classpath'を使用しています。 hduser @ master:〜$。/ spark-shell --driver-class-path $ HBASE_PATH hbaseとsparkシェルを接続します。それはhbaseと接続するための正しい手順なのでしょうか、何か他のことをしなければなりません。お返事をありがとうございます。 – Mahmud
Siddhartha、あなたが使っているhadoopのバージョンは? – Mahmud
Hadoopバージョン2.7.2 –