cloudera

0熱

1答えて

SparkとScalaを使い始めたばかりです。私たちはdev cloudera hadoopクラスタにSpark 2をインストールしました。私はspark2-shellを使用しています。基本を学ぶために本を読んでいます。 scala> val numbers = sc.parallelize(10 to 50 by 10) numbers: org.apache.spark.rdd.RDD[In

0熱

1答えて

Solrインデックス作成のパフォーマンス

Solrのバッチインデックス作成では、32コアと256GBのRAMを備えた4人の作業者からなるクラスタがあります。 YARNは、100のvCoreと785.05GBのメモリを使用するように設定されています。 HDFSストレージは、10Gbインタフェースを介して接続されたEMC Isilonシステムによって管理されます。私たちのクラスタはCDH 5.8.0を実行し、Solr 4.10.3を特色にして

0熱

1答えて

AnalysisException：集約出力によって産生されない選択リスト式（GROUP BY句から行方不明？）

私はインパラクエリがあります。 select id,zip,income from zipcode_incomes group by income having income>avg(income) が、私はエラー、AnalysisException取得しています：集約出力によって産生されない選択リスト式を（GROUP BY句から欠落していますか？）。私は何の間違いをしましたか？

1熱

1答えて

ClouderaのManagerとHDFS-site.xmlの

ClouderaのManagerを使用している場合、私は経由HDFS-site.xmlファイルにアクセスすることができます。 Clouderaのマネージャ]> [クラスタ]> [HDFS>インスタンス>（例えば名前ノード、）> コンフィギュレーションファイルを処理> HDFS-site.xmlのその後 URLのポイントへ： http://quickstart.cloudera:7180/cmf/p

0熱

1答えて

Dockerクイックスタート：アクティブなリソースマネージャーに連絡できませんでした：色相が失敗しました

MacBookにCDHをインストールしましたが、インストールはエラーなしでうまくいっていたようです。私はそれを実行したときには今、私は、コンソールログに1つの失敗した項目を参照してください。色相開始：G [FAILED]、色相クイックスタート・ページ：設定ミスについて語る（localhostの8888）： Checking current configuration Configuratio

0熱

2答えて

NoClassDefFoundError joda DateTimeFormat hadoop clouderaでaws-kinesisを使用

hadoop（CDH 5.5.1）でaws kinesisを実行しているときに異常なエラーが発生しました。私はこの単純なクラスでエラーを再現することができます。そして、私は私のメインの実行 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xs

1熱

2答えて

TIMESTAMP on HIVEテーブル

OracleからHiveへのデータを寄木張りとしてロードしようとしています。日付/タイムスタンプ列を含むテーブルをハイブにロードするたびに、これらの列は自動的にBIGINTに変換されます。 sqoopを使ってハイブにタイムスタンプ/日付形式を読み込むことはできますか？すでにハイブで表を作成してから、インパラを使用して寄木細工ファイルLOAD DATA INPATHを作成しようとしました。ところで

0熱

1答えて

SqoopオプションからSqoopコマンドを生成するには？

MysqlからRDBMSテーブルをインポートするためのSqoopコマンドを生成します。私はDBに格納されたsqoopコマンドを持っており、後でこのコマンドでOozieワークフローが作成されます。私は今、手動でSqoopコマンドを書いています。 SqoopOptionsのオブジェクトを作成して値を設定し、オブジェクトからsqoopクエリを生成する方法はありますか？

0熱

2答えて

SPARK HISTORY SERVERのCPU使用率が100％

SPARK HISTORY SERVER上のCPU使用率が100％の場合、これはスパーク履歴サーバーで正しく動作していますか？私は火花履歴サーバは、100％のCPUであることを期待していないCDH 5.4.3

0熱

3答えて

SQOOP - SQL ServerでSCHEMAを使用したクエリ

sqfopで--queryオプションを使用してSQL Serverからデータをインポートしようとしています。私の関心事は、どのようなスキーマをSQL Serverで--queryに使用するかを宣言することです。マイスクリプト： sqoop \ --options-file sqoop/aw_mssql.cfg \ --query "select BusinessEntityId, Login