sqoop

0熱

1答えて

--map-column-hiveタグを使用したSqoopコマンドのchar、varchar、decimalに関する問題

Sqoopを使用してデータをテラデータからハイブにインポートしています。原始的に（近く 'varchar型' を期待して '' 234不一致入力： FAILED：はParseExceptionライン1 は、私は例外だ --map-column-hive col1=int,col2=float,col3=decimal,col4=timestamp,col5=varchar sqoop import

0熱

2答えて

のcrontabは働いていませんが、スクリプトとしてその作業以下

は私のクローンタブです： */5 * * * * /usr/bin/wget "http://localhost:8080/sample/index.jsp" --post-data "data=$(nohup sqoop import --connect 'jdbc:sqlserver://localhost;username=username;password=password;databas

1熱

1答えて

cloudera quickstartVMでハイブテーブルを作成できません

cloudera quickstartvm 5.5でハイブでテーブルを作成しようとしていますが、「ログ初期化」と言われていて、長い時間が経過してもハイブにテーブルを作成しませんハイブにテーブルをインポートすることはできません..私は同じ問題でstackoverflowで多くの質問を見てきましたが、答えを見つけることができません。誰かがこれを知っている、または答えを得ている場合は、情報を共有してくだ

0熱

1答えて

hdfs-site.xmlのプロパティを変更した後でも、Sqoopがデータをインポートしますが、複製の問題があります

誰でも私にプロパティファイルの変更についてお知らせください！おかげで、 Sqoopも、HDFS-site.xmlのプロパティを変更した後のデータが、レプリケーションの問題をインポートします。コマンド： C:\hadoop\hdp\sqoop-1.4.6.2.4.0.0-169>SQOOP import --connect jdbc:oracle:thin:@nile:1527:huiprd -

0熱

1答えて

Apache sqoopエラー

sqoopを使用してRDBMSに接続したいとします。私のRDBMSはOracleです。 16/04/24 6時11分13秒INFOはmapreduce.Job：マップ0％、100％ 16/04/24 6時11分13秒INFOのmapreduce.Jobを減らし、最終的な状態では、私は、エラーの下に直面しています：ジョブjob_1461141375226_0002が状態FAILEDで失敗しました：

1熱

1答えて

負荷テーブル列

に変換私は、Sqoopマニュアルでこれを気づいた： 24.5。ハイブのスキーマ定義ハイブユーザは、SQLタイプとハイブタイプの間に1対1のマッピングがないことに注意してください。通常、直接マッピングを持たないSQL型（DATE、TIME、およびTIMESTAMPなど）は、HiveのSTRINGに強制的に変換されます。 NUMERICおよびDECIMAL SQL型はDOUBLEに変換されます。この

0熱

1答えて

sqoop import-all-tables fail

hortonworks VMサンドボックスで次のコマンドを使用してすべてのテーブルをインポートしようとしました。 [[email protected] ~]# sqoop import-all-tables -m 12 --connect "jdbc:mysql://sandbox.hortonworks.com:3306/retail_db" --username retail_dba -P -

0熱

1答えて

MySQLデータベースからインポート中にHadoopのデータノードにレプリケートできません

mysqlテーブルからhdfsにデータをインポートしようとしています。私は以下のエラーに 16/05/07 20:01:18 ERROR tool.ImportTool: Encountered IOException running import job: java.io.FileNotFoundException: File does not exist: hdfs://localhost:5

4熱

4答えて

RDBMSからhdfsにデータを転送する際のApache Spark-SQLとSqoopのベンチマーク

RDBMSからHDFSにデータを転送する必要がある場合に取り組んでいます。 sqoopを使用してこのケースのベンチマークを行い、6〜7分で約20GBのデータを転送できることが分かりました。 Spark SQLで同じことをしようとすると、パフォーマンスは非常に低くなります（レコードの1GbがNetezzaからhdfsに転送するのに4分かかる）。チューニングを行い、パフォーマンスを向上させようとしてい

0熱

1答えて

Sqoopジョブ例外

Sqoop JOBSをリストするときに次の例外が発生します。私はので、この例外のSoopジョブを作成することはできませんよ： [email protected]:/usr/lib/sqoop/conf# sqoop job --list 16/04/11 01:51:44 ERROR tool.JobTool: I/O error performing job operation: java.i