sqoop

0熱

3答えて

sqoopを使用してHDFSからMSSQLサーバにデータを転送しようとしています。しかし、いくつかの理由から、sqoopは tool.BaseSqoopTool: Enabled debug logging. sqoop.ConnFactory: Added factory com.microsoft.sqoop.SqlServer.MSSQLServerManagerFactory speci

0熱

1答えて

Hadoop、Hive、およびSqoopを使用してMS SQL Serverからデータを取得および分析する方法は？

データベース（MS SQL Server）にあるデータの分析を行いたい。だから、Sqoop/Hiveの助けを借りてHDFSにそのデータを持ち込むことはできますか？ Hive/Sqoopで可能ですか？どうすればいいのか教えてください。ありがとうございました。

0熱

2答えて

HDFSからHiveへのSqoopデータの移動

Sqoopを使用して大量のMySQLテーブルをHDFSにインポートするときに、--hive-importフラグを含めるのを忘れました。だから今私はHDFSに座っているこれらのテーブルを持っていると、データをロードする簡単な方法があるのだろうかと思っています（自分でLOAD DATA文を書くことなく）。私はsqoop作成・ハイブ・テーブルを使用してみました： ./bin/sqoop create-

1熱

2答えて

sqoopインポート中にハイブにテーブルを作成することに関連するクエリ

SQL Serverからハイブにsqoopをインポートしようとしています。 sqoop-importコマンドを実行すると、インポートタスクが完了するという問題があります。 HDFS（/ user/hive/warehouse/table_name_dir）の完全なデータが表示されます。しかし、HIveで "SHOW TABLES"コマンドを実行するとCLIリストにテーブルが表示されません。（私

0熱

2答えて

SQOOPを使用してHIVEからデータをエクスポートした後にSQL Serverでトリガを起動する方法

Hiveを使用しています。私はそれにいくつかのタスクを実装し、SQOOPを使用してハイブからSQL Serverにテーブルをエクスポートしたかったのです。テーブルがHiveからエクスポートされると、SQL Serverでトリガーを起動します。トリガを撃つことは可能ですか？ Plsはできるだけ早く返信します。ありがとうございました。

7熱

1答えて

Hiveで表をインポートした後に間違った数が表示される

MS SQL ServerからHiveに約10個の表をインポートしました。しかし、テーブルの1つでHiveのレコードをチェックしようとすると、クエリ（select tblNameからcount（*）を実行するとレコードが増えました）が見つかりました。次に、そのテーブルを削除し、再びハイブにインポートしました。私はコンソールログで（203レコードを取得した）ことを確認しました。そして、もう一度

1熱

3答えて

sqoop-exportのいくつかの問題に直面していますか？

私はHiveからSQL Serverに何度もテーブルをエクスポートしました。私はこの問題に直面しません。フィールドの区切り文字を "、"として使用し、SQL Serverにもテーブルを作成しました。 [email protected]:~/sqoop-1.3.0-cdh3u1/bin$ ./sqoop-export --connect 'jdbc:sqlserver://192.168.1.1;

19熱

5答えて

JavaプログラムでSqoopを使用するには？

私はsqoopをコマンドラインで使う方法を知っています。しかし、javaプログラムを使ってsqoopコマンドを呼び出す方法は知られていません。誰かがコードビューを表示できますか？

12熱

1答えて

HDFSからHBaseへのデータインポート（cdh3u2）

hadoopとhbase cdh3u2がインストールされています。 hadoopには、パス/home/file.txtにファイルがあります。 one,1 two,2 three,3 このファイルをhbaseにインポートします。最初のフィールドはStringとして解析され、2番目のフィールドは整数として解析され、hbaseにプッシュされます。私はdvanceにこの aThanksを行うために

0熱

1答えて

HBaseデータをRDBMSにエクスポート

私はHBaseを使用してデータを保存していますが、後で私の要件に合わせてデータをHBaseからmysqlやpostgresのようなRDBMにエクスポートします。私たちはSqoopをオプションとして持っていますが、MySQLからインポートしてHBaseに格納し、HDFSの保存データをRDBMSにエクスポートし、HBaseから直接データをインポートすることはできません。 HBaseテーブルからRDBM