sqoop

1熱

1答えて

--map-column-hiveでSqoop importコマンドを使用するには？

私はTeradataからハイブにデータをSqoopしようとしています。 1）必要なすべてのフィールドが色相で作成されたハイブテーブルを作成します。 2）テラデータからハイブにデータをロードするために、属性とともにSqoopインポートコマンドを使用します。 Sqoopedデータを対応するHiveテーブルに配置するように、Sqoop importコマンドから既に作成されたHiveテーブルをポイントする

0熱

1答えて

データがどのようにパーツファイルに分割されるのか

データが歪んでいる場合、データがパーツファイルにどのように分割されるのか疑問に思っています。可能であれば、これを明確にするのを手伝ってください。私のdepartmentテーブルには、department_idのプライマリキーとしてテーブルがあります。 mysql> select * from departments; 2 Fitness 3 Footwear 4 Apparel 5 Go

1熱

1答えて

Sqoopを使ってMySQLテーブルとHive外部テーブルを自動的に同期する方法は？

私は自分のローカルマシン（Linux）自体にMySQLテーブルを持っていますが、私はMySQLテーブルと同じスキーマを持つHive外部テーブルを持っています。私はMySQLテーブルからHive外部テーブルにデータをインポートしようとしていますが、これに対してSqoopを使用しています。しかし、問題は、新しいレコードがMySQLテーブルに追加されるたびに、自動的にHive外部テーブルを更新しない

0熱

1答えて

Sqoopでの$条件の意義

sqoop importコマンドの$ conditions節の意義は何ですか？ select col1, col2 from test_table where \$CONDITIONS

0熱

1答えて

Sqoop - 日付 - タイムスタンプ

OracleのデータをHadoopに変換しようとしています。 Oracle側では、日付フィールドは'10/01/2015 12:00:00 AM 'という形式のタイムスタンプです。フィルタを月、日、年にどのように置くだけですか？フィルタに時間と分は必要ありませんが、HDFSに読み込まれるデータには10/01/2015 12:00:00 AM 'の形式が必要です。何か案が？私は他のstackove

0熱

1答えて

sqoopインポートは1つのテーブルで動作しますが、他のテーブルでは動作しません

adhoc_mn_client_inn_201611_201705とEVKUZMIN_B2B_CHURN_BAN_SEGMENTにインポートする2つのテーブルVB_B2B_INN_201611_201705_7はevkuzmin_b2b_churn_ban_segmentになるはずです。どちらの場合もスクリプトは、私はHDFSのディレクトリでのOracleテーブル名とdirectoryとtabl

0熱

1答えて

hbaseの複合キーとしてのrowkeyの区切り文字

デフォルトでは、hbaseの複合キーを行キーとして使用する場合、区切り文字は '_'（アンダースコア）です。デリミタとしてアンダースコア以外を使用できますか？ sqoopを使用してデータをインポートしています。例：デフォルト：id_deptcode_branchcode カスタム：それは、あなたができる、source codeによるsqoop id|deptcode|branchcode

0熱

1答えて

HDInsightの外部SqoopメタストアとしてのAzure SQL

おはよう！ AzIn SQLをHDInsight用の外部Sqoopメタストアとして設定する方法についてのドキュメントはありますか？通常、HDInsightクラスタは、計算リソースとして動的に生成され、作業が完了するとシャットダウンされます。これは、Sqoopジョブ定義がクラスタの再起動や新しいクラスタのアタッチ後も存続する必要がある理由です。理想的には、外部sqoopメタストアは、作成プロセ

0熱

1答えて

クエリを使用したSqoopエクスポート

HIVEテーブルからHANAにデータをエクスポートしようとしています.Sqoopエクスポートコマンドの--hcatalogテーブルオプションを使用してデータをエクスポートできます。しかし句がsqoop exportコマンドにqueryオプションを使用することが可能とされている場合と、クエリオプションを使用してデータをロードしようとしたときに問題に直面して？私のサンプル・スクープコマンドは s

0熱

1答えて

sqoopを使用してRDBMSからすべてのテーブルをインポート

sqoopを使用してmysqlデータベースのテストからhadoopにデータをインポートしようとしています。しかし、プライマリといくつかのテーブルを持ついくつかのテーブルでは、プライマリキーがありません。 $sqoop import-all-tables --connect jdbc:mysql://192.168.0.101/mysql -username test -P --warehouse-