HDFSディレクトリを手動で上書きするのではなく、手動で上書きすることは可能ですか? は、それは、これにデータを書き込む前に、コマンドで提供<HDFS-target-dir>
を削除しますhdfsディレクトリを上書きするSqoop import
3
A
答えて
5
使用--delete-target-dir
(私たちは「--overwrite」我々はハイブ輸入のために持っているように、「--hive-上書き」などの任意のオプションを持っています)ディレクトリ。
1
使用この:--delete-target-dir
これはsqoop構文を使用してHDFSディレクトリを上書きするために動作します:
$ sqoop import --connect jdbc:mysql://localhost/dbname --username username -P --table tablename --delete-target-dir --target-dir '/targetdirectorypath' -m 1
例:
$ sqoop import --connect jdbc:mysql://localhost/abc --username root -P --table empsqooptargetdel --delete-target-dir --target-dir '/tmp/sqooptargetdirdelete' -m 1
このコマンドは、対応するHDFSディレクトリまたはハイブを更新しますこのコマンドが実行されるたびに、更新された/最新のデータでテーブルのデータが更新されます。
関連する問題
- 1. 上書きHDFSファイル/ディレクトリ
- 2. SqoopでMongoDBからデータを抽出し、HDFSに書き込む?
- 3. sqoop not import datatype varchar2
- 4. sqoop import-all-tables fail
- 5. エラー:hdfsにレコードを追加するsqoop
- 6. Odooでcsv importの "ir.sequence"フィールドを上書きする方法は?
- 7. Kerberos認証エラー---ハイブ/ HDFSにSqoopインポートSQL
- 8. HDFS:ディレクトリを削除する
- 9. Sqoop import-all-tablesコマンドの問題
- 10. PigでHDFSにSTORE(上書き)する方法は?
- 11. シェルスクリプトを使用したteradataからhdfsへのsqoopデータ
- 12. Sqoop HDFSからCrate.io DBにエラー/出力なしでエクスポートする
- 13. HDFSからHiveへのSqoopデータの移動
- 14. Spark/ScalaのHDFSへの書き込み
- 15. スパーク:RDDの各レコードをHDFSディレクトリの個々のファイルに書き込む
- 16. hdfsにディレクトリを圧縮することはできますか?
- 17. Hiveからsqoopエクスポートを使用するときにMySQLテーブルを上書きする方法
- 18. sqoopエクスポートを実行中にhdfsで追加ブロックが必要
- 19. sqoopからhive/hdfsをsybase IQデータベースにエクスポート
- 20. Dockerのnginxのhtmlディレクトリを上書きするコンフィグ設定
- 21. clouderaで上書きされたディレクトリを復元する方法
- 22. 更新されたファイルでディレクトリを上書きする方法
- 23. Javaでhdfsにファイルを書き込む
- 24. HDFS内にMetaDataを書き込む
- 25. sqoopを使ってhdfsからmysqlにjsonデータを挿入するには?
- 26. ドリルは開いているHDFSディレクトリでクエリできますか?
- 27. RDBMSからhdfsにデータを転送する際のApache Spark-SQLとSqoopのベンチマーク
- 28. sqoop import-all-tablesツールが動作しません
- 29. Sqoopコマンド--hive-import failedが発生しました
- 30. HIVE json形式の上書きディレクトリを挿入します