Hadoop Beginner - データの摂取および分析

HDFSは構造化された両方の構造化された&構造化データを保存します.HIVE & IMPALAを使用すると、SQLクエリを作成してMapReduceに変換できます。ユーザーがデータが格納されているスキーマ、またはHDFSに格納されているデータからそれらのテーブルを作成する方法を知る方法を教えてください。Hadoop Beginner - データの摂取および分析

出典

2017-12-18 Rinky

以前はHiveでメタデータを定義していた場合のみ、sqlでデータを読み取ることができます。このメタデータは、データのスキーマを説明します。ハイブ上のcreate tableのリファレンスを参照してください。 –

desc formatted table_name; - >テーブルの詳細との表示方法の詳細を示します。create table table_name;テーブルの作成方法を示します。 – sk7979

Parquetファイル形式を使用する場合は、ファイルブロックを直接検査するためのツールがあります。たとえば、thisを参照してください。また、ほとんどのhadoopファイル形式には、orcファイル用のhttps://orc.apache.org/docs/tools.htmlのような便利なツールもあります。

出典

2017-12-19 08:27:01 Amos

Hadoop Beginner - データの摂取および分析

答えて

関連する問題