分割された寄木細工を保存する

分割された寄木細工としてdfを保存します。レコード挿入によるレコードには時間がかかります。どのように私はそれを保存し、ハイブテーブルを指すことができます助けることができます。分割された寄木細工を保存する

実際に私は増分データを取得していますが、私は動的パーティションを作成します。むしろ1つの列で区切られた寄木細工として直接保存するデータを挿入します。 –

df.write.parquet("/parquet/file/path")

次に、パーケットファイルの場所を指すHive external tableを作成できます。

2016-10-31 12:52:28 Shankar

実際には、データを段階的に取得し続けます。動的パーティションではなく、1つの列で区切られた円柱として直接保存するデータを挿入します。 –

@HEMANTHKUMAR：1つの列で分けられた寄木細工はどういう意味ですか？あなたはHiveテーブルのパーティション化を意味しますか？ – Shankar

ええ、私はハイブテーブルを分割しました –

答えて