1
Sparkのデータフレームは、外部ファイルから作成することができます。複数のファイルを使用して単一のオブジェクトを作成する方法はありますか?複数のソースから1つのSpark Dataframeを作成しますか?
EX: 同じデータ(曜日に購入したアイテムの数など)を記録するcsvファイルまたは寄木細工ファイルがあるとします。毎週のファイルから1つのデータフレームを初期化して、1週間の購入データを表す単一のデータフレームを取得する方法はありますか?
私が1種類のファイルでフォルダ名を指定した場合、Sparkはそのフォルダ内のすべてのデータを取り込むことができますか? – knowads
はい、パス指定子 ''/my/own/path/* ''を使用して、すべて同じ方法でそれらを解析できると仮定します。 – YoYo