1
RDD上のすべての変換をファイルとして保存して、必要に応じてそれらを参照できるようにしたいと思います。 私が見つけたRDDの言葉は、いつもメモリに作成されていることを話しています。ドライブに保存したり、ファイルとして保存したりできますか? はいの場合は、それを説明するオンライン記事へのリンクがどのように役立つでしょうか。復元可能な分散データセットは永久にファイルとして保存できますか?
RDD上のすべての変換をファイルとして保存して、必要に応じてそれらを参照できるようにしたいと思います。 私が見つけたRDDの言葉は、いつもメモリに作成されていることを話しています。ドライブに保存したり、ファイルとして保存したりできますか? はいの場合は、それを説明するオンライン記事へのリンクがどのように役立つでしょうか。復元可能な分散データセットは永久にファイルとして保存できますか?
はい、もちろんです!ここで
だけランダムDatabricks link私が見つかりました:
RDDさんは、ディスクに保存するための方法で構築されたいくつかを持っています。一度ファイルになると、Hadoopデータベースの多くは、特定の形式であれば、ファイルから直接データを大量に読み込むことができます。
gsamaras、多くの感謝! –
あなたは大歓迎です@SaugatSaxena!あなたが好きなら(答の左側にある緑色のチェックマークをクリックして)*答えを受け入れることを忘れないでください。 – gsamaras