partitioning

0熱

1答えて

コレクション内のレコードのセットを指定した時間間隔後に削除する必要があるケースがあります。例：10時間より古いレコードは10時間ごとに削除されます。私はidに基づいて削除しようとしましたが、速度が遅いことがわかりました。コレクション内のレコードを分割し、モンゴで必要なときに

0熱

1答えて

Apache Sparkのパーティション

私は1つのマスタ10ワーカーノードで構成されるクラスタを持っています。パーティションの数を3に設定すると、マスターノードは3つのワーカーノードしか使用しないか、それらのすべてを使用するのでしょうか？それらはすべてが使用されていることを示しているからです。

0熱

1答えて

apache sparkでパーティションテーブルまたはビューを読み取る

私はdataproc-bigQueryコネクタを使用してパーティション化されたテーブルを読み込み、300GB以上のデータとそのパーティションを日付で表示していますが、 sparkコネクタで読んで、私はすでにパーティション化されたbigqueryのビューでそれを読んでみましたが、うまくいきません、apache sparkでbigqueryテーブルからパーティションを読み込む方法はありますか？更新（

-1熱

1答えて

使用Diskpart：cleanコマンド。パーティションテーブルが失われました

ウィンドウ10をインストールする前に誤ってdiskpartの "clean"コマンドを使用しました。すべてのディスクパーティションが消えました。 2つのディスクがありました。 1TB hddおよび480GB ssd。エキスパートモードでfdisk： "fix partition table"を実行しようとしました。それは答えた。何もしない！注文は既に正しいです。ディスクをマウントすることもで

-1熱

1答えて

CosmosDB gremlin APIを使ったソーシャルネットワークの設計方法は？

CosmosDB Gremlin APIを使用してソーシャルネットワークを構築したいのですが、良いパーティションキーを選ぶ方法を理解できません。わかりやすくするために、アプリケーションは他のユーザー（Instagramスタイル）に従うユーザーと、ユーザーがフォロワーを配置できるグループ（Google Plus Circlesスタイル）を作成できるユーザーのみで構成されているとします。 Follo

0熱

3答えて

INTインデックスの最後の桁に基づくMySQLインデックス

intカラムの最後の桁のインデックスをMySQLで作成することはできますか？私は、クエリ時間を最適化するためのpostIdの最後の数字のインデックスを作成しようとしているint型の列 CREATE TABLE partition_test( textfiled INT, cltext TEXT, reindexedAt TIMESTAMP NOT NULL DEFAUL

0熱

1答えて

マイクロサービスシーケンシャルデータ処理

時間内に順序付けられていないシーケンシャルデータのストリームを受信しているとします。例えば、入力があってもよい： [ {id:1, timestamp:1}, {id:2, timestamp:1}, {id:2, timestamp:2}, {id:1, timestamp:2}, {id:3, timestamp:1} ] 各エンテ

-1熱

1答えて

変換後のスパークデータフレームのパーティション数を保存する

データフレームが必要以上（700以上）のパーティションに分割されているコードのバグを見ています。これはシャッフル操作が多すぎますそれらを48パーティションに再分割することができます。パーティションを分割する前に、まずパーティションを少なくしたいので、ここでは合体（）を使用できません。私はパーティションの数を減らす方法を検討しています。たとえば、スパークのデータフレーム（複数の列を持つ）が10個の

1熱

1答えて

DOW（日付と時刻を入力として）で区切られた売り上げの数 - postgresql

インターネットで正しい応答を見つけましたが、私が望むものを見つけることができません。次のように私は例のデータセットを持っている：日---------------------------------販売数は Saturday 9th September 13:22:00 ------ 1 Sunday 10th September 16:44:02 ------ 3 Monday 11th

0熱

1答えて

はどうなりますか？

私は表1に、既存のパーティション構成/機能をドロップすることを計画してからTABLE1に新しいパーティションスキーム/機能を指す（私は、プロセスを進める方法を知っているが、その前に、私は希望しています、パーティションに関するいくつかの質問を持っています私は古いpartition.ndfファイル内のデータがどうなるか、テーブル内のデータと古い/既存のパーティション構成/機能を削除した場合）以下のク