大きなクエリ結果を送信するSQL Server

Question

私の上司は、大きなSQL Serverクエリ結果を送信したいと考えています。結果はおよそ6000万本です。これを送る方法についてアドバイスはありますか？ファイル形式？圧縮？助けてくれてありがとう！

Answer 1

行サイズとは何ですか？

通常、SQLから大量のデータをエクスポートする必要がある場合は、BoostSSMSスクリプトテンプレートを使用します。 SSISを使用してファイルを生成することもできます。特に、これがETLプロセスの場合（プロセスをデバッグしてステップ実行できるため） BoostSSMSと比較して、SSMSの「結果をファイル化」することはスピードの面では完全に不十分であることがわかりました。私の好みのフォーマットは、タブ区切りとシングルクォートのテキスト識別子です。

データをどこかに送信している場合は、圧縮することが最善です（ファイルサイズが大幅に縮小されます）。どのメソッドを使用するかは、ターゲットとその要件に依存しますが、私はプレーンな古いZIP圧縮には何の問題もありませんでした。

編集 - あなたの上司は、ただ見たいと言っています。正確に彼が探しているもの（それが特定の価値観の組み合わせなのか、それともデータの分析なのか）を聞いてください。なぜなら、彼がこのデータをラインごとに6000万行も見ていないことを保証できるからです。特定のものを探している場合は、それらの条件を使用してクエリを絞り込みます。彼がそれについての分析をしているなら、あなたのSQLで集計を行い、彼に結果を与えます。