大きなテキストファイルを短いファイルに分割する

Question

大きなtxtファイルを短いtxtファイルに分割（分割）したいとします。たとえば、file.txtで、700 MBです。これを7つの（100 MB） txtファイル。

私は何をするつもりですか？テキストファイルを開いたり、テキストファイルの内容を変更したりせずに分割する方法はありますか？この問題の既知のアルゴリズムがある場合は、それらを共有してください。 おかげ

Answer 1

シンプルなアプローチ -

1. は、ファイルの長さを取得します

2. は、作成したいどのように多くのファイルを参照してくださいチャンクサイズを決める - （N =ファイル長さ/チャンクサイズを）。余りがある場合、ファイル数はn + 1になります。

3. ファイルを読み取りモードで開きます。

4. 書き込みモードでファイルを作成します。

5. チャンクのバイト数（または残っている場合は剰余バイト<チャンクサイズ）をファイルに書き込む場合は、このファイルを閉じます（おそらくフラグメントを示す1..nという接尾辞を付加します）。

6. n個のフラグメントに対して4-5を繰り返す。

Answer 2

は、UNIX

split -b100m filename part上にある場合partaにファイル名を分割します、partb、partcなど

Answer 3

それはあなたの環境やニーズに適用されます念のため、標準的なUnixのソリューションはsplitを使用することです：

split -C 100M input.txt 

-C分割は、バイト/文字の代わりに行単位で分割されます。特定のバイトで分割したい場合は、代わりに-bを使用してください。

Answer 4

場合によっては、サイズと行数（場合によっては必要です）の両方で分割するオプションがあり、Windows環境にある場合は、GSplitというプログラムを使用できます。私はかつてこの問題を抱えていて、それは私のために働いた。 Googleにダウンロードすることができます。

Answer 5

Perlディストリビューションには、Unixに属していない場合に分割ユーティリティが含まれています。行分割には-lが使用されます。