R - できるだけ早くデータフレームを初期化する

Question

私が現在取り組んでいるプロジェクトについて、私は作業中のコードの速度を段階的に上げようとしています。プロジェクトは現在、プロジェクトを開始するには、10M-1B行と24列の間のどこかでデータフレームを初期化する必要があります。最初の8列は文字列、次の16列は整数なので、文字列のために行列ではなくデータフレームでなければなりません。

現在、私は持っている：

starttime = Sys.time() 
total_num_lineups = 100000000 
lineup = as.data.frame(matrix(nrow = total_num_lineups, ncol = 24)) 

Sys.time() - starttime 
# Time difference of 44.70181 secs 

100M行に対して約45秒をとります。このプロジェクトは1B行以上の拡張が可能で、これが私が修正しようとしている最初のボトルネックです。このステップをどのようにスピードアップするかについてのご意見は、大変に感謝しています。

追加 - 私は必要に応じてプロジェクトに関する追加情報を提供することができますが、問題によって焦点を絞った問題がより良いかもしれないと考えました。より高速であれば、コンテナを（データテーブルや他の構造に）切り替えることができます。

ありがとうございます！

Answer 1

このサイズのものを作るには、data.tableパッケージが必要です。

以下のコードはdata.frameを初期化しますが、1行のみでdata.tableに変換し、最初の行を指定された次元に繰り返します。あなたが欲しい示されるように、あなたはdata.frameを初期化する方法は、すべての列ダブルスではなく、文字/整数を作ること

library(data.table) 

starttime = Sys.time() 
total_num_lineups = 100000000 
lineup = as.data.frame(matrix(nrow = 1, ncol = 24)) 
dt = as.data.table(lineup) 
testit = dt[rep(1,total_num_lineups)] 

Sys.time() - starttime 
# Time difference of 15.08011 secs 

注意。

library(data.table) 

starttime = Sys.time() 
total_num_lineups = 100000000 
lineup = data.frame(
    character(1), 
    character(1), 
    character(1), 
    character(1), 
    character(1), 
    character(1), 
    character(1), 
    character(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1), 
    integer(1) 
) 
dt = as.data.table(lineup) 
lineup = dt[rep(1,total_num_lineups)] 

Sys.time() - starttime 
# Time difference of 15.08011 secs