2016-12-02 13 views
0

私は34年間(毎日12418のファイルx 4248ポイント)の海面温度のグリッド化された日々の値のセットを持っており、毎週の値を計算するふりをしています。私はこの投稿に続いてほぼ成功しましたhttps://stackoverflow.com/a/15102394/709777。しかし、日付と週の間にはいくつかの意見の相違があります。私はその点を見つけることができず、私は毎週の平均を計算するための正しい日付を得ていることを確認したい。R毎週平均

私は毎日のデータを読み込み、カラム内の単一のポイント(4248列/温度によって12418行/日)から、すべての毎日の値が含まれているビッグデータフレームを構築するために、私のRスクリプトのこの部分を使用

# Paths 
ruta_datos_diarios<-"/home/meteo/PROJECTES/VERSUS/DATA/SST/CSV/" 
ruta_files<-"/home/meteo/PROJECTES/VERSUS/SCRIPTS/CLUSTER/FILES/" 
ruta_eixida<-"/home/meteo/PROJECTES/VERSUS/OUTPUT/DATA/SEMANAL/" 

# List of daily files 
files <- list.files(path = ruta_datos_diarios, pattern = "SST-diaria-MED") 

output <- matrix(ncol=4248, nrow=length(files)) 
fechas <- matrix(ncol=1, nrow=length(files)) 

for (i in 1:length(files)){ 
    # read data 
    datos<-read.csv(paste0(ruta_datos_diarios,files[i],sep=""),header=TRUE,na.strings = "NA") 
    datos<-datos[complete.cases(datos),] 

    # Extract dates from daily file names 
    yyyy<-substr(files[i],16,19) 
    mm<-substr(files[i],20,21) 
    dd<-substr(files[i],22,23) 
    dates[i,]<-paste0(yyyy,"-",mm,"-",dd,sep="") 

    output[i,]<-t(datos$sst) 
} 

datos.df<-as.data.frame(output) 

# Build a dataframe with the dates (day, week and year) 
fechas<-as.data.frame(fechas) 
fechas$V1<-as.Date(fechas$V1) 
fechas$Week <- week(fechas$V1) 
fechas$Year <- year(fechas$V1) 

# Extract day of the week (Saturday = 6) 
fechas$Week_Day <- as.numeric(format(fechas$V1, format='%w')) 
# Adjust end-of-week date (first saturday from the original Date) 
fechas$End_of_Week <- fechas$V1 + (6 - fechas$Week_Day) 

# new dataframe from End_of_Week 
fechas.semana<-fechas[!duplicated(fechas$End_of_Week),] 
fechas.semana<-as.data.frame(fechas.semana) 

colnames(fechas)<-c("Day","Week","Year","Week_Day","End_of_Week") 
colnames(fechas.semana)<-c("Day","Week","Year","Week_Day","End_of_Week") 

これはデータと日付を読み取る方法です。私はこのファイルにデータフレームのサブセットを保存しましたtemp-sst.csv( "Day"、 "Week"、 "Year"、 "Week_Day"、 "End_of_Week"を含む10変数の1000個のオブジェクト)。

sst.dat <- read.csv("temp-dat.csv",header=TRUE) 

# Join dates and SST values 
sst.dat <- cbind(fechas, sst.dat) 

# Build new dates data frame 
fechas<-as.data.frame(sst.dat$Day) 
colnames(fechas)<-c("Day") 
fechas$Day<-as.Date(fechas$Day) 
fechas$Week <- week(fechas$Day) 
fechas$Year <- year(fechas$Day) 
# Extract day of the week (Saturday = 6) 
fechas$Week_Day <- as.numeric(format(fechas$Day, format='%w')) 
# Adjust end-of-week date (first saturday from the original Date) 
fechas$End_of_Week <- fechas$Day + (6 - fechas$Week_Day) 

fechas.semana<-fechas[!duplicated(fechas$End_of_Week),] 
fechas.semana<-as.data.frame(fechas.semana) 

colnames(fechas)<-c("Day","Week","Year","Week_Day","End_of_Week") 
colnames(fechas.semana)<-c("Day","Week","Year","Week_Day","End_of_Week") 

# Weekly aggregation function from the referred post 
media.semanal <- function(x, column){ 
    a<-aggregate(x[,column]~End_of_Week+Year, FUN=mean, data=x, na.rm=TRUE) 
    colnames(a)<-c("End_of_Week","Year","SSTmean") 
    return(a) 
} 

# Matrix to be populated by weekly function 
SST.mat<-matrix(nrow=nrow(fechas.semana), ncol=length(sst.dat)-5) # 5 son las columnas de fecha 

for (j in 6:length(sst.dat)){ # comienza en 6 para evitar las columnas de fecha 
b<-media.semanal(sst.dat,j) 
SST.mat[,j-5]<-b$SSTmean 
} 

しかし、ここで問題が発生します。ループからの "b"データフレームは145行あり、SST.matとfechas.semanaは144しかありません。この不一致が発生する箇所は見つかりませんでした。

ご協力いただければ幸いです。 ありがとう

+6

「_to短いexample_を保つ」 - 代わりにDropboxの上の1000年* 10ファイルへのリンクを掲載すると、あなたは_minimal_、自己完結型の例を提供する必要があります。 – Henrik

+0

あなたは正しい@henrik、役に立つフラグが立てられています – pacomet

答えて

1

b$End_of_Weekの1つの値に重複があります。

まず私は、設定された会員には差がなかったことに気づい:

setdiff(as.character(b$End_of_Week),as.character(fechas.semana$End_of_Week)) 

文字(0)

その後、私はので、重複したのでなければならなかったことに気づいて、それを確認しましたこのような:

table(table(as.character(b$End_of_Week))>1) 
143 1 
FALSE TRUE 

表を見ると、房は1983-01-01であることがわかります。

End_of_Weekは同様にそれに年を持っているので、根本的な原因は、あなたがYearが不要であるEnd_of_Week + Yearによって集約ということであるようで、あなただけの集計End_of_Weekすることにより、あなたは代わりに144を取得する場合145

# Weekly aggregation function from the referred post 
media.semanal <- function(x, column){ 
    a<-aggregate(x[,column]~End_of_Week, FUN=mean, data=x, na.rm=TRUE) 
    colnames(a)<-c("End_of_Week","SSTmean") 
    return(a) 
} 

# Matrix to be populated by weekly function 
SST.mat<-matrix(nrow=nrow(fechas.semana), ncol=length(sst.dat)-5) # 5 son las columnas de fecha 

for (j in 6:length(sst.dat)){ # comienza en 6 para evitar las columnas de fecha 
    b<-media.semanal(sst.dat,j) 
    SST.mat[,j-5]<-b$SSTmean 
} 
dim(b) 
関連する問題