滚动窗口中的条件总和

时间:2017-02-22 16:01:20

标签: r conditional-statements rolling-sum

我对R很新,如果我说错了,请提前道歉:)

我有一个由395行和4973列组成的数据框,按月分类,许多公司每月发生的次数(范围从0到25)。根据按月和年分组的每日数据汇总出现次数。 我的数据框df看起来像那样(只有几个月和3家公司):

Date     FirmA FirmB FirmC
01-2015  20    NA    20
02-2015  21    2     1
03-2015  22    3     2
04-2015  24    7     5
05-2015  10    10    10
06-2015  9     20    2
07-2015  13    22    1
08-2015  20    19    1

我现在的任务是通过从t-3个月到t-1个月(前3个月)的三个月滚动窗口来总结每个公司的出现情况。但是,总和应该具有以下条件。它应该在三个月窗口期间至少发生10次,并且在t-1个月中至少发生3次。只要满足这两个条件,NA是否在t-3和/或t-2中无关紧要。

看起来应该是这样。

Date     FirmA FirmB FirmC
01-2015  NA    NA    NA
02-2015  20    NA    20
03-2015  41    NA    NA
04-2015  63    NA    NA
05-2015  67    12    NA
06-2015  56    20    17
07-2015  43    37    NA
08-2015  32    52    NA

我不知道如何接近,特别是滚动窗口/总和(可能是滞后的东西)和使用哪些数字以及哪些数字没有的条件。

2 个答案:

答案 0 :(得分:2)

以下是使用zoo::rollapply的方法:

df <- structure(list(Date = c("01-2015", "02-2015", "03-2015", "04-2015", 
"05-2015", "06-2015", "07-2015", "08-2015"), FirmA = c(20L, 21L, 
22L, 24L, 10L, 9L, 13L, 20L), FirmB = c(NA, 2L, 3L, 7L, 10L, 
20L, 22L, 19L), FirmC = c(20L, 1L, 2L, 5L, 10L, 2L, 1L, 1L)), .Names = c("Date", 
"FirmA", "FirmB", "FirmC"), class = "data.frame", row.names = c(NA, 
-8L))

library(zoo)

mysum <- function(x, minprev = 3) {
  l <- length(x)
  if (l==1 || (! is.na(x[l-1]) && x[l-1] >= minprev)) sum(x[-l], na.rm = TRUE) else NA
}

winsize <- 3
# conditionally-sum
df[-1] <- lapply(df[-1], function(z) rollapply(z, winsize + 1, mysum, partial = TRUE, align = "right"))
# remove those that are insufficient in total
df[-1] <- lapply(df[-1], function(z) ifelse(z <= 10, NA, z))
df
#      Date FirmA FirmB FirmC
# 1 01-2015    NA    NA    NA
# 2 02-2015    20    NA    20
# 3 03-2015    41    NA    NA
# 4 04-2015    63    NA    NA
# 5 05-2015    67    12    NA
# 6 06-2015    56    20    17
# 7 07-2015    43    37    NA
# 8 08-2015    32    52    NA

可能有一种方法不需要mysum,但有两件事会让它变得有点棘手:(1)结果总和会出现在 next 字段中(如果窗口始终是长度3),(2)条件是最后一个值。尝试平滑它当然是可行的,但这很好用。

答案 1 :(得分:0)

另一种与r2evans相似的方法是通过cumsum计算滚动总和(用NA s替换0后)并插入NA s当条件不符合时:

ff = function(x, w = 3, ntot = 10, nlast = 3)
{
    x[is.na(x)] = 0L
    x = c(0L, x[-length(x)])

    cs = cumsum(x)
    wcs = cs - c(numeric(w), cs[1:(length(x) - w)])

    wcs[!((wcs >= ntot) & (x >= nlast))] = NA
    return(wcs)

}

sapply(df[-1], ff)  # 'df' borrowed from r2evans' answer
#     FirmA FirmB FirmC
#[1,]    NA    NA    NA
#[2,]    20    NA    20
#[3,]    41    NA    NA
#[4,]    63    NA    NA
#[5,]    67    12    NA
#[6,]    56    20    17
#[7,]    43    37    NA
#[8,]    32    52    NA