Как заводить людей в магазин каждые 5 минут?

Question

У меня есть таблица данных, как показано ниже:

library(data.table)
DT1<-data.table(
  id=c(1,2,3,4,3,2),
  in_time=c("2017-11-01 08:37:35","2017-11-01 09:07:44","2017-11-01 09:46:16","2017-11-01 10:32:29","2017-11-01 10:59:25","2017-11-01 13:24:12"),
  out_time=c("2017-11-01 08:45:35","2017-11-01 09:15:30","2017-11-01 10:11:16","2017-11-01 10:37:05","2017-11-01 11:45:25","2017-11-01 14:10:09")
  )

Она содержит каждую информацию о том, в какое время человек входит в магазин и выходит из него.

Теперь я хочу взять людей в магазине каждые 5 минут (стандартные 5 минут, например минуты 0,5,10,15 ... 60). Если никого нет, мне нужно значение 0.

Итак, я попробовал с

library(lubridate)
DT1[,time:=ymd_hms(in_time)]
DT1[,time:=ceiling_date(time,"5mins")]
DT1[,.N,by=list(time)]

, который дает только то, сколько человек входило каждый раз, но теперь я застрял в том, как принять счет out_time. Например, идентификатор 1 введен в 2017-11-01 08:37:35 и оставлен в 2017-11-01 08:45:35. Таким образом, он будет в магазине в течение 5-минутного интервала с 2017-11-01 08:40:00 до 2017-11-01 08:45:00, а не в 2017-11-01 08:50:00 и и так далее.

Идентификатор может повторяться несколько раз, как будто один человек заходил в магазин несколько раз в день.

Любая помощь приветствуется.

Answer 1

Вот вариант с использованием data.table::foverlaps:

#generate intervals of 5mins
times <- seq(as.POSIXct("2017-11-01 00:00:00", format=fmt), 
    as.POSIXct("2017-11-02 00:00:00", format=fmt), 
    by="5 min")
DT2 <- data.table(in_time=times[-length(times)], out_time=times[-1L], key=c("in_time","out_time"))

#set keys before foverlaps
setkey(DT1, in_time, out_time)

#find overlaps and count distinct in each 5min interval. 
#!is.na(id) is for truncating the output for checking. to be removed in actual code 
foverlaps(DT2, DT1)[!is.na(id), uniqueN(id), .(i.in_time, i.out_time)]

И если id уникален в каждом временном интервале, последняя строка кода может быть foverlaps(DT2, DT1)[, sum(!is.na(id)), .(i.in_time, i.out_time)] вместо

первые 8 строк вывода:

              i.in_time          i.out_time V1
 1: 2017-11-01 08:35:00 2017-11-01 08:40:00  1
 2: 2017-11-01 08:40:00 2017-11-01 08:45:00  1
 3: 2017-11-01 08:45:00 2017-11-01 08:50:00  1
 4: 2017-11-01 09:05:00 2017-11-01 09:10:00  1
 5: 2017-11-01 09:10:00 2017-11-01 09:15:00  1
 6: 2017-11-01 09:15:00 2017-11-01 09:20:00  1
 7: 2017-11-01 09:45:00 2017-11-01 09:50:00  1
 8: 2017-11-01 09:50:00 2017-11-01 09:55:00  1

данные:

library(data.table)
DT1 <- data.table(
    id=c(1,2,3,4,3,2),
    in_time=c("2017-11-01 08:37:35","2017-11-01 09:07:44","2017-11-01 09:46:16","2017-11-01 10:32:29","2017-11-01 10:59:25","2017-11-01 13:24:12"),
    out_time=c("2017-11-01 08:45:35","2017-11-01 09:15:30","2017-11-01 10:11:16","2017-11-01 10:37:05","2017-11-01 11:45:25","2017-11-01 14:10:09")
)
cols <- c("in_time", "out_time")
fmt <- "%Y-%m-%d %T"
DT1[, (cols) := lapply(.SD, as.POSIXct, format=fmt), .SDcols=cols]