Вычисление ВСЕХ вложенных уровней агрегации указанного столбца c (SUM, AVG, STDEV) в кадре данных - PullRequest
4 голосов
/ 23 января 2020

У меня есть таблица, которая выглядит ниже (упрощенно):

col_A   col_B   col_C
A       37      2
B       28      7
C       10      5
D       11      5
E       99      4

Я хотел бы получить таблицу со всеми вложенными комбинациями каждого уровня col_A и вычислить, скажем, среднее значение в подгруппе : например, таблица select-any-2 будет выглядеть (10 уникальных комбинаций уровней):

Grp_2   AVG (col_B/col_C)
A,B     7.76
A,C     6.61
A,D     7.55
…       …
D,E     12.99

Choose-any-4 будет выглядеть (5 комбинаций уникальных уровней):

Grp_4   AVG (col_B/col_C)
A,B,C,D 7.84
A,B,C,E 6.68
A,C,D,E 7.63
…       …
B,C,D,E 13.12 

(предпочтение при заказе) R, SQL (postgres, ANSI), Python. ; Мое текущее решение (ниже) в R не масштабируется, так как количество уровней col_A растет:

require(tidyverse)
df <- tibble(col_A=c("A", "B","C", "D", "E"), col_B=c(37,28,10,11,99), col_C=c(2,7,5,5,4))

nested_subgroup_agg <- function(choice = 2, mydf = NULL) {
  library(tidyverse)
  dfx <-
    combn(c("A", "B", "C", "D", "E"), choice) %>%
    t() %>%
    as_tibble()
  try(if (choice <= 1) {
    stop("Can't Choose less than 2 levels at a time")
  }
  else{
    if (choice == 2) {
      val <- map_dbl(1:nrow(dfx), function(i) {
        (mydf$col_B[mydf$col_A == dfx$V1[i]] + mydf$col_B[mydf$col_A == dfx$V2[i]]) /
          (mydf$col_C[mydf$col_A == dfx$V1[i]] + mydf$col_C[mydf$col_A == dfx$V2[i]])
      })
    }
    else{
      if (choice == 3) {
        val <- map_dbl(1:nrow(dfx), function(i) {
          (mydf$col_B[mydf$col_A == dfx$V1[i]] + mydf$col_B[mydf$col_A == dfx$V2[i]] + mydf$col_B[mydf$col_A == dfx$V3[i]]) /
            (mydf$col_C[mydf$col_A == dfx$V1[i]] + mydf$col_C[mydf$col_A == dfx$V2[i]] + mydf$col_C[mydf$col_A == dfx$V3[i]])
        })
      }
      else{
        if (choice == 4) {
          val <- map_dbl(1:nrow(dfx), function(i) {
            (mydf$col_B[mydf$col_A == dfx$V1[i]] + mydf$col_B[mydf$col_A == dfx$V2[i]] + mydf$col_B[mydf$col_A == dfx$V3[i]] + mydf$col_B[mydf$col_A == dfx$V4[i]]) /
              (mydf$col_C[mydf$col_A == dfx$V1[i]] + mydf$col_C[mydf$col_A == dfx$V2[i]] + mydf$col_C[mydf$col_A == dfx$V3[i]] + mydf$col_C[mydf$col_A == dfx$V4[i]])
          })
        }
      }
    }
  })
  dfx$val <- val
  dfx
}
## Example
df <-
  tibble(
    col_A = c("A", "B", "C", "D", "E"),
    col_B = c(37, 28, 10, 11, 99),
    col_C = c(2, 7, 5, 5, 4)
  )
nested_subgroup_agg(choice = 4, mydf = df)

Можете ли вы помочь улучшить?

Ответы [ 2 ]

2 голосов
/ 24 января 2020

Опция с использованием data.table:

nested_subgroup_agg <- function(choice=2, mydf) {
    ans <- setDT(mydf)[.(g=rep(seq(choose(.N, choice)), each=choice), col_A=c(combn(col_A, choice))), on=.(col_A)][, 
        .(toString(col_A), sum(col_B) / sum(col_C)), g]
    setnames(ans, names(ans)[-1L], c(paste0("Grp_", choice), "val"))[]
}

nested_subgroup_agg(3, DT)

Вывод:

     g   Grp_3       val
 1:  1 A, B, C  5.357143
 2:  2 A, B, D  5.428571
 3:  3 A, B, E 12.615385
 4:  4 A, C, D  4.833333
 5:  5 A, C, E 13.272727
 6:  6 A, D, E 13.363636
 7:  7 B, C, D  2.882353
 8:  8 B, C, E  8.562500
 9:  9 B, D, E  8.625000
10: 10 C, D, E  8.571429

data:

library(data.table)
DT <- fread("col_A   col_B   col_C
A       37      2
B       28      7
C       10      5
D       11      5
E       99      4")
2 голосов
/ 23 января 2020

Идея состоит в том, чтобы использовать combn, чтобы получить все комбинации строк (учитывая, что у вас есть 1 буква на строку), а затем просто агрегировать каждые 2 строки, то есть

#get a df with all combination of rows
new_d <- dd[c(combn(nrow(dd), 2)),]

#Aggregate
#You can use `aggregate` or `lapply(split())`
lapply(split(new_d, rep(seq((nrow(new_d)) / 2), each = 2)), function(i)sum(i$col_C))

ДАННЫЕ

dput(dd)
structure(list(col_A = structure(1:5, .Label = c("A", "B", "C", 
"D", "E"), class = "factor"), col_B = c(37L, 28L, 10L, 11L, 99L
), col_C = c(2L, 7L, 5L, 5L, 4L)), class = "data.frame", row.names = c(NA, 
-5L))
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...