R合并具有相似值的行

Question

我有一个数据框，行值首先从小到大排序。我计算相邻行之间的行值差异，合并具有相似差异（例如，小于 1）的行，以及合并行的 return 平均值。我可以用 for 循环检查每一行的差异，但似乎是一种非常低效的方法。有更好的主意吗？谢谢

library(dplyr)
DF <- data.frame(ID=letters[1:12],
                 Values=c(1, 2.2, 3, 5, 6.2, 6.8, 7, 8.5, 10, 12.2, 13, 14))
DF <- DF %>%
   mutate(Diff=c(0, diff(Values)))

DF 的预期输出为

ID        Values
a         1.0
b/c       2.6  # (2.2+3.0)/2
d         5.0
e/f/g     6.67 # (6.2+6.8+7.0)/3
h         8.5
i         10.0
j/k       12.6 # (12.2+13.0)/2
i         14.0

Answer 1

library(magrittr)

df <- DF[order(DF$Values),]
df$Values %>% 
  #Find groups for each row
  outer(., ., function(x, y) x >= y & x < y + 1) %>% 
  # Remove sub-groups
  `[<-`(apply(., 1, cumsum) > 1, F) %>%              
  # Remove sub-group columns
  .[, colSums(.) > 0] %>%                            
  # select these groups from data
  apply(2, function(x) data.frame(ID = paste(df$ID[x], collapse = '/')
                                , Values = mean(df$Values[x]))) %>% 
  # bind results by row
  do.call(what = rbind)

# ID    Values
# 1      a  1.000000
# 2    b/c  2.600000
# 4      d  5.000000
# 5  e/f/g  6.666667
# 8      h  8.500000
# 9      i 10.000000
# 10   j/k 12.600000
# 12     l 14.000000

注：

此方法与使用 diff 的方法不同，因为它仅在所有值彼此小于 1 时将行组合在一起。

示例：

更改数据集，使 ID g 处的值为 7.3。

上述方法：ID e、f、g不再归为一组，因为ID e处的值为6.2，7.2 - 6.2 > 1。

差异法：ID e、f、g 仍归为一组，因为 e 和 f 的 ID 差异 < 1，ID F 和 G 的差异 < 1

Answer 2

计算每行 Values 之间的差异，并检查它们是否为 >= 1。 >=1 的累积总和将为您提供不同的组，在该组中可以 summarize 获得所需的结果。

library(dplyr)
DF %>% arrange(Values) %>%
  group_by(Diff = cumsum(c(1,diff(Values)) >= 1) ) %>%
  summarise(ID = paste0(ID, collapse = "/"), Values = mean(Values)) %>%
  ungroup() %>% select(-Diff)

# # A tibble: 8 x 2
# ID    Values
# <chr>  <dbl>
# 1 a       1.00
# 2 b/c     2.60
# 3 d       5.00
# 4 e/f/g   6.67
# 5 h       8.50
# 6 i      10.0 
# 7 j/k    12.6 
# 8 l      14.0

Answer 3

这里有一个选项data.table

library(data.table)
setDT(DF)[, .(ID = toString(ID), Values = round(mean(Values), 2)),
          by = .(Diff = cumsum(c(TRUE, diff(Values)>=1)))][, -1, with = FALSE]
#        ID Values
#1:       a   1.00
#2:    b, c   2.60
#3:       d   5.00
#4: e, f, g   6.67
#5:       h   8.50
#6:       i  10.00
#7:    j, k  12.60
#8:       l  14.00

R合并具有相似值的行

R combine rows with similar values

diff

r

cluster-analysis

dataframe

dplyr