Функция R для нахождения взвешенной частоты элементов для деревьев Random Forest

Что я сделал: хорошее эмпирическое правило для поиска потенциальных взаимодействий состоит в том, чтобы искать близкое расщепление переменных высоко в дереве, то есть рядом с корневым узлом. Учитывая это, я использовал getTree для извлечения переменных разделения на узлах и удалил конечные узлы. Я использовал MaxNuMREV, чтобы повернуть значение до максимума, т.е. (13 изменено на 31). Используя двойное лаппли, я обхожу все деревья и получаю взаимодействие функций. Я применяю веса строк от 1 до ~ 0,06 для нижней более случайной части дерева.

Проблема: я использовал несколько взвешенных частотных методов, и ни один из них не работает. Мне нужно получить взвешенное значение частоты, чтобы судить о важности взаимодействия. Например, взаимодействие функций 31 может иметь вес, определяемый расположением каждой строки экземпляров.

library(dplyr); library(RandomForest)
Ntrees=500
RRFModel<- randomForest(Ozone ~ ., data=airquality, mtry=3,importance=TRUE, na.action=na.omit, ntrees=Ntrees)

MaxNuMREV=function(x){  reverse_int <- function(n) {
                                   t1 <- floor(log10(n)); t2 <- 0
                                   for (i in t1:1) {t2 <- t2 + floor(n/10^i) * 10^(t1-i)}
                                   return(n*10^t1 - 99*t2)}
                         return(max(x,reverse_int(x)))
                     }

SplitVar=lapply(1:Ntrees, function(i){getTree(RRFModel, k=i, labelVar=FALSE)[,"split var"]}) 
MinLen=min(unlist(lapply(1:Ntrees,function(i){length(SplitVar[[i]][(SplitVar[[i]])!=0])})))
RowWeight=exp(-0.1*c(1:(MinLen-1)))
DoubleLL=lapply(1:Ntrees, function(j){
                            VV=matrix(lapply(1:(MinLen-1),function(i){ UU=SplitVar[[j]][(SplitVar[[j]])!=0][(i):(i+1)]
                              if(sd(unlist(UU))==0){UU=0
                              } else {UU=MaxNuMREV(as.numeric(paste0(UU,collapse="")))}
                            return((UU))}))
                            })

frequency weighted
person user3647872    schedule 22.10.2020    source источник

Ответы (1)


arrow_upward
0
arrow_downward

Неважно, я понял, как заставить его работать. Возможно, это не самый эффективный способ, но он работает. Я держусь здесь на случай, если кому-то еще это понадобится.

SplitVar=lapply(1:Ntrees, function(i){getTree(RRFModel, k=i, labelVar=FALSE)[,"split var"]})
MaxNuMREV=function(x){  reverse_int <- function(n) {
                                   t1 <- floor(log10(n)); t2 <- 0
                                   for (i in t1:1) {t2 <- t2 + floor(n/10^i) * 10^(t1-i)} 
                                   return(n*10^t1 - 99*t2)}
                        return(max(x,reverse_int(x)))
                       }

 MinLen=min(unlist(lapply(1:Ntrees,function(i){length(SplitVar[[i]][(SplitVar[[i]])!=0])})))
 RowWeight=exp(-0.1*c(1:(MinLen-1)))
 DoubleLL=lapply(1:Ntrees, function(j){
                 VV=matrix(lapply(1:(MinLen-1),function(i){ UU=SplitVar[[j]][(SplitVar[[j]])!=0][(i):(i+1)]
                              if(sd(unlist(UU))==0){UU=0
                              } else {UU=MaxNuMREV(as.numeric(paste0(UU,collapse="")))}
                           return(UU)}))
                  WW=data.frame(unlist(VV),RowWeight);colnames(WW)=c("var", "wt")
                  return(WW[WW[,1]!=0,])      })

 FULLRbind=do.call("rbind",DoubleLL)
 AGGR=aggregate(FULLRbind[,"wt"], by=list(Category=FULLRbind[,"var"]), FUN=sum)
 AGGR=AGGR[order(AGGR[,"x"],decreasing=TRUE),]
person user3647872    schedule 22.10.2020