2017-03-23 4 views
0

Ich habe ein paar Modelle zu bauen und ihre Stabilität durch 10-fach CV zu validierenExtrakt und Plot K falten Ergebnisse für verschiedene Modelle

Ich habe den folgenden Code für eine logistische Regression und nnet zum Beispiel

mod_fitlog <- train(form, data=x, method="glm", family="binomial", 
       trControl = ctrl, tuneLength = 5,verbose=T,metric='auc') 

mod_fitnnet <- train(form, data=x, method="nnet",preProcess = "range", 
       trace = FALSE, maxit = 100) 

Jetzt möchte ich die Ergebnisse von 10 CV-Läufen extrahieren, dh 10 AUCs für jede Modellierung und plotten sie - im Grunde zu beurteilen, welches Modell stabiler ist und welche nicht mit höherer Varianz.

+0

Es ist leichter zu helfen, wenn Sie uns ein Beispiel liefern (http://stackoverflow.com/questions/5963269/how-to-make-a-great-r-reproducible-example) mit Beispiel-Eingabedaten kann den Code ausführen. – MrFlick

Antwort

0

Ich würde vorschlagen, Sie betrachten pipelearner, die für genau diese Art von Aufgabe geschrieben wurde.

Verwandte Themen