Re: Prognose von schulischen Leistungen
Posted: Thu 9. Mar 2017, 11:03
Guten Morgen zusammen, guten Morgen Herr Jetter,
ich habe nach einigen Tests per Skript nochmal einen händischen Test durchgeführt. Allerdings mit abweichenden Ergebnissen.Die Abbrechergenauigkeit ist bei gleichem Datensatz und Netzlayout um 9%punkte auf 67% gefallen. Erst dachte ich, der Unterschied ergäbe sich dadurch, dass im Testdatensatz ein Ergebnis enthalten ist. Dem ist nicht so. Ob dem Testdatensatz ein Outcome gegeben ist, oder nicht, ergibt keinen Unterschied in der Genauigkeit. Der Unterschied ergibt sich durch das Skript. Teste ich per Skript komme ich auf 77%, händisch auf 67%. Bei der händischen Variante bin ich so vorgegangen wie von mir im ersten post beschrieben:
"Netzgenauigkeit: hierzu laden wir die Testdatei - in der keine Ergebnisse stehen - zeichnen "think on lesson" auf, exportieren den output und ermitteln die genauigkeit durch gegenüberstellung in excel. Geht das uU einfacher?"
und auch so, wie Sie es anschließend empfahlen. Lediglich den Button "Export Validation" habe ich trotz richtiger Version nicht gefunden. Daher habe ich die über "think per lesson" aufgezeichneten Durchlauf der Testdaten exportiert und ausgewertet. Es scheint hieran zu liegen? Mache ich hier was falsch?
Das die Genauigkeit per Skript, bei vorenthaltenem Ergebnis im Testsatz, unverändert bei 77% liegt beruhigt mich! Ziel war es einen Prognosedurchlauf einer Kohorte bei gelerntem Netz simulieren. Das war so erfolgreich. Irritierte bin ich von der Abweichung im händischen Vorgehen dennoch.
Liebe Grüße
jo
ich habe nach einigen Tests per Skript nochmal einen händischen Test durchgeführt. Allerdings mit abweichenden Ergebnissen.Die Abbrechergenauigkeit ist bei gleichem Datensatz und Netzlayout um 9%punkte auf 67% gefallen. Erst dachte ich, der Unterschied ergäbe sich dadurch, dass im Testdatensatz ein Ergebnis enthalten ist. Dem ist nicht so. Ob dem Testdatensatz ein Outcome gegeben ist, oder nicht, ergibt keinen Unterschied in der Genauigkeit. Der Unterschied ergibt sich durch das Skript. Teste ich per Skript komme ich auf 77%, händisch auf 67%. Bei der händischen Variante bin ich so vorgegangen wie von mir im ersten post beschrieben:
"Netzgenauigkeit: hierzu laden wir die Testdatei - in der keine Ergebnisse stehen - zeichnen "think on lesson" auf, exportieren den output und ermitteln die genauigkeit durch gegenüberstellung in excel. Geht das uU einfacher?"
und auch so, wie Sie es anschließend empfahlen. Lediglich den Button "Export Validation" habe ich trotz richtiger Version nicht gefunden. Daher habe ich die über "think per lesson" aufgezeichneten Durchlauf der Testdaten exportiert und ausgewertet. Es scheint hieran zu liegen? Mache ich hier was falsch?
Das die Genauigkeit per Skript, bei vorenthaltenem Ergebnis im Testsatz, unverändert bei 77% liegt beruhigt mich! Ziel war es einen Prognosedurchlauf einer Kohorte bei gelerntem Netz simulieren. Das war so erfolgreich. Irritierte bin ich von der Abweichung im händischen Vorgehen dennoch.
Liebe Grüße
jo