Page 2 of 4

Re: Bug in ScritedElements?

Posted: Sun 13. Dec 2020, 19:15
by TJetter
Leider scheitere ich bislang an der Reproduktion des Fehlers, trotz Tests mit und ohne "Scripted Elements" und mit verschiedenen Netzen/Lessons.
--> Es wäre klasse, ein konkretes Beispiel zu bekommen (Netz + Lesson(s)).
Idealerweise zusammen mit einer Kopie von Settings.cfg und Teachers.mbt aus dem Verzeichnis:

C:\Users\<User>\AppData\Roaming\MemBrain\Config

Wobei <User> Ihr Windows Login-Name ist.
(Die Dateien enthalten keinerlei persönliche Informationen, damit kann ich aber exakt Ihre Einstellungen testen).


Vielen Dank schonmal vorab!

Re: Bug in ScritedElements?

Posted: Wed 16. Dec 2020, 21:34
by MrNo
Guten Abend,

ich habe eben mal ein wenig experimentiert um das Verhalten nachzustellen und bin glaube ich auch fündig geworden.
Schritte zur Reproduktion:

1. Netz und Scripted Elements s. Screenshot (NetError Function Configuration: Alles auf "UserDefined (Scipted)" und "Use Normalized Values" aus).
2. "Capture Best Net" einschalten
3. Dann das Training für kurze Zeit manuell starten und wieder stoppen.
4. Im NetErrorGraph und im Stockmanager steht als NetError der gleiche Wert. Also so wie es sein soll, weil der NetError aufgrund des Scriptprogramms immer kleiner wird.
5. Dann "Evaluate Net Error" drücken. Dann wird auf einmal ein anderer NetError berechnet, obwohl das nach meinem Verständnis nicht so sein sollte. In meinem Screenshot sieht man das an der grünen senkrechten Linie im "NetError Graph", die vor dem Drücken von "Evaluate Net Error" noch nicht da war.

Ob man Multithreading ein- oder ausschaltet macht hierbei diesmal keinen Unterschied.

Viele Grüße
MrNo

Re: Bug in ScritedElements?

Posted: Wed 16. Dec 2020, 21:44
by MrNo
P.S.: Sorry, hatte Ihren letzten Beitrag mit der Anfrage nach den Settings nicht gesehen. Falls doch noch benötigt, bitte nochmal melden.

Re: Bug in ScritedElements?

Posted: Fri 18. Dec 2020, 15:53
by TJetter
Hallo und Danke für die Mühe und das Beispiel!

Allerdings handelt es sich hier nicht um einen eigentlichen Fehler von MemBrain:

1.) Das "Scripted Elements" File im Beispiel enthält eine globale Variable <cnt>.
2.) Das "Scripted Elements" File wird von MemBrain als Programm-Modul beim Start des Trainings oder auch beim Aufruf der Funktion <Evaluate Net Error> jeweils compiliert und neu geladen. Dabei werden alle globalen Variablen allokiert und initialisiert.

Eine globale Variable über mehrere Trainingsschritte im Scripted Elements File zu nutzen, ohne diese nach jeder Net Error Berechnung neu zu initialisieren, macht deshalb keinen Sinn: Damit wird ja die Berechnung des Net Errors abhängig von der Vorgängerberechnung.
Das Scriptmodul vor jedem Trainingsschritt immer neu zu laden, macht wiederum aus Performance-Gründen keinen Sinn. Deshalb compiliert und lädt MemBrain das Script beim "Auto Teach" nur einmal beim Start.

Aus diesem Grund muss man beim Verwenden von globalen Variablen diese immer am Ende der Funktion <CalculateNetError> explizit neu initialisieren.
In Ihrem konkreten Beispiel ergäbe sich damit natürlich ein konstanter Net Error, das Beispiel ist ja aber ohnehin nur theoretischer Natur.

Zugegebenermaßen könnte man das bei nächster Gelegenheit in die MemBrain Hilfe mit aufnehmen ;-)

Viele Grüße,
Thomas

Re: Bug in ScritedElements?

Posted: Fri 18. Dec 2020, 17:43
by MrNo
Ok, verständlich. Ich hatte die globale Variable nur genutzt, um den Net-Error irgendwie immer kleiner werden zu lassen.
In meinem eigentlichen Script, bei dem ich das Problem mit der Net-Errror Berechnung gesehen habe, verwende ich keine solche globalen Variablen.
Ich schaue noch mal, ob ich es anders reproduzieren kann und würde mich dann noch einmal melden.

Vielen Dank!

Re: Bug in ScritedElements?

Posted: Fri 18. Dec 2020, 19:18
by MrNo
So, nächster Versuch.
Ich habe nun folgendes gemacht, und zwar ganz ohne Scripte.
(Daten dazu siehe angehängte Zip):

Vorbereitung Netz:
- test.mbn und Lesson1.csv geladen.
- keine scripted Elements (s. Screenshot "Setup.PNG")
- Stock Capture Ein, Multithreading diesmal aus.

Test:
Dann StartTeacher im Menu gedrückt und nach kurzer Zeit wieder beendet. Nun den Stock Manager aufgemacht (siehe Screenshot "1.PGN"). Wie man sieht, gibt es keinen Unterschied beim NetError.

Nun habe ich aus dem Stockmanager das beste (und in diesem Fall einzige) Netz geladen und dann "Evaluate Net Error" gedrückt. Wie man in Screenshot "2.PGN" sieht, ist der Net-Error nun auf einmal ein anderer, zumindest in den hinteren Nachkommastellen. Das dürfte doch eigentlich nicht sein, oder?

Re: Bug in ScritedElements?

Posted: Tue 22. Dec 2020, 10:29
by MrNo
Hallo,

hier noch die Teachers.mbt und Settings.cfg um das in meinem letzten Post beschriebene Verhalten nachzuvollziehen, falls benötigt.
viele Grüße

Re: Bug in ScritedElements?

Posted: Sun 3. Jan 2021, 22:57
by MrNo
Hallo und noch ein frohes neues Jahr,
ich habe eben ein Update auf die letzte Version 11.06 durchgeführt und sie einmal ausprobiert.
Das in meinem Post vom 18.12.2020 beschriebene Verhalten, dass der angezeigte NetError im Stockmanager ein anderer ist, als wenn ich das Netz dann noch einmal aus dem Stockmanager lade und EvaluateNetError drücke, ist aber so geblieben. Das ist doch nicht richtig, oder übersehe ich etwas? (ich hoffe, ich bin nicht zu nervig) ;)
In meinem Beispiel vom 18.12 sind es nur die hinteren Nachkommastellen, bei meinem eigentlichen Netz mit Scripted Elements sind aber alle Stellen betroffen. Das Netz was ich aus dem Stock lade ist immer schlechter als das was im StockManager anzeigt wird. Der Wert der im Stockmanager angezeigt wird, scheint mir aber plausibel für das beste Netz eines Trainings, nur wird es scheinbar nicht weggespeichert sondern ein anderes!?
Viele Grüße

Re: Bug in ScritedElements?

Posted: Fri 29. Jan 2021, 15:45
by TJetter
Hallo,

leider bin ich vom Forum nicht über den Post informiert worden und sehe ihn gerade jetzt erst, das tut mir sehr leid! Allzu oft funktioniert das "Abonnement" im Forum leider nicht, ich habe noch nicht rausgefunden, woran das liegen könnte.
Ich werde mir die Dateien möglichst bald ansehen.

Und nervig ist das gar nicht, nein! Ich bin froh über solche Rückmeldungen, nur auf diese Weise kann ich Fehlern auf die Spur kommen und die SW kontinuierlich verbessern, vielen Dank!

Viele Grüße,

Re: Bug in ScritedElements?

Posted: Fri 29. Jan 2021, 16:18
by TJetter
Hallo, da bin ich wieder,

ja, ich kann die Sache nun nachvollziehen, Danke! Und ich entschuldige mich nochmal für die späte Reaktion auf den Post.
Ich schaue mir die Sache so bald wie möglich genauer an und kann dann hoffentlich schnell einen Fix liefern.

Viele Grüße,