Projekt
Recursive Reasoning mit kleinen Netzen (TRM in Keras)
Eigene Implementierung des TRM-Papers „Less is More: Recursive Reasoning with Tiny Networks“ in Keras.
Kontext
Das Paper „Less is More: Recursive Reasoning with Tiny Networks“ zeigt, dass ein sehr kleines Netz durch wiederholte Anwendung derselben Schichten schwierige Denkaufgaben lösen kann. Mich interessiert genau diese Richtung: weniger Parameter, mehr Rekursion.
Beitrag
Ich habe die Architektur aus dem Paper selbst in Keras nachgebaut, um die Struktur der rekursiven Schleife und das Training im Detail zu verstehen.
Vorgehen und Ergebnis
Messergebnisse und Vergleichszahlen sind für diese Seite noch nicht freigegeben und werden deshalb nicht genannt. Der Code liegt noch nicht öffentlich.