#msmr — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #msmr, aggregated by home.social.
-
Продолжение исследования RNN
С прошлой статьи я внёс несколько изменений: 1. Планировщик был сломан и не изменял скорость. Починил. 2. Остаточное соединение через умножение. 3. WindowedDense для выходной проекции. 4. Добавил clipnorm 1, cutoff_rate 0.4 Как обычно это всё добавляет стабильности и 1% точности. WindowedDense по неизвестной мне причине добавляет SMR стабильность.
https://habr.com/ru/articles/851182/
#rnn #lstm #gru #slr #smr #msmr #tensorflow #python #transformer #исследование