Нейронная сеть с обратным распространением не сходится

В основном яя пытаюсь реализовать

Поэтому я реализовал код, как вы предложили. Это не сходится на Cartpole, что является неожиданным. Хуже того, если я заставлю актера ничего не изучать, просто критик даже не сойдет с правильной функцией значения статической политики. Я вроде не в курсе, как это отладить ... Я добавил полный код как редактирование к исходному вопросу

у реализовать следующий алгоритм, взятый изэта книга, раздел 13.6 [http://incompleteideas.net/book/bookdraft2017nov5.pdf]: [/imgs/YxBlr.png] Я не понимаю, как реализовать правило обновления в pytorch (правило для w довольно похоже на правило ...

Эффекты рандомизации порядка входов в нейронную сеть

Для моего класса Advanced Algorithms и Data Structures мой профессор попросил нас выбрать любую интересующую нас тему. Он также сказал нам исследовать это и попытаться найти в нем решение. Я выбрал Neural Networks, потому что это то, чему я давно ...

Реализация персептрона с алгоритмом обратного распространения

Я пытаюсь реализовать двухслойный персептрон с обратным распространением для решения проблемы четности. Сеть имеет 4 двоичных входа, 4 скрытых блока на первом уровне и 1 выход на втором уровне. Я ...

Нейронная сеть с обратным распространением не сходится

В основном я пытаюсь реализоватьbackpropogation в сети. Я знаю, что алгоритм обратного распространения жестко запрограммирован, но сначала я пытаюсь сделать его функциональным. Он работает для одного набора входов и выходов, но за одним ...

Рассчитать ошибку, используя сигмовидную функцию в обратном распространении

У меня быстрый вопрос по поводу обратного распространения. Я смотрю на следующее: http://www4.rgu.ac.uk/files/chapter3%20-%20bp.pdf В этой статье говорится...

Как использовать k-кратную перекрестную проверку в нейронной сети

Эластичная нейронная сеть обратного распространения - вопрос о градиенте

Сначала я хочу сказать, что я действительно новичок в нейронных сетях, и я не очень хорошо понимаю это;)Я сделал свою первую реализацию C # нейронной сети об...

Многопоточное обратное распространение

Я написал класс обратного распространения в VB.NET - он хорошо работает - и я использую его в проекте C # для искусственного интеллекта. Но у меня дома AMD Phenom X3 и Intel i5 в школе. и моя нейронная сеть не многопоточная. Как преобразовать ...

Часть 2 Эластичная нейронная сеть с обратным распространением

Это дополнительный вопрос кэта почта, Для данного нейрона у меня нет ясности относительно того, как взять частную производную его ошибки и частную производну...