Як працює Autograd?
Пакет autograd забезпечує автоматичне розмежування всіх операцій на тензорах. Це визначений-по-виконанню (define-by-run) фреймворк, що означає, що ваш backprop (зворотне поширення в нейронній мережі) визначається тим, як виконується ваш код, і кожна окрема ітерація може відрізнятися.
Навіщо потрібен Torch?
torch. optim – модуль, що реалізує кілька алгоритмів оптимізації, що використовуються при побудові нейронних мереж. Реалізовано більшість методів, що найчастіше використовуються. Збережена копія