gradient-descent

0зной

1ответ

Реализация алгоритма наивысшего спуска, изменяемый размер шага

Я пытаюсь реализовать алгоритм наименьшего спуска в языках программирования (C/C++/fortran). К примеру минимизации F (x1, x2) = x1^3 + x2^3 - 2 * х1 * х2 Расчетный начиная расчетной точке x0, итерацио

13зной

1ответ

Использование R для мульти-класса логистической регрессии

Короткого формата: Как реализовать логистические алгоритмы регрессионного классификации мульти-класса с помощью градиентного спуска в R? Можно ли использовать optim(), если имеется более двух ярлыков?

0зной

1ответ

Градиентный спуск не работает без нормализации, почему?

Мой вопрос основан на данных курса Курсера - https://www.coursera.org/learn/machine-learning/, но после того, как поиск, похоже, является общей проблемой. Градиентный спуск отлично работает при нормал

1зной

1ответ

SGD мини-партии - все одинакового размера?

Алгоритмы стохастического градиента с мини-партиями обычно используют размер мини-партий или считаются параметром. Теперь, что мне интересно, все мини-партии должны быть одинакового размера? Возьмем,

-1зной

1ответ

почему алгоритм обратного распространения в нейронных сетях застрял в локальных минимумах?

Я новичок в нейронной сети и читал о backpropagation, но не получал почему алгоритм backpropagation застрял в локальных минимумах?

0зной

1ответ

Градиентные значения спуска не корректные

Я пытаюсь реализовать градиентного спуска с использованием кода из: Gradient Descent implementation in octave Я исправленного кода следующим образом: X = [1; 1; 1;] y = [1; 0; 1;] m = length(y); X

0зной

1ответ

MNIST Tensorflow vs code от Michael Nielsen

Я прочитал книгу Neuralnetworksanddeeplearning.com Майкла Нильсена о нейронных сетях. Он всегда делает пример с данными MNIST. Теперь я взял его код и сконструировал точно такую же сеть в Tensorflow