EXACT: как мы оптимизировали accuracy градиентным спуском — Иван Карпухин, Тинькофф

Известно, что точность модели не является дифференцируемой функцией и не может оптимизироваться напрямую методом градиентного спуска. Однако, если внести случайность в предсказания модели, то ситуация в корне меняется. В своем докладе Иван рассказал про наши недавние исследования в области оптимизации метрики accuracy. А также показал способы, которые помогут добиться «гладкости» целевой функции и эффективно вычислят градиент.
Back to Top