Методы покоординатного спуска для обучения деревьев решения с частичным привлечением учителя

Научно-технический вебинар НТР от 27 декабря 2022 “Методы покоординатного спуска для обучения деревьев решения с частичным привлечением учителя“ Спикер: Арман Жармагамбетов, Калифорнийский университет в Мерседе, Калифорния, США. Арман о вебинаре: Oбучение модели машинного обучения с частичным привлечением учителя применимо когда разметка дана лишь для небольшого количества данных. Наиболее широко распространенный подход для решения таких задач использует регуляризацию на основе графа схожести, который побуждает cхoжие точки иметь похожие прогнозы. Несмотря на то что, этот подход был очень успешно применён для разных моделей (например нейронные сети, SVM и т.д.), он остается неприменимым к деревьям решений, для которых оптимизационная задача намного труднее. Мы предлагаем новый подход на основе переформулировки задачи, требующей итеративного решения двух более простых задач: 1) решение разреженной линейной системы; 2) стандартное обучение дерева. Что касается второй части, потенциально может быть применен любой алгоритм обучения дерева. Тем не менее, недавно предложенная нами метод TAO имеет уникальные свойства, которые делают общую структуру высокоэффективной и масштабируемой даже с очень небольшим количеством помеченных данных. Дополнительные материалы: Страница вебинара на сайте НТР: -- Наш чат в Telegram: aGZorUQIvT45MTMy