Что важно знать
- Линейная регрессия минимизирует квадраты ошибок.
- Логистическая — сигмоида от линейной комбинации, обучается по кросс-энтропии.
- L1 обнуляет веса (отбор признаков), L2 уменьшает их.
- Сильная базовая линия и простая интерпретация.
Линейная и логистическая регрессия, регуляризация L1 и L2.
Практика. Построить модель цены квартир линейной регрессией с интерпретацией коэффициентов.
Практика. Сравнить L1, L2 и ElasticNet на данных с множеством коррелированных признаков и объяснить отличия весов.
Линейная регрессия предсказывает число как взвешенную сумму признаков, веса подбираются минимизацией среднеквадратичной ошибки. Логистическая регрессия — это классификация: ту же…
Регуляризация добавляет к функции потерь штраф за большие веса, чтобы модель не подгонялась под шум. L2 (Ridge) — штраф за сумму квадратов: веса уменьшаются плавно, но не до нуля…
Градиентный спуск минимизирует функцию потерь, шаг за шагом сдвигая параметры против градиента — в сторону наибольшего уменьшения ошибки. Learning rate — размер шага: слишком…
На живом собеседовании sotto слышит вопрос интервьюера и показывает короткий ответ и план. Оставьте контакт — пришлём доступ и промокод.