Разведочный анализ и визуализация

Основа с Junior

Качество данных, распределения, связи, выбросы и графики, которые помогают принять решение.

Что важно знать

Сначала — как собирались данные и что значит строка.
Пропуски: случайные или нет; выбросы: ошибка или реальность.
Корреляция не означает причинность.
Хороший график отвечает на один вопрос.

Критерии освоения

Junior ≈ 10 ч

Проводит EDA нового датасета — структура, пропуски, выбросы, распределения, связи
Строит понятные графики в matplotlib или seaborn

Практика. Провести EDA открытого датасета и оформить ноутбук с 10 выводами и графиками.

Middle ≈ 6 ч

Находит проблемы сбора данных и потенциальные утечки на этапе EDA
Представляет выводы заказчику графиками, ведущими к решению

Практика. Подготовить для заказчика 5-слайдовую презентацию выводов из EDA с рекомендациями.

Вопросы с собеседований

Как вы проводите разведочный анализ данных (EDA)? Junior
Цель EDA — понять данные до модели: структура (строки, столбцы, типы, единицы, что такое одна строка), качество (пропуски, дубли, выбросы, ошибки ввода), распределения признаков и…
Как работать с пропущенными значениями в данных? Junior
Сначала понять, почему значение пропущено: технический сбой, «не применимо» (нет второго адреса), пользователь не захотел указывать. Пропуск часто несёт информацию. Варианты…
Как обнаруживать и обрабатывать выбросы в данных? Junior
Сначала понять природу выброса: ошибка данных (тестовый заказ, бот, сбой трекинга, неверные единицы) — исправить или исключить; реальное редкое значение (оптовый клиент) — часть…
Чем корреляция отличается от причинно-следственной связи? Junior
Корреляция — совместное изменение величин; причинность — изменение одной вызывает изменение другой. Корреляция возникает и без причинности: общая причина (конфаундер), обратная…
Как спроектировать дашборд, которым будут пользоваться? Junior
Начинать с вопросов и решений, которые дашборд должен поддерживать, и с аудитории: руководителю — несколько ключевых метрик с динамикой и сравнением с планом, команде …

← Вся карта «Data Scientist»

Закрытая бета

Знать тему — половина дела

На живом собеседовании sotto слышит вопрос интервьюера и показывает короткий ответ и план. Оставьте контакт — пришлём доступ и промокод.

Промокод на 2 часа — сверх пробных 30 минут
Программа для Windows — скачать сразу, войти — через Яндекс ID или VK ID
Первыми узнаете о версии для Mac — пока sotto только для Windows
Прямая связь с разработчиком: что улучшить — сделаем