ИИ-инженер регулярно работает с табличными данными: собирает набор вопросов для оценки качества, разбирает логи запросов, считает метрики по экспериментам, готовит данные для дообучения.
Что важно знать
- NumPy: массивы и векторные операции — эмбеддинги это массивы чисел, косинусное сходство — скалярное произведение нормированных векторов.
- pandas: чтение CSV и JSON, фильтрация,
groupby, объединение таблиц. - Циклы и
applyмедленные — векторные операции быстрее в десятки раз. - Jupyter-ноутбуки — для исследования и прототипов, но не для продакшен-кода.