Решение задач «Выполните следующие задания: 1. Загрузите набор данных»,
Алгоритмизация и программирование в Новосибирске

Выполните следующие задания: 1. Загрузите набор данных. Выведите голову таблицы (метод head), информацию о наборе данных (метод info). Подготовьте описание набора данных в указанном виде (см. рисунок ниже). Для перевода англоязычных названий можно использовать онлайн-переводчики. При наличии нескольких вариантов перевода выбирать подходящий исходя из здравого смысла. 2. Подготовьте набор данных для последующего анализа. Для этого выполните следующие действия: а) Поскольку большинство наборов данных хранятся в упорядоченном виде, перед началом анализа перемешайте наборы с использованием команды б) Выясните, имеются ли пропуски данных в каких-либо столбцах. При наличии удалите эти столбцы или заполните пропущенные значения. в) Проанализируйте распределение числовых переменных, а также порядковых категориальных признаков. Используйте графики и статистические функции. г) Выясните, есть ли выбросы и аномальные значения. При необходимости удалите их. д) Постройте матрицу корреляции. е) Напишите выводы по каждому этапу подготовки данных. 3. Выберите столбцы Х и у для решения задачи линейной регрессии (поиска зависимости у от Х). Обоснуйте свой выбор. Разбейте выборку на обучающую и тестовую, размер тестовой выборки должен составлять 20-30% от всех данных. Обучите модель линейной регрессии на обучающей выборке и выполните предсказание y в зависимости от Х на тестовой выборке. 4. Проверьте точность работы модели. Для этого выберите подходящие метрики сравнения реальных и предсказанных значений и вычислите значения этих метрик. Постройте график, на котором отображаются реальные значения и линия регрессии (см. рисунок ниже). Сделайте вывод. 5. Оформите решение, добавив текстовые пояснения перед каждой ячейкой и выводы в конце каждого этапа работы. Защитите работу.