Решение задач «Решить 2 задачи по «Введение в технологию Big Data»»,
Введение в технологию Big Data (Часть 2) в Новосибирске

Необходимо доработать две задачи, ранее выполненные другим исполнителем. К сожалению, он не выходит на связь. Комментарий преподавателя: Задания выполнены, однако требуется, чтобы они были реализованы в среде программирования с вводом исходных данных и получением результата. Необходимо предоставить скриншоты процесса выполнения. В текущем виде представлен только окончательный результат. Прикрепляю исходное задание, и также окончательный результат от предыдущего исполнителя. См. вложение. Задачи: Задача 1. Разработайте программу на Python для анализа тональности текста (положительная, нейтральная, отрицательная). Используйте предварительную обработку текст и библиотеки TextBlob и NLTK для классификации. Установите и подключите библиотеки TextBlob и NLTK. Проведите преобработку текста: токенизацию, удаление стоп-слов, лемматизацию. Проанализируйте тональность каждого из предложенных ниже текстов. Текст 1: “Сегодня ужасный день, все пошло не так.” Текст 2: “Я люблю Python. Это отличный язык программирования!” Текст 3: “Все в порядке, ничего особенного.” Задача 2. Установите Hadoop на вашу машину или создайте кластер с несколькими виртуальными машинами. Создайте локальный текстовый файл (data.txt) с некоторым содержимым. Загрузите файл в HDFS, проверьте, что файл был загружен в HDFS, прочитайте содержимое из файла, создайте новую директорию в HDFS для хранения других файлов, скопируйте файл из одной директории в другую внутри HDFS, удалите файл из HDFS. Ссылка на скачивание Hadoop — https://hadoop.apache.org/ Ссылка на инструкцию по установке и настройке Hadoop — https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/ClusterSetup.html Подробнее в прикрепленном файле