Для студентов ДВФУ по предмету Учебное пособиеУчебное пособие по дисциплине "Сбор и предобработка данных цифрового следа"Учебное пособие по дисциплине "Сбор и предобработка данных цифрового следа"
2023-06-132023-06-13СтудИзба
Учебное пособие по дисциплине "Сбор и предобработка данных цифрового следа"
Описание
На кого рассчитано учебное пособие
Данное учебное пособие ориентировано на студентов и людей только начинающих свое знакомство с работой с цифровым следом. В 2021 году был утвержден профессиональный стандарт специалиста по моделированию, сбору и анализу данных цифрового следа. Такая профессия востребована и актуальна. Важно уметь работать с максимальным количеством ресурсов, ведь большое количество данных помогает сделать новые выводы или повысить точность имеющихся.
Изучаемые программные инструменты
В пособие рассматривается применение Python для работы с данными. Стоит отметить, что для изучения выбраны наиболее простые программные инструменты для наилучшего восприятия начинающими. В таблице ниже представлены библиотеки Python для выполнения необходимых в работе с цифровым следом действий.
![]()
В пособие также присутствует большое количество иллюстраций, которые демонстрируют примеры применения программных средств. На рисунке далее представлен пример отправки HTTP-запроса для получения HTML-кода страницы.
![]()
Необходимый минимум теории по работе протоколов в устройстве интернета также рассмотрен в пособии, на рисунке ниже проиллюстрированы комментарии к формированию URL-адреса сайта.
![]()
Задания в пособии
Вместе с теорией в пособии содержатся задания для закрепления материала: в конце каждого подраздела представлены по 2 простых и в конце пособия 3 проектных. Вот пример проектного задания, которое требует изученных инструментов и приемов в совокупности:
Данное учебное пособие ориентировано на студентов и людей только начинающих свое знакомство с работой с цифровым следом. В 2021 году был утвержден профессиональный стандарт специалиста по моделированию, сбору и анализу данных цифрового следа. Такая профессия востребована и актуальна. Важно уметь работать с максимальным количеством ресурсов, ведь большое количество данных помогает сделать новые выводы или повысить точность имеющихся.
Изучаемые программные инструменты
В пособие рассматривается применение Python для работы с данными. Стоит отметить, что для изучения выбраны наиболее простые программные инструменты для наилучшего восприятия начинающими. В таблице ниже представлены библиотеки Python для выполнения необходимых в работе с цифровым следом действий.
В пособие также присутствует большое количество иллюстраций, которые демонстрируют примеры применения программных средств. На рисунке далее представлен пример отправки HTTP-запроса для получения HTML-кода страницы. 
Необходимый минимум теории по работе протоколов в устройстве интернета также рассмотрен в пособии, на рисунке ниже проиллюстрированы комментарии к формированию URL-адреса сайта. 
Задания в пособии Вместе с теорией в пособии содержатся задания для закрепления материала: в конце каждого подраздела представлены по 2 простых и в конце пособия 3 проектных. Вот пример проектного задания, которое требует изученных инструментов и приемов в совокупности:
Допустим, целью последующей обработки цифрового следа является формулирование программой ответов на вопросы о «ДВФУ». Выполните сбор и предобработку данных для этой цели со страницы про описание «ДВФУ» как объекта на Русском острове, URL: %D0%B4%D0%B2%D1%84%D1%83.html. Необходимо сохранить текст со страницы в словаре следующим образом: [заголовок] : [[ токенизированные абзацы ]]. Также нужно выполнить очистку от пустых и не текстовых данных.
Характеристики учебной работы
Тип
Предмет
Учебное заведение
ДВФУПросмотров
28
Размер
2,57 Mb
Список файлов
Angelina_Kurgak
13 июня 2023 в 06:07
![](https://s.studizba.com/z.php?f=/templates/si/i/noavatar.png&w=100&h=100&t=1"){kind=avatar}
