2 _ Анализ и визуализация данных лаб 2(ф) (Лаба 1-2)

1Московский государственный технический университет им. Н.Э. БауманаФакультет «Информатика и системы управления»Кафедра «Автоматизированные системы обработки информации и управления»Тоноян С.А.Методическое указаниепо выполнению лабораторной работыПо курсу“Оперативный анализ и визуализация данных”Лабораторная работа№2«Загрузка данных из источников и построениеассоциативной модели данных на базе BI QlickView»Москва20142_________________________________________________Содержание1.Цель работы32.Введение43.Архитектура платформы QlikView44.Источники данных55.Редактор скриптов86.Соединение с источником БД107.Загрузка данных из источников138.Обозреватель таблиц269.Контрольные вопросы2910.Литература3031.

Цель работы.Загрузка данных из источников и построение ассоциативной моделиданных на базе BI QlickView4ВведениеОсновные элементы технологии платформы BI QlikViewАрхитектура платформы BI QlikView5Основные платформы бизнес аналитикиИсточники данных6Запуск клиентского приложения BI QlikView1.

Создать новое приложениеСоздать новое приложение можно из меню «файл», «новый» либо«Ctr+N». Система запускает мастера начало работы.7Можно проделать работу по шагам предложенным мастером либоотключить мастера. В лабораторной работе мы сделаем работу безмастера, а так можете выполнять с помощью мастера.В лабораторной работе мы отключаем мастер, так как нам необходимозагрузить данные из реляционной БД (РБД), а мастер по умолчаниюпредлагает загрузить данные из источника в формате Excel .При загрузке данных из источников в формате Excel можно выполнятьпо шагам, предложенным мастером.8Созданный новый проект сохраняем в каталоге «stud3k» в файле«ИУ5хy» на жестком диске, где «x» номер группы, «y» Фамилия И.О.студента.1.1 «Редактор скриптов»Запустить «Редактор скриптов» можно из меню «файл», «новый»либо «Ctr+E».После запуска «Редактор скрипта» система формирует изаписывает в скрипт основные форматы представления данных хранимыхв компьютере.9«Редактор скриптов» является тем инструментом, которыйпозволяет подключиться к источникам, проверить результат соединения,загрузить и преобразовать данные.Загрузка происходит в 3 шага1.2.

Соединение с источником БД.Выбираем провайдер из существующих, в нашем случае это «OLEDB » и нажимаем кнопку «Соединить». Система выводит списоксуществующих драйверов с которыми работает «QlikView».10Выбираем драйвера связи и проверяем соединениеВ нашем случае вбираем «Microsoft Jet 4.0 OLE DB Provider» инажимаем «Подключение»В появившемся меню выбираем источник БД и нажимаем«Проверить соединение».11При удачном соединении система выводит сообщения «Проверкаподключения выполнена» и продолжаем далее, в противном случаенадо подобрать соответствующего провайдера.После удачного соединения система генерирует и записывает вскрпт строку соединения с соответствующими параметрами.12Созданный скрипт будет выполняться с лева направо и сверху вниз.2. Загрузка данных из источниковДля удобства разработчика в меню есть возможность создать вкладку меню «Вкладка», «Добавить вкладку» либо с помощью панелиинструментов.132.1.Создадим новую вкладку «Справочники»Загрузка данных из базы данных (БД) начнем с справочниковИз БД загружаем не все атрибуты таблиц, а выбираем те атрибуты,которые необходимы для построения модели и анализа.

Запускаем мастервыбора путем нажатия кнопки «Выбирать».Мастер выбора выводит следующее- в колонке «Таблицы Базы» все таблицы базы данных,14-в колонке «Поля» все поля выбранной таблицы.Закладка «Скрипт» содержит запрос к базе данных, что отмеченочерным маркером, а сверху находиться дополнительный оператор«LOAD», для внутренних преобразований.Система может работать как с явными таблицами, так и с виртуальными.152.2. Выбираем таблицу категории товаров «Categories» сполями.LOAD CategoryID,CategoryName,Description;SQL SELECT *FROM Categories;2.3.

Выбираем таблицу товаров «Products» с полямиLOAD CategoryID,ProductID,ProductName,QuantityPerUnit,SupplierID,UnitCost,UnitPrice,UnitsInStock,16UnitsOnOrder;SQL SELECT *FROM Products;2.1. Выбираем таблицу клиенты «Customers» с полями17Выбираем атрибуты отмеченные маркером.В результате выбираем следующие атрибутыLOAD City,CompanyName,Country,CustomerID;SQL SELECT City,CompanyName,Country,CustomerIDFROM Customers;183.Создание вкладки «Факты»Затем выбираем те поля и таблици, которые собираемся загрузить.Запускаем мастер выбора путем нажатия кнопки «Выбирать».3.1. Выбираем таблицу заказы «Orders» с полямиВ результате получаем следующий скриптLOAD CustomerID,EmployeeID,Freight,19OrderDate,OrderID,ShipperID;SQL SELECT *FROM Orders;3.2.Выбираем таблицу «Order Details» с полямиLOAD Discount,LineNo,OrderID,ProductID,Quantity,UnitPrice,UnitPrice;SQL SELECT *FROM `Order Details`;204.

Создадим новую вкладку «Загрузка из файлов»Загрузка данных из внешних источников осуществляется спомощью опции «Табл. поля»4.1. Загрузка данных из файла EmpOff.xls в формате Excel, гдехранятся данные о менеджерах.21В поле «Метки» выбираем «Встроенные метки» и можемотключать часть атрибутов, которые не нужны. Эти атрибуты из базы неудаляются, они не будут загружены в систему.Получаем следующий скриптLOAD EmpID,[Last Name],[First Name],Title,22[Hire Date],OfficeFROMДанные\EmpOff.xls(biff, embedded labels, table is Employee$);4.2.Загрузка данных из файла Suppliers.xml в формате XML, гдехранятся данные о поставщиках товаров.Получаем следующий скриптDirectory;// Start of [Suppliers.xml] LOAD statements_empty_:LOAD SupplierID,CompanyName,ContactName,Address,City,PostalCode,Country,Phone,Fax23FROM Suppliers.xml (XmlSimple, Table is [Suppliers/_empty_]);// End of [Suppliers.xml] LOAD statementsСледующие атрибуты из таблицы «Поставщики» можно исключитьContactName,Address,City,PostalCode,Country,Phone,FaxДалее после преобразования скрипта получим следующее/ Start of [Suppliers.xml] LOAD statementsПоставщики:LOAD SupplierID,CompanyNameFROM Данные\Suppliers.xml (XmlSimple, Table is [Suppliers/_empty_]);// End of [Suppliers.xml] LOAD statements244.3.

Загрузка данных и построение моделиСтруктура модели сформирована и теперь необходимо загрузитьсоответствующие данные из источников.При загрузки система выводит сообщения об источнике данных иколичестве строк загруженной информации, а также выводитсядиагностическая информация о наличии ошибок и о ее источнике.25После загрузки данных можно посмотреть на модель, котораясформировалась в результате.4.4.Анализ и корректировка дата логической моделиВ процессе построения модели QlikView просматривает всетаблицы и связывает их по одноименным атрибутам с помощьюключей «первичный ключ» и «внешний ключ». Посмотреть модельможно из панели инструментов «Файл», «Обозреватель таблиц»26Из схемы видно, что связь между таблицами менеджеры и заказыотсутствует, а в самом деле эти таблицы связанны.

Необходимоопределить идентичные поля в соответствующих таблицах и установитьсвязь посредством внесения изменений в скрипт самостоятельно.27После внесения изменений в скрипт, опять загружаем данные истроим модель. Так продолжаем до тех пор, пока не построимправильную схему.284.5.Выбор атрибутов в качестве измерений и фильтров.После успешной загрузки данных и построения модели системавыводит все таблицы и выбранные атрибуты. Эти атрибуты можемиспользовать как для фильтрации, так и в качестве измерения длявизуализации данных в виде таблиц, графиков и диаграмм.295.

Контрольные Вопросы306. Литература1. Барсегян А.А., Куприянов М.С., Холод И.И. «Анализ данных». БХВПетербург 2009г. 512с.2. Куприянов М.С, Холод И.И0, Барсегян А.А. «Анализ данных ипроцессов». БХВ-Петербург 2009г. 512с.3. Джестон Д., Нелис И. «Управление бизнес процессами». Пер с англ.С-Петербург 208г -512с.4. Тоноян С.А. Черненький В.М., Балдин А.В., Информационнаяуправляющая система МГТУ им.

Н.Э.Баумана «ЭлектронныйУниверситет». Изд. МГТУ им. Н.Э.Баумана 2009. -376 c. 304-325.5. Тоноян С.А., Балдин А.В., Елисеев Д.В. «Методика модернизациистандартных модулей типовой конфигурации на базетехнологической платформы «1С: Предприятие 8» с минимальнымидоработками». Наука и образование (МГТУ им. Н.Э. Баумана). № 08,август 2012 URL: http://technomag.edu.ru/.6. Официальный сайт компании QlikView - http://www.qlikview.com/ru.