1. Анализ и визуализация данных лаб 1(ф) - копия (Лаба 1-2)

1Московский государственный технический университет им. Н.Э. БауманаФакультет «Информатика и системы управления»Кафедра «Автоматизированные системы обработки информации и управления»Тоноян С.А.Методическое указаниепо выполнению лабораторной работыпо курсу“Оперативный анализ и визуализация данных”Лабораторная работа№1«Основные объекты бизнес - аналитики BI QlickView»Москва2014_________________________________________________2Содержание1. Цель работы32. Теоретическая частьСуществующие средства бизнес аналитики3.

Платформа QlikView473.1.Введение73.2.Версия QlikView Personal Edition103.3.Команды меню183.4.Панели инструментов и строка состояния223.5.Параметры пользователя254. Контрольные вопросы355. Литература3631. Цель работы.Установка BI QlickView версии Personal EditionОзнакомиться с интерфейсом OLE DB для подключения к внешнимисточникам данных и основными объектами платформы бизнесаналитики BI QlickView.Изучить следующие объекты платформы- Мастер начала работы- Команды меню- Панели инструментов и строка состояния42. Существующие средства бизнес аналитикиБизнес аналитика Business Intelligence - методы, технологии и средства извлечения ипредставления данных BI-продукты делятся на два типа: собственно генераторы запросов иотчетов и развитые аналитические OLAP-инструменты.

. Одними из наиболее известных BIрешений с открытым исходным кодом являются продукты Pentaho BI Suite от Pentaho Corporationи Jaspersoft BI Suite от компании Jaspersoft продукт Pentaho состоит из отдельных модулейкомпонентов, которые вместе формируют Pentaho BI Platform:Рис.1.

Реализация платформы бизнес аналитики на базе компоннт системных сервисов, ROLAP,мондриана, MDX запоров и стандартными средствами визуализацииСистемные сервисы позволяют извлечь данные из БД с последующей обработкой изаписывать в хранилище с определенной структурой, которая формируется согласноконфигурации Mondrian с использованием OLAP-сервера. Затем с помощью MDX запросовизвлекается необходимая информация и с помощью стандартных средств осуществляетсявизуализация данных с последующей выгрузкой для хранения.Pentaho BI – пакет ориентированный более на работу с OLAP, и в частности, с OLAPдвижком Mondrian. Первое – это то, что сам по себе этот пакет предоставляет крайне скудныевозможности по генерированию различных форм отчетов. Представлено только получение таблиц,но выбор нужных колонок и столбцов затруднен для оператора.

Получение диаграмм, графиков итаблиц с периодом невозможно вообще. Эти проблемы частично решаемы с помощью несколькихдополнений к Pentaho BI server, в частности, CDF и Saiku.5Модуль CDF работает на базе Pentaho являясь графической надстройкой на нем. Позволяетсоздавать несколько различных видов диаграмм. Возможно только создание готовых решенийадминистратором и затем пользователь сможет выбрать только из этих готовых решений.Создание своих отчетов затруднено оператором из-за сложности интерфейса и обилиятехнических настроек.Saiku – самая подходящая альтернатива собственной системе. Многие идеи были взяты изSaiku. На тот момент система подавала большие надежды, так как была лишена вышеописанныхнедостатков. Интерфейс понятен для пользователя, технические детали отсутствуют, но так каксистема не автономна и в ее работе участвуют несколько различных модулей (Mondrian,например), то добиться слаженной работы этих модулей оказалось затруднительно.

В этом случаесложна оказалась работа администратора. Каждому новому администратору приходилось быизучать большое количество документации как по Mondrian, так и по Saiku, чтобы вникнуть вдетали работы. Документация только на английском языке, что добавляет сложностей вподдержке системы.Jaspersoft в плане поддержки и работы с OLAP почти ничем не отличается от Pentaho инедостатки там точно такие же.

У всех этих систем (Pentaho + CDF, Saiku, Pentaho) есть несколькобольших и решающих недостатков или же резюмируя:Системы не гибки. Они не позволяют изменять себя в соответствии стребованиями, такая возможность принципиально отсутствует в этих системах. Либо ихследует использовать как есть, а это означает, что мы заперты в рамках интерфейса илогики программы не в силах каким-либо образом дополнить или изменить имеющиесявозможности, либо потратить много сил и времени на фактически разрушение старой истроительство новой системы.Использование их с имеющейся базой данных затруднено. Так как они всебазируются на движке Mondrian, то и извлечение данных должно проводиться по правилам,установленным Mondrian. Для этого необходимо было создавать новую базу данных на базеуже имеющейся в ЭУ. В противном случае вряд ли могли бы быть получены хоть какие-торезультаты.Скорость работы крайне низка.

На данный момент база данных длянепосредственной работы системы хранится в оперативной памяти, что обеспечиваетвысокую скорость работы. С использование Mondrian это невозможно и даже простыетаблицы невозможно получить за приемлемое для пользователя время.6Рис2 Реализация платформы бизнес аналитики на базе компоннт OLTP, Kettle, Pentaho BIPentaho Reporting – модуль создания и представления отчетов;Pentaho Analysis – модуль для выполнения OLAP-анализа;Pentaho Dashboard – модуль для управления и прогнозирования;Pentaho Data Integration – модуль для интеграции данных из разных источников;Pentaho Data Mining – модуль для поиска скрытых зависимостей в данныхPentaho BI Suite– система бизнес - аналитики и корпоративной отчетности, предоставляющаявозможности проведения двух ключевых видов анализаAdhoc-анализ - построение аналитических отчетов бизнес-пользователями на основе данныхучетных систем без их предварительной выгрузки и конвертации.PDI, также известная как Kettle- это компонент комплекса Pentaho отвечающий за процессИзвлечения, Преобразования и Выгрузки данных.

PDI:Kettle могут быть применены и дляОбмена данными между приложениями или базами данныхЭкспорта данных из таблиц баз данных в файлыЗагрузки массивов данных в базы данныхОбработки данныхИнтеграции в приложенияQlikView – решение для доступа к данным, которое позволяет анализировать ииспользовать информацию из различных источников данных. Используя приложениеQlikView, можно легко увидеть общую картину и обнаружить подключения, даже приработе с большими и сложными наборами данных. Можно интегрировать информацию изразличных источников, чтобы быстро сделать ее доступной по сетиСтандартные системы поиска информации часто требуют применения подходасверху -вниз, в то время как QlikView позволяет начать с любого элемента данныхнезависимо от его местоположения в структуре данных.

Получение данных в7традиционных системах часто представляет собой сложную задачу, требующую обширныхзнаний структуры баз данных и синтаксиса языка запросов. Пользователь часто вынуждениспользовать предварительно определенные процедуры поиска. Приложение QlikViewобеспечивает возможность произвольного выбора любых данных на экране одним щелчкоммыши.Практическая реализация бизнес процессов на базе QlikView показала, чтосистема достаточно гибкая, простая и является лучшей среди рассматриваемых.В QlikView имеются некоторые неоднозначности при генерации собственной БДна основе исходной БД.3.

Платформа QlikView3.1. ВведениеQlikView — это аналитическое программное обеспечение из категорииbusiness intelligence (бизнес-аналитика), которое позволяет пользователям, неимеющим специальных технических навыков, самостоятельно формировать отчетыи анализировать информацию о деятельности своего предприятия в самых разныхразрезах, независимо от того, в каких учетных системах предприятия хранится этаинформация (1С, Axapta, Access, Excel, Oracle, SAP, SQL Server и т.д.).

Благодаряиспользованию принципа работы in-memory, при котором все данные хранятся воперативной памяти, QlikView демонстрирует очень высокую производительность,часто в разы и десятки раз превосходящую реляционные или многомерные СУБД,на которые опираются традиционные BI-инструменты (например, BusinessObjects,Cognos, Microstrategy, Oracle BI и др.).

Для понимания того, как строить приложенияв QlikView, стоит обратить внимание на три фундаментальных отличия QlikView оттрадиционных BI-систем:Представление данных в виде ассоциативной моделиОбработка запросов в оперативной памяти, вместо использованияреляционных СУБДВысоко-интерактивный интерфейс пользователя83.1.1.Ассоциативная модель данных QlikViewАссоциативная модель данных представляет собой таблицы, связанные поключевым полям. Ассоциативная модель создается динамически в момент загрузкиданных в QlikView, при этом поля с одинаковыми названиями ассоциируются друг сдругом.

При выборе пользователем значения в одной таблице автоматическивыбираются все ассоциированные значения в других таблицах. Например, длямодели представленной ниже, при выборе клиента, автоматически выбираются всезаказы, сделанные этим клиентом, так как таблица заказов связана (ассоциирована) стаблицей клиентов. Но так как таблица заказов связана (ассоциирована) также стаблицей товаров, то кроме всех заказов данного клиента автоматическивыбираются и все товары, купленные этим клиентом.