Знакомство с Qlik Sense
01
/21
О чем мы поговорим сегодня
Узнаем про инновационный подход к сбору статистики и интерактивному анализу данных в Министерстве Транспорта Республики Казахстан! А также, познакомимся с компанией Qlik и ее продуктами, узнаем, что такое Qlik Sense, как выстроен процесс работы в продукте и сможем загрузить первое приложение для исследования!
ИСТОРИЯ УСПЕХА
Как в Комитете транспорта МИИР Республики Казахстан создали Ситуационный центр на Qlik Sense
Шынгыс Кажыбасов
Руководитель Управления цифровизации транспорта Комитета транспорта, Министерство индустрии и инфраструктурного развития Республики Казахстан (МИИР РК)
Платформа Qlik позволила нам создать единое цифровое аналитическое пространство для Комитета транспорта и сэкономить сотни человекочасов в месяц благодаря автоматизации внутренних процессов работы с данными.
Создание аналитической системы в Комитете Транспорта Министерства индустрии и инфраструктурного развития является частью государственной программы «Цифровой Казахстан», принятой в Республике Казахстан в 2018 году. Qlik используется Комитетом Транспорта с 2019 года и за это время не только помог автоматизировать работу всего отдела статистики, резко сократив количество рутинных операций по обработке данных, но и позволил увеличить оперативность работы Ситуационного центра Комитета Транспорта Республики, а также организовать эффективное взаимодействие с другими ведомствами.

Основными факторами в пользу выбора Qlik для Комитета стали:
1
Подход ассоциативного поиска и исследования данных в свободной форме
2
Механизмы управления и безопасности для защиты целостности данных
3
Широкая библиотека современных визуализаций, включающая лучшие практики для дашбордов, а также возможности использования расширений
4
Возможности консолидации всей информации Комитета без ручного сведения таблиц и организации повсеместного доступа к информации
Первый проект по Qlik стартовал в июне 2019 года. При этом, всего через полгода команда проекта Комитета, совместно с партнером Datanomix.pro, автоматизировала 26 внутренних аналитических бизнес-процессов и разработала 16 аналитических приложений.

Сейчас Qlik является основой аналитического ландшафта Комитета транспорта и объединяет данные из Oracle, MySQL, облачного хранилища, активно используется Ситуационным центром и заместителями председателя Министерства индустрии и инфраструктурного развития.
Аналитические приложения Qlik охватывают все ключевые направления деятельности Комитета Транспорта МИИР РК.
Шынгыс Кажыбасов
Руководитель Управления цифровизации транспорта Комитета транспорта, Министерство индустрии и инфраструктурного развития Республики Казахстан (МИИР РК)
Помимо удобных интерактивных дашбордов, в которых можно «провалиться» от региона до конкретного поста транспортного контроля и инспектора, чтобы проанализировать происшествие, мы активно используем сводки.
Сводки выведены на экраны в Ситуационном Центре и позволяют сотрудникам эффективно мониторить ключевые показатели на основе данных из всех регионов, интегрируемых в Qlik из облачного хранилища.

В сводках собрана ключевая информация по всей Республике Казахстан по различным видам транспорта и таким метрикам как:
  • Автотранспорт: инциденты, количество пострадавших, количество областей, количество закрытых дорог, скопления АТС на пропускных пунктах (например, на пункте пропуска таможни Республики Казахстан на границе с КНР)
  • Авиатранспорт: инциденты, количество пострадавших
  • Водный транспорт: статус, инциденты на ТЭЦ
  • Железнодорожный транспорт: события
  • Интерактивная панель позволяет управлять выборкой данных, используя фильтры по регионам республики, номерам отделений ж/д и пр.

Так выглядит Ситуационный центр Комитета транспорта МИИР РК
Оптимизация межведомственных взаимодействий с помощью Qlik Sense
Ежегодно при работе с имущественными декларациями налоговая служба Республики Казахстан отправляет более 15 тысяч запросов в Комитет Транспорта о наличии у физического лица зарегистрированного имущества. Раньше сотрудники Комитета Транспорта тратили много времени на поиск транспортного средства вручную, по заявленным идентификаторам. С появлением Qlik этот процесс получилось оптимизировать.

Для межведомственного взаимодействия в Комитете Транспорта разработали специальное аналитическое приложение специально для таких запросов — теперь у налоговой службы есть доступ к интегрированной базе данных по всему имуществу, что экономит несколько тысяч человеко-часов, особенно в период сдачи налоговых деклараций.
400 часов
400 человеко-часов экономии в месяц на составление отчетов сотрудниками КТ и территориальными подразделениями
70% процессов
70% бизнес-процессов в области обработки данных автоматизированы
ТЕОРИЯ
Что такое Qlik Sense
Qlik — ИТ-компания, разрабатывающая программы для работы с данными. Компания была основана в Швеции в 1993 году. В основе философии Qlik — стремление к принятию бизнес-решений на основе данных. Поэтому от такой компании требуется больше, чем просто один инструмент визуализации данных. Платформа Qlik поддерживает полный набор решений, которые обеспечивают аналитику по всему спектру потребностей в аналитике и интеграции данных.
>> Линейка продуктов Qlik
QlikView. Первое поколение систем Data Discovery. QlikView позволяет быстро обрабатывать и визуализировать данные для построения интерактивных аналитических приложений и дашбордов. Продукт требует продвинутых навыков в кодинге и большой вовлеченности IT-подразделения внутри компании, поэтому в 2014 году появилась новая, улучшенная система — Qlik Sense.

Qlik Sense. Система нового поколения аналитики данных, работа с которой не вызывает трудностей даже у неподготовленного пользователя. Qlik Sense относится к инструментам категории self-service («самообслуживание»), поэтому специфичные и продвинутые знания программирования не обязательны, а участие IT-специалистов часто не требуется. Использование различных источников со сложной структурой данных в рамках приложений Qlik Sense открывает новые возможности для построения интерактивных визуализаций и исследования данных.

Qlik NPrinting. Сервис является дополнительным серверным компонентом, который позволяет автоматически создавать отчеты в форматах PDF, Excel, Word, Power Point и публиковать их через электронную почту, каталог или в портал. Отчеты создаются на основании данных в аналитических приложениях Qlik Sense и документах QlikView.

Qlik AutoML. Это автоматизированный инструмент машинного обучения без написания кода, который команды аналитики могут использовать для удобной генерации моделей, прогнозирования и тестирования бизнес-сценариев. Позволяет быстро подключиться к данным, создавать и обучать ML-модели, составлять прознозы и тестировать сценарии «что если», а также публиковать результаты или напрямую интегрировать модели в Qlik Sense для полностью интерактивной аналитики.

Qlik Catalog. Это корпоративный маркетплейс данных, который упрощает и ускоряет профилирование данных и их обработку, и позволяет доставлять пользователям достоверные данные, уже готовые для аналитики. И все это – в формате «магазина данных». Интерфейс Qlik Catalog напоминает процесс совершения покупок в интернет магазине: сотрудники могут искать, просматривать, сравнивать и находить подходящие наборы данных из глобального каталога корпоративных данных и помещать их в корзину, из которой можно одним кликом загрузить данные в Qlik Sense для разработки дашборда. Есть облачная версия Cloud Catalog, которая предоставляется в облаке, и отдельный продукт.

Qlik Alerting. Это умная платформа оповещений для Qlik Sense, которая позволяет компаниям и их сотрудникам проактивно анализировать данные и быстрее реагировать на изменения бизнес-среды. Это не просто оповещения о выполнении и невыполнении какого-то KPI, а комплексная платформа, которая использует продвинутые статистические вычисления и тренды, позволяющие легко выделить выбросы и аномалии в данных, провести сравнения и реализовать комплексную логику оповещений (со многими условиями). Функционал Qlik Alerting включен в Qlik Cloud, а также доступен как отдельный продукт для серверной версии.

Qlik Application Automation. Это no-code инструмент, который позволяет автоматически преобразовывать инсайты из аналитических приложений в целевые действия в сторонних приложениях. Например, подготовить Автоматизирует интеграцию и оркестровку данных из облачных сервисов и не только, и уже содержит готовые коннекторы к Google Analytics, AmoCRM, Creatio, Salesforce, ZohoCRM, Microsoft Dynamics, MailChimp, YouTube, Slack, и к более 500 сервисам.

Qlik Data Intergration. Это целая линейка продуктов Qlik по интеграции данных, которая включает решения по репликации данных, автоматизации хранилищ данных, управляемому созданию озер данных, слайсингу SAP-сред, созданию маркетплейса корпоративных данных – все эти составляющие необходимы дата-инженерам, чтобы выстроить потоки данных и сделать дата-сеты доступными для пользователей из различных департаментов компании. В рамках марафона мы не будем подробно погружаться в эти более технические темы, но если вы хотите узнать больше можно посмотреть обзор всех продуктов по интеграции данных.
Qlik Sense
Qlik Sense — основной продукт Qlik, который предлагает управляемую интеграцию данных, гибкую аналитику и BI с низким порогом вхождения для простых пользователей. Qlik Sense может быть развернут в облаке, обеспечивая надежность данных вместе со скоростью работы и внедрения (Qlik Cloud), или же — как полноценное решения для компании в мульти-облачной среде (Qlik Sense Enterprise).

Платформа Qlik Sense имеет интуитивно понятный интерфейс и много возможностей для самостоятельного изучения данных. Упрощенный процесс подключения источников данных позволяет комбинировать их между собой, создавая полезные аналитические приложения. Возможность совместной работы над созданием приложений и работа на мобильных устройствах.
Типовой процесс работы с данными в Qlik Sense. Шаги могут выполняться как одним специалистом, так и разными — каждым со своей специализацией.
Игорь Буробин
эксперт по Qlik Sense, «Про BI»
В видео я покажу пример создания полноценного интерактивного аналитического приложения на платформе Qlik Sense без использования специальных навыков за 100 секунд.
Аналитика в Qlik Sense за 100 секунд
Быстрый пример для знакомства с принципами работы Qlik Sense
Процесс работы в Qlik Sense
Процесс работы в Qlik Sense ведется по принципу: Подключение данных → Разработка визуализаций → Сохранение → Просмотр.

Хаб — ваш старт в работе с данными. В Хабе вы выбираете с чем вы будете работать: просматривать готовые приложения или начинать новое. Интерфейс хаба поделен на две смысловые области.

Хаб состоит из двух разделов, они видны в левом меню экрана:
  1. Личное — раздел с персональным рабочим пространством, где отображаются приложения, над созданием которых вы работаете сейчас, и те приложения, которые вы опубликовали в какой-либо поток.
  2. Потоки / Пространство — раздел Хаба с потоками, в которых находятся приложения. Поток — это папка, в которой можно группировать различные приложения. Например, можно создать поток «HR» и дать доступ сотрудникам HR-департамента, чтобы они имели доступ ко всем приложениям с данными по персоналу.
По умолчанию созданные пользователем приложения хранятся в потоке Работа.

Поток «Работа» — это ваше персональное рабочее место, где будут храниться все ваши приложения, которые вы разрабатываете. После того как вы завершили работу над своим приложением, вы сможете опубликовать его в любой доступный вам Поток.
Медет Турарбеков
архитектор Qlik Sense, Datanomix.pro
Визуально Хаб может отличаться в зависимости от того, какая версия Qlik Sense используется у вас в организации. Существует две версии Qlik Sense: Qlik Sense Enterprise, Qlik Cloud.
В версии Qlik Cloud страницу Хаб также называют Каталогом (Catalog), поскольку функционал каталога встроен в облачную версию.
Как работать с Хабом в Qlik Sense
Видео от Datanomix
Листы, закладки, истории
Каждое приложение в Qlik Sense состоит из листов (sheets), закладок (bookmarks) и историй (stories).

Лист — это основной элемент приложения, это то место, где вы создаете визуализации, где происходит показ данных. Приложение может состоять из одного или нескольких листов.

Закладки — это инструмент для сохранения некоторого среза в данных, подготовленного набора фильтров.

Истории — заданные последовательности «слайдов» на основе ваших данных. При помощи историй можно отслеживать закономерности и паттерны.
Игорь Буробин
эксперт по Qlik Sense, «Про BI»
В видео я расскажу о том, какие действия вы можете сделать на примере одного демо-приложения. Само приложение вы тоже можете загрузить в свое облако — файл и инструкцию смотрите в блоке «Практика»!
Работа с готовыми визуализациями
Видео от Игоря Буробина
ПРАКТИКА
Работа с готовым приложением
Практическое задание 1
Посмотрите на изображение и ответьте на опрос ниже.
Опишите, что выделено в цветных прямоугольниках.
Красным — Разделы, Синим — Потоки, Желтым — Приложения
Практическое задание 2
  1. Скачайте файл готового приложения Qlik по ссылке. Внимание: скачивание файла начнется автоматически, убедитесь, что у вас разрешены всплывающие окна в браузере.
  2. Посмотрите видео-запись с инструкцией по загрузке приложений ниже
  3. Попробуйте загрузить приложение самостоятельно в Qlik Sense
  4. Исследуйте данные!
Экспорт и импорт приложений в Qlik
Видео от Игоря Буробина
Полезные ссылки
Если вам интересно узнать больше, переходите по ссылкам для дальнейшего изучения тем и расширения кругозора
Обзор дня и встреча с экспертом: День 01.
Сергей Полехин, архитектор решений Qlik
  • Какие задачи может помочь решить Qlik внутри компании: когда применять и не применять Qlik Sense?
  • Зачем инвестировать время в изучение Qlik Sense и как это поможет в профессиональном развитии?
  • Откуда пришли 1600 участников марафона?
  • Совет участникам марафона по изучению Qlik от Сергея Полехина
Телеграм-сообщество Qlik
Приглашаем вас присоединиться к телеграм-чату Qlik, чтобы общаться с коллегами, задавать вопросы экспертам и оставаться в курсе новостей Марафона.
@qlikbi_chat

2022