26.49M

Лекция 3

1.

Таможенная аналитика
Визуализация данных аналитики

Введение в BI-инструменты
● Узнать, что такое BI и какие задачи решают BI-
системы в компании
● Понять, что такое визуализация данных
и как выбирать правильный вид визуализации
в зависимости от задачи
● Выяснить, когда и зачем компании внедряют BI-
решения
● Научиться определять необходимость
внедрения BI-инструментов в зависимости
от уровня развития компании
● Разобраться в особенностях использования BI-
решений

3.

Что такое BI
Определение термина
1

4.

BI-решения помогают
представлять данные
в человекочитаемом виде

5.

Как оценить процесс найма
сотрудников?

6.

Варианты без BI
1
Спросить у рекрутера
2
Долго рассматривать большую таблицу
Источник

7.

Варианты с BI
Подбор персонала за период 08.01.2018 — 02.07.2018
Источник

8.

Business intelligence (BI) —
это набор методов и технологий, используемых компаниями для анализа
бизнес-информации и преобразования её в полезную информацию,
которая лежит в основе стратегических и тактических бизнес-решений
Источник

9.

Business intelligence
Инструменты BI получают доступ к наборам данных и анализируют их,
а также представляют аналитические результаты в отчётах, итоговых
сводках, дашбордах, графиках, диаграммах и картах, чтобы дать пользователям
подробную информацию о состоянии дел
Источник

10.

Business intelligence
1960-е
1990-е
2010–2015 гг.
Появился термин BI,
обозначавший анализ фактов,
связи между фактами
Зонтичный термин, определяющий
концепции и методы для улучшения
процессов принятия решений
Спор между BI
и Big Data
1960-е
1980-е
1990-е
2000-е
2010–
2015 гг.
2018–
2023 гг.
1980-е
2000-е
2018–2023 гг.
Термин стал называть класс систем,
которые позволяли
принимать решения
BI стал легче для бизнеса
(Power BI, Tableau),
появился self-service
Повысился уровень
грамотности
использования данных.
Новый расцвет использования BIсистем совместно
с инструментами Business Analytics:
предиктивный, прескриптивный
анализ и т. д.

11.

Виды визуализаций
и задачи, которые
они решают
2

12.

Визуализация данных — это
наглядное представление массивов
различной информации

13.

Как выбрать визуализацию
1
Определить цель/задачу визуализации
2
Определить тип данных
3
Выбрать визуальное представление

14.

Как определить цель/задачу визуализации
Что ты хочешь показать
Сравнение
Пропорция/распределение
Взаимоотношение
Иерархия/состав
Источник: материалы эксперта

15.

Типы диаграмм в зависимости от задач
Диаграммы, используемые
для представления динамики
показателей
Диаграммы, показывающие
часть от целого
Диаграммы,
демонстрирующие
взаимоотношения
показателей

16.

Примеры диаграмм: динамика
Column chart — столбчатая диаграмма
(гистограмма)
Источник: материалы эксперта
Bar — ленточная диаграмма

17.

Примеры диаграмм: динамика
Графики
Источник: материалы эксперта

18.

Диаграммы (динамика): особенности применения
Bar (ленточная диаграмма) и column chart (столбчатая
диаграмма)
при большом количество категорий должны использоваться
с осторожностью
Если категорий больше 15, то нужно сократить список
или ввести иерархию

19.

Примеры диаграмм: часть от целого
Столбчатая диаграмма с накоплением
Источник: материалы эксперта
Диаграмма с областями

20.

Примеры диаграмм: часть от целого
Donut — кольцевая диаграмма (один ряд)
Источник: материалы эксперта
Pie chart — круговая диаграмма

21.

Примеры диаграмм: часть от целого
Treemap — древовидная карта
Источник: материалы эксперта
Heatmap — тепловая карта

22.

Диаграммы (часть от целого): особенности
применения
Donut (кольцевая диаграмма) и pie chart (круговая диаграмма)
не используются при большом количество категорий
Если категорий много, лучше выбрать treemap (древовидную карту),
где значения отображаются с помощью цвета

23.

Примеры диаграмм: взаимоотношения
Пузырьковые диаграммы
Источник: материалы эксперта

24.

Диаграммы (взаимоотношения): особенности
применения
Пузырьковая диаграмма — сложная аналитическая визуализация,
которая очень красива в исполнении
Важно осторожно подходить к использованию этой диаграммы:
лучше дополнительно иметь табличное представление, необходимо
подробно расписывать легенду
Можно применять только на аналитических дашбордах

25.

Таблица как способ визуализации
Использование диаграмм — необязательное условие хорошей
визуализации
Таблица подходит для тех случаев, когда список сравниваемых
объектов слишком велик
Ячейки таблицы можно использовать как объекты для встроенной
визуализации: bar chart, иконки, форматирование ячеек по цветам

26.

Задача
Сравнить выручку прошлого и текущего
года по категориям товаров

27.

Пример 1.Сравнение выручки по
категориям товаров
Выручка по категориям товаров
Водоснабжение Инструменты
Источник: материалы эксперта
Краски
Кухни
Напольные Отделочные
покрытия материалы
Плитка
Сад
Сантехника
Свет
Скобяные
изделия
Столярные
изделия
Стройматериалы
Хранение
Электротовары

28.

Пример 2. Сравнение выручки по
категориям товаров
Прирост выручки по категориям товаров, % к прошлому году
Водоснабжение Инструменты
Краски
Источник: материалы эксперта
Кухни
Напольные
Отделочные
покрытия материалы
Плитка
Сад
Сантехника
Свет
Скобяные Столярные Стройматериалы
изделия изделия
Хранение
Электротовары

29.

Пример 3. Сравнение выручки по
категориям товаров
Прирост выручки по категориям товаров, % к прошлому году
Напольные покрытия
Водоснабжение
Сантехника
Электротовары
Кухни
Плитка
Инструменты
Стройматериалы
Отделочные материалы
Краски
Сад
Столярные изделия
Свет
Хранение
Скобяные изделия
Источник: материалы эксперта

30.

Алгоритм построения графика
1
Определите лучшее положение графика: вертикальное или горизонтальное
2
Выберите более показательную метрику. В нашем случае прирост в процентах
более показателен, чем визуальная разница между абсолютными значениями
3
Определите порядок отображения столбцов
Важно: всегда выделяйте единицу измерения

31.

Подбор правильной
визуализации —
сложный навык, которому необходимо
учиться. Всегда можно использовать
многолетний опыт других людей
и обратиться за помощью к экспертам

32.

Когда и зачем нужны
BI- решения
Разберём на примере
3

33.

Задачи, которые помогают решать BI
1
Оценивать эффективность маркетинговой компании
2
Отслеживать состояние оборудования: компьютеров, автомобилей и т. д.
3
Отслеживать финансовые показатели и цели компании
4
Отслеживать работу новых или текущих бизнес-процессов: улучшилась
ли конверсия в покупку при внедрении рекомендательной системы; как
меняются показатели скорости и качества доставки
5
Понимать, как меняется портрет текущего пользователя
6
Анализировать, как изменилось поведение клиента после внедрения
нового … мерчандайзинга

34.

Существуют ли компании,
которым не нужно работать
с данными?

35.

Кейс коммерческой компании
2018 год. Маленькая ритейл-компания «Позвони мне» занимается продажей
мобильных телефонов и аксессуаров. Ей управляет один менеджер, у него есть две
точки продаж. Компания думает выйти на маркетплейс или создать свой интернетмагазин.
Проблема: необходимо постоянно мониторить динамику продаж во всех
каналах и следить за сотрудниками в магазине
Вопросы
● Нужна ли компании BI-система?
● Какое решение мы можем ей предложить?

36.

Когда достаточно Excel
● Небольшое количество источников и небольшой объём обрабатываемых
данных
● Достаточно редкие обновления дашбордов (в ручном режиме)
● Малое количество пользователей
● Отсутствие рисков повреждения или утечки исходных данных
● Терпимость менеджеров компании к ограничениям пользовательского
интерфейса

37.

Кейс коммерческой компании
2021 год. Компания «Позвони мне» инвестировала в маркетинг, увеличила штат,
открыла 10 точек в своём регионе и планирует расширять сеть в других регионах.
Она успешно вышла на маркетплейс. Уже есть небольшая команда менеджеров
и специалистов по маркетингу.
Проблемы:
объём данных вырос настолько, что использования Excel недостаточно
необходимо прорабатывать возможности развития — создавать бизнес-планы
данные метрик постоянно не совпадают, требуется непрерывно мониторить динамику продаж
во всех каналах и следить за сотрудниками в магазине, оценивать эффективность маркетинга,
отслеживать показатели маркетплейса
Вопросы
Нужна ли компании BI-система?
Какое решение мы можем ей предложить?

38.

Создание бизнес-планов. Нужна ли
компании BI-система
Решение задачи по формированию
бизнес-планов большинство компаний
доверяют Excel
Только крупные компании могут
использовать BI-решения со специальными
модулями (например, Analysis Services
в Power BI) или отдельный класс систем —
CPM (corporate performance management)
Мировая финансовоэкономическая система
Excel

39.

Excel не справляется с возросшим количеством
данных. Нужна ли компании BI-система
Решение 1
Решение 2
Начать использовать Power Query
внутри Excel
● Создать базу данных для хранения
данных и предрассчитанных
показателей
● В таком случае можно делать
периодические выгрузки или даже
подключить базу к Excel

40.

Метрик стало больше, и все с ними путаются.
Нужна ли компании BI-система
Решение
Создать базу знаний с методиками расчёта метрик, которая будет удобна
и понятна в использовании всей команде

41.

Кейс коммерческой компании
2023 год. Компания «Позвони мне» работает в 5 регионах и постепенно расширяет
точки продаж, выходит на все маркетплейсы (в планах — международные). Из
небольшой команды менеджеров и специалистов по маркетингу вырастает
иерархия нескольких подразделений. Команда подумывает о масштабировании
бизнеса и расширении ассортимента.
Проблемы:
уровень терпимости к Excel падает, скорость доступа к обновлённым данным уже не устраивает:
чтобы посмотреть одну цифру/график, нужно грузить весь Excel и обязательно делать это на
компьютере
презентаций с аналитикой так много, что в них сложно ориентироваться и отслеживать динамику
добавляются задачи по более точечному мониторингу цен и ассортименту для его оперативного
обновления

42.

Теперь точно необходимо BI-решение
Использование единого пространства
корректных метрик и показателей
с настроенными правами доступа для
разных сотрудников
Быстрый доступ к оперативному
набору готовых метрик для всех
сотрудников с любого устройства
в любое время
Преимущества BI-решения
для компании
Оперативные оповещения
(алармирование) об изменении
значений метрик
Возможность готовить быстрые
визуализации под разные цели

43.

Может ли в одной компании быть
несколько BI-решений?

44.

Пример «комплекта» BI-решений в
ритейл-компании
Tableau
Сервис для стратегических и стандартизированных дашбордов.
Основные пользователи — топ-менеджеры
Apache Superset
или Yandex DataLens
Инструмент для решения оперативных и аналитических
задач разными сотрудниками компании
Kibana
Программа для решения задач мониторинга оборудования
Система онлайнгеоаналитики
Отслеживание доставки

45.

Цели использования BI-инструментов
Стратегические
Верхнеуровневые
показатели
Динамика и уровень этих
показателей
Аналитические
Операционные
Сравнение, выявление
трендов
Подробная информация
о разных объектах
Причинно-следственные
связи
Отклонение показателей
от нормы

46.

Под каждую цель
выбирается своё BI-решение,
поэтому вполне нормально,
если в очень крупной
компании несколько разных
BI-решений

47.

Мифы о BI-решениях
4

48.

Миф 1
Внедряем BI и повышаем эффективность
управления производственными,
финансовыми и трудовыми ресурсами
компании

49.

Запуск BI не приведёт напрямую к
эффективности
BI-решение
Эффективность
управления
Использование BI — только первый грамотный шаг к тому, чтобы стать
эффективнее, но этого недостаточно

50.

Ключевая особенность грамотного
внедрения BI-решения
+
BI-решение
Команда
Эффективность
управления
Внедрение BI-решения помогает структурировать информацию
и представить её в удобном виде. Эффективность управления ресурсами
напрямую зависит от специалистов, а BI — это инструмент

51.

Миф 2
Внедрение BI-решения — только
разработка и технологии

52.

Внедрение BI-решения. Шаг 1— технический
Необходимо установить ПО, подключить к нему данные, сделать несколько
визуализаций
BI-решение

53.

Внедрение BI-решения. Шаг 2
— обучение команды
Нужно, чтобы появилась команда, которая умеет постоянно развивать BI,
собирать требования и создавать крутые визуализации
Команде тоже необходимо непрерывно развиваться
+
BI-решение
Команда

54.

Внедрение BI-решения.
Шаг 3 — обучение пользователей
Нужно, чтобы у пользователей появились мотивация и привычка постоянно
обращаться к данным
Необходимо, чтобы пользователи научились самостоятельно запрашивать
данные, которые им требуются, или даже делать визуализации
+
BI-решение
+
Команда
Пользователи

55.

Принципы грамотного внедрения BI-решения
Продвижение
Дистрибуция материала
Обучение, инструкции
Общие чаты, рассылки
Дашборды
Персонал
Пользователи
BI-аналитики постоянно
развиваются
Вовлечены в процесс
и работают с данными

56.

Основные сложности внедрения BI-решений
1
Определить, в чём необходимость BI-решения и какие проблемы
решаются с его помощью
2
Создать систему постоянного развития BI и единые расчёты метрик
3
Создать культуру использования данных

57.

Миф 3
Внедрение BI-решения = сокращение
времени получения новой информации

58.

Кейс коммерческой компании
Компания решила проверить поведение нового сегмента пользователей —
женщин, которые любят заниматься реставрацией мебели (его нет в дашборде).
Задача: необходимо собрать статистику, сколько сейчас таких женщин
и как растёт тренд

59.

Алгоритм действий аналитика
для решения задачи
Определил, какие нужны метрики и какие данные
необходимы для расчёта — 1час
Нашёл данные в БД — 30 мин.
Построил запрос — 3–4 часа
Проверил данные/запрос — 30 мин. Сделал кросс-чек
с другими смежными метриками
5–6 часов*
* Приблизительный расчёт времени для аналитика со средним уровнем навыков

60.

Сравним два подхода
1
Если использование данных
осуществляется через Excel
1
Если использование данных
осуществляется в BI
Подготовил временную таблицу
в БД — 2 часа
Подготовил временную таблицу
и подключил её к BI — 2 часа
Выгрузил результат запроса — 10 мин.
Оформил, нарисовал график — 1час
Придумал, как визуализировать —
30 мин. Создал визуализацию,
оформил её — 2 часа
Отправил письмо
Опубликовал дашборд
3 часа 10 мин.
* Приблизительный расчёт времени для аналитика со средним уровнем навыков
4 часа 30 мин.*

61.

Основной плюс BI-решения —
в скорости переиспользования уже
готовых данных и способах их
представления и визуализации

62.

Миф 4
Все BI-системы одинаковые, давно
не появляется ничего нового

63.

Тренды рынка BI
1
BI-решения постоянно развиваются, на рынке появляются новые
игроки, которые расширяют свою функциональность, подстраиваясь
под новые условия
2
Вендоры, поставляющие BI-системы, начали создавать свои методологии
по их внедрению и обучению сотрудников по повышению грамотности
работы с данными
3
Развивается командная работа. Пользователи могут комментировать
и обсуждать визуализацию прямо в рамках дашборда, а аналитики —
совместно работать над его созданием
4
Появляются self-service BI. Теперь бизнес-пользователи не только учатся сами
создавать визуализацию, но и могут работать с данными без необходимости
сложного программирования и запросов

64.

Рынок BI систем —
один из самых развивающихся. За время своего существования
он пережил несколько волн изменений и сейчас находится в постоянном
процессе трансформаций.
Многие компании не успевают за этим рынком, так как ещё не могут
эффективно внедрить и освоить предыдущие возможности

65.

Миф 5
Любая визуализация существенно
улучшает понимание данных

66.

Пример 1.Хорошая или плохая визуализация
Источник: материалы эксперта

67.

Пример 2. Хорошая или плохая визуализация
Источник: материалы эксперта

68.

Только хорошая визуализация существенно
улучшает понимание данных
60% успеха визуализации зависит от выбора типа графика
30% — от его правильного использования
10% — от его верного оформления
Источник

69.

Итоги 1 части
1
BI-решения помогают представлять данные в человекочитаемом виде
2
Визуализация данных — это наглядное представление массивов
различной информации. Выбор визуализации зависит от поставленной
цели/задачи
3
BI-решения нужны в том случае, когда компания перерастает самые
простые решения
4
Для успешного внедрения BI необходима талантливая команда, имеющая
определённые навыки: люди, которые знают не только как сделать
запрос, собрать дашборд в конструкторе, но и как правильно применять
данные и грамотно их визуализировать
5
Рынок BI постоянно растёт и меняется. Разные BI-решения
применяются в работе над разными задачами: производственными,
маркетинговыми и др. По этой причине в одной компании может быть
несколько BI-решений

70.

DataLens:
быстрый анализ
данных с
визуализацией на карте

71.

Yandex DataLens —облачный BI-сервис
● Простой в освоении
Быстро начать, подключиться к источнику, построить график
и собрать дашборд —это просто
● Работает с разными источниками
CSV, Clickhouse, Postgres, MySQL, MS SQL, Oracle: облако,
on-prem с возможностью объединения гетерогенных источников
● Часть экосистемы Яндекс
Карты, Метрика, AppMetrica, Clickhouse, Yandex.Cloud,
Маркетплейс данных
● Для всей команды и даже публично
Возможность поделиться графиком или дашбордом с командой
или публично. Встраивание во внешние порталы
● Бесплатный
Для большинства сценариев использования.
Даже корпоративных

72.

Бесплатный тариф без привязки карты
Всё, что нужно для старта:
1. Перейти на datalens.yandex.ru
2. Указать аккаунт на Яндексе
3. Активировать бесплатный тариф DataLens

73.

Принципы работы с DataLens
База данных:
история продаж
ClickHouse
Подключение
Датасет
Чарты
DataLens
Дашборд

74.

Excel: табличное
представление
данных

75.

Принцип табличности
В конце первого этапа все исходные данные должны быть
представлены в виде таблиц
В таблице все однородные значения стоят в одном и только одном
столбце
Значения однородны, если для любых текстовых значений имеет
смысл отношение «лучше–хуже», а для числовых — результат
сложения имеет смысл