В ETL системе практически любая задача по преобразованию данных может быть решена за счет применения инструментов последовательной предобработки PolyAnalyst. Очистка или преобразование данных представляют собой сценарий, состоящий из определенных функциональных узлов (этапов), который можно сохранять, повторять и изменять по необходимости:
Программы для анализа и визуализации данных
в большинстве компаний используют для подготовки и анализа данных как правило довольно узкий круг специалистов, а потенциальных потребителей результатов аналитических проектов может быть много. Последними являются сотрудники, которые отвечают за процесс принятия решений. Они часто не имеют специальных технических навыков, например знания языков программирования, и прямого доступа к аналитическим проектам. Все это усложняет преобразование данных в полезные знания о бизнес-процессах.
Инструменты ETL и BI для преобразования данных и конструирования веб-отчетов PolyAnalyst ETL & BI позволяет решить эту проблему, предоставляя пользователям средства self-service трансформации данных, а также отображения результатов сложных алгоритмов анализа в виде интерактивных графических отчетов, доступных для понимания неспециалистов.
ДОСТУПНА ВСЯ ПАЛИТРА ETL-ИНСТРУМЕНТОВ
Аналог SQL JOIN
Объединение
Аналог SQL UNION
Конкатенация
Аналог SQL GROUP BY
Агрегирование
Формирование таблицы из записей, имеющихся в одной таблице, но отсутствующих в другой
Разность
Расчет и вывод новых производных вычисляемых атрибутов, а также построение правил проверки данных
Производные колонки
Позволяет установить условия для выполнения дочерних узлов, что способствует автоматизации выполнения скрипта
Условия
Фильтрует записи согласно критерию, заданному аналитиком
Фильтрация строк
Позволяет фильтровать колонки, которые не представляют интереса с точки зрения статистического анализа данных
Фильтрация данных
Позволяет переводить данные из строчного представления в колонки. Аналог функции PIVOT
Транспонирование
Генерирует из талицы данных случайные выборки записей или выборки, отвечающие определенным условиям
Выборка
Позволяет вручную редактировать данные в исходной таблице
Редактирование таблицы
Позволяет разделить продукты на 3 группы (A, B и C) по критерию привлекательность продукта, или группы X, Y и Z по стабильности продаж
ABC/XYZ анализ
Позволяет разделить клиентов на различные сегменты в зависимости от их активности и ценности для компании
RFM анализ
Меняет значения терминов (атрибутов) или создает таблицу терминов, извлеченных из исходной текстовой колонки на основе заданных условий
Извлечение и замена терминов
Фильтрует повторяющиеся записи
Уникальные записи
Изменяет тип данных и порядок колонок, переименовывает и скрывает их
Модификация колонок
Сортирует данные в выбранных колонках
Сортировка строк
Выполняет дискретизацию числовой или целочисленной колонки, подобно гистограмме
Дискретизация
Простой инструмент для отправки запросов GET/POST/PUT/DELETE без написания самих запросов
REST
Позволяет использовать язык программирования Python для выполнения различных операций с данными в PolyAnalyst
Python
ПРИМЕРЫ АВТОМАТИЗИРУЕМЫХ ЗАДАЧ
Проиграть видео
Одновременная обработка множества табличных данных из Excel и текстовых документов
Проиграть видео
Построение статистического отчета и предиктивной модели на данных об истории продаж
Проиграть видео
Интеллектуальный анализ и автоматическая сегментация покупательских корзин
Проиграть видео
Создание портрета клиента: ABC, XYZ, RFM анализ в системе PolyAnalyst
В рамках концепции «PolyAnalyst — открытая среда разработки» в ETL системе реализован функционал по включению в сценарии анализа кода на языке Python, а также предусмотрена возможность вызова из внешних библиотек стандартных функций. Это позволяет расширить набор ETL инструментов для создания сценариев преобразования данных и использовать накопленный ранее опыт заказчика.
Набор визуальных интерактивных дашбордов, созданных в конструкторе отчетов BI-модуля системы PolyAnalyst. Ознакомьтесь с возможность визуального представления результатов анализа больших данных, в том числе с применением алгоритмов машинного обучения и обработки данных на естественном языке.
Интерактивный отчет для анализа структуры и динамики продаж розничной точки. Кроме того, отчет включает результат работы предиктивной модели, строящей прогноз реакции клиентов на проведение промокомпании, а также результат интеллектуального анализа покупательских корзин.
Отчет демонстрирует ключевые темы и анализ пользовательского опыта в интернет-отзывах о принтерах четырех крупнейших производителей. Вы можете проанализировать разницу в рейтинговых позициях брендов на разных площадках и изучить причины этого.
Визуализация модели прогноза масштабов и сроков заболеваемости COVID-19 в России. Визуализированы данные по новым случаям, общем количестве активных случаев, числу летальных исходов и выздоровлений. Данные представлены в общем по РФ и по регионам.
ПРИМЕРЫ BI ДАШБОРДОВ POLYANALYST
Назад
Далее
ETL & BI инструменты: преимущества использования PolyAnalyst ETL & BI системы для трансформации и анализа больших данных
- Загрузка, трансформация, очистка, обогащение и графическое предоставление данных в одной системе, без необходимости сопряжения различных программных продуктов;
- Создание модели proof of concept бизнес-пользователем за 1 час без привлечения ИТ-специалиста;
- Несколько десятков Low-code инструментов преобразования данных, настраиваемых без программирования;
- Последовательности аналитических процедур легко настраиваются на регулярное автоматизированное выполнение;
- Возможность интеграции кода и моделей, разработанных на языках Python и R;
- Оперативное self-service создание пользовательских отчетов;
- Свыше 30 нативных графических инструментов для построения отчетов, настраиваемых без написания кода;
- Удобный веб-интерфейс для работы в браузере;
- Возможность многомерного представления результатов;
- Гибко настраиваемая ролевая модель, разграничивающая доступ к данным и отчетам;
- Высокая масштабируемость и производительность: поддержка крупных массивов данных и большого количества пользователей;
- Возможность полностью автономной работы системы в закрытом контуре заказчика или публикации отчетов в Интернете с использованием безопасного шифрованного канала доступа.
Как работает ETL & BI -система
Традиционные инструменты создания отчетности, как правило, не предоставляют пользователю возможности серьезного преобразования и анализа данных, а большинство систем глубокого анализа данных, в основном, предлагают весьма посредственные инструменты создания отчетов. PolyAnalyst BI — дополнительный набор инструментов, которые могут быть интегрированы в аналитический клиент PolyAnalyst. Комплексное использование обеих систем позволяет решить эту проблему: вы сможете легко создавать пользовательские отчеты на основе результатов, полученных в ходе выполнения сложных аналитических проектов.
PolyAnalyst BI обладает интуитивным пользовательским интерфейсом, поддерживающим функцию drag-and-drop. Имеются широкие возможность по выбору и настройке цветовой схемы, типа визуализации, области детализации, отображения логотипа компании и многое другое. Интерфейс, предназначенный для работы в браузере, позволяет скачивать любой отчет, открывать к нему доступ других сотрудников, распечатывать его для руководства, коллег или клиентов.