EvgeniyStuchalkin — 📈BI2business

#1.8 Макроподстановка в Loginom. Загрузка списка файлов

В финальном занятии курса «Знакомство с Loginom» вы разберем еще одну интересную функциональность, и сразу применим ее на очень прикладной задаче — загрузки данных из множества однотипных файлов. Как вы уже догадываетесь, в этом процессе нам будет нужно использовать цикл. Получаем список имен файлов, грузим каждый по очереди. Только вот как этот список имен получить?… Читать далее #1.8 Макроподстановка в Loginom. Загрузка списка файлов

#1.7 Создание переиспользуемых компонентов в Loginom. Производные компоненты

В прошлом занятии мы создали процедуру генерации последовательности значений через цикл. Инструмент полезный, и наверняка нам в будущем пригодится возможность использовать его во множестве сценариев. Но как нам это сделать? Копирование узла из одного пакета в другой (или его написание каждый раз с нуля) очень плохо скажется как на производительности труда, так и на сложности… Читать далее #1.7 Создание переиспользуемых компонентов в Loginom. Производные компоненты

#1.6 Циклы в Loginom

В предыдущих сериях мы освоились с основными механиками простых сценариев. Пора двигаться в более сложные темы. Циклы — важная часть разработки сценариев. С их помощью можно автоматизировать выполнение однотипных операций (вы ведь не хотите создавать 100 блоков импорта для 100 файлов для загрузки? :)). Тема циклов интересна еще и тем, что для ее разбора мы… Читать далее #1.6 Циклы в Loginom

#1.5 Логика выполнения сценариев в Loginom. Последовательность, активация, автосинхронизация

И так. Мы сделали простой сценарий. Мы нажимали на кнопку выполнения сценария, узлы зеленели, таблицы считались. Однако сейчас пришло время нырнуть в глубину того, как работает сценарий, и почему происходит именно то, что происходит. Активация и последовательность Скорее всего вы заметили, что обычно узлы окрашены в один из 2-х цветов: серый и зеленый. А если… Читать далее #1.5 Логика выполнения сценариев в Loginom. Последовательность, активация, автосинхронизация

#1.4 Переменные в Loginom

На прошлом занятии мы создали простой сценарий конвертации файла в формат lgd со статичными настройками узлов. Однако для реальных задач нам потребуется гораздо большая гибкость управления логикой сценариев, для вычислений, и для изменений настроек узлов в автоматическом режиме. А также для подстановки в SQL запрос и команды запуска программ. И для этого в Loginom существует… Читать далее #1.4 Переменные в Loginom

#1.3 Основы проектирования сценариев в Loginom

Скачайте учебную таблицу, на которой мы будем тренироваться. Создайте в Loginom новый пакет, перейдите в раздел Сценарий. Из блока Импорт перетащите узел «Текстовый файл». Вообще, все элементы, из который строится сценарий, называются «узлы». Пара слов об узлах Каждый узел представляет собой определенную операцию, выполняемую над данными. Данные перемещаются между узлами через порты. Прежде всего, порты… Читать далее #1.3 Основы проектирования сценариев в Loginom

#1.2 Структура проекта в Loginom

Когда вы установите и запустите Loginom, вам будет предложено создать или открыть «пакет». Пакет — это проектный файл в Loginom. Прежде всего, он содержит в себе сценарии обработки данных, которые мы проектируем в визуальном редакторе. Файлы с расширением ~lgp — резервные копии пакетов, открытых в данный момент. Одновременно может быть открыто несколько пакетов. Сразу учитывайте,… Читать далее #1.2 Структура проекта в Loginom

#1.1 О мини курсе «Знакомство с Loginom». Роль Loginom в BI-аналитике

Цель данного курса — помочь специалистам в области работы с данными быстро сориентироваться в основных понятиях и логике работы системы. А также определить текущие границы использования Loginom и подходы, которые сразу имеет смысл закладывать в архитектуру разработки. В курсе намеренно опущены избыточные описания и разъяснения, т.к. вы можете подчерпнуть их из справки, либо продвинутых курсов… Читать далее #1.1 О мини курсе «Знакомство с Loginom». Роль Loginom в BI-аналитике

BI-аналитика в условиях импортозамещения. Как построить удобную вендоро-независимую аналитику.

Всем привет! С вами Евгений Стучалкин. Т.к. настало время импортозамещения, считаю нужным поделиться своим видением того, как нужно подходить к разработке бизнес-аналитики сейчас. Многие аналитики до сих пор пребывают в шоке и пытаются решить задачу из серии “Найти российский аналог Power BI”. В которой, конечно же, терпят фиаско. Поэтому я расскажу, как приземлить свои ожидания… Читать далее BI-аналитика в условиях импортозамещения. Как построить удобную вендоро-независимую аналитику.

Шаблон приложения для отладки ETL-процессов в Qlik Sense

Во время написания скриптов подготовки данных часто приходится заниматься отладкой. Проверять, как взаимодействуют между собой запросы к различным источникам, проверять результаты вычислений, корректность маппингов, да и вообще много чего. Проблема в том, что в в Qlik нет готовых инструментов для контроля выполнения запросов — постоянно приходится создавать временные контрольные таблицы, exit script, комментировать блоки кода,… Читать далее Шаблон приложения для отладки ETL-процессов в Qlik Sense