«Модус:Управление корпоративным хранилищем данных (ETL)», ред. 1.6

Продукт предназначен для построения и управления корпоративным хранилищем данных (КХД), автоматизированного сбора данных из различных источников данных, включая инструменты управления качеством данных.

Особенности и возможности программы:

 — Работа под ОС Windows и Linux;

 — Управление сбором данных:

    — Использование в качестве источника «1C:Предприятие»(в т. ч. 1С:Fresh), СУБД (MSSQL, PostgreSQL, Oracle), ODBC-источников, файлов Excel и csv, веб-сервисов;

   — Для получения данных из «1C:Предприятие»есть возможность использовать адаптер 1С-ETL (HTTP-сервис), который встраивается в конфигурацию источника как отдельная подсистема или устанавливается как расширение конфигурации и публикуется на веб-сервере. Адаптер обеспечивает безопасное получение данных, не требует одинаковой версии платформы «1С:Предприятие» для источника и ETL, дает возможность обезличивать персональные данные «на лету» — до записи в хранилище;

   — Возможные приемники данных: СУБД MS SQL, PostgreSQL, Clickhouse;

   — Настройка и сохранение правил сбора данных;

   — Загрузка данных в несколько потоков (многопоточность);

   — Загрузка данных по расписанию, включая визуализацию расписания загрузки данных;

   — Возможность визуального конструирования запроса на языке SQL/1C;

 — Визуализация структуры метаданных базы «1C:Предприятие», PostgreSQL, Clickhouse;

 — Управление обработкой данных:

   — Настройки правил трансформации данных – сценариев на языке SQL/1С;

   — Настройка правил консолидации данных;

   — Версионирование данных с возможностью настройки правил версионирования и хранения актуальных и исторических данных (версий данных) в одной таблице;

   — Настройка правил валидации и очистки данных (использование преднастроенных шаблонов);

   — Трансформация данных в структуры для многомерного анализа (схема «звезда»);

 — Другие возможности:

   — Возможность объединения правил выгрузки данных и сценариев трансформации данных в ETL-пакеты и настройки расписания запуска пакетов;

   — Отображение и редактирование ETL-пакета в виде work-flow диаграммы;

   — Подсистема логирования ETL-процессов;

   — Уведомление по электронной почте о событиях системы;

   — Возможность написания произвольного алгоритма и подключения плагинов/библиотек при загрузке и обработке данных;

 — Формируемое хранилище данных может быть использовано в качестве источника для программного продукта «Модус:Аналитический портал», имеющего сертификат «Совместимо! Система программ 1С:Предприятие».

Для работы продукта необходимо наличие установленной платформы «1С:Предприятие 8.3» (не ниже

версии 8.3.27).

Продукт  разработан с использованием функционала «1С:Библиотеки стандартных подсистем», ред. 3.1

Конфигурация имеет фрагменты, не подлежащие изменению пользователем.