CasPlan

Готовые универсальные коннекторы ко всем 1С конфигурациям по автоматизации выгрузки информации

Как работает?

*ETL (от англ. Extract, Transform, Load — дословно «извлечение, преобразование, загрузка») — один из основных процессов в управлении хранилищами данных, который включает в себя: извлечение данных из внешних источников; их трансформация и очистка, чтобы они соответствовали потребностям бизнес-модели; и загрузка их в хранилище данных.
БАЗЫ ДАННЫХ И ИСТОЧНИКИ 1С
МОДУЛЬ ETL
DATA WAREHOUSE
CASPLAN

Универсальные коннекторы
для конфигураций 1С

Скорость

Фоновая и многопоточная выгрузка обеспечивает выгрузку до 1200 проводок в секунду, что позволяет полностью выгружать данные из баз 1С в сотни гигабайт (например ERP) за 2 часа. Выгрузка изменений за период выполняется за 5–10 минут для той же базы ERP и не влияет на текущую производительность системы.

Объём

Основной формат обмена через FTP и архивы CSV-файлов обеспечивает стабильную выгрузку больших объёмов без высоких требований к каналу связи и не нагружает сервер DWH в момент выгрузки данных.

Полнота

Выгрузка дополнительных отчётов вместе с данными позволяет контролировать полноту и целостность выгруженной информации в центральном модуле обмена.

Внедрение и эксплуатация

  • Уже разработаны почти для всех конфигураций 1С в Казахстане
  • Независимая подсистема не влияет на сложность обновления баз и не зависит имеющихся в базе объектов и доработок
  • Возможность обновления модуля выгрузки без необходимости администратору подключаться к базам

Оптимизация

  • Инкрементальная выгрузка только изменённой информации
  • Система гарантированной доставки изменений до DWH
  • Защита от повторной выгрузки из копии базы
  • Логирование процессов выгрузки; логи ошибок позволяют быстро понять причину сбоя

Data Warehouse

*DWH (англ. Data Warehouse) это предметно-ориентированная информационная база данных, специально разработанная и предназначенная для подготовки отчётов и бизнес-анализа с целью поддержки принятия решений в организации.

С точки зрения процесса ETL, архитектуру хранилища данных можно представить в виде трёх компонентов:

источник данных
содержит структурированные данные в виде таблиц, совокупности таблиц или просто файла (данные в котором разделены символами-разделителями);
промежуточная область
содержит вспомогательные таблицы, создаваемые временно и исключительно для организации процесса выгрузки
получатель данных
хранилище данных или база данных, в которую должны быть помещены извлечённые данные

Скорость

Промежуточные таблицы для обеспечения быстрой загрузки данных из полученных сообщений со скоростью до 100 тыс. строк в секунду

Эффективность

Наличие «быстрых» таблиц с заменой длинных «1С-ных» ключей на короткие ID. Позволяет снизить объём выгружаемой информации в Power BI на 30 %.

Удобство

Отслеживание изменений данных позволяет пересчитывать агрегированные данные только за период, в котором произошли изменения

Прозрачность

Прозрачная, документированная и удобная для обработки финансовой информации структура таблиц облегчает работу аналитика при составлении отчётности

Оставить заявку

check

CasPlan — современная платформа для комплексного планирования, моделирования и контроля эффективности бизнеса в единой среде.

Модуль выгрузок 1С (ETL) — автоматическая загрузка данных в DWH и CasPlan