Модуль Загрузка данных (ETL)
Главной задачей данного модуля является создание единого источника унифицированной, консолидированной информации, объединяющего все разнородные, нередко дублирующиеся или неполные данные, хранящиеся в различных системах-источниках банка. Таким образом, хранилище данных становится единственным источником для заведомо правильной чистой информации, структурированной в единую типовую банковскую модель, позволяющую использовать данные для всестороннего анализа и формирования аналитической, обязательной и специализированной отчётности банка.
Основными функциональными блоками данного модуля являются:
Средство получения и преобразования данных из различных систем-источников, единая платформа интеграции данных, которая позволяет получать доступ и проводить интеграцию данных любого формата, из любых источников и доставлять их в хранилище с высокой скоростью.
Оперативный склад данных КХД (Stage-область)
Промежуточная область хранения загруженных данных. В этой области выполняется очистка, верификация данных и приведение их к единому формату хранения в РХД.
Совокупность средств, выполняющих проверку корректности загружаемых данных.
Рабочее хранилище данных (РХД)
Область хранения очищенных и консолидированных данных, загруженных из оперативного склада данных КХД.
Интерфейсы управления – набор автоматизированных рабочих мест (АРМ), позволяющих осуществлять управление модулем «Загрузка данных».
Информация из систем-источников банка с помощью промышленного ETL-средства попадает в Stage-область, где происходит консолидация данных, очистка, верификация, приведение к формату типовой банковской логической модели, на базе которой строится рабочее хранилище данных.
Do'stlaringiz bilan baham: |
