DATAREON (EDW)
Построение корпоративных хранилищ данных
Формирование единого аналитического пространства компании
ФУНКЦИОНАЛЬНЫЕ ВОЗМОЖНОСТИ ПОСТРОЕНИЯ
КОРПОРАТИВНЫХ ХРАНИЛИЩ ДАННЫХ (EDW) НА
ПЛАТФОРМЕ DATAREON
Построение корпоративных хранилищ данных является одним из вариантов применений платформы DATAREON. Решение обладает всеми необходимыми инструментами для формирования единого аналитического пространства компании.
Для формирования хранилищ данных в платформе DATAREON присутствуют следующие механизмы и инструменты:
Создание моделей данных
Платформа DATAREON поддерживает возможность описания полной модели данных. Платформа DATAREON обеспечивает возможность гибкого создания и изменения модели данных на всем протяжении жизненного цикла данных. Платформа позволяет оперативно создавать новые модели и модернизировать существующие
Механизмы распределенного хранения данных
Для хранения данных в рамках создаваемых моделей платформа DATAREON предоставляет механизмы распределенного хранения данных. Данные механизмы позволяют выполнять горизонтальное масштабирование физической архитектуры серверов, связанных с хранением данных, абстрагироваться от количества и типа используемых СУБД, использовать различные типы СУБД для различных типов данных. Например, в зависимости от планируемого типа нагрузки - OLAP, OLTP и т.д. Механизмы распределенной структуры хранения позволяют спланировать и осуществить переход существующих данных на другие типы СУБД без прерывания доступа к данным.
Валидация, стандартизация, очистка и обогащение данных
Для обработки данных в платформе DATAREON могут применяться такие простейшие механизмы как приведение значений к единому формату (например, телефонных номеров), удаление/замена случайных вкраплений символов «другого» алфавита, удаление лишних пробелов замена сокращений и аббревиатур по словарю, исправление явных опечаток и т.д. Также в системе могут использоваться более сложные механизмы на основе бизнес-правил, различные семантические и синтаксические алгоритмы с функцией самообучения и возможность подключения внешних референсных баз данных для стандартизации и обогащения (например, баз данных адресов или юридических лиц). Процессы обработки данных настраиваются в платформе DATAREON параметрически. Процессы обработки могут выполняться как полностью автоматически, так и с привлечением дата-стюардов на каком-либо из этапов.
API для подключения сторонних систем
Платформа DATAREON позволяет гибко настраивать и предоставлять API доступа к данным для различных систем. При этом системы подписчики просто подписываются на необходимые им типы данных без необходимости знания текущего расположения данных. Платформа DATAREON выступает единой точкой входа как для отправителей, так и для потребителей данных.
Поддержка различных сценариев получения данных
Платформа DATAREON позволяет реализовывать различные сценарии получения данных системами-подписчиками. Могут быть реализованы сценарии по событию возникновения/изменения данных, получение по расписанию разных типов, получение по запросу от системы-подписчика, получение по команде от сторонней системы или сервиса. Такой функционал позволяет различным бизнес-системам информационного ландшафта предприятия получать данные с той актуальностью, которая требуется для реализации их бизнес-моделей и функциональных потоков.
