30 июля состоялась вторая техническая онлайн-конференция DATAREON. Эксперты DATAREON рассказали о новейших технологиях в области интеграции корпоративных систем и управления данными.
Сегодня DATAREON Platform является одним из тех инструментов, которые клиенты все чаще рассматривают как единое решение разнородных задач — от настройки интеграционных потоков до ведения мастер-записей и т.д. Благодаря Low‑code возможностям платформы снижается зависимость от ручного кода, а промышленный .NET Core обеспечивает стабильность при нагрузках.
Менеджер по развитию бизнеса DATAREON Марат Сабуров, руководитель учебного центра DATAREON Сабина Ибрагимова и ведущий аналитик производственного отдела DATAREON Елена Раззакова продемонстрировали в ходе конференции несколько наиболее интересных прикладных сценариев работы с платформой.
Взаимодействие с 1С в DATAREON Platform с помощью Low-code функционала
В качестве первого сценария выступила ситуация, в которой одна база 1С отправляет данные сразу в две разные системы. Сначала пользователь организует подключение к базе через внешнюю систему с типом «1С», где нужно указать сервер, имя информационной базы и порт (например, стандартный 7298). На стороне 1С подсистема DATAREON подключается как расширение (в формате .cfe или .cf), что позволяет не снимать с поддержки основную конфигурацию.
Благодаря тому, что все настройки обработчиков, описание структур для передачи данных реализуются на стороне платформы, разгружается сама 1С от интеграционных задач.
Далее генерируются обработчики для направлений «В Platform» и «Из Platform», строится маршрут с автоматическим запуском. Примечательно, что отладить работу обработчиков можно прямо на стороне платформы.
После отработки сценария добавляется второй получатель — Microsoft SQL Server, для которого создается внешняя система с типом «База данных». Обе системы-получателя помещаются в общую папку, что позволяет отправлять данные параллельно, без перестройки маршрутов.
Сбор событий с помощью сервиса аналитики
Вторым сценарием стал сервис аналитики, решающий задачу централизованного сбора и визуализации событий со всех серверов кластера. В ходе демонстрации в центре настройки эксперты создали сервис аналитики с указанием СУБД для хранения (MSSQL или PostgreSQL) и настроили несколько условий сбора данных: по типам событий (отправка, получение, ошибки), уровням логирования и периодичности. После этого в тестовом режиме эмулировались отправка сообщений и возникновение ошибок: в центре мониторинга оперативно отобразились соответствующие события, а в СУБД начали накапливаться исторические записи.
Для наглядности эти данные были выведены в Grafana, где на дашборде отобразилась статистика по количеству событий на системе «Файловый каталог» в разрезе типов за последний час. Такой подход позволяет не только оперативно реагировать на инциденты, но и анализировать тренды, прогнозировать нагрузки, оптимизировать ресурсы. Сервис работает через API или прямое подключение к таблицам базы, что делает его совместимым с любыми системами визуализации, а настраиваемый фильтр сбора в разрезе серверов, систем и сервисов дает возможность мониторить именно те данные, которые нужны в конкретный момент.
Репликация очередей с помощью модуля горячего восстановления
В третьем сценарии спикеры перешли к вопросам отказоустойчивости и продемонстрировали модуль горячего восстановления на сервере на ОС Astra Linux. В исходной конфигурации модуль был отключен — сообщения хранились в локальной очереди каждого сервера. После активации модуля в настройках кластера (блок hotRecovery) с параметром faultTolerance = 2 была настроена репликация очередей между серверами. Затем эмулировался сбой: служба DATAREON Platform на сервере Debian была остановлена. Через некоторое время система автоматически перенесла очередь и все сообщения на сервер Ubuntu. Важно отметить, что при этом новые сообщения продолжали поступать и обрабатываться в штатном режиме.
Данный подход обеспечивает бесперебойный обмен данными даже при выходе из строя одного или нескольких узлов кластера. Репликация очередей покрывает риски, связанные со сбоями оборудования, человеческим фактором и авариями в инфраструктуре. В отличие от классических решений, где восстановление требует ручного вмешательства, здесь перераспределение нагрузки и перенос очередей происходят автоматически, что минимизирует простои и поддерживает непрерывность бизнес-процессов.
Управление данными в DATAREON Platform
Четвертый сценарий был посвящен управлению мастер-данными (MDM) на примере создания конфигурации для работы с физическими лицами. Инструменты DATAREON Platform позволяют гибко работать с данными на всех этапах: описание структуры (вручную или импорт из JSON/XML), валидация, обогащение и преобразование — все настраивается в единой среде. С помощью готовых шаблонов (например, «Управление контрагентами» или «Управление ТМЦ») в платформе были реализованы функции проверки заполнения, нормализации данных и кастомные правила (например, чтобы в поле «Фамилия» не было цифр). Далее на основе созданного типа данных «Пациент» через конструктор центра разработки был настроен портал — веб-сервис для работы с записями, где сразу же отобразилась форма с валидацией полей, а при вводе некорректных данных система подсвечивала ошибки.
В продолжение темы управления мастер-данными эксперты DATAREON анонсировали специальное коммерческое предложение – разработку и внедрение отраслевых конфигураций MDM силами компании.
Что входит в новое предложение:
- настройка конфигурации под бизнес-процессы конкретной отрасли;
- участие экспертов от вендора на всех этапах внедрения;
- сопровождение выделенным консультантом при дальнейшем масштабировании проекта;
- индивидуальный обучающий курс;
- использование сервиса искусственного интеллекта для автоматической классификации номенклатуры и настройка AI/ML модели
До встречи на новых конференциях DATAREON!