На конференции «Данные компании 2025: управление и интеграция» Алексей Гончаров, руководитель подразделения «Технический документооборот и управление данными» в «СИБУР», представил опыт внедрения DATAREON Platform. Он рассказал, как компания успешно реализовала проект самостоятельно, при этом воспользовавшись расширенной техподдержкой DATAREON.
Начнем с примечания: Нижеописанное относится не ко всему «СИБУР», а только к блоку «Цифровое развитие процессов инжиниринга и инвестиционных проектов».
ИТ-ландшафт блока «Цифровое развитие процессов инжиниринга и инвестиционных проектов» в «СИБУР» включает около 40 систем, большинство из которых обмениваются данными между собой. До DATAREON Platform интеграции были реализованы по схеме «точка-точка», что создавало ряд сложностей и проблем. Разные механизмы, методы и алгоритмы интеграции приводили к тому, что системы, содержащие одни и те же данные, могли предоставлять различающиеся версии информации.
Компания понимала важность и необходимость использования решения для интеграции данных. Однако путь к его внедрению был сложным и тернистым, т.к в последние пять лет, наша страна столкнулась с различными событиями, влияющими на защиту и ИТ-бюджета.
2021 год — начало проекта
В 2021 году команда подготовила предложение, рассмотрела все варианты, выбрала оптимальное решение и рассчитала необходимые финансовые затраты. Однако проект не был защищен, так как приоритет отдавался программам, которые были понятны для бизнеса. Доказать значимость и выгоду интеграционного ПО оказалось непросто. Ситуация повторилась в 2022–2023 годах. И только в 2024 году удалось добиться прогресса.
— На рынке существует множество open-source решений. Можно было бы выбрать одно из них, развернуть и использовать, наслаждаясь всеми преимуществами. Однако проблема заключалась в том, что в компании действовало жесткое ограничение: в продуктивный контур не могут попадать решения без поддержки. В случае с open-source проектами необходимо было найти компанию-подрядчика, которая могла бы обеспечить эту поддержку.
Но если требуется подрядчик, который будет обеспечивать непрерывную работу решения, то снова возникают финансовые вопросы. И это возвращает нас к проблеме бюджета, из-за которой проект не мог быть защищен ранее. — Алексей Гончаров, руководитель подразделения «Технический документооборот и управление данными» в «СИБУР».
2024 год — очередная попытка. Успех благодаря DATAREON Platform
В 2024 году подразделение «Технический документооборот и управление данными» предприняло очередную попытку инициировать внедрение интеграционного решения, но бюджет проекта опять оказался под угрозой. Было решено оптимизировать расходы, оставив только закупку ПО и исключив подрядчика. Реализацию планировалось осуществить собственными силами, что позволило минимизировать инвестиции и помогло команде наконец защитить проект.
Выбор решения для проекта был основан на критериях импортозамещения. Каждый год обновлялся короткий список кандидатов, и в итоге на рассмотрение были представлены несколько решений, включая DATAREON Platform.
— Платформа DATAREON была полностью самописной, в то время как многие решения из списка представляли собой оболочки для open-source программного обеспечения. По критериальному листу, который включал более 40 параметров, DATAREON Platform получила небольшой перевес. Окончательный выбор в пользу платформы был сделан на основании стоимости владения. — Алексей Гончаров, руководитель подразделения «Технический документооборот и управление данными» в «СИБУР».
Перед началом внедрения компания провела обучение для нескольких специалистов из подразделения. Обучение включало базовые и расширенные курсы по интеграциям с односистемными решениями. Для дополнительной уверенности в успешной реализации проекта была приобретена расширенная техническая поддержка, которая позволила оперативно решать возникающие проблемы.
На текущий момент в подразделении СИБУР «Цифровое развитие процессов инжиниринга и инвестиционных проектов» развернуто три контура DATAREON Platform: тестовый, предпрод и прод. В тестовом контуре уже работают восемь систем, и до конца года планируется подключить еще восемь систем. Таким образом, к концу года будет интегрировано 16 систем, что покроет значительную часть ИТ-ландшафта из 40 систем.
Взаимодействие с техподдержкой DATAREON. Примеры обращений
Внедрение DATAREON Platform заняло у подразделения команды «СИБУР» чуть более полугода. В ходе работы было зафиксировано около 80 обращений в техподдержку, которые были разделены на три категории.
Первая категория и самая объемная — специфические консультации:
- Сюда включено 19 обращений, в которых специалисты техподдержки DATAREON предоставляли консультации и фрагменты кода, адаптированные под нужды компании. Чаще всего речь шла о нестандартных решениях, которые не были описаны в базовой документации.
- 5 обращений касались анализа проблем. Коллеги из техподдержки подключались к видеоконференции с демонстрацией экрана, чтобы помочь выявить и устранить ошибки.
- Один раз был запрошен совет по интеграции системы с учетом ее уникальных особенностей.
Вторая категория — вопросы по базовому функционалу платформы, который не был подробно описан в документации или освещен на обучающих занятиях:
- 14 обращений были связаны с исправлениями и улучшениями. Эти вопросы касались нюансов, которые будут учтены в будущих релизах DATAREON Platform. Часть из них уже решена в выпущенных версиях, а остальные все еще ожидают доработки.
- 5 обращений касались базовых функций, которые, по мнению команды «СИБУР», должны были быть включены в документацию, но по каким-то причинам отсутствовали. Один из таких случаев связан с интеграцией системы с 1С, где использовался коннектор, не поддерживающий старые версии 1С. В настоящий момент, работа в этом направлении продолжается.
Третий блок включал 17 обращений, которые компания «СИБУР» в рамках конференции посчитала менее значимыми. Сюда вошли вопросы по активации ключей, дополнительным модулям и другим темам, которые ИТ-подразделение смогло решить самостоятельно или получив ссылки на документацию от техподдержки.
— В целом взаимодействие с техподдержкой DATAREON было и остается эффективным, так как некоторые вопросы все еще находятся в процессе доработки. — Алексей Гончаров, руководитель подразделения «Технический документооборот и управление данными» в «СИБУР».
Для наглядности Алексей рассмотрел несколько конкретных примеров того, какие задачи «СИБУР» помогли решить специалисты техподдержки DATAREON.
Кейс 1
Задача: Первый случай касается пилотного проекта по интеграции между 1С и корпоративным порталом, который был разработан самостоятельно и не подлежит изменениям. Портал отправляет данные в формате XML, а принимает в формате JSON. Платформа DATAREON лицензируется по количеству подключенных систем, и для каждой внешней системы необходимо указать протокол и формат обмена данными. Поэтому потребовалось создание двух внешних систем с разными форматами данных.
Решение: Специалисты DATAREON предложили использовать фрагмент кода, который определяет формат данных и разбирает различные вариации сообщений «на лету». Это позволило интеграции работать с разными форматами и корректно обрабатывать входящие данные, затратив при этом 1 лицензию
Кейс 2
Задача: Второй кейс связан с интеграцией с Primavera, где требовалось отправить REST-запрос в определенной структуре и формате. DATAREON Platform не могла автоматически сформировать эту структуру, поэтому запрос пришлось писать вручную. В пакете необходимо было указать логин и пароль для доступа к системе.
Для подобных случаев в платформе есть модуль Credential, который должен был упростить задачу, но разобраться с ним самостоятельно подразделению «СИБУР» не удалось.
Решение: Обращение в техподдержку показало, что функция извлечения данных из этого модуля еще не реализована, но ожидается в новых релизах. В итоге пакет был сформирован вручную, а логин и пароль прописаны в коде.
Кейс 3
Задача: Настройка интеграции, которая позволяет получать данные из одной системы и передавать в другую только измененные данные. Проблема была в том, что в исходной системе не было полей с датой изменений. Поэтому нужно было придумать, как определить изменения и передавать только их.
Решение: Специалисты DATAREON предложили создать дополнительную колонку в базе данных, которая бы указывала, были ли данные переданы в платформу. Однако, поскольку система-источник не подлежала доработке, это решение оказалось неприменимым. Вместо этого команда «СИБУР» выбрала классический подход: данные, полученные из системы-источника, записывались в банк данных с расчетом хэш-ключа для каждой колонки. При каждом последующем запросе данные сравнивались с предыдущими, и, если хэш-ключ менялся, данные передавались в систему-приемник.
При реализация этого решения помогла консультация с группой DATAREON в Telegram, которая помогла команде справиться с задачей. Сейчас решение проходит тестирование и показывает успешные результаты.
Кейс 4
Задача: Еще один сложный кейс был связан с обработкой данных на веб-сервисе, который обрабатывал пакет настолько долго, что выходил за таймаут платформы DATAREON, и соединение с ним прерывалось.
Решение: После долгих поисков и переписки с техподдержкой выяснилось, что таймауты в разных системах измерялись в разных единицах времени (секундах и миллисекундах) и имели разные приоритеты. Решение проблемы включало изменение значений таймаутов и перезагрузку сервера.
2025 год и дальше. Планы по развитию DATAREON Platform
На текущий момент в компании продолжается внедрение системы DATAREON Platform и добавление систем в интеграционный контур. Подразделение «СИБУР» работает над тремя открытыми вопросами:
- Неполная авторизация через AD.
- Нереализованный вызов программного кода модуля Credentials.
- Проблемы с коннектором к старым версиям 1С, работающим в режиме обычных форм.
Опыт «СИБУР» показывает, что внедрить DATAREON Platform своими силами, без помощи вендора или подрядчика, вполне реально. Алексей отметил огромную пользу расширенной поддержки: благодаря ей всегда можно получить нужную информацию, которой нет в открытом доступе, так как решение относительно новое.
— Расширенная поддержка — это не просто ссылка на документацию. Она часто выручала нас в специфических ситуациях, которые касались только нас и вряд ли будут актуальны для кого-то еще. — Алексей Гончаров, руководитель подразделения «Технический документооборот и управление данными» в «СИБУР».