Запросить ключ
Продукты

Функциональные возможности DATAREON PLATFORM

Механизмы загрузки, обработки и выгрузки данных (ETL)

Поддержка различных стандартов и сценариев интеграции

На нашей практике мы встречались с тем, что в различных приложениях реализованы и различные подходы, и способы интеграции с ними. А смена механизма интеграции с приложением может быть довольно трудоемка или вообще невозможна в связи с довольно обширным рядом причин. DATAREON PLATFORM позволит вам объединить все приложения предприятия в единый информационный ландшафт так, что различия между приложениями будут заметны только на уровне механизмов и настроек коннекторов к системам.

В DATAREON PLATFORM уже реализованы коннекторы к таким системам (протоколам) как:

  1. Коннектор SOAP-сервисов
  2. Коннектор REST-сервисов
  3. Коннектор MS SQL
  4. Коннектор IBM DB2
  5. Коннектор Oracle
  6. Коннектор PostgreSQL
  7. Коннектор SharePoint
  8. Коннектор OData 1C
  9. Коннектор TCP
  10. Коннектор Siemens Teamcenter
  11. Коннектор SAP
  12. Коннектор File
  13. Коннектор Pick to Light
  14. Коннектор SFTP
  15. Коннектор Biometry
  16. Коннектор Kardex
  17. Коннектор 1С 7.7
  18. Коннектор 1С 8.х
  19. Коннектор Active Directory
  20. Коннектор ADO.NET
  21. Коннектор RabbitMQ
  22. Коннектор Apache ActiveMQ
  23. Коннектор IBM MQ
  24. Коннектор SMTP
  25. Коннектор IMAP
  26. Коннектор ЛОЦМАН PLM

Все коннекторы имеют возможности параметрической настройки подключения к системе-источнику и взаимодействию с ней.

В составе DATAREON PLATFORM присутствует механизм, позволяющий самостоятельно разрабатывать различные коннекторы на языках платформы .NET. Таким образом может быть реализован любой пользовательский сценарий подключения к системам-источникам.

В связи с тем, что одной из самых востребованных интеграций, является интеграция с 1С 8.х, то в коннекторе 1С реализована возможность интеграции по 4 протоколам:

  • SOAP
  • HTTP
  • PIPE
  • TCP

В поставку включена специальная подсистема, написанная на языке V8, которая встраивается в любую систему на платформе «1С:Предприятие 8» и обеспечивает все необходимые механизмы для интеграции решения с DATAREON PLATFORM.

DATAREON PLATFORM предоставляет возможность централизованного автоматического встраивания и обновления данной подсистемы в конфигурации 1С без необходимости снятия их с поддержки.

Правила обработки данных для конфигураций на платформе «1С:Предприятие 8» создаются и хранятся централизовано в DATAREON PLATFORM. Распространение и обновление обработчиков в системах на платформе «1С:Предприятие 8» также выполняется централизованно в автоматическом режиме без необходимости модификации самой конечной системы. Отсутствие необходимости модификации конечной системы при изменении схемы обмена является особенно важным, если таких систем много или если предъявляются высокие требования к времени доступности системы, которые значительно ограничивают временной промежуток, в который изменения могут быть внесены.

Реализованы удобные мастера, которые позволяют создавать обработчики для 1С и механизмы отладки обработчиков 1С без использования конфигуратора 1С. Отладка кода 1С выполняется непосредственно из центра управления DATAREON PLATFORM. Данный механизм позволяет проверить, каким образом будут выгружены или загружены данные в 1С без их сохранения в 1С и без прямого доступа к системе.

Все реализованные интеграционные сценарии учитывают особенности лицензионной политики фирмы «1С», в частности те, которые запрещают прямой доступ к данным системы на платформе 1С через СУБД.

Событийное взаимодействие

Для создания интеграционных потоков и взаимодействия на событийной схеме по расписанию и получение данных по требованию (сценарии вытягивания и выталкивания) в DATAREON PLATFORM применяются механизмы событийного взаимодействия. Использование этих механизмов предоставляет пользователю широчайшие возможности по управлению данными, такие как валидация и трансформация любой сложности, обогащение из систем интеграционного ландшафта или внешних сервисов. Механизмы взаимодействия также позволяют настроить маршрутизацию данных между участниками обмена.

Механизмы гибкого расширения модели данных

Сложность модели данных ограничивается только бизнес-потребностями, за счет этого достигается быстрое внедрение и легкость в поддержке системы

Бизнес-процессы

Для обработки, валидации, обогащения, нормализации и дедубликации данных в рамках процедур управления MDM в DATAREON платформе имеются механизмы бизнес-процессов. Данные механизмы позволяют строить сквозные бизнес-процессы для информационных систем предприятия, соединенных в единый интеграционный ландшафт.

DATAREON PLATFORM позволяет настроить процесс выявления дублирующих записей как по точному соответствию, так и с использованием нечеткого поиска (возможна реализация любого метода и алгоритма на C#). Встроенные механизмы позволяют настраивать трансформации любой сложности. Наличие средств программирования на языке C# предоставляет пользователю возможность гибко настраивать систему. Возможна реализация автоматической обработки заявок для создания мастер-данных с переводом заявок на экспертов в случае возникновения коллизий. Наличие таких механизмов позволяет значительно расширить функциональность базовых информационных систем и повысить уровень автоматизации предприятия в целом.


Хранение данных

Механизмы хранения обеспечивают хранение данных, требующихся в процессе взаимодействия. Это может быть, как временное, так и постоянное хранение данных. С помощью данного механизма может быть создан MDM-хаб, если речь идет о мастер-данных, и хранилище сырых данных для последующей автоматической или ручной их обработки. Также с помощь данного механизма могут быть созданы хранилища аналитических данных (DataLake), которые могут быть задействованы различными инструментами для анализа (BigData). Подсистема позволяет хранить неограниченное количество данных различных типов.


Работа с данными

Довольно часто компаниям приходится сталкиваться с проблемой недостаточного качества данных. Для обработки и массового анализа в DATAREON PLATFORM используются механизмы загрузки, обработки и выгрузки данных (ETL), которые способны решить эту проблему.

Механизмы работы с данными находят широкое применение в сценариях нормализации мастер-данных и формировании хранилищ аналитических данных.

Веб-интерфейс и управление

Для выполнения задач управления DATAREON PLATFORM использует веб-интерфейс. Использование веб-интерфейса предоставляет пользователю широчайшие возможности по настройке доступного функционала. Интерфейс предоставляет мощные и удобные инструменты проектирования потоков данных, разработки алгоритмов обработки данных. 

Механизм API предназначен для обеспечения прямого взаимодействия с платформой с целью построения пользовательского интерфейса для работы с данными платформы

Веб-интерфейс дает возможность подключения из любой точки без установки вспомогательных программ.


Безопасность и отказоустойчивость

Обеспечение безопасности при передаче данных традиционно недооценивается, а ведь в большинстве случаев утечки конфиденциальных данных происходят именно при их передаче.

Для обеспечения безопасности данных в DATAREON PLATFORM используются механизмы безопасности и отказоустойчивости. Механизмы обеспечения безопасности управляют доступом как к настройкам платформы, так и к данным платформы. Отказоустойчивость обеспечивается за счет построения отказоустойчивого кластера. Наличие отказоустойчивого кластера вместе с компонентной архитектурой системы также позволяет добиваться высоких показателей горизонтального масштабирования интеграционного контура предприятия.

При поступлении новой задачи на сервер платформы балансировщик выполняет оценку нагрузки на кластере серверов и близости сервера к информационной системе. В зависимости от этого выбирает сервер для выполнения задачи.


На случай аварии выполняется репликация данных на свободные серверы и автоматический запуск сервисов системы на доступных серверах уже при аварии.


Ролевая модель

В DATAREON PLATFORM ответственность за работоспособность различных компонент может разделяться между пользователями. Разграничение прав доступа выполняется посредством ролевой модели. Уровень доступа пользователей может быть настроен в разрезе каждого объекта DATAREON PLATFORM. Это позволяет разделять группы пользователей по зонам ответственности и ограничивать доступ к объектам DATAREON PLATFORM согласно полномочиям.



Диагностика и мониторинг 

DATAREON PLATFORM обладает широкими возможностями для диагностики и мониторинга состояния как всего решения, так и каждого компонента DATAREON PLATFORM в отдельности. 

Механизм мониторинга поддерживает реализацию API, позволяющего встраивать данные мониторинга платформы в системы централизованного мониторинга предприятия, что повышает эффективность обслуживания информационного ландшафта предприятия в целом.

Центр диагностики не только сигнализирует об ошибках, но и фиксирует все действия пользователей.




Выявления дубликатов записей

DATAREON PLATFORM обладает развитыми настройками автоматического выявления дубликатов записей. Самые распространенные - это правила точного соответствия значений, оценка совпадения записей между собой с использованием вероятностной логики, применение «нечеткой» логики для определения дубликатов.

Средства поиска

Одна из важных задач, которая стоит перед специалистами, работающими с данными – это поиск необходимой информации среди большого объема данных. Для решения этой задачи в платформе реализованы поиски по методу Ливенштейна, Дамерау-Ливенштейна, N-грамм, а также поиск по маске.

Уведомления о событии на почту

Модуль бизнес-процессов позволяет реализовать гибкую настройку отправки уведомлений пользователям при любом событии, которого требует бизнес-логика предприятия. Начиная с задачи, поступившей пользователю в работу и заканчивая очередными изменениями в структуре адресного классификатора при его очередном автоматическом регламентном обновлении платформой.

Данный функционал не ограничивается работой с данными. Администраторы системы также могут получать уведомления на почту в случае возникновения различных событий в работе платформы, начиная с критических ошибок в любом сервисе и заканчивая подробным отчетом о работе сервиса.

Иерархические и фасетные классификаторы

Гибкая настройка модели данных и возможности алгоритмов бизнес процессов позволяют реализовать иерархические и фасетные классификаторы любой сложности, а развитые средства хранения и поиска данных дают возможность создать классификатор любой глубины и объема.

Обратная связь

Наверх