数据管理与分析-数据共享交换管理操作流程

时间:2024-04-26 09:42:16

数据共享交换管理操作流程

图1 数据共享交换管理操作流程
  • Governor(管控平台)

数据服务共享统一管控平台,提供资源目录、数据开发、数据使用、服务引擎管理、调度计划、统计监控、服务权限配置等系列功能,对数据资源和服务资源统一注册管理。

  • Server(服务引擎)

批量作业服务及文件传输服务引擎,负责批量作业模型解析、批量作业执行、文件传输服务;提供多协议、多数据源适配支持;为服务运行提供高性能、高可靠的运行环境。

  • SSM(服务状态监控)

提供日志解析及监控能力,对事前预警、事中告警、事后统计分析等功能提供后台支撑。

  • Studio(可视化开发工具)

基于Eclipse技术开发的可视化批量作业设计器,提供可视化批量作业模型定义与调试、可视化的模型性能监控、元数据管理以及数据处理模型部署等功能。

  • Agent(传输代理)

数据抽取及文件传输代理,支持数据库、大数据等数据源的数据抽取,支持任意节点及任意大小文件一对一、一对多的传输,并支持压缩、加密等多种文件传输策略。

  • Scheduler(调度引擎)

作业调度引擎,支持作业与作业流的串行及并行调度,提供日历、频度、事件等多种规则的调度,为作业和作业流运行提供多样化的调度方式。

  • DataRelease(数据发布引擎)

基于SpringBoot架构提供数据服务发布及数据访问能力,支持单表、结果集等形式的实时接口服务发布。

  • GatherClient(资源采集客户端)

实时采集各引擎所在物理机的CPU、内存、磁盘、网络等指标,通过Governor进行展示。

support.huaweicloud.com/primetonmams-dma/primetonmams_11.html