数据架构基本概念介绍

常用的基本概念

添加审核人:在数据架构中,业务流程中的步骤都需要经过审批,因此,需要先添加审核人。只有工作空间管理员角色的用户才具有添加审核人的权限。

管理配置中心:数据架构中提供了丰富的自定义选项,统一通过配置中心提供,您需要根据自己的业务需要进行自定义配置。

数据调研:基于现有业务数据、行业现状进行数据调查、需求梳理、业务调研,输出企业业务流程以及数据主题划分。

  1. 主题设计:通过分层架构表达对数据的分类和定义,帮助厘清数据资产,明确业务领域和业务对象的关联关系。
  2. 流程设计:针对流程的一个结构化的整体框架,描述了企业流程的分类、层级以及边界、范围、输入/输出关系等,反映了企业的商业模式及业务特点。

标准设计:新建码表&数据标准。

  1. 新建码表:通常只包括一系列允许的值和附加文本描述,与数据标准关联用于生成值域校验质量监控。
  2. 新建数据标准:用于描述公司层面需共同遵守的属性层数据含义和业务规则。其描述了公司层面对某个数据的共同理解,这些理解一旦确定下来,就应作为企业层面的标准在企业内被共同遵守。

模型设计:应用关系建模和维度建模的方法,进行分层建模。

  1. 关系建模:基于关系建模,新建SDI层和DWI层两个模型。
  2. 维度建模:基于维度建模,新建DWR层模型并发布维度和事实表。

指标设计:新建业务指标和技术指标,技术指标又分为原子指标、衍生指标和复合指标。

  1. 指标:指标一般由指标名称和指标数值两部分组成,指标名称及其涵义体现了指标质的规定性和量的规定性两个方面的特点,指标数值反映了指标在具体时间、地点、条件下的数量表现。
  2. 原子指标:原子指标中的度量和属性来源于多维模型中的维度表和事实表,与多维模型所属的业务对象保持一致,与多维模型中的最细数据粒度保持一致。
  3. 衍生指标:是原子指标通过添加限定、维度卷积而成,限定、维度均来源于原子指标关联表的属性。
  4. 复合指标:由一个或多个衍生指标叠加计算而成,其中的维度、限定均继承于衍生指标。

数据集市建设:新建DM层并发布汇总表。

  1. DM (Data Mart):又称数据集市。DM面向展现层,数据有多级汇总。
  2. 汇总表:汇总表是由一个特定的分析对象(如会员)及其相关的统计指标组成的。组成一个汇总逻辑表的统计指标都具有相同的统计粒度(如会员),汇总逻辑表面向用户提供了以统计粒度(如会员)为主题的所有统计数据(如会员主题集市)。

数据架构产品功能

数据架构:数据建模可视化、自动化、智能化

数据架构:数据建模可视化、自动化、智能化

DataArts Studio数据架构践行数据治理方法论,将数据治理行为可视化,打通数据基础层到汇总层、集市层的数据处理链路,落地数据标准和数据资产,通过关系建模、维度建模实现数据标准化,通过统一指标平台建设,实现规范化指标体系,消除歧义、统一口径、统一计算逻辑,对外提供主题式数据查询与挖掘服务。

  • DataArts Studio数据架构主要包括以下三个部分:
  • 主题设计:

    构建统一的数据分类体系,用于目录化管理所有业务数据,便于数据的归类,查找,评价,使用。通过分层架构对数据分类和定义,可帮助用户厘清数据资产,明确业务领域和业务对象的关联关系。


    数据标准:

    构建统一的数据标准体系,数据标准流程化、系统化。用户可基于国家标准或行业标准,对每一行数据、每一个字段的具体取值进行标准化,从而提升数据质量和易用性。


    数据建模:

    构建统一的数据模型体系,通过规范定义和数据建模,自顶向下构建企业数据分层体系,沉淀企业数据公共层和主题库,便于数据的流通、共享、创造、创新,提升数据使用效率,极大的减少数据冗余,混乱,隔离,不一致以及谬误等。

数据治理中心-数据架构-功能介绍及使用

  • 准备工作

    使用数据架构功能前需要添加审核人并对按照需求对管理中心进行配置。

    使用数据架构功能前需要添加审核人并对按照需求对管理中心进行配置。

  • 数据调研

    基于现有业务数据、行业现状进行数据调查、需求梳理、业务调研,输出企业业务流程以及数据主题划分。

    基于现有业务数据、行业现状进行数据调查、需求梳理、业务调研,输出企业业务流程以及数据主题划分。

  • 标准设计

    按照业务需求新增码表及数据标准

    按照业务需求新增码表及数据标准

  • 模型设计-关系建模

    基于关系建模的逻辑模型和物理模型,新建SDI层和DWI层两个模型。

    基于关系建模的逻辑模型和物理模型,新建SDI层和DWI层两个模型。

  • 模型设计-维度建模

    基于维度建模,新建DWR层模型并发布维度和事实表;新建DM层并发布汇总表。

    基于维度建模,新建DWR层模型并发布维度和事实表;新建DM层并发布汇总表。

  • 指标设计

    新建业务指标和技术指标,技术指标又分为原子指标、衍生指标和复合指标。

    新建业务指标和技术指标,技术指标又分为原子指标、衍生指标和复合指标。

数据治理中心-数据架构-使用教程


/

数据架构常见问题

常见问题