DAP数据分析平台数据服务介绍

在企业中,由于开发时间或开发部门的不同,往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行,这些系统的数据源彼此独立、相互封闭,使得数据难以在系统之间交流、共享和融合,从而形成了"信息孤岛"。

随着信息化应用的不断深入,企业内部、企业与外部信息交互的需求日益强烈,急切需要对已有的信息进行整合,连通“信息孤岛”,共享信息。许多行业提出将企业内外部数据进行统一治理及高效利用辅助决策分析的需求,在这种背景下以互联网、云计算等为代表的新一代信息技术被广泛应用,数据分析相关产品成为解决此类问题的重要工具。

整体介绍

DAP数据分析平台是一款专门用于企业大数据平台构建的产品,它可以对从业务系统或者ODS中抽取来的海量数据进行高效存储、计算、分析并处理。最终将有价值的数据以可视化的形式进行展现,能够有效地帮助企业清晰地分析优劣势,从而调整企业策略,加快企业的信息化发展与整体竞争力

1.产品体系

数通畅联的产品可以通过不同的组合来解决不同的问题,帮助企业范围内建立起一整套统一、规范的IT架构标准体系,包括数据规范、服务规范、流程规范、界面规范、接口规范等,彻底解决了当前面临的信息孤岛问题,有利于提高效率和降低成本。下面介绍一些数通畅联的产品体系,如下:

上图所示通过DAP数据分析平台+MDM基础数据平台+ESB企业数据总线组成了数据中台方案,本次介绍的DAP数据分析平台就是此方案的核心,基础数据进行主数据治理,DAP数据分析平台进行业务数据治理,通过ESB进行数据的集成,帮助整合企业数据,统一管理,提升企业的数据价值。

2.产品说明

DAP数据分析平台中预置了丰富的组件,饼状图、条形图、散点图、折线图等满足企业的真实所需。它可以对从业务系统或者ODS中抽取来的海量数据进行高效存储、计算、分析并处理。最终将有价值的数据以可视化的形式进行展现,能够有效地帮助企业清晰地分析优劣势,从而调整企业策略,加快企业的信息化发展与整体竞争力。

数据分析平台功能有:

1.数据来源(应用系统定义、数据源头配置、ODS数据定义)数仓模型

2.数仓模型(业务主题、维度配置、事实配置、模型配置、指标管理)。

3.数据调度(规则校验、调度资源(同步资源、加工资源)、调度任务、调度日志(同步日志、加工日志)、质量日志、通知日志)。

4.分析模型(数据集配置、立方体配置、业务类报表、多维度分析)。

5.展现模型(导航管理、组件管理、展现主题、装饰管理)。

6.数据服务(接收服务、查询服务、统计服务、指标服务、业务服务)。

7.反向集成(集成配置、数据管理、数据分发)。

8.数据标签(标签定义、标签配置、标签画像)。

9.统计分析(数据地图、质量分析、血缘分析、影响分析)。

10.系统管理(组织管理、角色管理、人员管理、功能管理、编码类型、编码管理、系统日志)。

本次介绍数据服务内容,数据服务分为接收服务、查询服务、统计服务、指标服务、业务服务。

3.功能说明

DAP是数据中台重要组成部分,数据中台是指通过企业内外部多源异构的数据采集、治理、建模、分析、应用使数据对内优化管理提高业务,对外可以数据合作价值释放,成为企业数据资产管理中枢,数据中台对外发布不只是可视化展现,还需要支持对外提供数据,所以DAP数据服务功能分别有:接收服务、查询服务、统计服务、指标服务、业务服务

接收服务

接收服务是对ODS数据抽取的一种方式,通过对外接口把业务系统的数据同步到ODS中间库里。

1.功能介绍

ODS有几种同步数据方式,分别是源库读取、接口同步、流程同步、手工录入,其中接口同步一种是和流程同步一样生成一个集成流程,一种是通过接口进行同步数据,如果ODS选择接口同步就会在接收接口处生成一条服务,通过接收接口能够查看到接口地址和入参格式,通过样例就可以进行调用。

2.配置扩展

创建一个ODS中间表,在同步方式选择接口推送模式,然后勾选上生成介绍服务。

创建表之后我们可以在接收服务中找到刚创建的服务接口:业务系统就可以调用这个接口进行数据同步了。

3.扩展效果

双击数据之后可以看到入参样例:

找到ODS数据库中刚刚创建的的表,可以看到当前数据为空:

点击执行,刷新数据库,可以看到数据同步已经过来了。

查询服务

查询服务是对数据集数据对外发布的一个服务,通过数据集编码和条件进行查询数据集中数据。

1.功能介绍

查询服务数据集通过发布生成数据集获取接口,数据集是直接通过数据模型生成的数据集合,直接是数仓的数据展现出来,通过此接口的条件默认是数据集编码和10条数据,也可以通过配置条件,通过条件查询数据集中的数据。

2.功能扩展

配置好数据集之后点击发布按钮就可以看到数据接口按钮变亮:

发版后可以进行反发布:

发布后在查询服务中:

3.扩展效果

点击发布后我们可以在查询服务中找到刚刚发布的数据,如下图:

选中数据,点击数据预览可以看到配置好的数据:

统计服务

统计服务是对立方体数据对外发布的一个服务,通过立方体编码和条件进行查询立方体数据。

1.功能介绍

通过发布生成立方体数据获取接口,通过接口可以获取到立方体到汇总计算数据,此接口的条件默认是立方体编码和10条数据,也可以通过配置条件,通过条件查询立方体中的数据。在统计服务中,可以根据配置的条件字段以及排序配置使数据以排序(降序)形式展现

2.配置扩展

选择配置好的立方体,点击发布按钮后,可以看到数据接口按钮变亮:

点击发布后就生成对应的统计服务:

3.扩展效果

在立方体发布后我们可以在统计服务中看到该条数据,如下图。在统计服务中,可以通过配置条件,排序配置查询立方体中的数据。

点击数据预览,可以查看根据条件配置的数据:

指标服务

指标服务是对指标数据对外发布一个服务,通过立方体编码和条件进行查询立方体数据。

1.功能介绍

指标实例通过发布生成指标阈值获取接口,此接口的条件默认是指标编码和10条数据,也可以通过配置条件,通过条件查询数据集中的数据,并且可以通过配置表达式来控制数据的阈值,在数据预览时,超出阈值的数据会以高亮形式展现出来并且发起报警策略进行邮件、短信提醒,也可以调用事件进行回写操作。

2.配置扩展

在新增指标页面我们可以选择组成类型、范围类型、功能类型以及来源类型,

数据来源可以选择数据集、立方体以及模型:

保存之后,点击指标元数据,可以在元数据中添加字段,以及修改字段名称:

指标实例中可以选择配置指标的实例类型为单条或多条以及添加条件配置和排序配置:

指标实例还支持配置阈值,通过配置表达式来控制数据的阈值:

可以配置通知策略,如果超出预置就可以报警:

3.扩展效果

在指标服务配置好之后点击发布按钮我们可以在指标服务中看到该条数据,如下图:

点击数据预览,可以看到我们配置好的数据,红色字体就是超出指标阈值的数据:

双击可以查看到超出预置的情况:

业务服务

DAP数据服务缺少业务对象服务,此对象服务从数据集、立方体、指标查询,定义单体、树形、主从模型通过配置的查询条件进行查询业务数据。

1.功能介绍

业务服务来源于数据集、立方体、指标查询,通过这些机构配置单体、树形、主从动态对象模型。选择来源后,要设置选择关联关系、条件(条件通过数据集配置条件获取) 用于构建树形、主从这种特殊格式。支持查询条件过来查询。

2.配置扩展

在数据服务添加业务服务功能:

列表页面:列表显示对象名称、对象编码、对象类型、来源类型、发布状态、创建人、创建时间:

新增详情页面:来源选择数据集、立方体、指标:

选择对象类型(简单列表、树形表格、主从表):

3.扩展效果

配置完业务服务,点击发布按钮后,可以在服务查看中看到刚刚发布的服务,如下图:

点击数据预览后可以看到配置好的条件,点击执行,可以展现出参展示:

出参信息如下:

总结分析

无论是现在的互联网企业,还是传统型企业,都需要数据分析。企业决定前进方向或者推出某种新型产品,都需要数据分析来将数量庞大且凌乱的数据整合汇总,从而得出有用的信息,判断出前进的方向。

1.产品理解

数据分析必须要以数据为先,分析为后。对收集来的大量第一手资料和第二手资料进行分析,以求最大化地开发数据资料的功能,发挥数据的作用。这是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程,而本文介绍的数据分析平台就大大加强了数据治理方面,加强数据应用,无论数据服务和数据可视化展现都是提升企业数据价值的表现。

2.数据服务

DAP数据服务就是一种将治理后的标准数据从数据中台获取的方式,因为数据中台集成业务系统在展现层的数据一般不是本身系统的数据,直接抽取性能会变差,所以不可能在去业务系统中抽取,而DAP数据服务就刚好解决了这一问题。

3.产品展望

DAP数据分析平台是数通畅联数据中台的一部分,它可以提升企业的业务数据价值,从数据来源上梳理企业的业务数据,把可以提升企业业务价值的相关表放到中间库中,通过数据治理整合汇总这些数据,把这些数据变成完整的、可观察的数据,从而把数据展现出来。

DAP数据分析平台可以对采集到的所有海量数据进行分析,分析用的数据由采样数据扩展至全部数据,从传统单一领域的数据扩展到跨领域的数据。大数据可以将不同领域的数据组合后进行分析,数据基于有关关系的数据源相同可以分析预测出正确的结果。

本文由@数通畅联原创,欢迎转发,仅供学习交流使用,引用请注明出处!谢谢~

展开阅读全文

页面更新:2024-05-11

标签:阈值   立方体   数据   接口   指标   条件   功能   业务   系统   平台   企业

1 2 3 4 5

上滑加载更多 ↓
推荐阅读:
友情链接:
更多:

本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828  

© CopyRight 2020-2024 All Rights Reserved. Powered By 71396.com 闽ICP备11008920号-4
闽公网安备35020302034903号

Top