数据管控平台项目范围(数据管控平台实现目的)

在目前的大数据时代,企业之间各个部门的数据权限划分模糊,不同应用系统对于相同的字段在数据库中命名非常随意,很难保证统一,并且在进行数据统一时,很多应用系统的数据表的表结构需要进行变更,而修改数据的存储样式,很可能会对企业造成不可评估的影响,因此越来越多的企业进入到了数据治理阶段,对于主数据治理的需求越来越明确。

从系统应用角度而言,主数据管理是把企业的多个业务系统中最核心的、最需要共享的数据(主数据)进行整合,集中进行数据的清洗和标准化,并且以集成服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给需要使用这些数据的应用系统,包括各业务系统和决策支持系统等。

整体介绍

MDM作为主数据管理平台,主要是通过数据建模、数据维护、数据质量、数据分析等进行基础数据的维护,保证各个系统基础数据的同源,使企业的主数据具有唯一性、准确性、一致性、及时性,使企业的各项信息更加完善,也使得各项业务之间可以形成闭环。

1.产品设计理念

MDM主数据管理平台的设计理念在于保证主数据在各个系统中的正确性、重用性和通用性。通过基础数据平台将企业的主数据进行整合,集中进行数据的清洗和标准化,并以集成服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给各业务系统。助力企业创建并维护主数据的统一视图,通过保证统一视图的准确性、一致性和完整性,提高数据质量,逐步统一企业级数据模型,简化改进企业流程并提高业务的响应速度。

2.产品整体介绍

MDM主数据平台实现前期数据清洗导入,上线后的主数据申请、校验、审核、发布、维护、变更、注销等全生命周期管理,其作用就是对主数据进行治理,通过数据治理实现各个系统间的数据共享,从而保证企业数据的一致性、准确性和完整性,从根本上解决企业各个业务系统之间数据不能共享,数据重复、错误等问题。使得企业在数据方面更完善,业务流程更顺畅。

数据管控平台项目范围(数据管控平台实现目的)

3.产品功能介绍

MDM主数据管理平台整体功能架构如下图所示:

数据管控平台项目范围(数据管控平台实现目的)

MDM整体功能架构大致分为主数据管理平台和主数据控制台两部分。其中主数据管理平台包括主数据、参考数据、流程监控、质量管理、数据分析五个功能模块。主数据和参考数据模块包括各类主数据(参考数据)的数据管理、数据导入、数据分发以及日志管理功能;流程监控模块包括流程实例统计、流程实例列表和流程历史查询功能;质量管理模块包括血缘分析、数据巡检、相似数据和数据清洗功能;数据分析模块是从数据角度和应用角度出发,主要是对主数据进行统计分析,数据角度下对主数据的一些基本信息例如来源、状态和主数据同步分发情况进行统计展示,而应用角度下就是在查询主数据的基本信息以及同步分发情况之前先查询该主数据关联的应用系统信息。

主数据控制台包括数据建模、功能建模、流程建模、应用管理、规则定义、流程监控六大功能模块。数据建模模块包括主数据建模、参考数据建模和分类数据建模功能;功能建模模块包括功能配置、功能组件功能;流程建模包括流程定义列表、流程业务列表、仿真业务管理、流程全局变量;应用管理包括应用配置和应用分组;规则定义包括编码规则和校验规则;流程中心是对已创建的流程的运行情况进行监控统计。

解决问题

我国企业目前对于内部数据的治理仍都处于初级管理阶段,如何对数据进行治理已经成为困扰企业的一项巨大挑战,企业在业务发展过程中沉淀了大量的数据,但是这些数据没有为企业带来直观的价值,没有形成企业的数据资产,并且存在数据混乱、数据标准和数据断层等问题。

1.数据缺失问题

在企业系统中,存在缺少关键数据,部分辅助数据缺失或不全面,历史数据丢失严重等问题。例如:有些信息是被遗漏的。可能是因为输入时认为不重要、忘记填写了或对数据理解错误而遗漏,也可能是由于数据采集设备的故障、存储介质的故障、传输媒体的故障、一些人为因素等原因而丢失了。

2.数据不准问题

在业务系统运行过程中,由于各类原因会导致数据不准确的情况,企业存在大量编码不规范、格式不正确、含义不清晰的数据。这些问题数据如果不及时发现并处理,会使数据分析结果将受其影响,从而误导管理层决策,影响企业的运营,阻碍业务发展,甚至造成严重的后果。

3.数据重复问题

大多数企业的系统中存在很多重复的数据,这些数据中一部分数据可能就是企业系统中的垃圾数据,因为有这些重复数据的存在,在操作的过程中,比如在进行同步分发操作时,查数据的时候可能就会查到很多条数据;另外在数据分析时,如果有数据重复也会影响最终分析的效果,会对企业业务运转造成一定的影响。

4.数据壁垒问题

企业中绝大部分系统处于分散、独立的状态,各系统独立运行,系统中的数据标准自成体系,系统与系统之间无法进行业务交互和数据交换,导致数据只在系统内部有效,不能与其他系统的相关数据进行关联分析,数据无法有效对公司经营、管理、决策形成统一的视图,对公司长期、高速发展的战略形成了一定的阻碍。

涉及方案

MDM主数据管理平台可以与数通畅联其他产品组合使用,产品间相辅相成、灵活组合,彼此之间组成不同的解决方案,可以满足绝大多数的应用场景。可根据企业项目的不同需求/性质,将产品组合搭配,最终形成特定的、符合企业自身业务的、能够适应企业当前以及未来发展的最佳解决方案。

1.统一集成平台

大多数企业随着企业规模的扩大、业务的发展,信息化建设也随之不断推进,在信息化建设不断深入的过程中,很多企业都面临着业务系统之间的整合问题,应用系统间数据共享与功能集成的需求日趋强烈,如:系统功能整合、跨系统数据访问以及业务财务集成等需求。针对上述问题,数通畅联推出了ESB和MDM结合组成的统一集成方案

在统一集成平台方案中,ESB产品提供平台协同功能,可以无侵入地连接各个业务系统,支持通过数据库、服务接口等方式抽取、转换、传输数据,实现不同系统间服务、数据、信息的全面集成;MDM产品作为基础数据管理工具,建立数据管理标准,简化数据清洗工作,将内外部基础数据统一治理整合,在应用集成的过程中保证各系统基础数据的一致性、准确性、完整性,降低应用集成的难度。

数据管控平台项目范围(数据管控平台实现目的)

2.基础数据治理

随着企业业务迅速发展,需要支撑业务运转的信息系统越来越多,各系统之间的数据分散、重复,未完全形成业务闭环,数据孤立不能互通,数据统计不一致,企业主数据(组织、人员、岗位客户、供应商、产品、项目等)不能共享,数据不完整,缺少关键基础数据,历史数据丢失现象严重,且数据质量低,无统一管理,集成数据可用性差;缺乏统一的、标准的数据管理体系和工具,导致各系统之间、集团与各业务板块之间数据传输与共享机制不规范,存在手工录入现象,无法有效支持高层战略决策及服务升级。

为了解决上述问题,数通畅联推出了由MDM主数据管理平台和ESB应用集成平台相结合形成的基础数据治理方案,可以满足企业各个应用系统间数据共享与功能集成的需求,帮助企业解决数据整合的问题,推进企业信息化建设

在基础数据治理方案中,MDM产品起到提高数据特征一致性、识别唯一性、高度共享性及长期有效性,从而获得“单一的基础数据来源”,避免提供的数据有误,造成大量定制视图或者统计报表计算逻辑错误,导致流程监控出错等一系列问题,为企业运营管理过程中深度应用集成、业务流程再造、业务升级创新提供准确的数据支撑作用;ESB产品作为数据交换平台,支持应用间批量数据交换和数据库间的数据交互,包括数据的抽取、转换和导入操作。不需要向不同的业务系统请求主数据的获取、同步,只需要通过ESB进行数据分发、下发等操作即可获取这些数据,帮助企业数据整合或数据中心建设。

数据管控平台项目范围(数据管控平台实现目的)

3.集成底座方案

集成底座是基于IDM、MDM、ESB三个核心产品组合打造的一套解决方案,主要解决企业信息化建设过程中业务系统打通以及基础业务集成整合的问题,通过构建企业集成底座,实现各业务系统间的统一认证,保证业务系统访问的一致性;实现各系统基础数据的同源,保证数据一致性的同时为后续复杂的业务集成、财务集成等提供基础数据支撑。

其中IDM平台基于5A管控体系实现统一用户、统一认证、统一授权、统一审计、统一应用管控等安全管控;MDM通过支持组织、岗位、人员等主数据的同步分发,实现主数据的标准化,实现全生命周期的主数据管理;ESB作为集成通道,通过API管理将业务系统接口注册、代理到ESB平台,并通过平台实现集中监控、认证、限流、报警等功能,在满足IDM、MDM以及上下游系统的集成管理的同时实现服务接口的集中化管理。

数据管控平台项目范围(数据管控平台实现目的)

4.数据中台方案

数通畅联数据中台方案主要作用是打通企业的数据环节,实现全生命周期的数据管理,通过数据中台建设数据管理体系,实现各个业务系统数据的有效整合。通过基础数据治理保证底层基础数据的一致性,基于业务指标进行前端的动态展现,结合数据指标的多维度穿透,实现以不同形式、不同维度的分析展现。分析业务指标的同时也是对企业业务的梳理,发现业务中存在的问题,实现企业业务升级与转型,保证领导层能实时把控企业业务的发展,了解业务痛点,改进业务管理方式,实现业务与数据的相互支撑,从而为企业的高层决策提供数据支持。

数据中台分三个模块,数据分析平台(DAP)、主数据治理平台(MDM)、数据集成平台(ESB),数据中台的部署环境采用K8S云平台部署,主要实现基于数据治理分析的中台建设,通过MDM将企业内部的基础数据标准化、规范化、整合化后,由DAP进行数仓建设以及最终的数据分析的可视化展现,ESB通过数据集成完成整个数据中台的主数据分发和数仓的数据汇聚。

数据管控平台项目范围(数据管控平台实现目的)

产品优势

数通畅联的产品都是从一个个项目中迭代出来的,通过项目不断完善我们的产品,我们的产品都可以通过对外接口与其他的产品进行结合使用,接口都具有规范性,而且调用方便,获取到的数据更全面。

1.性能易用强大

MDM主数据管理平台具有易用性、开放性、标准化、安全性、扩展性、实用性和高可用等特性,因此MDM能满足绝大多数企业在多种业务场景下的使用需求,并且MDM在使用过程中数据处理操作简单、方便、快捷、直观,对于刚刚接触这款产品的用户也能快速上手。

2.提前预置样例

数通畅联的所有产品和方案都有提前预置样例,预置样例有以下优势:一是通过预置样例我们可以提前验证产品;另外无论是在产品演示、培训还是具体的相关项目实施时,都可以基于预置样例快速生成对应的流程和场景,满足实际情况的需要。

3.具有可扩展性

MDM主数据管理平台可以根据项目需求进行敏捷、快速地扩展开发,MDM系统支持字段扩展、按钮扩展、表单扩展等配置功能,具有良好的兼容性,易于扩展、修改模块、增加新的功能以及重组,满足用户未来扩展的需求,支持后续的应用系统资源逐步整合。

4.方案灵活多样

MDM主数据管理平台能够与公司其他不同产品相结合,能够组合成多种解决方案,这些解决方案能够解决不同企业实际的业务问题,满足不同业务场景的需求,产品是可以灵活组合的,彼此之间组成不同的解决方案,能满足绝大多数的应用场景。

价值分析

通过数据管理模式、数据共享模式和数据应用模式的制度化、规范化和标准化,实现各系统间公用数据的统一、集中管理。保障了对主数据进行全生命周期的高效管理,进而大幅提高主数据质量,为业务报表编制、数据统计分析以及财务业务一体化等工作提供统一的基础数据源,为系统集成和提高业务数据处理准确性奠定重要基石。

1.数据集中管理

MDM主数据管理平台可以实现数据“源头”的集中管理,从而解决企业数据分散、数据难以管理的问题,能够实现数据集中管理、统一分发、整体维护,改变原有基础数据分散管理的现状,为主营业务系统集中化部署与集约化运营管理奠定数据基础。

2.提高数据质量

MDM主数据平台的数据自动化服务实现了统一的业务访问标准,主动分发服务保证了相关业务目标系统数据的变更同步性。通过数据总线,以灵活、可持续的方式支持任何面向业务的规则集合,保证数据的唯一和规范,大幅降低数据的集成和共享成本。应用数据标准模型和多重关联校验规则,对前端数据输入源头实现可靠的控制,有效降低人为因素所产生的数据问题,提高数据应用质量。

3.实现数据共享

通过MDM建立起基础数据的共享“桥梁”,从而打破各系统信息交互壁垒,使得物资、项目、人员、组织等一些重要基础信息能够在多个系统内充分共享、高度复用,从而提高数据的利用率,提升数据所带来的价值,实现企业数据间的深度集成,打破数据壁垒,为数据门户提供数据,辅助管理者决策分析。

4.构建标准体系

通过数据管控体系和数据运维体系咨询服务,对组织架构、运营模式、管控流程、角色与职责进行明晰的定义。通过标准业务流程驱动,构建企业信息基础数据集成和共享平台,实现企业数据层面的战略规划管理。支持集团化多组织结构的复杂管理层级,能够构建在多组织结构上的应用系统,兼顾集团公司整体管理和下属企业作业流程之间的平衡。

5.强化数据掌控

MDM主数据管理平台可以对各业务系统数据进行统一掌控,通过MDM可以保证企业各业务系统的主数据具有一致性、完整性、准确性、及时性,然后再分发至下游系统,使企业信息化更加完善,从而打通企业各系统业务链条,提高公司整体的战略协同力。

MDM主数据管理平台能够打通企业内各业务链条,消除不同部门重复录入数据造成的数据冗余。统一数据语言,统一数据标准,实现数据同源、数据共享,最大程度提高数据的权威性。同时也可以作为公司内部业务运转、经营分析、决策制定的“通用语言”,有助于打通部门、系统间壁垒,实现信息集成与共享,提高公司整体的战略协同力。

MDM主数据管理平台在不同方案中起到能不同的作用。在业财一体化项目中,MDM起到基础数据映射作用;在数据治理项目中,MDM起到治理、完善、统一业务系统中共享主数据的作用;在数据分析项目中,MDM抽取整合业务系统中的主数据,保证其完整性、统一性,并起到分析数据的作用。企业通过MDM主数据管理平台集中管理数据,保证了分散的系统间主数据的一致性,有利于推进数据合规化进程,快速部署新应用,加快推出新产品的速度。

本文由@数通畅联原创,欢迎转发,仅供学习交流使用,引用请注明出处!谢谢~

本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 sumchina520@foxmail.com 举报,一经查实,本站将立刻删除。
如若转载,请注明出处:https://www.dasum.com/167325.html