伴随着数字化、互联网及智能技术大规模应用于工业生产,先进制造业对廉价劳动力的依赖已大大下降。多年来,中国制造业一直处于经济高速发展的快车道中,受益于不断开拓的“增量”市场。
但在经济增长平稳化、外贸波动的今天,如今利用数字化、信息化技术改造制造业,提高企业的运营效率,正成为当前制造业企业探寻的方向。那么面对企业海量数据,如何找到数据管理的切入点呢?众多制造企业根据自身发展情况选择适合自己的建设目标,大多数企业纷纷选择主数据管理来入手。伴随着企业信息化进程的不断深入,企业IT应用的业务场景越来越复杂,来自跨业务、跨部门和跨系统的业务连贯性需求越来越迫切。许多企业对系统数据的一致性、完整性和准确性提出了更高的要求,纷纷将目光投向主数据管理产品,使得主数据管理市场得到了迅速发展。然而,主数据究竟是什么呢?主数据是指满足跨部门业务协同需要的,反映核心业务实体状态属性的基础信息。举个例子,公司的员工信息,存在于很多业务系统里,比如人力系统、财务系统、OA系统,以及考勤系统等,但每个系统所需要的信息可能不一样,财务系统需要员工开放信息,比如从哪个银行开户,账号是什么,这样方便打款;人力系统可能只是需要员工的一些入职信息。这样的员工信息就属于主数据,它在很多企业业务系统被使用,同时还能反映这个员工本身的一些属性。除此之外产品、物料、客商、客户、供应商也属于主数据。1.唯一性:在一个系统、一个平台甚至一个企业范围内同一主数据要求具有唯一的识别标志(代码、名称、特征描述等),用以明确区分业务对象、业务范围和业务的具体细节。2.共享性:主数据特征会被作为业务流程的判断条件和数据分析的具体维度层次,因此需保证主数据的关键特征在不同应用、不同系统中的高度一致共享,形成统一规范 。3.稳定性:主数据作为用来描述业务操作对象的关键信息,在业务过程中其识别信息和关键的特征会被交易过程中产生的数据继承、引用、复制,但主数据本身的属性通常不会随交易的过程所被修改。4.有效性:只要该主数据所代表的业务对象仍然在市场中继续存在或仍具有意义,则该主数据就需要在系统中继续保持其有效性,通常贯穿该业务对象在市场上的整个生命周期甚至更长。不是企业内部所有的业务数据都是主数据,主数据的范围是指在企业各个系统间共享的必要的业务数据,简单来说就是在处理业务中被重复使用的数据,企业典型的主数据类型一般包括供应商、物料、产品、客户、组织、人员、财务等数据。此外,根据业务需求,关键基础数据也经常纳入主数据的管理范畴。很多制造企业要做数据管理工作时,因为主数据固有的的一些特性,不得不面对治理中的一些难题,可归结为责任部门不清晰、数据定义不明确、维护流程不统一、数据共享不及时。责任部门不清晰。主数据的共享应用的特性决定了他将在各部门都有应用,只是侧重点不同,比如人员主数据,在人力资源部管理人事信息,信息中心主管账号信息,财务部管理工资信息等等,而且各部门管理范围都不一样,维护的属性不统一等,各部门责任界定不清晰。数据定义不明确。数据定义包含数据属性定义,数据标准规范,编码规范等,由于应用习惯不同,数据定义在部门之间也不明确,比如各部门同一类主数据编码规则不统一,数据大小写不一致(如规格型号,有大小写之分),名称不统一(如同名时容易叫张超,张超1)等。维护流程不统一。企业没有对主数据管理进行统一规划,导致各部门根据业务需求各自进行主数据的分散维护,导致维护流程不统一。直接影响主数据的数据质量和数据唯一性等。数据共享不及时。缺少统一管理的主数据,无法实现统一的数据分发与共享,往往是需求提出后才进行数据的维护,数据维护工作量大,耗时长,从长远来看效果不理想,甚至对业务准确性、及时性等产生影响。伴随着互联网技术的高速发展,数据正在呈现爆发式的增长。为了使庞大的企业数据发挥更大的价值,企业必须着眼于数据治理和综合利用,通过数据驱动业务创新,提升管理水平,引领企业转型升级。基础数据治理方案能有效解决上述问题。主数据治理项目前期主要根据企业的特点,对企业的集成架构、数据架构、系统架构、功能架构以及核心业务进行调研,在这其中对企业的整体架构以及项目的相关方进行了解,从而分析出企业现有的主数据类型等,现从主数据治理项目的业务架构、集成架构、数据架构等方面总结如下。物料主数据通过主数据的数据统一同步、清洗、管理、分发,保证企业内部的的一致性、共享性及完整性,实现企业内部数据的单一视图。现以制造业特有主数据物料或物料分组为例对其整体业务进行说明:1.生产层:物料主数据源头系统为PLM系统,其主要作用是实现产品全生命周期的数据管理,管理产品相关的全部数据包括组成零件、设计图纸、工程图纸、工艺文件、产品文件、材料等,物料主数据在其中实际上为零件的核心组成部分,对企业内部的原材料、制造零件、外购件、标准件等进行数据层面的统一管理。2.中间层:上文可知PLM系统为物料的主要源头,而ERP系统、MES系统均需要物料的数据,而主数据的核心功能便是对企业内部基础数据进行管理,保证源头系统及下游系统数据的一致性、完整性,中间层就是通过多维度建模实现对基础数据的全方位管控。3.消费层:数据的生产层更多的是对数据层面的管理,而消费层则是通过中间层主数据分发过来的数据进行企业业务的管理,依旧以物料为例,包括物料的采购、库存、生产等业务的使用。主数据治理项目整体数据架构从各个应用系统获取数据信息,在主数据管理平台对元数据信息进行统一管理,具体包含元数据信息采集、定义、变更等,在数据分析时可以根据元数据信息进行数据血缘分析、影响分析等,基于元数据进行主数据建模部署过后实现基础数据信息的管理,保证全集团公司数据具有高度共享性、一致性、完整性、数据维度统一。数据架构图如下:如数据架构图所示,是从数据源头系统获取组织、人员、岗位、客户、供应商等基础数据信息,通过ESB企业服务总线将数据同步至MDM主数据管理平台中,在主数据管理平台进行数据模型的创建、数据编码的定制以及数据质量的管理等等,最后将干净的数据分发至需要的各业务系统中。主数据治理项目是将企业的主数据,如组织、人员、岗位、客户、供应商、产品、项目等数据信息进行共享,提高数据特征的一致性、识别唯一性、高度共享性及长期有效性,从而获得“单一的基础数据来源”,避免提供的数据有误,造成大量定制视图或者统计报表计算逻辑错误,导致流程监控出错等一系列问题,为企业运营管理过程中深度应用集成、业务流程再造、业务升级创新提供准确的数据支撑。基础数据治理方案集成架构图如下:ESB企业服务总线主要作为数据交换平台,支持应用间批量数据交换和数据库间的数据交互,包括数据的抽取、转换和导入操作。不需要向不同的业务系统请求主数据的获取、同步,只需要通过ESB进行数据分发、下发等操作即可获取这些数据,帮助整合企业数据或建设数据中心。整体调研分为两阶段,第一阶段主要了解企业运作模式,了解其业务架构、组织架构、业务流程、应用架构以及数据架构,在第二阶段主要针对主数据层面,了解其需求、数据模型、对接方案以及相关接口。整体调研通常分为两个阶段,分别为系统调研以及业务调研,调研时间通常为自然月,共调研两轮,第一轮调研时,主要是了解产品,分析可能存在主数据类型,并与各个厂家的实施维护人员见面,进行产品演示。如果有两个系统都用到的数据,先对数据进行记录,明确使用字段、数据来源,明确两个系统间共用数据是否有联系,包含线下数据。对于相互重叠的主数据,应该明确哪里作为数据的源头。第二轮调研更多的是讨论和确认,例如确认主数据的元数据字段信息,与各业务厂商明确接口以及集成对接方式等等,在最终确认后与业务部门进行沟通方便后续数据管理、测试、运维等工作。前期调研一般由我方向客户提出请求,由客户发起联系各个业务系统的厂商合理安排会议时间节点,沟通时间主要取决于业务系统的复杂程度,最好是由各厂商运维人员对业务系统进行介绍演示,在演示过程中对不明确问题进行记录,将确认完毕事宜通过邮件发送至各系统厂商邮箱进行留痕。在系统调研时,首先需要了解该企业现有的应用系统,根据招标文件明确本期建设内容以及边界,了解各个应用系统的核心应用模块以及其主要作用,在条件允许的情况下与各个业务厂商碰面,让其进行系统演示,对于不明确的业务点及时记录明确,并让业务厂商提供登录测试系统账号、数据字典等相关对接文件,根据其系统的介绍并明确主数据的来源以及该类主数据在该业务系统是如何维护的进行记录,对该数据什么人员使用、使用场景进行记录,最后由客户以及各厂商提出主数据层面的需求以及想法。业务调研整体分为两类,分别为主数据集成和应用集成,在对业务部门调研时需要记录,在后续通过会议纪要的形式邮件发送给项目总监、负责人以及参与调研的双方人员。主数据集成首先需要根据业务系统调研确认主数据的类别,以该制造业物料主数据为例,明确该类主数据在哪些业务系统中使用,物料主数据的源头在哪,需要分发到什么应用系统中,在源头系统需要对主数据的维护模式进行确认,并与来源系统明确主数据同步以及数据初始化形式等等,例如物料主数据又根据物料分组形成的编码规则,需要和客户确认是否沿用该编码等。在应用集成时需要明确有哪些集成的场景,对接哪类应用系统,该应用系统目前是否在维护,能否提供对接的接口等。针对调研阶段输出对应蓝图资料进行确认,基于蓝图进行主数据的模型创建及对应ESB应用集成流程开发工作,对实施阶段的主数据模型创建、集成开发以及和各业务系统联测说明如下。模型创建主要针对的产品为MDM主数据管理平台,建模涵盖如下几个技术要点:分别为数据建模、功能建模、分类数据建模、参考数据建模、功能组件等。我们构建的模型并不是一蹴而就的,主数据的模型创建是根据客户及源头业务系统的需求进行联动的,首先需要确定建模采用哪种功能模型,在这个模型的基础上进行字段的扩充丰富即可。ESB应用集成流程开发实际上最重要的不是技术上的问题,在技术上了解一些常用的ESB组件即可,最重要的是了解其数据结构,了解各类主数据之间的关联关系才是最重要的,在生产类主数据集成流程开发过程中物料的数据关联性非常紧密,例如在制造BOM及设计BOM同步过后需要将对应的物料也进行变更操作。所以说在IT行业了解业务是至关重要的,基于业务去分析对应的数据结构,最终进行集成流程的开发工作。实际上功能测试出现问题更多的原因是业务场景考虑不全面导致的,例如在源头系统新增人员数据时,仅仅绑定了组织架构的一个接口,而没有考虑到人事档案、入职等模块也可以进行人员的录入操作,这样就会导致产生源头系统同主数据管理平台不一致,主数据同消费系统不一致的现象,此时消费系统就会反馈这种情况,由主数据进行排查发现问题并解决问题。所以说在进行功能测试时最重要的是在宏观上考虑业务场景,防止因为业务场景考虑不全面导致数据出现问题的现象,其次考虑数据状态对应主数据的业务场景,常见的有数据新增、变更、归档等,最后再进行逐个字段的测试。主数据管理使得企业能够集中管理数据,在分散的业务系统间保证了主数据的完整性、一致性,加强主数据规范性。从信息化建设的角度来讲,主数据管理能增强信息化结构的灵活性,构建整个企业内的数据管理基础和相应标准规范,并且能够灵活地适应企业业务需求的变化。对于整个企业而言,加强主数据管理能带来如下好处。制造企业中,物料的请购、跟催、验收、领发、盘点、存储等工作十分频繁,高质量、高标准的物料主数据,无疑是企业部门业务协同的重要抓手,使得企业业务协作更加快捷、准确、方便,提升企业业务效率,降低各环节沟通成本。标准统一的物料主数据管理,有利于库存的控制,防止呆料、缺料,有利于实现制造企业的“安全库存”,提高了物料管理工作的效率。采购、仓库、车间都采用同一个物料编码和相同的物料规格,车间领料、仓库发料都十分方便且井然有序,提升了企业生产效率,从而增加企业利润。标准统一的物料主数据,能够消除因为物料编码不一致所造成的企业之间物料管理混乱、协同困难的情况。标准统一的物料主数据管理,能够为采购、库存、生产、供应商等信息的管理提供科学管理的前提,从数据源头保证各类分析报表的精确,进而提升管理层决策的科学性和准确性。通过标准统一的物料主数据,能实现企业之间信息的共享,从而实现物料的全生命周期跟踪和追溯。标准统一的物料主数据,是制造企业从采购到生产到销售的整个供应链各节点企业协同的重要基础和保障。供应链协同的基础是:打通电商大数据、ERP、MES系统,实现纵向一体化。没有标准的物料编码,就没有协同的供应链。标准统一的物料主数据是未来企业整合整个产业链的基础。全球制造业数字化的战局,早就在几年前就拉开了帷幕。在如今全球暗潮涌动的经济形势下,谁先抢得制造业数字化转型的先机,自然也就在这场“混战”中,拥有了更多的话语权。而制造业要想成功实现工业化和信息化融合,设计-工艺-制造一体化融合,云计算、大数据、物联网融合的智能制造,底层数据的治理是关键,制造企业需要明确数据治理的目标和范围,搭建好主数据管理平台,做好数据资产盘点与持续不断地改进数据质量,最终形成管理制度与文化,才能实现制造业的数字化转型。