随着云计算、大数据和5G技术的高速发展,企业数据海量增长,同时,数据应用的复杂性也在不断增加。在企业中往往存在多个运行在不同的软硬件平台上的异构业务系统,这些系统彼此独立、相互封闭,数据难以汇聚、互通和共享," 数据孤岛 "随之形成。
数据集成就是将这些分散在一个个“孤岛”中不同来源、格式、特点、属性的数据通过技术手段,在逻辑上或物理上进行有效的整合与处理,为企业数据提供交互通道,实现组织范围内共享数据的能力。
但是,企业数据的海量、多源、异构、实时四大特点给数据集成的实现提出了巨大挑战。而且,企业应用数据存在较大不确定性,业务场景发生变化时,对数据的提取和共享也需随之发生变动。因此,高效性、可靠性、灵活性、安全性和易用性是数据集成技术关键之所在。
智慧数据集成管理平台-价值
"数据孤岛" 形成后,企业的数据以不同的格式驻留在多个数据库、DCS/ERP/CRM/MES/OA等系统、大数据平台、电子表格、消息队列、文件甚至是云端中。所以,各业务系统之间标准不一致,内容不统一,数据存在严重的冗余和一致性问题,给企业内部信息的互联/互通/共享带来很大阻碍。
而且,为满足业务需求,企业要花费高昂的预算开发业务应用,但因为系统间缺失互通性,业务应用仅仅只能针对单一业务系统。同时,业务系统内,数据与应用之间强捆定,缺乏柔性,这也导致企业不得不对不同业务系统中的应用重复投资、重复建设、重复管理。企业也苦于各业务系统之间的异构性,无法开展全域的数据分析和处理。
数据集成就是要从根源上解决问题,应对不同数据源之间接口不互通、协议不匹配的状况,将企业中异构、离散、自治的数据集成在一起,为企业内不同业务提供统一的数据源,实现业务彼此间的数据交换、共享、同步。
数据集成是开展企业全域数据治理、挖掘、管理、维护和服务的先决要求,是企业落地数字化转型的资源基础和技术底座。同时,企业也会在数据迁移、数据整合、数据同步,搭建企业级数据仓库或数据平台时使用数据集成技术。