面对企业的不同需求, 东软大数据集成系列产品如何放大招?

之前的文章《土豆君带你读懂大数据那些事儿》,让我们了解到,作为大数据落地的基石,东软大数据集成系列产品是集数据资源整合、数据开放共享、数据跨领域、跨行业融合的专业化、全方位数据集成整体解决方案。

如今,面对庞大而复杂的IT系统,很多政府和企业都意识到数据整合已经成为他们投身大数据的重要支撑之一,但在实际操作过程中往往会遇到一些问题,下面我们对政府和企业在数据整合时遇到的问题进行了梳理,只为让你更深入的了解东软数据集成系列产品如何快捷地将异构、多源的数据进行采集、标准化,并提供数据服务,为IT技术人员快速实现数据整合提供工具支撑,帮助组织提升服务的质量和效率,实现更智慧的业务决策和对市场形势的更快响应。

 

1如何实现非标准化数据实时标准化处理?

借助SaCa CDC和SaCa DataTransform组合,对各个系统中的数据进行实时采集、转换、清洗、装载。

我们支持:

实时数据复制:基于分析数据存储日志方式,实时捕获变更数据,支持异构数据源间一对一、一对多、多对一、多对多和双向复制。

结构变更复制:支持复制源端数据库DDL操作,目标端默认支持DDL复制,包括如CREATE、ALTER、DROP、TRUNCATE等。

异构数据源整合:支持主流的关系型数据库(Oracle、DB2、SQLServer、MySQL等)、XML文档、文本数据、Excel、HBase、以及WebService等接口,支持灵活的扩展新的数据源。

多样化数据转换:如类型转换、字段拆分、字段合并、字符串处理、日期转换、算数运算、码表转换等,同时提供自定义接口实现特殊的数据转换处理。

 

2如何实现跨网络、跨部门的实时数据交换并确保数据一致?

借助SaCa CDC、SaCa DataExchange和SaCa DataCompare 组合,对跨网络的数据进行实时的采集和交换,为数据集成提供高可扩展的支撑平台,快速打造数据中心、数据迁移、数据同步、数据交换等方案。在这个过程中,通过可视化的方式,及时发现、修复交互双方的数据差异,确保数据的一致性。

我们支持:

同步按需复制:支持基于指定以及指定字段进行复制,基于数据条件复制,基于指定的时间点复制,基于指定的时间段复制等。

丰富的数据源支持:支持主流的关系型数据库(如:Oracle、DB2、SQLServer、MySQL、Sybase、神通、达梦、南大通用等)、XML文档、文本数据、Excel、HBase等。

敏捷的定义工具:提供支持协同开发的图形化工具,通过拖拽和连线的方式快速完成不同数据源之间数据转换规则定义,能够配置各种复杂、异构的数据源间的数据转换、清洗规则。

提供多种比对方式:支持基于表结构比对识别结构化差异、数据量比对识别数量差异、数据项比对识别信息内容差异,支持表、视图、自定义SQL等方式。

 

3如何采集到高质量数据?

借助SaCa DataQuality和 SaCa DataTransform组合,及时发现并校核数据的完整性、一致性、准确性等问题,在保证数据质量的同时,对数据进行抽取、转换、装载,实现数据标准化处理,为企业提供高质量的数据。

我们支持:

支持多种效验逻辑:产品提供字段级复杂校验,能够校验多个字段间的关联关系;提供表级复杂校验,能够校验相同信息项中差别数据;提供表间复杂校验,能够校验多表间关联计算校验等。

分布式并行运行:支持多个无关联任务并行执行,并且可以在监控页面统一进行任务状态的查看、管理。

 

4如何实现数据的即采即用?

借助SaCa CDC、SaCa DataTransform 和 SaCa DataServices组合,实时的捕获和保存变更数据,同时通过并行技术对多样、海量的数据进行处理,最终通过实时统一的数据访问入口提供数据服务。

我们支持:

基于OData V4.0标准:基于OData V4.0标准,提供HTTP REST方式读取、插入、更新、删除数据,提供一致性的访问入口。

可靠的处理能力:提供网络中断、意外停机的错误处理能力,内置错误处理策略,配合断点续传、断点抽取等功能可按照预定规则进行自动化处理。

多源访问:适配任何数据源及数据类型,包括主流的关系型数据库、文本形式、NoSQL数据库、各种接口和云服务。

 

5如何将分散数据进行统一的高级可视化展现?

借助SaCa DataServices 和 SaCa DataViz组合,通过实时统一的数据访问入口提供数据服务,屏蔽异构数据的复杂性,同时控制数据访问与数据内容的安全性。借助JavaScript构建的轻量级图表组件库及高效的定义工具进行大数据的高级可视化展现。

我们支持:

丰富的图表展现:内置轻量级的 JavaScript 图表组件库,不仅具有常见的柱图、饼图、折线图等,更有如弦图、玫瑰花图、太阳辐射图等高级展示方式,并支持图表组件自由扩展。

其实类似以上数据整合的需求在企业中还有很多,东软数据集成系列产品能够为用户提供不同特征和功能的解决方案,帮助用户挖掘数据价值。

相关产品

2019-01-10T15:13:43+00:00