高效能、高扩展的数据开发平台

致力于解决数据采集、数据清洗、数据转换、质量检查、数据计算等过程中错综复杂的数据依赖关系,并进行统一调度和运维监控。
产品白皮书
联系我们

分布式、易扩展的一站式数据处理作业开发与调度

可协作的脚本开发

提供在线编辑器,支持数据开发人员多人协作满足进行数据处理脚本开发工作。支持在线调试和执行结果日志展示,方便快速进行脚本开发和调试。

可视化作业流程编排

提供可视化的DAG作业流程设计器,支持组件拖拽和连线的方式编排数据处理流程。提供作业调试和日志查看功能,保证开发器作业运行的正确性。

丰富的任务类型组件

内置SQL、SHELL 、Spark、Hive、MapReduce、存储过程、离线任务等多种类型的数据计算和处理组件,以及用于控制条件分支、状态分支、子作业流程。

高效能统一调度

支持单次、周期、依赖等多种调度方式,支持秒级、分钟级、小时级、周级、月级等多种周期模式。基于分布式高性能调度引擎、满足多种任务类型混合调度。

作业运维监控

提供查看最近一次的运行状态,支持对作业的多次运行实例进行查看,查看每次实例中不同的任务的执行状态和执行日志。

全类型资源管理

支持统一管理脚本开发和作业开发中所使用的file、jar包、archive等类型文件。并将文件上传至对应的运行环境中,支持文件资源和程序隔离。

提高政务数据治理效能、数据挖掘分析和决策能力

敏捷工具提升开发效率

提供可视化的脚本编辑器和作业流程编排画布,仅使用浏览器即可完成相应数据处理流程的工作,降低操作难度。

服务运行高可靠

去中心化、分布式执行引擎架构设计,任务拆分、任务执行解耦,以及任务队列推送等方式,避免任务过载。

系统高扩展

调度器使用分布式调度引擎,任务拆分和调度能力随着集群水平扩展呈线性增长,满足系统高扩展性。

更多成功案例

某市政务大数据管理平台数据开发项目

每个业务数据计算任务开发由一周时间缩减为一天,有效降低政务数据资源管理成本。
阅读成功案例

加速国务院《政务信息资源共享管理暂行办法》政策落地

应对当前及今后国家政务信息资源共享管理的诸多需求,提供支撑工具。
阅读成功案例

面对不同企业需求, 东软大数据如何放大招?

面对庞大而复杂的IT系统,政府或企业都意识到数据整合已成为投身大数据的重要支撑。
阅读相关内容
在线咨询
联系我们
关注我们