DTinsight-离线开发平台软件

BatchWorks离线开发平台是数据中台中的基座,包含全链路的数据集成、数据开发、周期调度、任务运维、监控告警等功能,具备灵活的多集群、多引擎对接能力。平台拥有多项自研核心技术,帮助企业快速完成数据中台离线计算部分的建设,加速释放数据价值。

商品介绍

产品介绍

离线开发BatchWorks离线开发平台是数据中台中的基座,包含全链路的数据集成、数据开发、周期调度、任务运维、监控告警等功能,具备灵活的多集群、多引擎对接能力。平台拥有多项自研核心技术,帮助企业快速完成数据中台离线计算部分的建设,加速释放数据价值

产品架构

模块介绍

BatchWorks采用先进的大数据生态底层技术,通过Spark等开放的体系架构提供离线计算框架,具备高性能且功能丰富的大数据处理能力,可以最大化地萃取数据价值,完整实现数据应用的闭环。在提供开发环境和平台接口的同时,对大数据离线计算、数据仓库建设、企业图谱等多种应用提供有效支撑。BatchWorks包含如下几个模块:

数据集成

自研分布式同步引擎FlinkX,可在多种异构数据源之间进行海量的数据同步,可视化的页面封装帮助用户便捷地完成数据同步任务配置。

数据开发

丰富的任务类型满足临时查询、周期调度等不同场景下的数据开发需求。

周期调度

基于自研分布式调度引擎DAGScheduleX,可对任务进行灵活的周期性和依赖性调度配置。

运维中心

支持任务运行情况监控、补数据、重跑、告警配置、脏数据管理等。

发布管理

在生产环境和测试环境隔离时,支持一键跨环境发布和导入导出方式进行任务发布。

项目管理

用户管理、角色管理、项目整体配置等。

声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2022年6月8日
下一篇 2022年6月8日

相关推荐

发表回复

登录后才能评论