启数道DataOps

启数道DataOps 基于“数据对象”的数据平台管理技术，可以屏蔽数据存储、数据开发等相关复杂技术，使得在统一的平台上可以完成跨数据平台、跨存储平台的统一数据开发、运营、管理。

启数道DataOps通过多元化的数据技术帮助客户实现快速构建数据能力，搭建业务数据链路，轻松打造业务数据能力闭环，助力企业及时全面的掌握业务现状，最大限度的释放数据价值，用数据驱动企业数字化转型，为企业的经营决策提供有力的数据支撑。

• 开发管理

  • 可视化建模（可选）

    1.基于已有的数据对象，通过可视化拖拉拽，快速定义自己的标签逻辑
    2.标签可以选择落表或只保留逻辑
    3.标签支持流数据接入，从而实现实时计算

  • 数据加工

    1.通过网页端实现快速的sql编写
    2.支持在sql中直接使用数据对象
    3.支持将写好的sql快速发布成一个sql任务

  • 数据模型

    1.支持通过可视化界面进行数据对象的定义
    2.从已有数据源中批量选择的表，快速注册结构成为数据对象
    3.支持将数据对象的结构快速在数仓中生成表
    4.支持快速查看关联表中的数据
    5.支持通过引用数据

  • 数据集成

    可以快速配置shell、qetl、sql、fink、http等等任务，任何任务都可以直接运行查看效果。可以对任务设置超时时间，任务优先级，重试次数等。

• 配置管理

  • 数据血缘（可选）

    1.通过图表，快速展示各个对象间的关系
    2.可以对需要的对象进行关系拓展
    3.在任意对象点击追溯，快速查看已有对象的血缘关系

  • 数据源支持

    支持MySql，Oracle，Hana，Doris，Sqlserver，Hive，Greenplum等外部数据源的定义

  • 数据权限

    权限组可实现系统级的权限控制
    1.报表访问的数据权限
    2.数据分享的行列权限
    3.模板展示中用户能操作的行列权限
    4.系统内所有对象的展示权限
    5.系统内所有对象的按钮操作权限

• 部署管理

  • 传输管理

    1.将已经规划开发好的版本整体导出成文件
    2.将导出文件进行导入，获得版本数据

  • 调度管理

    1.通过DAG图，支持将已有任务，配置成作业流
    2.对作业流进行上下线，定时执行等管理
    3.支持工作流的嵌套
    4.支持逻辑判断节点
    5.支持事件节点

• 系统管理

  • 数据调用日志

    快速查看数据分享接口的调用情况

  • 通知组

    将人员划分为一个通知组，并为这个通知组选择通知策略

  • 通知策略

    配置通知的策略，支持企业微信、邮件、手机、钉钉等

  • 监控中心

    1.创建事件判断逻辑
    2.事件支持将工作流的状态、全局参数的值等做作为判断条件
    3.定义事件触发的后续动作，如发通知，调用工作流等

  • 集成配置

    支持外部系统的信息配置

  • 系统审计

    记录人员的登录，访问等信息

  • 角色管理

    角色的配置操作，可以分配页面以及数据的权限

  • 用户管理

    用户的配置操作

  • 集群管理

    通过图表展示各个服务器的cpu，内存，磁盘等状态和使用率

  • 菜单管理

    配置已有菜单，整理菜单树

  • 参数配置

    1.普通参数，为一个手工写入的值
    2.sql参数：通过一段sql获得参数的值
    3.python参数：通过python代码得到参数值

  • 资源管理

    文本，python脚本，shell脚本，json等格式文件的在线查看和编辑

• 报表门户

  • 工作空间

    工作空间设计：
    通过配置，实现不同的工作空间布局

    工作空间分配：
    1.系统用户自由选择想要的工作空间
    2.支持管理员为指定用户统一分配指定的工作空间

• 开发管理

  • 可视化建模（可选）

    1.基于已有的数据对象，通过可视化拖拉拽，快速定义自己的标签逻辑
    2.标签可以选择落表或只保留逻辑
    3.标签支持流数据接入，从而实现实时计算

  • 数据加工

    1.通过网页端实现快速的sql编写
    2.支持在sql中直接使用数据对象
    3.支持将写好的sql快速发布成一个sql任务

  • 数据模型

    1.支持通过可视化界面进行数据对象的定义
    2.从已有数据源中批量选择的表，快速注册结构成为数据对象
    3.支持将数据对象的结构快速在数仓中生成表
    4.支持快速查看关联表中的数据
    5.支持通过引用数据

  • 数据集成

    可以快速配置shell、qetl、sql、fink、http等等任务，任何任务都可以直接运行查看效果。可以对任务设置超时时间，任务优先级，重试次数等。

• 配置管理

  • 数据血缘（可选）

    1.通过图表，快速展示各个对象间的关系
    2.可以对需要的对象进行关系拓展
    3.在任意对象点击追溯，快速查看已有对象的血缘关系

  • 数据源支持

    支持MySql，Oracle，Hana，Doris，Sqlserver，Hive，Greenplum等外部数据源的定义

  • 数据权限

    权限组可实现系统级的权限控制
    1.报表访问的数据权限
    2.数据分享的行列权限
    3.模板展示中用户能操作的行列权限
    4.系统内所有对象的展示权限
    5.系统内所有对象的按钮操作权限

• 部署管理

  • 传输管理

    1.将已经规划开发好的版本整体导出成文件
    2.将导出文件进行导入，获得版本数据

  • 调度管理

    1.通过DAG图，支持将已有任务，配置成作业流
    2.对作业流进行上下线，定时执行等管理
    3.支持工作流的嵌套
    4.支持逻辑判断节点
    5.支持事件节点

• 系统管理

  • 数据调用日志

    快速查看数据分享接口的调用情况

  • 通知组

    将人员划分为一个通知组，并为这个通知组选择通知策略

  • 通知策略

    配置通知的策略，支持企业微信、邮件、手机、钉钉等

  • 监控中心

    1.创建事件判断逻辑
    2.事件支持将工作流的状态、全局参数的值等做作为判断条件
    3.定义事件触发的后续动作，如发通知，调用工作流等

  • 集成配置

    支持外部系统的信息配置

  • 系统审计

    记录人员的登录，访问等信息

  • 角色管理

    角色的配置操作，可以分配页面以及数据的权限

  • 用户管理

    用户的配置操作

  • 集群管理

    通过图表展示各个服务器的cpu，内存，磁盘等状态和使用率

  • 菜单管理

    配置已有菜单，整理菜单树

  • 参数配置

    1.普通参数，为一个手工写入的值
    2.sql参数：通过一段sql获得参数的值
    3.python参数：通过python代码得到参数值

  • 资源管理

    文本，python脚本，shell脚本，json等格式文件的在线查看和编辑

• 报表门户

  • 工作空间

    工作空间设计：
    通过配置，实现不同的工作空间布局

    工作空间分配：
    1.系统用户自由选择想要的工作空间
    2.支持管理员为指定用户统一分配指定的工作空间