这个软件堪称数仓建设神器,让你从此不再发愁

数据仓库的概念由来已久,相信大家早已不再陌生,其主要目的是为管理决策提供数据支撑和依据。于是数仓工具显得尤为重要。

一、什么是数仓

数据仓库以一种新的数据组织架构,整合企业各大业务系统数据,为企业分析型应用提供数据支撑。从结构层面上,数据仓库将事务型应用系统的范式模型转换成面向主题的维度建模,这种结构形式更利于分析展现,从数据层面上,采集各大业务系统数据进行数据集中,并对数据整合转换加载、数据标准化、数据质量提升,从而打破企业数据孤岛、提升数据价值、形成数据资产,数据赋能企业管理决策。

随着互联 的迅猛发展,大数据时代的到来,传统数仓设计理论依然被广泛应用,但是其底层技术框架发生了不小的变化。数据存储由原来常用的传统关系型数据库现在演变成多种存储方式并存如Nosql数据库、NewSql数据库等,数据处理原来更多的是离线批处理,现在也出现了很多实时流处理架构。针对各大企业自身的信息化程度和不同应用场景,建设数据仓库需要针对具体场景选择合适的技术框架。

二、亿信数仓解决方案

服务了7000多家客户的亿信华辰,累计数据项目20000+,其中数据仓库更是重点打造的项目,从公司成立之初就开始帮助企业和政府部门实施数据仓库建设,为打磨产品积累了丰富的经验。亿信华辰提供的数据仓库解决方案,包括有大数据仓库的分布式数据库管理系统PetaBase-i以及大数据实时分析平台PetaBase-V、数仓建模与ETL一体化产品数据工厂EsDataFactory等。

数据工厂EsDataFactory是由亿信华辰全力打造的一款同时满足大中小型数据集成和数据管控的实施利器,它集数据建模和ETL于一体,以低门槛、智能化工作方式帮助企业快速建设数据仓库。其主要特点是内置数仓经典分层,提供多种建模方式快速建模,“零”编程拖拽式ETL开发,支持多种异构数据源、数据处理组件丰富、调度服务灵活、多角度运营监控。

三、成功案例分享

数据工厂到底有什么用呢?话不多说,我们来看看数据工厂在项目上的成功应用。

案例一:某银行数仓建设

为全面满足某银行各项监管 送、分析决策类需求,基于数据仓库和商务智能BI技术,构建数据仓库和数据分析应用平台,为决策者提供数据支持服务。平台整合各业务数据,构建了经逻辑整合的、面向业务主题的综合应用数据仓库,能够支持高扩展性的辅助决策支持体系。通过数据补录手段对业务数据和 表数据分别进行人工补录,全面解决数据缺失、数据质量不高的问题。

使用数据工厂EsDataFactory,通过建模功能构建统一的符合企业数据标准的业务主题模型,通过ETL任务实现多源数据的整合、汇总,并根据业务规则创建数据质量检查体系,解决数据不准确、不一致等质量问题。该项目主要架构如下图:

案例二:国家电 一体化数据应用平台

为建设“三型两 ”,要实现电力流、数据流横向融合和纵向贯通,优先重点做好“大规划”业务技术支撑,而“大规划”体系的技术支撑单位,存在业务涉及面广,支撑部门多,工作中存在信息口径多、重复录入,信息交换困难,孤岛现象严重;业务数据协同、智能分析、辅助决策等深层次分析挖掘和综合利用不够;各项业务系统缺乏流程监控,精益化管理水平有待进一步提高等问题。

为提高信息化和精益化管理水平,建立统一、健全、高效的技术服务体系,亟需在“大规划”体系的技术支撑单位建设贯通各层级、集成各业务、信息高度共享的电 大数据综合管理平台。

电 规划大数据一体化平台拓展覆盖电 规划等全部规划领域,贯穿各层级,打通各环节,建设涵盖规划信息库、输电 规划、配电 规划、电 发展诊断、输电 成果管理和配电 成果管理六大块业务需求的全业务数据中心,全面支撑电 规划设计业务。

平台建设借助i@Report快速搭建数据采集平台,并通过亿信EsDataFactory完成各个业务系统数据的整合清洗,再结合亿信BI实现大规划、大建设成果的集中展示,快速完成数据采集、数据处理、数据应用的一整套流程。

小结:数据仓库作为分析型系统的理论模型被逐渐应用完善,发展到今天,数据仓库已经成为企业信息化建设必不可少的重要支撑。亿信华辰的数仓工具-数据工厂EsDataFactory已成功应用于多个客户,经过无数项目的锤炼,成功证明其价值。

声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2020年4月8日
下一篇 2020年4月9日

相关推荐