数据中台、数据仓库、数据湖和BI事实有什么区别

3天前 (02-24 07:52)阅读1回复0
小强
小强
  • 管理员
  • 注册排名8
  • 经验值130130
  • 级别管理员
  • 主题26026
  • 回复0
楼主

一、数据仓库

数据仓库平台逐渐从BI报表为主到阐发为主、到揣测为主、再到操做智能为目标。

图1.数据仓库开展阶段划分

商务智能(BI,Business Intelligence)是一种以供给决策阐发性的运营数据为目标而成立的信息系统。是属于在线阐发处置:On Line Analytical Processing(OLAP),将预先计算完成的汇总数据,贮存于魔方数据库(Cube) 之中,针对复杂的阐发查询,供给快速的响应。在前10年,BI报表项目比力多,是数据仓库项目标前期预热项目(次要阐发为主的阶段,是数据仓库的初级阶段),造造一些可视化报表展示给治理者。

它操纵信息科技,将分离于企业内、外部各类数据加以整合并转换成常识,并根据某些特定的主题需求,停止决策阐发和运算;

用户则通过报表、图表、多维度阐发的体例,觅觅处理营业问题所需要的计划;

那些成果将呈报给决策者,以撑持战略性的决策和定义组织绩效,或者融进智能常识库主动向客户推送。

数据仓库(Data Warehouse)是一个面向主题的(Subject Oriented)、集成的(Integrated)、相对不变的(Non-Volatile)、反映汗青改变的(Time Variant)数据聚集,用于撑持治理决策和信息的全局共享。其次要功用是将组织透过资讯系统之联机事务处置(OLTP)经年累月所累积的大量材料,透过数据仓库理论所特有的材料贮存架构,做一有系统的阐发整理,以利各类阐发办法如联机阐发处置(OLAP)、数据发掘(Data Mining)之停止,并进而撑持如决策撑持系统(DSS)、主管资讯系统(EIS)之创建,搀扶帮助决策者能快速有效的自卑量材料中,阐发出有价值的资讯,以利决策拟定及快速回应外在情况变更,搀扶帮助建构贸易智能(BI)。[1]:引自全球数据仓库之父 W.H.Inmon。

图2.数据仓库逻辑架构

展开全文

图3.数据仓库的感化

图4.数据仓库供给价值

图5.数据仓库产物构成

图6.数据仓库产物构成

二、数据湖

数据湖(Data Lake)是Pentaho的CTO James Dixon提出来的(Pentaho做为一家BI公司在理念上是挺先辈的),是一种数据存储理念——即在系统或存储库中以天然格局存储数据的办法。(CXO UNION(CXO联盟)、数字化转型网(szhzxw.cn)、中国数字化转型展、华东CIO大会、CDLC中国数字化灯塔大会、CXO数字化研学之旅、数字化江湖-讲武堂,数字化江湖-大侠传、数字化江湖-论剑、CXO系列治理论坛(陆家嘴CXO治理论坛、宁波东钱湖CXO治理论坛等)、数字化转型网,走进灯塔工场系列、ECIO、iTdaily 、It司理人、CIO操练营、数字化江湖等)

数据湖(Data Lake)是一个存储企业的各类各样原始数据的大型仓库,此中的数据可供存取、处置、阐发及传输。数据湖是以其天然格局存储的数据的系统或存储库,凡是是对象blob或文件。数据湖凡是是企业所有数据的单一存储,包罗源系统数据的原始副本,以及用于陈述、可视化、阐发和机器进修等使命的转换数据。数据湖能够包罗来自关系数据库(行和列)的构造化数据,半构造化数据(CSV,日记,XML,JSON),非构造化数据(电子邮件,文档,PDF)和二进造数据(图像,音频,视频)。来源:维基百科。

目前,Hadoop是最常用的摆设数据湖的手艺,所以良多人会觉得数据湖就是Hadoop集群。数据湖是一个概念,而Hadoop是用于实现那个概念的手艺。

图7.数据湖的处置架构

图8.数据湖示企图

图9 数据仓库、数据湖的区别

本文节选自数字化转型展

CXO联盟(CXO union)是一家聚焦于CIO,CDO,cto,ciso,cfo,coo,chro,cpo,ceo等人群的平台组织,此中在CIO会议范畴的领头羊,目前举办了大量的CIO大会、CIO论坛、CIO活动、CIO会议、CIO峰会、CIO会展。如华东CIO会议、华南cio会议、华北cio会议、中国cio会议、西部CIO会议。在那里,你能够参与大量的IT大会、IT行业会议、IT行业论坛、IT行业会展、数字化论坛、数字化转型论坛,在那里你能够熟悉良多的首席信息官、首席数字官、首席财政官、首席手艺官、首席人力资本官、首席运营官、首席施行官、IT总监、财政总监、信息总监、运营总监、摘购总监、赐与链总监。

数字化转型网()是聚焦于数字化转型的资讯媒体,是企业数字化转型的必读参考,在那里你能够进修大量的常识,如财政数字化转型、赐与链数字化转型、运营数字化转型、消费数字化转型、人力资本数字化转型、市场营销数字化转型。通过存眷我们的公家号,你就晓得若何实现企业数字化转型?数字化转型若何做?

【CXO UNION部门社群会员】万向集团公司CEO、冀南钢铁集团CEO、中天钢铁集团CEO、北京电子控股CEO、比亚迪股份CEO、敬业集团CEO、TCL集团股份CEO、海信集团CEO、超威电源集团CEO、海澜集团CEO、无锡财产开展集团CEO、北京金隅集团股份CEO、河北津西钢铁集团股份CEO、中国重型汽车集团CEO、山东东明石化集团CEO、雅戈尔集团股份CEO、南山集团CEO、中国黄金集团CEO、江阴澄星实业集团CEO、四川省宜宾五粮液集团CEO、利市集团CEO、杭州钢铁集团CEO、新华联集团CEO、酒泉钢铁(集团)CEO、协鑫集团CEO、广西柳州钢铁集团CEO、辽宁方大集团实业CEO、日照钢铁控股集团CEO、河北新华结合冶金控股集团CEO、长城汽车股份CEO、万达控股集团CEO、江铃汽车集团CEO、传化集团CEO、宁波金田投资控股CEO、江苏悦达集团CEO、利华益集团股份CEO、中兴通信股份CEO、扬子江药业集团CEO、内蒙古伊利实业集团股份CEO、贵州茅台酒股份CEO、正邦集团CEO、徐州工程机械集团CEO、包头钢铁(集团)CEO、三一集团CEO、晨喊控股CEO、中国国际海运集拆箱(集团}股份CEO、杭州锦江集团CEO、通威集团CEO、正泰集团股份CEO、太原钢铁(集团)CEO、天津荣程祥泰投资控股集团CEO、桐昆控股集团CEO、河北普阳钢铁CEO、山东黄金集团CEO、云南锡业集团(控股)CEO、奇瑞控股集团CEO、华泰集团CEO、陕西汽车控股集团CEO、金鼎钢铁集团CEO、奥克斯集团CEO、温氏食物集团股份CEO、三房巷集团CEO、红豆集团CEO、盘锦北方沥青燃料CEO、云天化集团CEO等

0
回帖

数据中台、数据仓库、数据湖和BI事实有什么区别 期待您的回复!

取消
载入表情清单……
载入颜色清单……
插入网络图片

取消确定

图片上传中
编辑器信息
提示信息