数据仓库
-
一篇文章搞懂数据仓库:数据仓库架构-Lambda和Kappa对比
在介绍Lambda和Kappa架构之前,我们先回顾一下数据仓库的发展历程: 传送门-数据仓库发展历程 写在前面 咳,随着数据量的暴增和数据实时性要求越来越高,以及大数据技术的发展驱…
-
数据仓库的构建步骤 电商数据仓库
建立数据仓库是解决企业问题的过程。业务人员往往不知道如何建立和使用数据仓库,以及如何发挥他们在决策支持中的作用。IT部门的人往往不了解业务,不知道应该建立什么决策主题,从数据源中提…
-
基于hadoop生态搭建的电商数据仓库,整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化
项目简介 基于hadoop生态搭建的电商数据仓库,整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等。 图片加载失败请查看 电商数据仓库项目简介 详情学习攻略请查看 had…
-
数据仓库&面试总结
一、数据仓库分为几层?负责什么职责?为什么要分层? 1、数据仓库分为4层: ODS层 (原始数据层) DWD层 (明细数据层) DWS层 (服务数据层) ADS层 (数据应用层) …
-
爱奇艺数据仓库平台和服务建设实践
首先介绍一下爱奇艺公司整体的业务情况以及数据仓库1.0的设计和出现的问题,针对数仓1.0的缺陷,是如何演进到数仓2.0架构以及数仓2.0需要解决的问题和需要达成的目标。 这张图非常…
-
数仓入门基础-1-漫谈数仓
数据仓库,英文名称为Data Warehouse,可简写为DW或DWH。数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和…
-
数据仓库架构及数据模型介绍
数据仓库体系和数据模型介绍 一、 数据仓库基础架构 做大数据分析,建立大数据分析体系,首先需要对源数据进行采集,经过一定的整理,转换成统一规范和量纲之后,得到统一的、规范的数据后才…
-
某电商公司数据仓库项目
一、项目背景 公司是一家以女装销售及网红孵化为主的大型电商公司,一年的GMV大约在30亿左右。公司的数据存在多个业务系统(ERP、WMS、SCM、OA)中,由于数据比较大而且分散,…
-
数据处理层中数据仓库的建设
本文将重点探讨数据处理层中数据仓库的建设。早期的数据服务中存在不少问题,虽然在做运营Dashboard系统时,对后台数据服务进行了梳理,构建了数据处理的底层公共库等,但是仍然存在一…
-
什么是数据仓库?
一、什么是数据仓库? 其实很多企业做数据仓库的时候,都忽略了数仓与BI、数据库的差异,只去搞底层数据,不去做数据服务和应用,其实就是把数据仓库给狭义化了。 其实数据仓库可以看成是B…