离线大数据分层，从下往上，分别为：

  1. ODS层 --- 原始数据层，保持数据原貌
  2. DWB层 --- 数据清洗层（DW：Data Warehouse）
    1. 去除空值
    2. 过滤无意义的数据
    3. 数据脱敏
  3. DWA层 --- 宽表层（按照主题进行数据的聚合和加工），例如：
    1. 用户属性表
    2. 用户行为表
    3. 用户动态表
  4. ADS层 --- 指标层，QuickBI、业务从此层出数据

其他一些配置信息：

  1. DIM --- 存放一些字典数据

在这里插入图片描述

# 大数据
Logo
亚马逊云科技技术品牌专区

更多推荐

cover

企业物联网平台如何选择？

avatar 亚马逊云科技技术品牌专区

STM32节点移植lorawan协议连接腾讯云物联网开发平台（IoT Explorer）

STM32移植lorawan协议连接腾讯云物联网开发平台（IoT Explorer）前言前言在移植协议之前，先给大家科普一下Lora 和 lorawan 的区别。LoRa 是LPWAN通信技术中的一种，是美国Semtech公司采用和推广的一种基于扩频技术的超远距离无线传输方案。这一方案改变了以往关于传输距离与功耗的折衷考虑方式为用户提供一种简单的能实现远距离、长电池寿命、大容量的系统，进而扩...

avatar 亚马逊云科技技术品牌专区

从华为的MQTT到TdEngineRPC，解读物联网时代的分布式

今天中秋节，笔者首先祝各位读者们中秋快乐，之所以在今天这个团圆节来谈分布式的话题，就是要聊聊物联网是如何通过MQTT连接各类终端，如何通过RPC整合各种数据的。下面就通过代码+动图的方式来解读一下华为LiteOS的MQTT与TD的RPC。MQTT协议MQTT是一个客户机服务器发布/订阅消息传输协议。它重量轻、开放、简单、易于实现。这些特性使其非常适合在物联网的低带宽、...

avatar 亚马逊云科技技术品牌专区