logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

HBase基本架构及原理

1. HBase框架简单介绍HBase是一个分布式的、面向列的开源数据库,它不同于一般的关系数据库,是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。HBase使用和 BigTable非常相同的数据模型。用户存储数据行在一个表里。一个数据行拥有一个可选择的键和任意数量的列,一个或多个列组成一个ColumnFamily,一个Fmaily下的列位于一个HFi..

#hbase
Spark 统一内存管理模型详解

堆内内存(On-heap Memory)默认情况下,Spark 仅仅使用了堆内内存。Executor 端的堆内内存区域大致可以分为以下四大块:Execution 内存:主要用于存放 Shuffle、Join、Sort、Aggregation 等计算过程中的临时数据Storage 内存:主要用于存储 spark 的 cache 数据,例如RDD的缓存、unroll数据;用户内存(Us...

#spark
到底了