
简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
大数据篇(一):实时计算(storm集成kafka的流式处理)讲解
一、大数据技术背景大数据的维度分为五维:大量、高速、多样、精确、价值。大数据背景下,就是将数据集进行清洗处理,得到根据业务场景相关的各项指标。还可以通过开发分析引擎对各种指标的数据进行批处理作业,统计查询等。基本包括两大类型:分布式批处理以及实时计算。分布式批处理,可以看成离线处理,将数据收集到1个月一周或者一天进行处理,不要求纳秒/毫秒响应,应对不要求实时性的海量数据运算。这里不做过多讲...
Vagrant虚拟机安装,磁盘扩容以及局域网内访问教程
1.下载vagrant以及virtualBox配上vagrant,virtualBox线上下载地址:vagrant下载地址virtualBox下载地址2.开始准备安装镜像文件找到需要安装的系统镜像文件,配上vagrant镜像地址:vagrant镜像地址打开所在系统的终端,输入以下命令:$ vagrant box add {title} {url}...
一次oracle数据库大数据表的分区方案设计,以及所踩的坑
1.分区方案的背景设计由于系统架构老旧,模型方案设计时的欠缺,导致分区方案的整改碰到了很多问题,以往使用的是历史归档表的形式归档数据,使得主表数据量减少,核心功能的读写就不会碰到问题,但是缺点时导致数据库表数量增加,账单整理困难,以往历史数据查询连表太多,查询速度太慢等问题,考虑用分区方案解决,分区方案的设计使用了组合分区的形式。2.问题集合1)由于表结构的设计太过集中,没有按照三个范
到底了