logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据之Scala

Scala入门简介scala 是一门以 jvm 为运行环境的静态类型编程语言,具备面向对象及函数式编程的特性六大特征Java 和 scala 可以混编类型推测(自动推测类型)并发和分布式( Actor )特质,特征(类似 java 中 interfaces 和 abstract 结合)模式匹配(类似 java 中的 switch…case )高阶函数Scala应用场景kafka :分布式消息队列,

#scala#big data#java +1
Storm大数据实时计算框架

StormDAG有向无环图Directed Acyclic Graph(DAG)它由有限个顶点和有向边组成,每条有向边都从一个顶点指向另一个顶点;从任意一个顶点出发都不能通过这些有向边回到原来的顶点。有向无环图就是从一个图中的任何一点出发,不管走过多少个分叉路口,都没有回到原来这个点的可能性条件每个顶点出现且只出现一次若存在一条从顶点 A 到顶点 B 的路径,那么在序列中顶点 A 出现在顶点 B

#big data#storm#大数据
HBase大数据分布式数据库

HBaseHBase介绍简介是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库利用Hadoop HDFS作为其文件存储系统利用Zookeeper作为其分布式协同服务主要用来存储非结构化和半结构化的松散数据(列存 NoSQL 数据库)优点容量大单表可以有百亿行、百万列面向列数据在表中是按照某列存储的,这样在查询只需要少数几个字段的时候,能大大减少读取的数量多版本每一个列的数据存储有多个V

#hbase#数据库#big data +1
大数据之Kafka看这一篇就够了

Kafka异步通信原理观察者模式观察者模式(Observer),又叫发布-订阅模式(Publish/Subscribe)定义对象间一种一对多的依赖关系,使得每当一个对象改变状态,则所有依赖于它的对象都会得到通知并自动更新。一个对象(目标对象)的状态发生改变,所有的依赖对象(观察者对象)都将得到通知。生产者消费者模式传统模式生产者直接将消息传递给指定的消费者耦合性特别高,当生产者或者消费者发生变化,

#kafka#big data#java +1
到底了