logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

IaaS平台架构(一):价值

IaaS平台架构所谓的IaaS便是在基础设置层面上实现云计算。目前业界比较有名的是亚马逊的EC2。但就纯粹的EC2而言,我感觉似乎还是稍微原始了一点。因为他只提供了虚机(计算能力的载体),另外提供了S3作为存储能力的载体。虽然我们可以利用这两者做许多事情,比如说将我们自己的应用搭建在上面。利用虚机跑应用,同时利用S3作为存储应用的载体。这样,我们可以用它来部署任何类型的应用,从企业应用到网站。

#服务器#apache
Flink Kafka数据写入MySql

之前我们讲过kafka-flink-es的场景,本次我们讲解kafka->flink-mySql,即数据采集存储到kafka,通过flink消费kafka数据,实时计算,结果存储到mySql,这个场景项目接处也是非常多,因为数据很多时候要存储到数据库,下面介绍具体实现过程。环境搭建flink参考Flink环境搭建,令人惊愕的HA,mySql自行安装。代码实现1、pom.xml 引入下面的包&

文章图片
#kafka#mysql#flink
实时数仓-Doris ON ES

原理介绍Doris通过创建外部表方式将Doris的分布式查询规划能力和ES(Elasticsearch)的全文检索能力相结合,提供更完善的OLAP分析场景解决方案,支持:ES中的多index分布式Join查询Doris和ES中的表联合查询,更复杂的全文检索过滤创建ES外表后,FE会请求建表指定的主机,获取所有节点的HTTP端口信息以及index的shard分布信息等,如果请求失败会顺序遍历host

文章图片
#大数据#big data
到底了