logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据 hive 记录 窗口函数 求占比

有个需求 统计每天的类型和占比绑定渠道绑定人数统计日期占比占比是每天的每个渠道数/每天的总数首先查出来渠道,人数,日期 hql是select case bind_typewhen 1 then '二维码绑定'when 2 then '邀请码绑定'when 3 then '领取优惠券绑定'when 4 then '分享链接绑定'end bindtype,substring(bind_date,0,1

#hive
分布式服务之分布式缓存(layering-cache)

很多高性能高并发的优化最有效果的优化就是做缓存,缓存又分本地缓存和分布式缓存,分布式缓存大多数用redis,但是高并发下的redis有时候网络消耗多的时候也扛不住,于是redis又可以做分布式redis,增加redis的服务器节点和配置,但是这个成本也比较高,其实完全可以用本地缓存+redis缓存结合的方式,保证高并发下的响应速度。下面是git上一个本地缓存(一级缓存)+r...

#redis#缓存#分布式
大数据(二)flink 1 概念介绍

Flink介绍:Apache Flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算。2015年升级为Apache的顶级项目,然后突然爆发,之后被阿里收购。基本上国内说得出名字的大厂都在用flink。Flink特点:1,事件驱动:根据数据的到来触发一系列的计算,输出等。2,流处理和批处理批处理的特点就是 有界,持久,量大,非常适合做离线计算流处理的特点就是 无界,实时,无需针对

dubbo,springcloud,k8s 几种微服务比较 云计算K8S一些介绍

前言:之前在研究监控系统:Prometheus,它是云全球云原生基金的第二大项目,然后带出第一大 Kerbernates,然后就开始研究K8S微服务框架是知道阿里的duboo,Netflix的springcloud,这些都是大厂研发并且在各自的公司实施生产稳定的架构,最近2年又出了k8s,开始只了解这东西是google大厂出来做服务编排管理的,后来这东西又归于云计算的一种,最近在看杨波老师的视频《

#微服务#云计算#kubernetes
到底了