logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Prometheus & Grafana:算力中心的“ICU 监控系统”

传统的监控往往是 Agent 主动推 (Push)数据给服务器。但 Prometheus 选择拉 (Pull)好处:Prometheus 掌握主动权。如果某台机器宕机了(挂了),Prometheus 拉不到数据,它立刻就知道这台机器掉线了(Up 状态变为 0)。像极了:护士去病房喊病人,病人不答应,护士马上知道出事了;而不是等病人自己跑来护士站汇报(万一晕倒了怎么汇报?Exporter: 这里的传

#prometheus#grafana
Elasticsearch:大数据的超级索引引擎

关键词:全文检索、倒排索引、ELK。适用:搜日志、做商城的商品搜索框、复杂的报表分析。不适用:频繁更新且要求强一致性的事务系统。

#大数据#elasticsearch#搜索引擎
CSI (Container Storage Interface) 通俗原理解析:K8s 的“万能存储插头”

CSI就是存储界的USB 标准。它让 Kubernetes (操作系统) 和各种各样的存储系统 (U盘、移动硬盘、鼠标) 彻底解耦。运维人员:爽,装个插件就能用各种高端存储。开发人员:爽,不用关心底层是 Ceph 还是 NFS,写好 PVC 就行。存储厂商:爽,再也不用求 K8s 合并代码了。

#kubernetes#容器#云原生
ELK Stack 通俗指南:日志江湖的“神探组合”

ELK 最初只有三个成员,后来加了一个小弟(Beats),所以现在有时也叫。ELK 是给程序员看病的显微镜。没有 ELK,查 Bug 靠猜和翻文件;有了 ELK,查 Bug 靠搜。它是目前业内日志中心的标配。

#elk#jenkins#运维
ZooKeeper 通俗指南:分布式系统的“老干部分管”

ZK 是用来管事儿的,不是用来存大量数据的。它的临时节点机制是很多分布式系统高可用的基石。如果你在搞大数据(Hadoop 全家桶),ZK 是你的必修课。

#zookeeper#分布式#云原生
OIDC (OpenID Connect) 通俗原理解析:你的互联网通用“身份证”

是一种身份认证协议。通俗点说,这就是我们每天都在用的或。它允许你在不向新应用透露密码的情况下,直接使用已有的可信账号登录。

08-Apache Iceberg 通俗指南:给“胡乱堆放”的文件加个“智能账本”

Iceberg就是给杂乱无章的大数据文件系统,请了一位拥有超强记忆力的会计。从此以后,我们不再通过“翻箱倒柜”来找数据,而是通过“查账本”来精准定位。

#apache
05-Spark 通俗指南:为什么要造一辆比 Hadoop 更快的跑车?

老黄牛。稳重、容错性极强(机器挂了接着跑),适合跑那几天几夜的离线批处理,不在乎时间。Spark:法拉利。吃内存(贵),但速度极快,适合迭代计算、机器学习、交互式查询。

#spark#hadoop#大数据
06-Spark 进阶指南:架构原理与 Alluxio 加速

Driver是大脑,Executor是四肢。RDD是个聪明的懒汉,不见Action不撒鹰。Alluxio给数据加了也是内存级的缓存,让 Spark 彻底告别 IO 等待。

#spark#架构#大数据
02-Hadoop 生态圈名角儿:翻译官、管家与索引员

如果把 Hadoop 比作一个大集市Hive是帮你说外语的翻译。HBase是能快速找人的查询台。Zookeeper是维持秩序的保安/广播站。是往里运货的卡车。

#hadoop#大数据#分布式
    共 69 条
  • 1
  • 2
  • 3
  • 7
  • 请选择