logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

利用 LLM 推演 MySQL 临时表空间扩张:避免大促期间 ibtmp1 文件撑爆磁盘

在大促峰值(如“双 11”或年终大促)的极高并发流量下,数据库运维最致命的黑天鹅事故之一,并非 CPU 达到 100%,而是磁盘空间在数分钟内被瞬间打爆。ibtmp1。与常规用户数据表空间(.ibd)支持通过释放碎片不同,MySQL 的ibtmp1。在实例运行期间,一旦发生低效复杂查询将百 GB 的临时数据倾倒进ibtmp1,即便该查询被终止(KILL)且连接断开,已经占用的物理磁盘空间也绝不会归

文章图片
#AI#人工智能#云原生 +4
存储引擎原子写入与对齐:Direct I/O 模式下 4KB 扇区对齐的读写性能提升

在设计高性能数据库存储引擎(如 MySQL InnoDB、RocksDB、自研分布式时序引擎)时,许多开发者习惯于依赖操作系统提供的“便利性”,直接使用标准的标准库fwrite或标准系统调用write。在这种默认的缓冲 I/O(Buffered I/O)模式下,写入数据会首先进入内核的页高速缓存(Page Cache)。为了夺回对数据落盘的绝对掌控权,存储引擎必须全面转向O_DIRECT。然而,D

文章图片
#AI#人工智能#云原生 +4
节后开工第一天的冷静:当整个部门都在谈双 11 指标,我们先核对备份集

长假结束后的第一个早会,气氛通常格外亢奋。业务部门在战报里复盘节假日成交数据,产品与运营在白板上密密麻麻写满双 11 的 GMV 目标、跨端裂变玩法与峰值订单预期;研发团队则在争论全链路压测的流量倍数、Redis 缓存集群要不要再扩两倍、微服务熔断降级阈值怎么设。然而,在会议室的角落里,作为经历过多次机房掉电、光缆被挖断与误删核心库事故的资深存储架构师,我的第一反应从来不是跟着狂热,而是调出大盘,

文章图片
#AI#人工智能#云原生 +4
国庆收假前夕的存储底座巡检清单:28 项核心指标防范节后开工流量洪峰

长假最后一日的夜间,是所有核心业务存储系统最具隐患的时刻。长假期间,由于业务流量整体处于低谷,数据库的 Buffer Pool 与操作系统的 Page Cache 往往被假期的离线数据分析、全量数据备份或安全扫描脚本彻底“冲洗”成冷态。随着节后第一个工作日早晨全国业务的集中并发唤醒,积压的数据补偿任务、长周期结算报表以及瞬时涌入的用户登录打卡流量,极易在冷态底座上引发雪崩效应。作为存储架构师,必须

文章图片
#AI#人工智能#云原生 +4
数据库连接风暴防御指南:TCP 半连接队列打满与应用端连接泄漏定位

在微服务架构的大规模滚动重启、流量突增或网络抖动恢复瞬间,数据存储层经常遭遇极具破坏性的“连接风暴(Connection Storm)”。此时系统呈现出一种反常现象:数据库主机的 CPU 与内存利用率可能仅有 30%,但上游数千个应用实例在尝试建立连接时,却密集抛出或。与此同时,已建立的数据库连接数并未达到设定的。这种“外围全线堵死、内核尚未过载”的假象,根源在于操作系统内核网络栈的 TCP 握手

文章图片
#AI#人工智能#云原生 +4
Direct I/O 与操作系统 Page Cache:存储引擎绕过系统缓存的性能边界测试

Direct I/O 与 Page Cache 的取舍,是存储架构设计中“专业化自主管控”与“通用化系统代管”的终极对决。大型数据库与自建缓冲引擎(MySQL, TiDB, RocksDB):必须坚定选择 Direct I/O,将内存分配、预读策略、脏页淘汰与落盘调度牢牢掌握在应用层自己手中,以换取可控的 P99 延迟与确定性的持久安全;流式消息队列与轻量工具:充分信任并利用 Linux 内核强大

文章图片
#AI#人工智能#云原生 +4
电商复杂时间谓词与嵌套子查询:提升 Text2SQL 在财务对账场景的生成精度

在金融与电商财务对账这种容错率为零的核心场景中,把 Text2SQL 当作简单的黑盒端到端翻译是极其危险的技术自负。依靠 Schema 注释锁定时间字段的物理语义,抹除时态模糊性。依靠少样本(Few-Shot)范式引导模型优先采用 CTE 进行局部预聚合。依靠 AST 静态分析强制重写时间谓词,在编译阶段斩断笛卡尔积膨胀。依靠试运行借贷平衡断言实现最后一公里物理验真。只有用确定性的工程规则驯服随机

文章图片
#AI#人工智能#云原生 +4
存储压测与调优月度总复盘:Linux 内核、Direct IO、eBPF 与长稳基准资产

性能调优是一场与底层物理规律的严密对话。把计算机体系结构、操作系统调度与存储介质特性一行一行落实到生产参数中,我们的万亿存储底盘在极限工况下展现出了无可挑剔的极致收敛!

文章图片
#AI#人工智能#云原生 +4
存储系统可观测性终极实践:OpenTelemetry、eBPF 与微秒级指标全景透视

可观测性不是一堆凌乱的图表,而是一张将应用逻辑、网络传输、操作系统内核与物理硬件无缝咬合的数字透视网。搭建起三位一体的可观测中枢,技术团队才能在面对任何未知生产风暴时,永远拥有最从容、最坚定的技术底气!

文章图片
#AI#人工智能#云原生 +4
智能存储排障第四周复盘:从突发切流到 20 条黄金防御与因果图谱

在大促决战周(W4:0921 ~ 0927)的大考中,展现出了前所未有的工程战力。在以往的大促保驾中,值守团队总处于一种“被动挨打、疲于救火”的高压状态;而在本次战役中,依托于我们深度自研的智能排障机器人与因果知识图谱体系,全面系统复盘第四周在智能排障深水区攻下的六大核心阵地。

文章图片
#AI#人工智能#云原生 +4
    共 855 条
  • 1
  • 2
  • 3
  • 86
  • 请选择