logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

RDMA在AI大模型训练集群中的关键应用深度解析:集合通信与梯度同步(必知必会)

本文深度解析RDMA技术在万卡级AI大模型训练集群中的核心应用。从RoCEv2报文结构、GPUDirect RDMA底层机制到DCQCN拥塞控制算法,剖析RDMA如何突破TCP/IP协议栈瓶颈。结合NCCL集合通信原语与3D并行策略,提供H3C交换机与Mellanox网卡的多厂商实战配置指南及性能Benchmark数据,助力工程师构建高吞吐、低延迟的无损AI算力网络。

文章图片
#人工智能#网络#linux +2
AI大模型训练网络优化:从集合通信到拓扑感知调度(深度解析:硬件实现与底层调优)

本文面向DPU/RDMA/NVMe SSD方向的芯片设计与验证工程师,从硬件实现层面深入剖析AI大模型训练网络的全栈优化路径。覆盖RoCEv2报文处理流水线中BTH/RETH/ATH各字段的硬件分发逻辑、DCQCN拥塞控制中Token Bucket Rate Limiter的RTL级实现、NCCL GIN架构中GPU kernel构造WQE并直接敲击NIC Doorbell寄存器的完整通路、Rai

文章图片
NCCL集合通信库RDMA调优实战指南:大模型训练网络底座(必知必会)

本文深度解析NCCL集合通信库在AI大模型训练中的RDMA调优实战。从RoCEv2协议底层原理、DCQCN拥塞控制算法,到NCCL内部Ring/Tree拓扑映射,全面剖析通信机制。提供H3C交换机与Mellanox网卡的多厂商配置指南、内核级源码调用链及性能Benchmark对比。结合十余年DPU/RDMA工程经验,分享PFC死锁排查、参数调优等真实踩坑案例,助力构建高性能无损AI训练网络。

文章图片
#人工智能
SSD寿命预测与健康度监控深度解析:SMART/Health Log、JEDEC JESD218标准、NAND物理退化模型、机器学习RUL预测与Linux内核源码全剖析

SSD寿命预测与健康度监控是企业级存储运维的核心课题。本文从NVMe SMART/Health Information Log(Log Page 02h)协议字段定义出发,深入解析JEDEC JESD218C标准的TBW耐久度评级方法论、NAND闪存P/E循环导致的RBER物理退化模型、Available Spare与Percent Used的计算机制,结合Linux内核nvme驱动源码分析、WD

文章图片
#智能硬件#python#嵌入式硬件 +1
RDMA与容器网络深度解析:K8s环境下的SR-IOV与设备池化(必知必会)

本文深度剖析Kubernetes环境下RDMA网络的硬件实现与工程实践。从芯片级RTL视角拆解SR-IOV在ConnectX-7中的VF上下文分配与Doorbell机制,结合NVIDIA Network Operator与H3C交换机配置,详解K8s中RDMA设备的池化与直通方案。包含寄存器级时序分析、多厂商实战配置及P999尾延迟评测,为构建微秒级低延迟AI/HPC集群提供芯片级指导。

文章图片
#人工智能#python#tcpdump +1
NVMe SR-IOV与I/O虚拟化深度解析:从PCIe VF直通、Namespace隔离到数据中心多租户存储的性能隔离全链路——协议字段、内核源码、fio实测与五大方案架构对比

NVMe SR-IOV是数据中心多租户存储的核心虚拟化技术。本文解析NVMe 2.0 Section 8.26的Primary/Secondary Controller架构、PCIe VF创建与Namespace容量隔离、virt-mgmt I/O Queue资源分配字段,结合Linux内核sriov_numvfs与vfio-pci直通源码,以及Samsung PM1735 fio实测数据,对比v

文章图片
SSD电源管理与掉电保护(PLP)深度解析:NVMe电源状态机、硬件PLP电容架构、固件刷新算法与Linux APST内核实现全链路

SSD掉电是数据完整性的头号杀手。本文深度剖析NVMe 2.0电源状态描述符(32字节PDS、PS0-PS31、APST自动转换表),硬件PLP四层架构(PMIC→VDT→钽电容阵列→固件flush),Exascend/三星/创见/建兴等厂商方案对比,Linux内核nvme_configure_apst源码解析,ATP电容健康诊断机制,以及USENIX FAST 15盘掉电对照实验数据。

文章图片
NVMe协议深度解析:从寄存器到命令队列,拆解SSD高性能的协议基石

NVMe协议是PCIe SSD高性能的软件基石。本文从协议栈分层架构出发,深入拆解NVMe寄存器空间、提交/完成队列的工作机制、六大核心I/O命令的数据流、MSI-X中断与轮询两种模式的设计取舍、Namespace管理模型,以及NVMe 2.0的模块化变革,帮你建立对NVMe协议的完整认知框架。

文章图片
#python#智能硬件#嵌入式硬件 +2
SSD固件Firmware深度解析:固态硬盘的“操作系统“到底在干什么?为什么固件升级能改变性能和寿命?

SSD固件是运行在主控芯片上的嵌入式操作系统,负责FTL地址映射、垃圾回收、磨损均衡、ECC纠错、温度管理等所有底层逻辑。它决定了SSD的性能表现、数据安全和使用寿命。本文从固件的架构分层、核心模块、启动流程、升级机制到安全风险,全面拆解这块"隐藏在硬件中的软件"。

文章图片
#python#人工智能#ubuntu +3
RDMA技术概述:从传统网络到零拷贝通信的革命

本文带你一文读懂RDMA技术!从传统TCP/IP网络的“数据搬运”痛点出发,深度剖析RDMA零拷贝、内核旁路与CPU卸载三大核心优势。文章不仅横向对比了InfiniBand、RoCE与iWARP三大实现方案,还硬核拆解了QP、MR等底层概念,并附带Verbs API实战代码。无论你是HPC老兵还是云原生新人,都能在这里找到通往高性能网络的大门。

#网络#tcp/ip#tcpdump +1
    共 15 条
  • 1
  • 2
  • 请选择