logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

保姆级教程:用Megatron-DeepSpeed在单机多卡上跑通BLOOM风格的大模型训练(附避坑指南)

本文提供了一份详细的Megatron-DeepSpeed单机多卡训练类BLOOM模型的保姆级教程,涵盖环境配置、模型并行策略(张量并行、流水线并行、数据并行)、数据处理、训练调优及常见问题解决方案。通过实战案例和性能优化技巧,帮助开发者在消费级GPU上高效训练大规模语言模型。

保姆级教程:用Megatron-DeepSpeed从零搭建你的第一个大模型训练环境(附避坑清单)

本文提供了一份详细的Megatron-DeepSpeed大模型训练环境搭建指南,涵盖硬件配置、软件安装、并行策略(包括模型并行、张量并行和流水线并行)以及实战训练流程。通过清晰的步骤说明和常见问题解决方案,帮助开发者高效构建分布式训练环境,特别适合需要处理大规模AI模型的团队参考。

别再混淆了!一文搞懂Megatron的张量并行、DeepSpeed的ZeRO与PyTorch DDP到底怎么选

现代大规模模型训练主要依赖三种基本并行范式:数据并行(Data Parallelism)、模型并行(Model Parallelism)和流水线并行(Pipeline Parallelism)。本文将从工程实践角度,系统剖析当前主流的分布式训练技术方案,包括张量并行、流水线并行、数据并行及其混合策略,帮助开发者根据实际场景做出最优技术选型。在最近的一个175B参数模型训练项目中,通过精心调优的3D

#运维
别再只盯着CNN了!用PyTorch手把手复现经典DBN,解锁无监督特征提取新姿势

本文深入探讨了深度信念网络(DBN)在无监督特征提取中的经典应用,通过PyTorch实战演示如何构建DBN模型。文章详细解析了DBN的层次化特征提取优势、对比散度算法实现,并展示了其在工业缺陷检测等场景中的实际效果,为处理无标签数据提供了高效解决方案。

别再死记硬背了!用Python的Control库5分钟搞定梅森增益公式计算

本文介绍了如何利用Python的Control库快速计算梅森增益公式,避免繁琐的手工推导。通过实例演示了从系统框图到代码实现的完整流程,包括环境配置、基础概念、复杂系统处理及工程应用技巧,帮助工程师高效完成自动控制系统的分析与设计。

告别Selenium的繁琐!用Playwright+Python轻松搞定浏览器多标签页切换(附完整代码)

本文详细介绍了如何利用Playwright和Python简化浏览器多标签页切换的自动化测试流程。通过对比Selenium的繁琐操作,展示了Playwright的Page对象模型如何以更简洁高效的代码实现多标签页管理,包括基础操作、高级切换策略和性能优化技巧,助力开发者提升自动化测试效率。

#浏览器
实战:用Playwright模拟用户真实操作,自动切换并抓取多个电商平台商品价格(Python教程)

本文详细介绍了如何使用Playwright和Python实现多电商平台商品价格的自动化抓取。通过模拟真实用户操作,包括多窗口管理、平台登录、智能切换及数据抓取,有效绕过反爬机制。文章还提供了反反爬策略、数据存储与可视化方案,帮助开发者高效构建稳定的比价系统。

别再只会用BurpSuite了!免费神器ZAP保姆级安装与初体验(附Java环境避坑指南)

本文详细介绍了开源渗透测试工具ZAP的安装与初体验,包括Java环境配置避坑指南、多版本选择建议及HUD系统的革命性功能。通过20分钟快速上手教程,帮助安全从业者高效替代BurpSuite,实现零成本、高扩展的渗透测试工作流。

FineReport 10.0 表单控件联动新玩法:用JavaScript实现输入框和下拉框的互斥锁定

本文深入探讨了FineReport 10.0中利用JavaScript实现表单控件互斥锁定的高级技巧,涵盖从基础API到企业级解决方案的全流程。通过状态管理器模式、复合条件锁定等核心设计,帮助开发者构建高效可靠的下拉框与输入框联动机制,提升企业报表开发效率。

别再硬编码密钥了!Java AES加密证件号/手机号的两种实战方案(含完整代码)

本文详细探讨了Java中AES加密在敏感数据保护中的最佳实践,重点分析了硬编码密钥的安全风险,并提供了环境变量注入和密钥管理系统集成两种解决方案。通过完整代码示例,展示了如何实现动态密钥生成和安全加密模块,帮助开发者避免常见的安全漏洞,确保用户证件号、手机号等敏感数据的安全存储。

    共 17 条
  • 1
  • 2
  • 请选择