logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

PyTorch DDP 实战指南:分布式训练底层原理与工程落地(附代码)

本文深入解析PyTorch分布式训练方案DistributedDataParallel(DDP),从原理到实践全面讲解多卡/多机训练方法。首先介绍DDP的核心机制,包括数据并行、梯度同步等关键技术;然后提供单机多卡训练完整示例代码,涵盖环境配置、模型包装、数据采样等关键步骤;接着讲解多机扩展方案及性能优化技巧;最后分析常见问题解决方案。文章指出DDP凭借高效通信机制和简洁API,已成为突破算力瓶颈

文章图片
#pytorch#分布式#人工智能
爬虫登录失效避坑:Cookie 自动刷新与持久化实战方案

本文针对爬虫登录场景中Cookie过期问题提出三种解决方案:1)Cookie持久化存储,适用于有效期较长的场景;2)自动重新登录机制,通过中间件检测并刷新过期Cookie;3)动态Cookie池方案,采用多账号轮换应对高反爬。文章详细剖析了Cookie过期的安全机制和表现特征,并提供了Scrapy框架下的具体实现代码。最佳实践部分强调需根据场景复杂度选择方案,同时注意控制请求频率和合规性。三种方案

文章图片
#python#开发语言
爬虫逆向 Day20-21:Webpack 打包网站 JS 逆向实战

《Webpack打包网站JS逆向实战指南》摘要:本文针对Webpack打包特点,系统讲解JS逆向方法论。核心思路为"模块定位-依赖追溯-逻辑还原"四步法:1)通过调用栈追踪定位加密入口;2)根据模块ID精准提取目标代码;3)递归解析依赖链;4)Python复现加密逻辑。重点剖析了如何识别Webpack特征(自执行函数、__webpack_require__加载器等)、破解混淆手

文章图片
#爬虫#webpack#javascript
LoRA 与 QLoRA 微调深度揭秘:大模型优化的实践与见解

本文探讨了LoRA和QLoRA微调技术在大语言模型应用中的工程实践。LoRA通过冻结主干、训练低秩适配矩阵,可减少90%以上参数,在保持性能的同时实现高效微调;QLoRA进一步引入4-bit量化,显存占用降低至1/4。实验表明,7B模型上QLoRA比LoRA节省70%显存,性能仅降1-2%。文章提供了完整的代码实现框架,包括参数自动调优、混合微调策略及生产部署方案,证明这些技术可使部署成本降低80

文章图片
#人工智能#深度学习#机器学习
从零开始学大模型:2 分钟速通 MCP 与 Agent 核心原理与关联

MCP与Agent协同构建大模型应用核心框架:MCP作为模块化组件平台,通过标准化封装(天气查询、邮件发送等功能组件)解决能力碎片化问题;Agent则作为智能决策中枢,基于大模型进行任务拆解与组件调度。两者形成"Agent决策-MCP执行"的闭环,实现从用户需求到任务落地的完整流程。初学者可从搭建基础MCP接口和开发简单Agent入手,逐步构建复杂任务处理系统。该架构显著降低大

文章图片
#github
AI 生成 Dockerfile:Go 应用镜像大小优化(多阶段构建实战)

本文介绍了使用多阶段构建技术优化Go应用Docker镜像体积的实战方法。传统单阶段构建的Go镜像常因包含编译环境而体积臃肿(约950MB),通过分离编译和运行阶段,可将镜像压缩至10MB以内。文章详细解析了多阶段构建的核心逻辑和关键优化参数,并展示了AI生成Dockerfile的技巧,包括处理静态资源、私有依赖和多平台构建等复杂场景。通过对比测试,优化后的镜像体积减少99%以上,同时启动速度和内存

文章图片
#人工智能#golang#开发语言
Spring Boot+EasyExcel 实战:大数据量 Excel 导出(高效无 OOM)

【摘要】本文介绍使用SpringBoot整合EasyExcel实现百万级数据Excel导出的解决方案。针对传统POI方式易出现内存溢出的问题,提出分批次查询+流式写入的技术方案,通过MyBatis-Plus分页查询数据库,结合EasyExcel的流式处理能力,实现低内存占用的高效导出。文章详细讲解了从环境搭建、代码实现到性能优化的全流程,包括数据模型定义、分页查询实现、响应流处理等核心代码,并提供

文章图片
#spring boot#后端
Jenkins 实现微服务自动化部署:流水线搭建与实战指南

本文介绍如何利用Jenkins实现微服务自动化部署的全流程方案。通过Jenkins流水线(Pipeline)技术,可完成从代码提交、编译构建、镜像打包到多环境部署的自动化流程。重点包括:环境准备(Jenkins安装与插件配置)、Jenkinsfile流水线脚本编写(含参数化部署环境选择)、Docker容器化部署策略,以及针对生产环境的优化建议(如镜像版本管理、安全加固)。该方案有效解决了微服务架构

文章图片
#jenkins#微服务#自动化
微服务架构选型指南:Spring Cloud Netflix 与 Alibaba 核心差异解析

本文对比了SpringCloud Netflix与Alibaba两大微服务生态的核心差异。Alibaba方案(Nacos+Sentinel+Seata)提供一站式解决方案,组件更活跃且适配国内场景,部署运维更简单;Netflix方案(Eureka+Hystrix+Zuul)核心组件已停更,需整合多个独立服务。通过核心组件对比、特性分析和代码示例,建议新项目首选Alibaba生态,存量系统可逐步迁移

文章图片
#架构#微服务#云原生
Java + 鸿蒙双引擎驱动:ZKmall 开源商城定义 B2C 技术新标准实践

本文介绍了ZKmall开源商城的双引擎架构创新,通过Java后端与鸿蒙前端融合,解决传统B2C商城在跨端体验、性能瓶颈和智能化方面的不足。文章详细解析了ZKmall的技术架构设计,包括Java后端微服务集群的高可用实现和鸿蒙前端的跨设备自适应展示。关键技术实现涵盖商品服务模块的缓存策略、分布式事务处理,以及鸿蒙设备特有的功能适配。通过具体代码示例,展示了如何构建高性能、高可用的现代电商系统,为开发

文章图片
#java#harmonyos#开源
    共 135 条
  • 1
  • 2
  • 3
  • 14
  • 请选择