logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

实战:用Playwright模拟用户真实操作,自动切换并抓取多个电商平台商品价格(Python教程)

本文详细介绍了如何使用Playwright和Python实现多电商平台商品价格的自动化抓取。通过模拟真实用户操作,包括多窗口管理、平台登录、智能切换及数据抓取,有效绕过反爬机制。文章还提供了反反爬策略、数据存储与可视化方案,帮助开发者高效构建稳定的比价系统。

AI Agent安全三道坎:执行隔离、意图校验与人类监督

AI Agent本质上是将大语言模型(LLM)输出映射为真实世界动作的系统,但LLM作为概率性文本生成器,天然不具备确定性与可信性。其核心安全风险源于‘LLM输出直执行’这一设计原罪,导致提示词注入可轻易触发任意代码执行。解决路径在于三层防御:通过沙箱或契约化执行实现执行环境隔离,借助结构化Tool Call与JSON Schema校验建立意图-动作强约束映射,再以安全等级路由、审计留痕和实时熔断

保姆级教程:用Megatron-DeepSpeed在单机多卡上跑通BLOOM风格的大模型训练(附避坑指南)

本文提供了一份详细的Megatron-DeepSpeed单机多卡训练类BLOOM模型的保姆级教程,涵盖环境配置、模型并行策略(张量并行、流水线并行、数据并行)、数据处理、训练调优及常见问题解决方案。通过实战案例和性能优化技巧,帮助开发者在消费级GPU上高效训练大规模语言模型。

保姆级教程:用Megatron-DeepSpeed从零搭建你的第一个大模型训练环境(附避坑清单)

本文提供了一份详细的Megatron-DeepSpeed大模型训练环境搭建指南,涵盖硬件配置、软件安装、并行策略(包括模型并行、张量并行和流水线并行)以及实战训练流程。通过清晰的步骤说明和常见问题解决方案,帮助开发者高效构建分布式训练环境,特别适合需要处理大规模AI模型的团队参考。

别再混淆了!一文搞懂Megatron的张量并行、DeepSpeed的ZeRO与PyTorch DDP到底怎么选

现代大规模模型训练主要依赖三种基本并行范式:数据并行(Data Parallelism)、模型并行(Model Parallelism)和流水线并行(Pipeline Parallelism)。本文将从工程实践角度,系统剖析当前主流的分布式训练技术方案,包括张量并行、流水线并行、数据并行及其混合策略,帮助开发者根据实际场景做出最优技术选型。在最近的一个175B参数模型训练项目中,通过精心调优的3D

#运维
别再只盯着CNN了!用PyTorch手把手复现经典DBN,解锁无监督特征提取新姿势

本文深入探讨了深度信念网络(DBN)在无监督特征提取中的经典应用,通过PyTorch实战演示如何构建DBN模型。文章详细解析了DBN的层次化特征提取优势、对比散度算法实现,并展示了其在工业缺陷检测等场景中的实际效果,为处理无标签数据提供了高效解决方案。

别再死记硬背了!用Python的Control库5分钟搞定梅森增益公式计算

本文介绍了如何利用Python的Control库快速计算梅森增益公式,避免繁琐的手工推导。通过实例演示了从系统框图到代码实现的完整流程,包括环境配置、基础概念、复杂系统处理及工程应用技巧,帮助工程师高效完成自动控制系统的分析与设计。

告别Selenium的繁琐!用Playwright+Python轻松搞定浏览器多标签页切换(附完整代码)

本文详细介绍了如何利用Playwright和Python简化浏览器多标签页切换的自动化测试流程。通过对比Selenium的繁琐操作,展示了Playwright的Page对象模型如何以更简洁高效的代码实现多标签页管理,包括基础操作、高级切换策略和性能优化技巧,助力开发者提升自动化测试效率。

#浏览器
实战:用Playwright模拟用户真实操作,自动切换并抓取多个电商平台商品价格(Python教程)

本文详细介绍了如何使用Playwright和Python实现多电商平台商品价格的自动化抓取。通过模拟真实用户操作,包括多窗口管理、平台登录、智能切换及数据抓取,有效绕过反爬机制。文章还提供了反反爬策略、数据存储与可视化方案,帮助开发者高效构建稳定的比价系统。

别再只会用BurpSuite了!免费神器ZAP保姆级安装与初体验(附Java环境避坑指南)

本文详细介绍了开源渗透测试工具ZAP的安装与初体验,包括Java环境配置避坑指南、多版本选择建议及HUD系统的革命性功能。通过20分钟快速上手教程,帮助安全从业者高效替代BurpSuite,实现零成本、高扩展的渗透测试工作流。

    共 17 条
  • 1
  • 2
  • 请选择