
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
TorchEasyRec 是阿里巴巴开源的基于 PyTorch 的推荐系统深度学习框架,专为构建生产级推荐模型而设计。该框架实现了业界最先进的推荐算法,涵盖召回、排序、多任务学习和生成式推荐等完整链路,支持 20+ 生产级模型(如 DSSM、DIN、DeepFM、MMoE、HSTU 等)和 10+ 特征类型。框架具备强大的扩展能力,支持分布式训练、大规模 Embedding、零冲突 Hash、混合

阿里巴巴开源的大模型推理加速引擎RTP-LLM是一款专为提升大语言模型推理性能而设计的工具。它通过PagedAttention、FlashAttention等优化技术,结合动态批处理和量化方法,显著降低推理延迟和显存占用。该系统支持多种主流开源模型,包括LLaMA、ChatGLM等,并提供多GPU并行、LoRA适配等高级功能。RTP-LLM已在淘宝、高德等阿里系产品中验证其生产环境可靠性,具备灵活

本文介绍了大型语言模型(LLM)应用测试与评估的完整体系,主要包括以下核心内容: 黄金数据集(Golden Dataset):作为标准答案库,用于基准测试、回归测试和模型微调。通过Python代码实现了数据集管理、评估和增强功能。 人工评估系统:设计了评估标准、评分等级和多人评估机制,通过系统化方法收集人工反馈。 A/B测试框架:包含实验设计、流量分配、数据收集和统计分析全流程,支持科学验证模型改

包含四大部分:向量数据库深入 :详解HNSW、IVF、PQ等索引算法,提供完整实现代码,对比Pinecone、Weaviate、Chroma等主流数据库的优缺点和适用场景。LLM安全与对齐 :分析提示词注入、越狱攻击等安全风险,实现输入输出扫描、内容审核系统,构建可信AI防护体系。企业级架构设计 :涵盖微服务架构、API网关、缓存策略、限流熔断、优雅降级等高可用方案,确保系统稳定性和可靠性。性能优

本文摘要: 本文是一篇OpenAI API进阶教程,从基础API调用深入到构建完整AI应用的核心技术。主要内容包括: Embeddings技术:讲解文本向量化原理,实现语义搜索功能 RAG系统:构建检索增强生成系统,让AI基于私有知识库回答 Prompt工程:详解提示词设计原则和高级技巧 Agent开发:实现能自主规划执行的智能体 模型微调:指导如何准备数据和训练专属模型 生产实践:涵盖错误处理、

本文详细介绍了如何使用OpenAI SDK连接多种AI模型的核心方法和技巧。主要内容包括: 核心概念解析:API Key、Base URL、模型名称等基础要素的说明 连接方式差异:OpenAI官方、Azure及国内大模型(通义千问、智谱GLM等)的具体对接方法 多模态模型应用:文本、图像、语音等不同模态的处理技术 高级实践技巧:错误处理、成本控制、异步调用等优化方案 完整代码示例:提供统一封装类和

本教程深入讲解了LangGraph中节点的设计与实现方法。节点作为LangGraph的基本构建单元,本质上是普通的Python函数,具有以下特点:1. 接收状态作为唯一参数,返回更新字典或Command对象;2. 遵循单一职责原则,每个节点只完成一项特定任务;3. 支持同步和异步实现,可灵活处理各类业务场景。教程详细演示了邮件智能体的7个核心节点实现,包括数据节点(read_email)、LLM节

本文深入解析了LangGraph中四种节点类型的特点及应用场景。LLM节点负责调用大模型进行理解、生成和推理,需结构化输出和错误处理;数据节点执行外部查询,具有可缓存性;动作节点修改外部状态,强调幂等性;用户节点等待人工输入,需要检查点机制。文章通过邮件处理案例详细说明各类节点的实现方式,并提供了节点选择决策树和最佳实践指南,帮助开发者构建高质量的智能体系统。

摘要:本文详细介绍了如何用LangGraph构建AI客服系统的流程拆解方法。首先强调需求分析的重要性,通过5个典型场景(如密码重置、Bug报告等)提取处理规律。然后逐步拆解为7个核心节点:读取邮件、分类意图、文档搜索、Bug跟踪、起草回复、人工审核和发送回复,并给出清晰的流程图。重点阐述了节点设计的三大原则:单一职责、合适粒度和明确输入输出,同时提供了检查清单和常见错误示例。最后提出扩展思考题,为

子图是一种将复杂系统模块化的技术,它允许将一个完整的图作为节点嵌入到另一个图中。文章通过乐高积木的比喻,解释了子图如何实现代码复用和组件化开发。核心内容包括两种通信方式(共享状态模式和不同状态模式)的实现方法、多级子图的嵌套结构、持久化配置技巧以及实际应用场景(如多代理系统)。技术实现上详细展示了如何定义子图、添加到父图、处理数据转换,并提供了调试和状态查看的方法。子图特别适用于需要模块化开发、代








