logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

LangChain 实现文本分类任务

使用 PydanticBaseModel声明分类任务需要的字段,并通过Field提供描述或枚举约束。LangChain 会返回符合 Schema 的对象。"""定义一个Pydantic的数据模型,未来需要根据该类型,完成文本的分类"""# 文本的情感倾向,预期为字符串类型sentiment: str = Field(description="文本的情感")# 文本的攻击性,预期为1到10的整数de

文章图片
#分类
智能客服文本匹配系统

本文介绍了基于孪生网络和Triplet Loss的文本匹配任务实现。该系统通过构建语义相似度模型,将用户输入问题与标准问题库进行匹配,找到最相似的预设问题。核心内容包括:1) Triplet Loss原理及其在语义匹配中的作用,通过优化同类样本靠近、异类样本远离的约束条件学习区分性特征;2) 展示了实际应用场景的训练数据样例,如"固定宽带服务密码修改"、"停机保号&q

文章图片
#人工智能
构建RAG系统时,如何选择合适的嵌入模型(Embedding Model)?

RAG系统嵌入模型选择核心是精准捕捉文本语义相关性,需多维度权衡。中文、专业领域、多语言/通用场景分别适配专属、领域优化、通用模型,同时平衡语义能力与应用效率,考量向量维度、模型大小对存储、检索及部署的影响,按资源与隐私需求选API或本地部署。通过检索指标和端到端测试验证效果,搭配混合检索、重排序策略优化,做好文本预处理,必要时微调,兼顾向量库兼容性,按成本效益迭代选型。

文章图片
#python#人工智能
LangChain RAG PDF 问答 Demo

本文介绍基于 RAG 的 PDF 问答 Demo,支持用户上传 PDF 后检索相关段落并结合大模型生成答案,核心技术栈含 Chroma 向量库、ChatZhipuAI 大模型、FastEmbedEmbeddings 文本嵌入。核心类 ChatPDF 封装文档入库、检索、问答全流程,通过 ingest () 建索引、ask () 实现问答,RAG 流程保障回答源自指定文档。使用前需配置并通过环境变量

文章图片
#人工智能#深度学习
SFT(监督式微调)

SFT(监督式微调)是大语言模型对齐流程的关键步骤,通过人工标注的"指令-回答"数据对预训练模型进行微调,使其从无目的文本续写升级为有意图的指令响应。本文基于Qwen2-0.5B-Instruct模型实现SFT微调,核心流程包括:1)格式化处理问答数据,使用模型专属分隔符拼接;2)复用预训练模型权重;3)仅计算回答部分的损失进行优化;4)适配训练参数以降低资源消耗。整个流程完整

文章图片
#人工智能
BPE 词表构建与编解码(英雄联盟-托儿索语料)

BPE(Byte Pair Encoding)是一种从字符级别出发的子词分词算法,通过反复合并高频相邻二元组构建词表。本文介绍了简化版BPE的实现过程:1)训练阶段统计语料中字节对频次,按频次从高到低合并并记录规则;2)编码时将字符串转为字节后按训练顺序合并;3)解码时将token id序列还原为字节并拼接。代码包含get_stats统计频次、merge执行合并、build_vocab构建词表等核

#人工智能#深度学习
LangChain RAG PDF 问答 Demo

本文介绍基于 RAG 的 PDF 问答 Demo,支持用户上传 PDF 后检索相关段落并结合大模型生成答案,核心技术栈含 Chroma 向量库、ChatZhipuAI 大模型、FastEmbedEmbeddings 文本嵌入。核心类 ChatPDF 封装文档入库、检索、问答全流程,通过 ingest () 建索引、ask () 实现问答,RAG 流程保障回答源自指定文档。使用前需配置并通过环境变量

文章图片
#人工智能#深度学习
多Agent协作模式

本文介绍了一个基于多Agent协作思想的文章优化系统,通过将复杂任务分解为多个专业化Agent(主题分析、语言优化、内容丰富、可读性评价)分工处理,最后整合生成优化文章。系统采用"分而治之"的设计理念,各Agent聚焦专业领域,协同完成文章质量提升。详细阐述了系统架构、Agent分工和数据流,并提供了Python代码实现,展示了如何调用大语言模型接口完成各环节任务。该系统解决了

文章图片
#人工智能#深度学习
Function Call实战:图书查询助手Agent

本文介绍了一个基于大语言模型Function Call能力的图书查询助手Agent实现。该Agent具备搜索图书、获取详情、查询借阅状态和预约借阅四大功能,通过工具函数与JSON Schema的配合实现智能响应。代码详解了四个核心工具函数(search_books、get_book_detail、check_availability、reserve_book)的实现逻辑,重点包括:参数验证、错误处

文章图片
#人工智能
基于OpenAI与DashScope的AI知识面试模拟系统实现

本文介绍了一个基于大语言模型的AI面试模拟系统实现方案。该系统使用阿里云DashScope平台的QWen-Turbo模型,通过Chat Completion接口实现自动化面试交互。系统特点包括:通过环境变量管理API密钥确保安全性;采用消息列表维护多轮对话上下文;实现健壮的异常处理机制;支持用户通过命令行与AI面试官进行连续问答。该系统为AI学习者提供了结构化的知识测试环境,解决了传统面试模拟的人

文章图片
#人工智能#语言模型
    共 17 条
  • 1
  • 2
  • 请选择