logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

RAG体系之Query Enhancement 及下属技术:Query Transformations、HyDE、HyPE

基于大模型的轻量改写**,如查询补全、意图明确化、多义消歧(如把模糊的 “产品性能怎么样?: 输入用户原始查询、调用大模型生成贴合 RAG 场景的「假设提示词(Hypothetical Prompt)」,而非无差别的假设文档、将假设提示词通过嵌入模型转化为向量、用该向量在知识库中检索,匹配真实文档块。通过大模型生成「与用户查询匹配的假设性文档」,用「假设文档的向量」替代「原始查询的向量」进行检索,

文章图片
#人工智能#自然语言处理#知识图谱 +1
Agentic RAG之核心协作类(Agentic RAG with Contextual AI)和基础技术类(包含5种RAG变体)

本文探讨了传统RAG的局限性并提出Agentic RAG解决方案。传统RAG存在单向、固定、一次性的弊端,而Agentic RAG通过工具化、循环决策和多步推理实现了动态优化。文章详细介绍了两种技术类别:核心协作类(如Agentic RAG with Contextual AI)和基础技术类(包含5种RAG变体)。基础技术类重点解决了文档分块、结构化数据处理、结果验证等核心问题,如Reliable

文章图片
#人工智能
预训练模型的微调方法

利用强化学习的方法对已经预训练好的模型进行进一步训练,通过让模型与环境进行交互,根据其行为获得奖励或惩罚信号,并据此调整模型的参数,使其能够更好地完成目标。,底层冻结​​:底层通常学习通用特征(如文本的字符 / 词嵌入、图像的边缘 / 纹理),顶层则学习任务相关特征,所以冻结底层可减少过拟合风险(如BERT的顶层Transformer)。:(Hard Prompt)是指人工设计的模板,在提示工程中

文章图片
#人工智能#产品经理#语言模型
AI产品经理学习之算法评估指标

分类任务指标包括准确率(评估总体正确率)、精确率(减少误报)、召回率(减少漏报)、F1分数(平衡精确率和召回率)、混淆矩阵(全面展示预测结果)以及ROC曲线与AUC(评估分类效果)。回归任务指标包含MSE(对异常值敏感)、RMSE(数值直观)、MAE(抗异常值)和R²(解释变异能力)。聚类任务指标有轮廓系数(评估聚类结构)和调整兰德指数(与真实标签一致性比较)

文章图片
#人工智能#产品经理#机器学习
AI常见优化算法

梳理了优化算法及其适用场景。基础算法包括梯度下降法(BGD、SGD、MBGD),其中MBGD是深度学习最常用的基础优化器。动量优化通过历史梯度加速收敛,适合复杂地形优化。自适应学习率算法(AdaGrad、RMSProp、Adam)可自动调整参数步长,Adam综合性能最优。二阶算法(牛顿法、L-BFGS)计算代价高但收敛快,适合低维问题。智能优化算法(PSO、GA、SA、EA)通过模拟自然现象实现全

文章图片
#人工智能#算法
到底了