logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Langchain(四)文本嵌入模型(Embedding Model)

文本嵌入模型将文本转换为数值向量,使计算机能够处理语义信息。LangChain框架通过Embeddings类为多种嵌入模型提供统一接口。嵌入模型解决了计算机无法直接理解文本的问题,通过向量化实现语义相似度计算、同义词识别等功能。模型工作原理包括文本分词、神经网络编码和向量生成过程,生成的向量具有语义保持性、上下文敏感性等特点。通过向量空间中的距离计算(如余弦相似度)可评估文本相似度。实际应用中,可

文章图片
四、基于LangChain与HuggingFace Pipeline的本地大语言模型对话系统搭建指南(使用阿里千问-模型)

本文介绍了基于LangChain和HuggingFace的本地大语言模型部署方案,以Qwen1.5-0.5B-Chat为例。重点包括:1)环境配置与模型加载,支持GPU/CPU自动分配;2)构建文本生成Pipeline,详细解析温度值、top_k等关键参数;3)LangChain集成实现多轮对话管理;4)性能优化策略如混合精度推理和量化技术。该方案具有数据安全、成本可控等优势,适用于客服系统、教育

#语言模型#人工智能
RAG(二)基于 LangChain+FAISS + 通义千问搭建轻量级 RAG 检索增强生成系统

RAG(检索增强生成)技术通过结合外部知识检索与大模型生成,解决大模型知识过时、事实错误等问题。本文介绍搭建轻量级RAG系统的完整流程:使用BCE嵌入模型将文本向量化,FAISS构建本地向量库,LangChain编排流程,通义千问大模型生成回答。系统先检索相关知识,再基于上下文生成精准回答,适用于知识库问答等场景。文章包含详细代码实现、关键参数说明及扩展方向,是入门大模型应用开发的实践指南。

文章图片
#服务器#运维
RAG(七)基于 LangChain + 通义千问构建本地化文档问答系统

本文介绍如何使用LangChain框架和阿里云通义千问大模型构建本地化Word文档智能问答系统。系统通过Docx2txtLoader加载文档,RecursiveCharacterTextSplitter进行文本切分,DashScopeEmbeddings生成向量,并存入Chroma向量数据库实现相似度检索。问答链结合检索结果和提示词约束,调用通义千问模型生成精准答案。方案支持扩展多格式文档,可应用

文章图片
#c##数据库#开发语言
四、基于LangChain与HuggingFace Pipeline的本地大语言模型对话系统搭建指南(使用阿里千问-模型)

本文介绍了基于LangChain和HuggingFace的本地大语言模型部署方案,以Qwen1.5-0.5B-Chat为例。重点包括:1)环境配置与模型加载,支持GPU/CPU自动分配;2)构建文本生成Pipeline,详细解析温度值、top_k等关键参数;3)LangChain集成实现多轮对话管理;4)性能优化策略如混合精度推理和量化技术。该方案具有数据安全、成本可控等优势,适用于客服系统、教育

#语言模型#人工智能
十四、基于 BERT 的微博评论情感分析模型训练实践

本文提出了一种基于BERT预训练模型的微博评论情感分析方法,实现了8类情感(喜欢、厌恶、开心、悲伤、愤怒、惊讶、恐惧、无情感)的自动分类。系统采用BERT-base-chinese作为基础模型,通过PyTorch框架构建分类网络,利用CLS token特征进行情感预测。实验使用50,000条微博评论数据,详细介绍了数据预处理、模型训练、验证测试等完整流程。该方法在测试集上取得了较好的分类效果,同时

#bert#人工智能#深度学习
十一、基于 BERT 的中文文本情感分类模型训练全解析

本文详细介绍了基于BERT的中文文本情感分类模型训练全流程,采用模块化设计分为数据加载、模型构建和训练执行三个核心模块。通过ChnSentiCorp数据集,实现了从文本预处理到模型训练的完整闭环。文中重点解析了BERT模型的特征提取机制、PyTorch数据加载规范、以及"冻结预训练层+微调分类头"的训练策略。该方法在保证分类精度的同时降低了训练成本,适合小规模NLP任务落地。文

文章图片
#bert#分类#人工智能 +2
Hbase org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not running yet 报错解决

Hbase org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not running yet 报错解决,hadoop一直处于安全模式解决

文章图片
#hbase#数据库#大数据
Docker部署mysql

Docker 应用部署一、部署MySQL拉取mysql镜像3. 创建容器,设置端口映射、目录映射赋权启动查看运行镜像docker ps查看日志设置开机自动启动/取消开机启动docker update --restart=always 容器IDdocker update --restart=no 容器ID。

文章图片
#docker#mysql
langchain(五)调用本地大模型实现embedding-BCE 嵌入模型本地部署与调用指南

本文介绍了如何下载和使用maidalun/bce-embedding-base_v1双语嵌入模型的完整流程。首先需要注册魔塔社区并搜索该模型,然后安装modelscope、sentence_transformers等必要依赖。文章提供了两种运行模型的方法:通过LangChain框架调用HuggingFaceEmbeddings,以及直接使用SentenceTransformer进行本地推理。两种方

文章图片
    共 53 条
  • 1
  • 2
  • 3
  • 6
  • 请选择