logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

程序员应该熟悉的概念(2)OpenAI API

大名鼎鼎的 **OpenAI** 发布之后,其 **OpenAI API规范** 逐渐成了事实上的工业标准,很多大模型API都兼容这个规范。这也就意味着:OpenAI的SDK可以使用很多大模型。

文章图片
#人工智能
在langchian中使用本地部署的llama3大模型

Ollama是一个工具和框架,主要用于本地部署和使用大语言模型(Large Language Models, LLMs)。它旨在帮助开发者和组织方便地在本地或私有环境中运行和交互这些模型,避免依赖外部API或云端服务,保护隐私并降低成本。langchain可以集成本地化大模型,实现智能问答等各种应用。

文章图片
程序员应该熟悉的概念(7)vLLM和ollama

**vLLM**(Virtual Large Language Model) 和 **Ollama** 都是用于运行大语言模型 **大语言模型/LLM** 的工具,旨在降低本地部署和使用大模型的门槛。应用程序可以通过它们的统一接口,使用不同大模型。

文章图片
#人工智能
大模型的最大特色:涌现能力

涌现能力是在模型参数增加到某一临界点后突然出现的,这些能力包括但不限于语言理解能力、生成能力、逻辑推理能力等,而这种能力是小模型所不具备的。这也是为什么chat GPT出现后让人眼前一亮:和它聊天与真人无异,不像是机器了!这主要应该归功于大模型的涌现能力。

文章图片
#人工智能
本地大模型编程实战(39)MCP实战演练

本文将使用`Visual Studio Code`写一个`MCP服务端`和`MCP客户端`,演示**MCP**的基本功能。

文章图片
#MCP
本地大模型编程实战(04)给文本自动打标签

使用本地大模型可以根据需要给文本打标签,本文介绍了如何基于 `langchain` 和本地部署的大模型给文本打标签。> 本文使用 `llama3.1` 作为本地大模型,它的性能比非开源大模型要查一下,不过在我们可以调整提示词后,它也基本能达到要求。

文章图片
#python
如何选择FAISS的索引类型

本文将在**语义检索**领域探讨更加接近实战的话题:如何如何选择FAISS的索引类型。

文章图片
#faiss#人工智能
程序员应该熟悉的概念(3)MCP简介

**MCP**(Model Context Protocol) 是由 Anthropic 在 2024 年 11 月提出并开源的一个协议标准,目的是统一 AI 模型(尤其是大语言模型) 与外部资源 / 工具 / 数据源之间的交互方式。

文章图片
#人工智能#后端#MCP
到底了