logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

基于 PyTorch + BERT 意图识别与模型微调

意图识别说大白话就是:能够理解提炼用户输入的内容最终目的、意图是什么,能够从用户的自然语言中理解他到底想要做什么!了解了意图识别概念后,接下里先了解一个概念叫做【槽位slot】,槽位是意图识别中的:参数、信息点,是实现具体操作所需的关键数据。当用户输入:发起张三2026年全年的绩效考核任务,就能把该内容理解为【发起考核任务】——> create_task;将2026年1月份任务就行归档,就理解为【

文章图片
#pytorch#bert#人工智能 +2
K8S HPA + KEDA 弹性伸缩消费者解决 MQ 消息积压

相关问题,平时使用最多的 MQ 是 Kafka,消息积压通常指 Consumer Group 的消费速度持续低于 Producer 的生产速度,导致 Lag(滞后量)不断增长,消息在 Topic 的分区中堆积。,就导致消息不断挤压在 MQ 当中,这样就会出现消息消费延迟,导致业务上的数据流转出现不实时现象,对于一些实时性的场景是比较忌讳的,对客户的使用体验来说也是不小的打击。,因为对于消费者组的运

文章图片
#kubernetes#linq#容器 +2
针对 SAAS 私有化部署,如何优雅合并微服务

在 SAAS 系统中,一个非常经典、同时也非常“现实”的部署场景是:客户要求提供私有云部署方案但是对于微服务架构场景,私有云部署的成本是非常大的,例如:对于有些大型SAAS系统来说,一个系统会有几百个、上千个 Docker 容器需要部署启动到客户的私有云环境中,即便是做好了通用的部署方案,部署的成本也是非常高的,无论是人力,还是服务器资源。。假设你的系统中微服务容器有300个,通过合并可能只需要部

#微服务#java#架构
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践

层级核心问题主要作用是否做计算ODS发生了什么?原始落地、可追溯❌DWD这是什么行为?清洗、统一口径⚠️ 轻DWM能不能提前算?中间事实、预聚合✅DWS指标是多少?主题指标汇总✅ADS怎么给人用?查询 / 服务 / 看板❌DWD:ods_user_behavior → 清洗统一 → Kafka(dwd_user_behavior)DWM:dwd_user_behavior → UV 去重 → Ka

#kafka#flink#clickhouse +2
Linux 内核与 Zero-Copy 零拷贝

Linux 系统安全性更高的原因之一就是系统是区分用户态、内核态。如果想要进行硬件调用操作,必须要切换到内核态空间。对于用户进程来说,是没办法操作任何操作系统硬件的。如果当前应用程序需要进行一个文件读写操作(例如 MySQL 写数据到磁盘),该操作需要将数据写入到磁盘,其实就需要转换成内核态,首先将数据写入到的Page CacheLinux 2.4 之前,Kernel Buffer Cache区域

文章图片
#linux#运维
【AI Agent】常用架构模式:ReAct、Plan-and-Execute、Reflection

为什么需要 Agent 架构模式,在传统 LLM 应用中,大模型通常是根据用户输入直接生成答案,这种方式适合简单问答,但在真实业务场景中往往不够用。可以把 AI Agent 理解为:Agent = 大脑 + 手脚 + 记忆 + 主见大脑 LLM:负责理解用户意图、推理分析、生成回答。手脚 Tools:负责调用外部工具、API、数据库、搜索引擎或业务系统。记忆 Memory:负责保存上下文、历史记录

文章图片
#人工智能#架构
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践

层级核心问题主要作用是否做计算ODS发生了什么?原始落地、可追溯❌DWD这是什么行为?清洗、统一口径⚠️ 轻DWM能不能提前算?中间事实、预聚合✅DWS指标是多少?主题指标汇总✅ADS怎么给人用?查询 / 服务 / 看板❌DWD:ods_user_behavior → 清洗统一 → Kafka(dwd_user_behavior)DWM:dwd_user_behavior → UV 去重 → Ka

#kafka#flink#clickhouse +2
【AI Agent】常用架构模式:ReAct、Plan-and-Execute、Reflection

为什么需要 Agent 架构模式,在传统 LLM 应用中,大模型通常是根据用户输入直接生成答案,这种方式适合简单问答,但在真实业务场景中往往不够用。可以把 AI Agent 理解为:Agent = 大脑 + 手脚 + 记忆 + 主见大脑 LLM:负责理解用户意图、推理分析、生成回答。手脚 Tools:负责调用外部工具、API、数据库、搜索引擎或业务系统。记忆 Memory:负责保存上下文、历史记录

文章图片
#人工智能#架构
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践

层级核心问题主要作用是否做计算ODS发生了什么?原始落地、可追溯❌DWD这是什么行为?清洗、统一口径⚠️ 轻DWM能不能提前算?中间事实、预聚合✅DWS指标是多少?主题指标汇总✅ADS怎么给人用?查询 / 服务 / 看板❌DWD:ods_user_behavior → 清洗统一 → Kafka(dwd_user_behavior)DWM:dwd_user_behavior → UV 去重 → Ka

#kafka#flink#clickhouse +2
RAG架构(检索增强生成)与向量数据库

当客户发起提问,首先也会讲问题进行向量化处理,然后才会在向量数据库中进行相似度检索,此时可能会检索出很多内容,还需要进行筛选、排名TopN,对数据进行召回发送给LLM大模型进行参考,最后大模型组织语言对客户问题进行回答。例如我想要把公司知识库的文本数据全部存储到向量数据库中,我就需要将文本通过向量模型(Embedding)进行向量化,数据会被清洗、分块(Chunk)后,存入向量数据库(Vector

文章图片
#数据库#RAG#AI
    共 24 条
  • 1
  • 2
  • 3
  • 请选择