logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

放弃云端API!一套React+WebGPU本地LLM方案,零数据上传、离线可用

做AI前端开发,你是不是长期被云端大模型折磨?频繁调用DeepSeek/OpenAI接口,月度API成本居高不下;用户对话、业务数据全部外传,隐私合规风险巨大;网络差时加载卡顿,断网直接无法使用AI能力。市面上大多教程只教调用远程API,很少完整落地浏览器端本地推理项目。弄懂WebGPU端侧LLM核心优势,对比云端API、Ollama本地部署差异掌握React+TS+Tailwind完整现代化AI

文章图片
#人工智能
搞懂大模型文本处理?7000字实战讲透Token分词与Embedding向量化

本文以实战代码演示大模型处理文本的核心流程:从Token分词到Embedding向量化。首先通过js-tiktoken实现文本与Token ID的双向转换,展示中英文混合文本的分词逻辑;然后利用OpenAI API将文本转化为1024维Embedding向量,并通过余弦相似度计算语义关联性。结果显示,语义相近的文本相似度接近1(0.89),无关文本接近0(0.12)。文章还总结了Token计价、向

文章图片
#人工智能#面试
大模型数据划分踩坑!3步搞定训练/验证/测试集拆分+K折交叉验证实战

本文系统讲解了大模型训练中数据拆分的关键技术与实践方法。首先指出数据质量比算力和算法更重要,强调训练集、验证集、测试集8:1:1划分原则及各自作用。然后以大众点评数据集为例,提供Python代码实现两步拆分法(先拆10%测试集,再从剩余数据拆9%验证集),重点提示随机种子设置和数据格式转换等常见陷阱。针对数据分布不均问题,介绍K折交叉验证方案。最后指出工业级数据管理是动态闭环过程,包括数据清洗、去

文章图片
#算法#人工智能#database
AI编码失控不用慌!4层Harness工程体系,彻底驯服大模型稳定输出

本文介绍了AI开发技术的演进历程,重点阐述了最新的Harness工程解决方案。文章指出,从Prompt工程到上下文工程,再到Harness工程,AI开发能力实现质的飞跃。Harness工程通过四层架构(记忆层、工具调度层、上下文管理层、输出稳定层)系统性地解决了LLM的四大原生缺陷:无状态、无工具能力、输出随机性和上下文受限。其中,记忆层作为基础核心,可通过配置CLAUDE.md文件实现项目规范的

文章图片
#人工智能#大数据
放弃云端API!5套技术栈实战WebGPU端侧AI,前端独立跑本地大模型,省成本还保隐私

端侧WebGPU AI:数据本地推理、低成本、保护隐私,是AI前端新趋势,替代传统云端API。技术栈选型:中大型AI项目首选 React + TS + ESLint,保证工程规范与类型安全。:原子化样式大幅提升开发效率,AI组件库标配,掌握className使用规则即可快速开发页面。React组件本质:函数+JSX,JSX允许JS与HTML混写,是区别Vue模板的核心特征。适用边界:端侧本地模型适

文章图片
#人工智能#前端
零成本隐私AI!1套React+WebGPU端侧模型项目,吃透组件封装、Tailwind、浏览器本地大模型全流程

本文介绍了一种基于WebGPU技术在浏览器本地运行DeepSeek-R1大模型的创新方案,相比传统云端API和Ollama本地部署具有显著优势。通过React+TypeScript+TailwindCSS技术栈实现,项目特点包括:零安装、数据本地闭环、离线可用、无接口费用。文章详细讲解了前端核心实现技术,包括进度条组件封装、WebGPU兼容性处理、React状态管理等,并提供了完整可运行代码。该方

文章图片
#人工智能#react.js#前端
做AI前端开发,你是不是长期被云端大模型折磨?

做AI前端开发,你是不是长期被云端大模型折磨?频繁调用DeepSeek/OpenAI接口,月度API成本居高不下;用户对话、业务数据全部外传,隐私合规风险巨大;网络差时加载卡顿,断网直接无法使用AI能力。市面上大多教程只教调用远程API,很少完整落地浏览器端本地推理项目。弄懂WebGPU端侧LLM核心优势,对比云端API、Ollama本地部署差异掌握React+TS+Tailwind完整现代化AI

文章图片
#人工智能
推理成本高企?5分钟看懂大模型知识蒸馏,小模型复刻大模型90%能力

知识蒸馏核心:以大模型为老师,把概率分布承载的隐性暗知识迁移到轻量化小模型,大幅降低推理成本。软标签是蒸馏效果关键,相比硬标签能完整传递模型类别关联、推理逻辑,是工业落地首选。训练损失必须融合软KL损失+硬交叉熵损失,通过温度、权重两个参数平衡效果。蒸馏是中性技术,开源模型间蒸馏合规;商用付费API抓取输出训练存在协议与法律风险。落地避坑核心:冻结教师梯度、合理设置蒸馏温度、避免仅使用纯硬标签训练

文章图片
#人工智能#大数据
别再被厂商分数忽悠!6大主流大模型Benchmark全拆解,选AI不踩营销坑

别再被厂商PPT忽悠!6大主流大模型Benchmark通俗拆解 Benchmark是AI界的统一高考,通过标准化试题横向对比模型能力。主流评测包括:MMLU测综合知识、GPQA考深度推理、HumanEval/SWE-bench评代码能力、MATH/AIME验数学水平、C-Eval专测中文。厂商常玩3个套路:只晒优势指标、不说明测试条件、混淆门槛分与实用分。需注意:高分可能只是背题,真实业务还需实测

文章图片
#人工智能
爬网页+分块+向量检索,50行JS搭建专属知识库,彻底解决大模型幻觉问题

Loader统一标准化:多源数据统一转为Document,一套逻辑适配所有知识库语义分割是核心:用中文标点优先分割+重叠冗余,平衡长度与语义完整Cheerio简化爬虫:CSS选择器替代复杂正则,快速提取网页正文向量检索解决幻觉:只拿原文相关片段喂给LLM,杜绝凭空编造低成本落地:MemoryVectorStore无需部署向量数据库,本地快速验证RAG效果这套流程不仅能爬网页,替换对应Loader即

文章图片
#javascript#开发语言#ecmascript
    共 50 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择