
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
本文全面介绍了大语言模型(LLM)本地化部署的完整流程与关键技术。从硬件需求分析、模型选择到量化技术应用,详细阐述了如何在不同场景下优化部署方案。重点探讨了Ollama等主流部署框架的使用方法,以及GPTQ、GGUF等量化技术对性能和精度的平衡影响。针对常见问题如显存不足、模型加载慢等提供了实用解决方案。文章还分析了本地部署在数据安全、定制化等方面的独特优势,为企业和个人开发者提供了一套完整的实施

OFweek产业研究中心发布具身智能产业蓝皮书,通过对产业链企业表现的分析,客观总结行业现状并预测未来趋势。蓝皮书公布优秀企业榜单,预判热门应用领域及需求空间,涵盖感知传感器、灵巧手等核心厂商的产品技术信息。该报告为企业布局提供参考,助力具身智能机器人产业发展。全文34页,可获取完整PDF版本。

预训练属于迁移学习的范畴。现有的神经网络在进行训练时,一般基于后向传播(BackPropagation,BP)算法,先对网络中的参数进行随机初始化,再利用[随机梯度下降(Stochastic GradientDescent,SGD)]等优化算法不断优化模型参数。而预训练的思想是,模型参数不再是随机初始化的,而是通过一些任务进行预先训练,得到一套模型参数,然后用这套参数对模型进行初始化,再进行训练。

就在昨天,智谱 AI 发布了最新开源模型 GLM4,通过 10T 高质量多语言数据与更先进的训练技术,达到了更加出色的生成效果。在仅有 9B 参数的前提下,在中文能力、长文本能力以及工具调用等任务中达到了更加出色的效果。秉承开源贡献的宗旨,Datawhale团队成员在模型发布12 小时之内,为 编写了GLM-4整套教学流程,包括:模型 api 部署;Langchain 接入;WebDemo 部署;

如果你对大模型感兴趣,可是还未接触过大模型的话,不用着急,本文带你在自己的笔记本上亲自搭建一个大模型出来。本文基于 LLaMA2 模型来进行的,可以快速完成搭建并体验。

OFweek产业研究中心通过组织编撰蓝皮书的形式,从具身智能相关产业链企业近期表现与进展中,以客观的角度对他们总结当前,洞见趋势,聚焦热点和预测未来,为企业布局、产业发展提供了巨大的参考价值。蓝皮书公布了行业内优秀企业榜单,同时对行业未来热门应用领域、需求空间及趋势进行了预判。此外,蓝皮书中还涵盖了感知传感器、旋转执行器、灵巧手、控制与交互、系统集成、结构件核心等核心厂商的产品、技术方案的全方位资

本文提供完整版报告下载,请查看文后提示。文│甲子光年**

《具身智能产业蓝皮书发布:洞见趋势与核心厂商全景》 OFweek产业研究中心发布的具身智能蓝皮书,通过产业链企业分析,客观总结了行业现状并预测未来趋势。报告包含优秀企业榜单、热门应用领域预判及需求空间分析,覆盖感知传感器、灵巧手等核心厂商的技术方案。同时提供AI大模型学习路径,从提示词工程到商业落地,分四阶段培养AI人才。报告显示2025年大模型岗位缺口达47万,初级工程师平均薪资28K,并附完整

深度学习模型从实验室到生产环境的部署面临跨框架兼容性(如PyTorch到TensorFlow转换)和推理性能(实时响应需求)两大核心挑战。解决方案聚焦两大技术:1)ONNX标准化转换实现跨框架模型迁移,通过统一格式解决团队协作与硬件适配问题;2)TensorRT硬件加速优化(层融合/精度校准/并行计算)可使推理速度提升3-10倍。二者结合形成完整部署链路:ONNX作为"万能翻译器&quo

本文详细介绍了如何整合Dify、RAGFlow和LangBot三款工具,构建完全本地部署的企业级智能客服系统。RAGFlow负责知识管理,Dify处理智能体与业务逻辑,LangBot对接多平台。系统支持微信、飞书等常见聊天平台,数据完全保留在内网,满足隐私合规要求,且无需重启即可更新内容。教程提供了详细的安装配置步骤,帮助读者快速搭建自己的本地智能客服中心。








