logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

DeepInfer 产品分析:DeepSeek 把自家“推理引擎“开源了,到底强在哪?

DeepInfer是DeepSeek为支撑每日155万亿token推理而打造的生产级离线推理框架,开源于2026年。它并非实验室产物,而是基于vLLM等框架、经海量流量打磨的工程系统,具备高性能算子库、投机解码、异步调度、批不变性与确定性采样等硬核能力。支持NVIDIA SM100与华为昇腾950双后端,专为DeepSeek-V4.1-Flash优化,适用于评测、生成、长上下文处理等场景。虽仅开放

#开源#人工智能
DeepInfer 产品分析:DeepSeek 把自家“推理引擎“开源了,到底强在哪?

DeepInfer是DeepSeek为支撑每日155万亿token推理而打造的生产级离线推理框架,开源于2026年。它并非实验室产物,而是基于vLLM等框架、经海量流量打磨的工程系统,具备高性能算子库、投机解码、异步调度、批不变性与确定性采样等硬核能力。支持NVIDIA SM100与华为昇腾950双后端,专为DeepSeek-V4.1-Flash优化,适用于评测、生成、长上下文处理等场景。虽仅开放

#开源#人工智能
一个人用 Rust 写了个操作系统,把 AI Agent 当成了“亲儿子“

Veda 是一位开发者用 Rust 构建的 AI 原生操作系统,将智能体(Agent)作为一等公民嵌入系统底层。它通过能力模型微内核、应用动作契约与系统级权限管控,实现智能体以与用户相同路径操作应用,同时强制安全审批机制,确保操作可审计、可控制。尽管依赖云端 AI 服务、生态有限且仅限单人开发,但其在系统设计层面为“可信 AI”提供了闭环范本:不是让 AI 更聪明,而是从根上定义它如何被约束。这是

#rust#人工智能#开发语言
neo4j-3.x性能调优

1.配置优化优化内存配置在neo4j中有两个内存配置项,直接决定了neo4j的性能。在neo4j中最重要的内存的配置有两项:堆内存(Heap size)堆内存是neo4j运行时需要的内存,用于:查询执行事务状态图形管理等堆的大小决定于neo4j的使用性质。配置堆内存的参数如下:dbms.memory.heap.initial_size=16384mdbms.memory...

#neo4j
如何搭建并运行以太坊(Ethereum)私有链

概述本文讲述了如何通过以太坊源码搭建一个以太坊私链,并为该私链添加自己的智能合约。搭建以太坊私有链注意:搭建私有链关键是编写创世块的配置文件,在创始块的配置文件中定义了区块链中第一个区块的内容,完成创始块的配置文件后,需要执行初始化操作,初始化操作会把创始块的信息写入到区块链中,初始化完成后即可启动自己的私有链。下载并编译以太坊客户端geth下载源码通过以下命令下...

#区块链#以太坊#智能合约
通过REST接口来访问Fabric区块链网络

概述​通过REST接口来访问区块链网络,可以屏蔽底层区块链网络的复杂性,减低开发Dapp的难度,快速开发基于区块链的应用。​Fabric官方已经开始提供访问Fabric网络的REST接口,但该接口目前还不是太完善,官方文档明确说明会在后续版本release这些功能。可以参考这里的官方说明。​根据官方文档可以看出,到目前为止,release的版本中只提供了node和ja...

#区块链#fabric
Go语言的channel和死锁

Go中channel产生的死锁阻塞(同步)channel–不带缓冲区的channel阻塞channel要点默认情况下创建的channel是阻塞和不带缓冲区的,例如:ch1 := make(chan int)// 创建一个阻塞的不带缓冲区的channel通过默认方式创建的channel有以下性质:发送操作将会阻塞,直到接收端准备好了。接收操作将会阻塞,直到发...

Llamaindex实战-本地大模型(llama2-chinese)安装和使用

通过ollama来安装llama相关的模型非常方便,也很容易对各个模型进行管理。本文介绍如何通过ollama来安装llama2-chinese模型,或则llama相关的其他模型。

dify实战-源码安装

dify实战-源码安装

#人工智能
llamaindex实战-Agent-让Agent调用多个工具函数(本地部署)

本文介绍如何通过llamaindex的Agent来调用多个自定义的Agent工具函数。同以上系列文章一样,本文不使用openai的接口,完全使用本地大模型来完成整个功能。

文章图片
#人工智能
    共 109 条
  • 1
  • 2
  • 3
  • 11
  • 请选择