logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

AI Native Data Stack 系列终篇:数据平台变成智能操作系统之后,数据团队要去哪里?

AI Native Data Stack 的建设,表面上看是数据平台升级,往深处看,其实是企业组织能力升级。它要求企业重新理解几件事:数据不只是资产,也是 AI 推理的事实基础。语义不只是说明文档,也是机器理解业务的接口。模型不只是算法服务,也是需要治理的认知能力。智能体不只是对话入口,也可能成为业务流程里的执行单元。治理不只是合规要求,而是 AI 进入核心业务的前提。数据团队也不只是技术支撑部门

#人工智能#大数据
Data Agent(ChatBI)生产落地:从“能演示”到“可规模化落地”

本文探讨了面向数据分析的对话式智能体(ChatBI/DataAgent)的发展现状与关键技术。文章指出,当前ChatBI正从基础的自然语言转SQL功能向"语义层+治理+Agent工程化"方向演进。为实现生产可用性,系统需具备正确性可控、口径一致、安全合规等工程属性,并推荐采用NL2DSL/NL2Metric架构路线,通过语义层约束模型输出。核心在于构建可治理的语义层,包含指标、

#人工智能
本体论语境下的 Semantic Layer:它在企业 AI 与 Data Agent 构建中的真实作用

现代语义层的重点,已经不仅仅是字段的说明,而是实现度量指标代码化(metrics-as-code)。换句话说,它真正管理的是:指标定义聚合语义可复用的指标有向无环图(DAG)维度约束时间智能规则语义下推能力如果不明确这部分内容,很难全面理解语义层的实际工程价值。因为在企业里,最困难的往往不是“收入”这个名称如何对应,而是更细节的问题,比如:收入是以订单级别还是发票级别为粒度?毛销售额和净销售额的粒

#人工智能#大数据
Apache Iceberg vs Apache Paimon :数据湖表格式深度对比与选型指南

摘要: Apache Iceberg 和 Apache Paimon 是两种主流的数据湖表格式,分别针对不同场景优化。Iceberg 以开放性和多引擎兼容性为核心,v3 版本引入删除向量(BinaryDeletionVectors)、行级血缘(RowLineage)和半结构化支持(VARIANT),适合跨云、多引擎协作的企业级湖仓。Paimon 则基于 LSM-Tree 架构,专为流式处理设计,支

#大数据#spark
[企业数据平台的下一阶段一] 当 Hadoop 拼装架构越来越难支撑 AI,企业真正可行的升级路线,往往不是推倒重来,而是在存量之上做原地加速、旁路验证和渐进式收敛

在很多企业里,Hive 有一份 schema,Kafka 有一份 schema,Elasticsearch、ClickHouse、Redis、应用库、指标平台,各自都有各自的定义。它能生成 SQL,不代表它真的理解业务。所以 Unified Engine 的价值,不是抽象地说“统一”,而是把原本散落在离线、交互式、BI、实时链路之间的重复建设,逐步收回来。但这组数字背后更值得讲的,其实是场景判断:

#hadoop#架构#人工智能
Data Agent:为什么 AI 不只是问数,而是开始接管数据工程(AI Native Data Stack 系列三)

本文系统探讨了AI时代数据工程范式的转型,提出DataAgent正在成为下一代数据工程操作系统的核心组件。文章指出:1. DataAgent超越传统ChatBI,具备业务意图理解、任务规划、工程实施、运行观测和持续优化的闭环能力;2. 其实现依赖三大基础架构:Lakehouse提供统一数据基础设施,SemanticLayer构建企业知识底座,AgentRuntime形成执行体系;3. 行业实践表明

#人工智能#大数据#架构
从 Medallion Architecture 到 AI Native Data Stack:企业数据平台如何从 BI 底座升级为 AI 决策底座

因为 AI 进来之后,企业面对的已经不只是“让更多人看懂数据”。这不是报表层的一次小修小补,更像一次“操作系统级”的重构。过去十年,企业数据平台主要在做一件事:从分散走向统一,从数据仓库走向 Lakehouse。未来三到五年,真正重要的变化,是它会继续从往上长,变成,再进一步变成。

#人工智能#大数据
Agent 应用范式下,企业数据基础设施正在重写:为什么云器 Lakehouse 会成为 AI 时代的数据底座

AI正加速从试验走向企业生产应用,Gartner预测到2026年80%企业将使用生成式AI,AI Agent市场规模将达526亿美元。传统数据基础设施面临三大挑战:时效性不足、语义层缺失、执行闭环能力弱。未来数据平台需向语义数据系统演进,具备统一增量计算、业务语义表达和AI原生能力。云器Lakehouse的创新在于将变化处理、语义理解和AI执行整合,为Agent应用提供实时、低成本的数据底座。企业

#人工智能
[企业数据平台的下一阶段一] 当 Hadoop 拼装架构越来越难支撑 AI,企业真正可行的升级路线,往往不是推倒重来,而是在存量之上做原地加速、旁路验证和渐进式收敛

在很多企业里,Hive 有一份 schema,Kafka 有一份 schema,Elasticsearch、ClickHouse、Redis、应用库、指标平台,各自都有各自的定义。它能生成 SQL,不代表它真的理解业务。所以 Unified Engine 的价值,不是抽象地说“统一”,而是把原本散落在离线、交互式、BI、实时链路之间的重复建设,逐步收回来。但这组数字背后更值得讲的,其实是场景判断:

#hadoop#架构#人工智能
本体论语境下的 Semantic Layer:它在企业 AI 与 Data Agent 构建中的真实作用

现代语义层的重点,已经不仅仅是字段的说明,而是实现度量指标代码化(metrics-as-code)。换句话说,它真正管理的是:指标定义聚合语义可复用的指标有向无环图(DAG)维度约束时间智能规则语义下推能力如果不明确这部分内容,很难全面理解语义层的实际工程价值。因为在企业里,最困难的往往不是“收入”这个名称如何对应,而是更细节的问题,比如:收入是以订单级别还是发票级别为粒度?毛销售额和净销售额的粒

#人工智能#大数据
    共 29 条
  • 1
  • 2
  • 3
  • 请选择