logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

MCP Server 如何助力 Lakehouse 实现 AI 驱动的 6 大数据应用场景

因为传统数据平台不适合高维向量的相似性搜索,图片等非结构化数据,经模型转换后的特征向量,则必须存入专门的向量数据库(如Milvus)进行索引当需要混合检索时,应用层需先在向量库中进行相似性搜索,获得候选图片ID,再返回数据平台,与主数据进行关联查询。Lakehouse 基于增量计算的一体化引擎,通过 MCP 协议 与 AI 生态工具集成,实现仅凭一句自然语言指令,就能启动数据爬取、完成数据入仓并快

文章图片
#人工智能#大数据#MCP
AI 时代,数据湖的“拐点”与展望

数据湖技术正经历AI驱动的第三次革命,解锁半非结构化数据处理能力。文章从技术架构演进和AI需求视角,探讨数据湖的过去、现在与未来:1)数据湖本质是统一开放的系统,已发展到湖仓一体阶段;2)存储系统转向云对象存储,表格式标准呈现多元竞争;3)AI重塑数据处理范式,推动架构向"召回驱动"转变;4)云器科技推出AI驱动数据湖解决方案,整合多模态数据。未来数据湖将更智能化,企业需关注技

文章图片
#大数据
无需CDP:基于现有数据仓库构建高效用户画像系统

传统的的标签存储和标签计算的技术方案大家推荐都是基于bitmap,云器已经实现了对bitmap的内置支持,bitmap作为标签存储和筛选的虽然计算性能高,但是bitmap仅支持布尔型标签,无法存储数值型标签(如消费金额区间),云器Lakehouse同时提供了倒排索引的能力,可以在解决bitmap短板的情况下,同样提供秒级的的标签筛选能力。其次是用户ID统一的难题。在云器Lakehouse上我们提供

文章图片
#数据仓库
NinjaVan x 云器Lakehouse: 从传统自建Spark架构升级到新一代湖仓架构

摘要:东南亚物流巨头能者物流(NinjaVan)采用云器Lakehouse湖仓一体架构升级原有Spark+Presto开源数据平台,实现了显著性能提升和成本优化。新架构通过数据湖兼容方案免除数据搬迁,支持99%语法兼容实现平滑迁移。实际效果显示:ETL任务性能提升6倍,BI查询提速2-10倍,总成本降低三分之二。动态库存管理支持秒级资源扩容,解决了业务峰谷资源浪费问题。该方案以嵌入式升级方式实现了

文章图片
#spark#架构#大数据
技术深度报道:解析云器Lakehouse如何实现超越Spark 10倍性能提升

云器科技发布TPC-DS基准测试报告,显示其Lakehouse引擎性能超Spark十倍。CTO关涛详解技术路径,指出10倍性能提升来自四大技术创新:C++向量化引擎(3倍)、高级查询优化器(2倍)、直连调度优化(1.3倍)和自适应缓存(1.3倍)。报告强调这些优化充分利用了现代硬件性能,并通过全栈创新实现。云器表示将持续优化,未来计划引入GPU加速等技术,同时提醒用户需结合实际场景验证性能。

文章图片
#spark#大数据#分布式 +2
告别Spark?大数据架构的十字路口与技术抉择

技术十字路口:Spark的升级与替代抉择 Apache Spark作为大数据处理的核心引擎,曾通过RDD、批流统一等创新推动行业发展,但随着业务需求变化和技术演进,其性能瓶颈、实时性不足等问题日益凸显。新一代引擎在批处理、交互分析等场景性能提升显著,而Spark的JVM架构、资源利用率低等问题也制约了企业降本增效的需求。 企业在升级路径上需权衡技术因素(如批流融合、资源弹性)与业务价值(成本优化、

文章图片
#大数据#spark#架构
数美科技的数百TB大数据平台实践:从“1天响应“到“定义即可查”

数美科技基于云器Lakehouse突破大数据分析瓶颈,实现JSON半结构化数据的秒级查询。日均处理100亿次风控请求的背景下,传统架构面临灵活性(Spark查JSON慢)与性能(ClickHouse宽表固化)的根本矛盾。通过JSON类型优化+生成列技术+自动索引,云器Lakehouse让500TB原始JSON数据同时具备灵活查询和宽表级性能,业务响应从"天级"缩短至"

文章图片
#科技#大数据
大数据平台降本增效实践:四大典型场景的成本优化之路

摘要:云器科技提出通过统一架构和通用增量计算(GIC)重构大数据平台,解决企业面临的成本高企和效率低下问题。文章分析了Lambda架构导致的四大痛点:实时加工成本高、资源割裂数据冗余、多组件开发效率低、引擎性能不足,并分别给出创新解决方案。GIC技术将流式计算转化为"主动计算"模式,实现分钟级实时性;VirtualCluster资源管理模式提升资源利用率;Kappa架构统一多场

文章图片
#大数据
从“数据中台“到“数智基建“:一树药业的湖仓架构升级实践

摘要:贵州医药零售龙头一树药业通过云器一体化数据平台重构数据架构,将原有割裂的数据中台与数据底座整合为湖仓一体平台,实现全场景数据时效性统一。该方案显著降低了50%以上的数据成本,同时保障了业务报表性能,解决了传统数据中台响应慢、价值感知弱、成本高的问题。云器Lakehouse采用存算分离架构,支持SQL统一开发,通过透明计费模式让数据成本与业务价值对齐,为企业数智化转型提供了高效灵活的基础设施。

文章图片
#架构#大数据
云器科技亮相AWS亚太双城峰会,以 AI+Data 基础设施加速企业智能化落地

云器科技近日相继亮相2026年AWS香港峰会与上海中国峰会,展示其AI+Data产品云器Lakehouse。核心技术"通用增量计算"可提升ETL效率最高100倍;湖仓加速方案实现零迁移、降本超50%;Agent矩阵与MCP Server让Lakehouse成为AI事实层。双城联动深化AWS生态合作,共同服务企业数据智能化升级。

文章图片
#科技#aws#人工智能
    共 64 条
  • 1
  • 2
  • 3
  • 7
  • 请选择