logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

抖音集团基于Flink的亿级RPS实时计算优化实践

本文整理自抖音集团数据工程师陶王飞和羊艺超老师,在 Flink Forward Asia 2024 生产实践(一)专场中的分享主要内容。

文章图片
#flink#java#网络
日均百亿级日志处理:微博基于 Flink 的实时计算平台建设

随着微博业务线的快速扩张,微博广告各类业务日志的数量也随之急剧增长。传统基于 Hadoop 生态的离线数据存储计算方案已在业界形成统一的默契,但受制于离线计算的时效性制约...

阿里重磅开源 Fluss: Flink Unified Streaming Storage

在11月29日举办的 Flink Forward Asia 2024 大会主题演讲上,阿里巴巴正式开源了 Fluss 项目(https://github.com/alibaba/fluss)。阿里巴巴开源委员会副主席王峰先生,在现场进行了 Fluss 项目的开源,赢得了现场观众的热烈反响。Fluss 项目是由阿里云智能 Flink 团队研发的一款面向流分析的下一代流存储,旨在解决流存储在分析方面长

#开源#flink#大数据
2025云栖大会·大数据AI参会攻略请查收!

践,覆盖大模型、AIGC、大数据 AI 一体、数据分析计算、数据开发治理、AI 搜索等多领域,期待与您在云栖小镇相聚,一同探索“阿里云智能集团计算平台事业部负责人 汪军华,带来大数据 AI 平台年度发布,解读大数据 AI 平台各款产品的重大功能升级。9月26日上午,在云栖大会开源大数据分论坛上,阿里云开源大数据团队将带来。云上 Flink 能力的最新技术分享。2025云栖大会·大数据AI。议程已定

#大数据#人工智能
用实时计算释放当下企业大数据潜能

本文整理自阿里云高级产品解决方案架构师王启华(敖北)老师在 Flink Forward Asia 2023 中闭门会的分享。

文章图片
#大数据
Flink Agents:基于Apache Flink的事件驱动AI智能体框架

Apache Flink社区推出全新项目Flink Agents,专注于事件驱动智能体框架的开发。文章分析了AI技术发展的四个层次,指出Flink Agents聚焦于智能体AI的工程化实现,特别适用于实时直播分析、智能运维等场景。项目架构设计支持Python/Java两种语言,提供Workflow和ReAct两种编程模式,并集成主流模型提供商。Flink Agents通过将Flink流处理能力与A

文章图片
#人工智能#flink#apache
Flink基于Paimon的实时湖仓解决方案的演进

本文整理自 Apache CommunityOverCode Asia 2025 大会上,阿里云技术专家,Apache Flink Committer 苏轩楠分享了基于 Paimon构建的 Flink 实时湖仓解决方案持续演进的深刻见解。

文章图片
#flink#大数据
云栖探展 | 大数据AI平台“企业级黑科技”抢先看

ODPS 是阿里云第一款产品,自 2009 年诞生以来,ODPS 见证了大数据技术的飞速发展,不仅支撑了阿里集团电商、金融、物流等核心业务的数据处理需求,还帮助全球客户实现从线下 IDC 到云原生的平滑过渡,从杭州走向世界,用中国技术定义世界标准。” 的现代数据架构演进趋势,为企业提供“实时、准实时、离线”数据分析一体化及 Data + AI 领域的创新实践,新一代的湖流一体的数智平台全面赋能企业

#大数据#人工智能#科技
零售数据湖的进化之路:滔搏从Lambda架构到阿里云Flink+Paimon统一架构的实战实践

新架构构建了完整的数据处理流水线:数据从各类数据源统一接入后,通过 Flink 引擎进行实时和离线的流批一体化处理,处理后的数据统一存储在 Paimon 湖存储中,再通过多种查询引擎提供灵活的数据查询能力,最终为各类业务应用提供实时响应服务。在存储层面,通过湖仓数据一体化存储消除了数据孤岛,实现了真正的统一存储。当前的数据集成与处理流程在实时性方面仍有优化空间,例如通过引入流式处理与更高效的数据同

#零售#阿里云#flink +2
Flink CDC 3.5 正式发布,新增 PostgreSQL Source 和 Fluss Sink 连接器

Flink CDC 3.5 版本中,社区贡献者重点改进了 Pipeline 框架在处理万表同步、元数据协调等场景的性能优化和稳定性改进,扩展了 CDC Pipeline 支持的上下游,新增了读取 PostgreSQL 数据源和写入 Apache Fluss 流存储的能力,解锁了通过简单的 YAML 文本便可实现整库同步 PostgreSQL 的数据到 Fluss 流存储等业务场景。现在,YAML

#flink#postgresql#大数据 +1
    共 189 条
  • 1
  • 2
  • 3
  • 19
  • 请选择