logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

有赞 Flink 实时任务资源优化探索与实践

背景随着 Flink k8s 化以及实时集群迁移完成,有赞越来越多的 Flink 实时任务运行在 K8s 集群上,Flink k8s 化提升了实时集群在大促时弹性扩缩容能力,更好的降低大促期间机器扩缩容的成本。同时,由于 K8s 在公司内部有专门的团队进行维护,Flink k8s 化也能够更好的减低公司的运维成本。不过当前 Flink k8s 任务资源是用户在实时平台端进行配置,用户本身对于实时任

#flink#java#kafka
Flink 实时计算 -- 1.9 SQL使用注意点

前言Flink 1.9 版本开源了很多 Blink 方面的功能,尤其是在 SQL 方面,这使得我们在开发 Flink 实时任务变得更加方便。目前 Blink SQL 支持了 Create Table 功能,以及维表的功能。我们的实时任务整体流程为,读取Kafka的数据,然后去关联 HBase 维表的数据,最后在输出到 Kafka 中,虽然整体流程跑通,但是其中也遇到了很多坑,这里记录一下,和大家.

#flink#大数据#sql
我是如何参与 Apache Calcite 社区并成为 Committer 的

参与社区,重要的是能够持续的参与,这样你才能够让其他社区同学对你有影响,然后慢慢的记住你,社区的 PMC 其实也会关注每天在社区活跃的同学,对于在社区活跃的同学,如果贡献够了,PMC 也会帮你进行 Commiter 的提名。个人一个好的经验就是:你可以想一想自己平时工作中,接触到的和使用最多的开源项目是什么,结合工作以及实践,参与进来,在了解原理的同时,既能够帮助你更好的解决业务侧的问题,同时你平

文章图片
#apache#开源#开源软件
到底了