转载：https://blog.csdn.net/yidan7063/category_9569417.html

目录离线数据仓库实时数据仓库离线数据仓库ODS：原始数据DWD：详细数据DWS/DM：数据汇总层/数据集市层data markerAPP/ADS:数据应用层实时数据仓库但是会遇到一些问题，什么问题呢？这是实时数仓就进场了：...

目录Flink+实时数仓实时数仓架构Flink+实时数仓实时数仓架构

参考：官网确保你的机器上已安装：Docker（17.06.0 及以上版本）Docker ComposeGit注意直接把docker-compose.yml 下下来运行命令不行，里面涉及到如下：等，所以还是git 下全了。1、下载tidb-docker-composegit clone https://github.com/pingcap/tidb-doc...

参考：xxl-job搭建、部署、SpringBoot集成xxl-job

参考视频：【黑马程序员】大数据新时代：基于Flink的实时数仓架构大数据应用数据运营、用户画像、推荐系统、金融风控、机器学习、数据挖掘.....大数据的业务流程大数据的技术学习路线大数据的本质...

目录概述jenkins中安装gitlab插件jenkins中安装sonar插件jenkins重启jenkins中的相关配置JDK配置Maven配置在gitlab中创建访问token在jenkins中配置gitlab插件在soanrQube中生成token在jenkins中配置sonar插件1、系统设置2、全局工具配置在jenkins中配置任务...

在flink中没有现成的用来写入MySQL的sink，但是flink提供了一个类，JDBCOutputFormat，通过这个类，如果你提供了jdbc的driver，则可以当做sink使用。JDBCOutputFormat其实是flink的batch api，但也可以用来作为stream的api使用，社区也推荐通过这种方式来进行。JDBCOutputFormat用起来很简单，只需要一个prepare

1、程序结构2、domain-聚合根、实体、值对象、领域服务的创建2.1、聚合根Leave.java/*** 请假聚合根** @author steven* @date 2021/07/31*/public class Leave {String id;//聚合根IDDate startTime;Date endTime;long duration;ApprovalInfo approvalInf

参考：https://www.cnblogs.com/frankdeng/p/9400622.html这几年大数据的飞速发展，出现了很多热门的开源社区，其中著名的有Hadoop、Storm，以及后来的Spark，他们都有着各自专注的应用场景。Spark掀开了内存计算的先河，也以内存为赌注，赢得了内存计算的飞速发展。Spark的火热或多或少的掩盖了其他分布式计算的系统身影。就像Flin...