maven导出项目中所有依赖jar包开发时我们也许因为各种情况，需要导出maven的所有dependency项，如果去maven仓库找会显的相当繁琐。下面是简单的配置可以帮助我们轻松的得到所有的依赖jar。之前使用：是使用maven-assembly-plugin 插件，发现所有依赖jar全部打到一个jar中，不能满足要求。这里需要添加maven-dependency-plug

准备异常Caused by: java.sql.SQLException: No suitable driver found for jdbc:postgresql://dev-111:5432/report?user=dev&password=123456at java.sql.DriverManager.getConnection(DriverManager.java:689)at j

文章目录分组取每组前n条分组、汇总同时计算表重命名分组取每组前n条数据分析分组展示N行想必大家都不陌生，clickhouse也很方便的提供了相关的查询语法：LIMIT n BY express，我们以系统表为例，用到的属性有数据库名、表名、表大小。-- 数据库分组取每个库下最大的三个表SELECTdatabase,table,formatReadableSize(sum(data_compress

需求在使用ck时，我们难免会遇到跨集群的数据传输，比如数据备份，不同环境同步数据等。之前试过查询出来再写入，数据量少的情况还能接受，超过10w这样效率就显得很低了，而大数据环境下10w当然是不能接受的。所以ck也提供了一种比较高效的方式，直接跨集群传输，减少了io次数，进而大幅度提升效率。方案ck提供remote函数，允许我们去查询远程的服务。（这里要吐槽下ck的文档，目录结构的划分...

文章目录安装metabase配置clickhouse驱动metabase时区配置安装metabase# 选用docker方式，下载镜像docker pull metabase/metabase# 创建插件目录mkdir -p /data/docker/metabase/plugins# 启动容器，将目录挂载到容器/tmp 目录下docker run -d -v /data/docker/metab

查看后台进程-- 这个命令和mysql是一样的show processlist；-- 如果进程太多，也可用通过查询系统表 processes，select * from system.processes;-- 指定主要关心字段selectuser,query_id,query,elapsed,memory_usagefrom system.processes;杀死后...

springboot整合neo4j 执行指令之前上网搜索配置都很凌乱，于是在 springboot neo4j文档 中摸索了下。- pom配置<dependency><groupId>org.springframework.boot</groupId><artifactI...

文章目录前言唯一键批量插入批量插入或更新结尾前言本篇开发环境基于上篇，客户端client使用rest风格的高等级（high level）API，这节我们来讲下ES的批量插入或更新操作。唯一键这里先提个概念，存在则更新。ES是以_id来作为doc的唯一键的，等同于主键，但它没有像关系型数据库的索引，不过我们开始可以利用_id来实现我们唯一索引的目的。当有多个字段需作为唯一键时，我们可以利用h...

本文详细介绍了在 macOS 本地环境下搭建轻量级实时数仓平台的全过程。项目基于 Minikube 单集群，整合了 Apache Flink 1.19.1、Iceberg 1.10.2、MinIO 和 Kafka 等技术栈，实现 Kafka→Flink→Iceberg→MinIO 的数据流处理。文章包含环境准备、组件部署、核心配置及踩坑经验，重点解决了 Flink 与 Iceberg REST C

本文详细介绍了在 macOS 本地环境下搭建轻量级实时数仓平台的全过程。项目基于 Minikube 单集群，整合了 Apache Flink 1.19.1、Iceberg 1.10.2、MinIO 和 Kafka 等技术栈，实现 Kafka→Flink→Iceberg→MinIO 的数据流处理。文章包含环境准备、组件部署、核心配置及踩坑经验，重点解决了 Flink 与 Iceberg REST C