logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

springboot 使用clickhouse实时大数据分析引擎的方法

声明:因项目中使用clickhouse引擎这里springboot使用的方式是jdbc方式连接,这种方式的好处是可以使用clickhouse 自带的fetch方法批量从clickhouse中获取数据,对于大量数据的下载来说,比较好因为如果全部拿到内存中处理,大量数据会有内存溢出的结果如果批量多次请求数据库对于数据库查询等也不靠谱,所有直接使用clickhouse jdbc连接来满足这种...

docke学习之:安装docker并下载镜像启动容器

背景:在工作开发时,因为某些项目需要分布式的框架或者一些集群,由于开发与op沟通成本和时间问题,常常无法快速得到一个开发可用的测试环境,那么就需要程序员在自己的测试机上安装一些集群和工具,但是由于测试机只有一台,集群例如zookeeper集群无法安装,所以选择使用docker来解决本地测试机搭建可用的开发环境。安装内容:zookeeper集群(三台)mysqlredismon...

#docker
springboot+mybatis连接Postgresql数据库实例

接上篇配好springboot+mybatis+日志。mysql的是比较基础的这里就不写了这里写一下关于配置postgresql数据库需要改哪些首先介绍场景需求。需要连接oushu database 有兴趣的可以看一下官网示例:http://www.oushu.io/docs/ch/programming.htmlspringboot+mybatis 连接postgresql的需求是 数据源来自大

#postgresql
java实现把数据库数据导出成word文件实现文件下载功能

一 html代码:(注必须用标签)class="btn btn-success"  target="_parent" style="margin-top: 5px;">下载报告     截图:二  后台controller方法:   1、       /**       * 下载pc端提交的外访报告       *        * @param

#java
用java实现mybatis的动态创建表、修改表功能

能实现的需求:需求1:要实现一次创建多张表,或者修改表的功能,来减轻手动创建的重复操作需求2:分表功能 根据业务创建不同公司的表一、test类 java代码package org.uz.dxt.service;import java.io.File;import java.io.FileInputStream;import java.io.FileOutputSt

#java#mybatis
mysql百万级以上的数据迁移及优化

需求:将旧数据导入新系统,已知旧数据为580万。由于要做数据迁移工作,已知一个旧表数据为580万条,要导入新库,并且根据新的业务逻辑插入到各个分表,结果就是要将这580万数据分别插入到近100张表中在此也作为我自己的一个工作的整理,下面是我整理的整个思路及各个sql语句,包括优化前后的执行速度对比。一、由于关键字段不在旧表的主表中,所以需要连表查询得到关键的连表字段

#mysql#迁移#sql
clickhouse实时大数据分析引擎的SQL写法详解

 ClickHouse的优点单个查询的并行处理(利用多个核心)多个服务器上的分布式处理非常快速的扫描(参见下面的基准测试),可用于实时查询列存储非常适合使用“宽”/“非规范化”表(许多列)压缩性好SQL支持(有限制)良好的功能集,包括支持近似计算不同的存储引擎(磁盘存储格式)非常适合结构日志/事件数据以及时间序列数据(引擎MergeTree需要日期字段)...

git提交本地代码到本分支仓库和远程分支操作步骤

场景:此处为git初学者操作git提交代码到本地分支和远程开发分支的操作步骤及图解(注:已经安装过git并提交过初始代码之后的代码提交操作)创建本地分支与远程分支例如现在有两个分支,master和developgit checkout master //进入master分支git checkout -b frommaster //以master为源创建分支fromm...

#git
Canal配置connector.subscribe和canal.instance.filter.regex遇到的坑

Canal配置connector.subscribe和canal.instance.filter.regex遇到的坑

#java
mybatis向动态表名,动态属性表中插入数据,更新数据

原文地址:https://www.cnblogs.com/chen-yun/p/9274734.html1.因为在向动态表中插入数据后,要返回主键id,所以我建了实体类。(若是不需要返回主键,则不需要建实体类)xml代码<insert id="insertInfo" parameterType="com.entity.InsertMap" useGeneratedKe...

#mybatis#java#xml
    共 31 条
  • 1
  • 2
  • 3
  • 4
  • 请选择