logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

mysql 高并发 千万级大数据量 limit 分页查询优化

其中需要对where条件增加索引,id因为是主键自带索引。select返回减少回表可以提升查询性能,所以采用查询主键字段后进行关联大幅度提升了查询效率。当where条件后的结果集较大并且页数达到一个量级整个SQL的查询效率就十分低下(哪怕where的条件加上了索引也不行)。优化思路:先走覆盖索引定位到,需要的数据行的主键值,然后 INNER JOIN回原表,取到其他数据。

文章图片
#mysql#sql
github hosts 最新地址

https://cdn.jsdelivr.net/gh/521xueweihan/GitHub520@main/hosts 文件。https://raw.hellogithub.com/hosts 文本类型直接访问查看。使用 SwitchHosts 工具配置hosts。一、最新github host 获取方式。二、host配置和更新方法。

#github#git
Intellij IDEA plugin 开发最常用插件

lombok pluginp3c阿里巴巴代码检查工具GsonFormat json和java对象转换工具GenerateAllSetter new 对象 赋值时 自动生成对象的所有setFindBugs-IDEA自动扫描项目中的bugVisualVM Launcher 启动java项目时 自动启动jvisualvm监控内存占用Mybatisxmybatis自动生成工具.........

#idea#java#单元测试
docker 部署 phpMyAdmin 数据库可视化工具

docker run --name=phpadmin --hostname=b11ea9728bd7 --mac-address=02:42:ac:11:00:02 --env=PMA_HOSTS=s1.com.cn,s2.com.cn,s3.com.cn, --env=PMA_PORTS=4335,7915,6066 --env=PATH=/usr/local/sbin:/usr/local/b

Java如何优化大量的if else

来自Google的解释:表驱动法是一种编程模式,它的本质是,从表里查询信息来代替逻辑语句(if,case)。其实这里的表就是数组而已,通过直接查询数组来获得需要的数据,那么同理,Map之类的容器也可以成为我们编程概念中的表。通过Java8的lambda表达式,我们把需要执行东西存进value中,调用的时候通过匹配key的方式进行。在项目中,总少不了一些非空的判断,可能大部分人还是如下的用法。上面的

#java#后端
开源线程池多线程编排框架 asyncTool 比CompleteableFuture更强大

asyncTool: 解决任意的多线程并行、串行、阻塞、依赖、回调的并行框架,可以任意组合各线程的执行顺序,带全链路执行结果回调。多线程编排一站式解决方案。来自于京东主App后台。

大数据架构

目前大数据主要的结构如下:从最下面一层往上依次为:一、接入层1、DataXa) dataX是一个ETL工具,阿里出品b) 采用Framework + plugin架构构建,幸运的是自带了常用的插件,比如MysqlReader、HdfsWriter等c) Standalone,无中心,每个实例之间无关联d) 性能强劲、相对于sqoop,配置更简单e) 稳定高效,我们引入DataX以...

大数据 Flink SQL CDC 实时数据整库同步 实时宽表 实时计算 流批一体

应用案例基于 Apache Flink 和规则引擎的实时风控解决方案 ​日均百亿级日志处理:微博基于Flink的实时计算平台建设基于Flink的超大规模在线实时反欺诈系统的建设与实践每秒1.8亿条高峰流量,美团数仓上FlinkFlink CDCFlink CDC采集MySQL binlog日志实时写入ClickHouseDocker 安装 FlinkDocker Hub flink最新版本dock

文章图片
#架构#big data#flink
大数据 百亿级实时查询 ClickHouse SQL mysql canal kafka 数据实时同步

彪悍开源的分析数据库-ClickHouse趣头条基于ClickHouse玩转每天1000亿数据量Clickhouse替代ES后,日志查询速度提升了38倍基于ClickHouse的大数据全链路监控平台实践SpringBoot + Mybatis Plus + ClickHouse增删改查入门教程...

#big data#大数据#clickhouse
    共 50 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择