logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hive 性能优化

目录1.sql语法优化1.使用explain 查询计划优化sql2.使用analyze分析器3.谓词下推2.数据存储优化1.设计分区表2.设计分桶表3.采用列式存储(orc格式存储)1.开启orc索引2.开启orc布隆过滤器(布隆过滤器:没有一定没有,有可能没有,还有查数据)3.开启orc 矢量化查询4.使用文件snappy压缩5.小文件优化1.避免生成小文件2.合并小文件3.hive参数优化1.

#hive#sql#big data
到底了