logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Hadoop 3.2.2 + Hive 3.1.2 + Tez 0.10.1 冲突解决(Hive sql MR任务执行结果跟预期不一致)

因公司分析订单数据要求,全面装行大数据工程师,在自己摸索Hadoop+Hive+Tez on Hive上花费了不少时间也趟了不少坑。该篇文章主要记录下较新版的Hadoop+Hive搭建遇到比较大的问题在开始的时候并没有使用tez替换计算引擎,公司主要是离线数仓,但是在使用hadoop的MR执行的时候出现了查询数据跟预期结果不同的严重BUG,确认不是sql 的问题,公司的业务需求写了一条较多嵌套的s

#hive#hadoop
Mybatis plus 多wrapper传参无法正确获取参数问题分析

文章目录问题复现一、定位问题二、问题分析1.getCustomSqlSegment源码分析2.MergeSegments源码分析3.AbstractISegmentList及NormalSegmentList源码分析4.函数式接口ISqlSegment三、Compare接口中sql条件拼接四、解决办法1.使用apply方法拼接语句2.Mapper中只传入一个Wrapper,其余的以方法参数传入,在

#java#mybatis
到底了