logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hive有哪些数据倾斜场景,并举例

小表 Join 大表:用 MapJoin 避免 Shuffle;大表 Join/Group By:拆分倾斜 Key、加随机前缀分散负载;特殊场景(空值、类型不匹配):针对性处理(替换空值、统一类型)。实际优化中需结合具体数据分布(通过explain查看执行计划,或抽样分析 Key 分布)选择合适的方法。

#hive#面试
linux100题带答案

答案:free -h。答案:history。

#java#前端#python
人工智能训练师(三级)实操全套题号 + 细分题型 + 完整考点对照表

实操总分 100 分、总时长 120 分钟;,题库每套单元下设 5 套子题(X=1~5,考场随机抽取 1 套作答)

#人工智能
数据治理场景下的数据质量稽核脚本

SUM(dup_count) - COUNT(dup_count) AS error_records,-- 重复记录数=总记录数-唯一记录数。'订单关联的用户ID必须在用户主表中存在(数据血缘关系:order_main.user_id → user_info.user_id)',data_domain VARCHAR(50) COMMENT '数据域(如用户域、订单域)',audit_batch_

#数据库
到底了