搜狗用户查询日志分析综合案例一.MapReduce数据清洗1.数据清洗要求（1）解决乱码问题（2）过滤少于6个字段的行（3）统一字段之间的分隔符（统一用逗号）（3）在每行前添加年，月，日字段。清洗前的数据清洗后的数据2.准备原始数据说明：1.该数据来自搜狗实验室数据下载地址2.年月日三个字段在文件名中3.该数据已经上传到HDFS3.代码详解这个案例只需要Mapper类和Driver类即可Mappe

Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties20/04/26 00:45:36 INFO SparkContext: Running Spark version 2.4.420/04/26 00:45:36 ERROR Shell: Failed to locate the win..