1. 实验目的和要求1.1 实验目的Hadoop运行在Linux系统上，因此，需要学习实践一些常用的Linux命令。本实验旨在熟悉常用的Linux操作和Hadoop操作，为顺利开展后续其他实验奠定基础。1.2 实验软硬件环境① 操作系统：Linux Ubuntu 16.04② Java：open-jdk-1.8③ Apache Hadoop：3.2.01.3 实验要求① 在Linu...

1. 实验目的和要求1.1 实验目的通过实验掌握基本的MapReduce编程方法；掌握用MapReduce解决一些常见的数据处理问题，包括数据去重、数据排序和数据挖掘等。1.2 实验软硬件环境操作系统：Linux（建议Ubuntu16.04）Hadoop版本：2.7.11.3 实验要求（一）编程实现文件合并和去重操作对于两个输入文件，即文件A和文件B，请编写MapRedu...