为什么需要图计算许多大数据以大规模图或网络的形式呈现许多非图结构的大数据，常会被转换为图模型进行分析图数据结构很好地表达了数据之间的关联性图（Graph）的基本概念1、图是由顶点集合（Vertex）及顶点间的关系集合（边edge）组成的一种网状数据结构通常表示为二元组：Graph=(V,E)可以对事物之间的关系建模2、应用场景：在地图应用中寻找最短路径社交网络关系网页间超链接关系图的术语1、顶点（

章节目录一、reduceByKeyscala版本Java版本二、foldByKeyscala版本三、sortByKeyscala版本Java版本一、reduceByKey函数定义def reduceByKey(func: (V, V) => V): RDD[(K, V)]def reduceByKey(func: (V, V) => V, numPartitions: Int): RD

章节目录一、firstScala版本Java版本二、takeScala版本Java版本三、collectScala版本Java版本四、countScala版本Java版本五、countByValueScala版本Java版本六、reduceScala版本Java版本七、aggregateScala版本八、foldScala版本Java版本九、topScala版本Java版本十、takeOrdere

章节目录一、mapToPairscala版本Java版本二、flatMapToPairscala版本Java版本一、mapToPair案例：在项目中创建src同级目录in，并在此目录中创建sample.txt文件sample.txt文件内容如下：aa bb cc aa aa aa dd dd ee ee ee eeff aa bb zksee kksee zz zksscala版本scala是没有

一、前提安装jdkscala、spark版本号：scala scala-2.11.12spark spark-2.4.5安装包下载地址：https://pan.baidu.com/s/1Lq5odbQiYdSpkqbyRX8Fww)提取码：w2xv二、安装配置scala1、下载并上传scala安装包至linux的software目录下2、解压安装包至/opt目录下，并重命名为scalatar -z

linux虚拟机安装mysql步骤linux虚拟机安装mysql步骤1、网络配置（仅主机：static，IPADDR=）2、systemctl restart network 重启网络3、停止和禁用防火墙systemctl stop firewalldsystemctl disable firewalld4、moba远程连接虚拟机5、上传安装包（一个jkd，两个mysql）6、解压jdk包：tar