数据结构主要可以分为两大模块：线性结构非线性结构本文主要开始讲线性结构。什么是线性结构线性结构，顾名思义，就是这些数据所有节点都能被一根线(指针)联系起来的一种结构。线性结构的存储方式：连续存储：【数组】离散存储：【链表】线性结构的常见应用方式：栈队列专题 :【递归】数组和链表本小节学习数组和链表，从底层去了解和实现数组与链表，并分析两者对应的优缺点数组...

目录首先让我们来回顾一下 spark 的生态系统spark SQLDataframeDataframe 和 RDD 的区别spark SQL WordCount首先让我们来回顾一下 spark 的生态系统spark SQLDataframe与RDD类似，DataFrame也是一个分布式数据容器。然而DataFrame更像传统数据库的二维表格，除了数据以外，还掌握数据的结构信息，即sch...

目录spark 的简介什么是 spark ？spark 技术栈回顾 MapReduce 模型MapReduce 的共享数据慢Spark的共享数据快Spark APIspark 的运行模式spark local 运行模式 环境搭建添加 依赖 和 插件local 模式的代码示例 -- WordCount在本地配置 Hadoop 的环境spark 的简介什么是 spark ？spark 与 Map...

目录Spark Standalone -- 独立集群模式Standalone 架构图Standalone 的搭建1、上传、解压、重命名2、配置环境变量3、修改配置文件 conf4、同步到其他节点5、启动、关闭访问 spark web 界面Spark 提交任务的两种模式standalone client模式日志在本地输出，一般用于上线前测试(bin/下执行)standalone cluste...

目录spark 写代码的方式1、在IDEA中将代码编写好然后打包上传到集群中运行(使用最多)2、spark shell(REPL -- 交互式的命令行)3、spark-sql(spark的SQL命令行)在进入 spark-sql 的过程中会输出很多日志，那么如何取消这些日志呢？spark 整合 Hivespark 写代码的方式1、在IDEA中将代码编写好然后打包上传到集群中运行(使用最多)...

目录什么是 RDDRDD 的五大特性spark WordCount 流程图什么是 RDDRDD 全称 ResilientDistributedDataset (弹性分布式数据集 )RDD 仅为一个抽象的编程模型，RDD 默认没有数据RDD 的五大特性A list of partitions由一组分区组成，默认一个 Block 块对应一个 partitionA function...

前端页面的搭建首先我们在resources包下新建一个文件夹static，SpringBoot默认会去把static包下的文件做一个路由然后在static包下新建一个HTML File类型的文件，文件名为index.html(这是默认的)在index.html文件中<!DOCTYPE html><html lang="en">//完整的html分为head...

目录操作HBase的方式HBase shell 的常用基本操作创建表查看所有表查看所有的命名空间(类似 show databases )创建命名空间(类似 create database )查看命名空间下的表删除表向表中插入数据查询表中数据修改表中数据帮助命令查看表结构删除表中数据清空表删除指定的列族增加新的列族扫描所有数据统计表中数据量查看表是否存在手动切分表来生成多个regionshbase.