logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Spark第一天和第二天总结

一:分布式基础架构二:Spark大数据分析计算引擎Spark在传统的MapReduce 计算框架的基础上,对计算过程的优化,从而大大加快了数据分析、挖掘的运行和读写速度,并将计算单元缩小到更适合并行计算和重复使用的RDD计算模型。软件是完整的,框架是不全的,我们自己写的代码逻辑,需要部署到环境中才能够运行;val spakConf = new SparkConf().setMaster("loca

#spark#大数据#big data
Maven详细总结

一:为什么要使用Maven1.1:大量的jar包JavaEE开发领域,需要使用大量的第三方框架和工具jar包,如果每次都进行复制到WEB-INF目录下的lib目录中会导致每次创建一个新的工程就需要将jar包再次复制到lib目录下,从而造成工作区中存在大量重复的文件。另外,大量的jar包避免不了版本的冲突。Maven拥有一套完全统一规范的jar包管理体系。可以将每个jar包只在本地仓库中保存一份,项

#maven#java
到底了