logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据入门之分布式计算框架Spark(2) -- Spark SQL

1.Spark SQL概述一个运行在Spark上执行sql的处理框架,可以用来处理结构化的数据【外部数据源(访问hive、json、parquet等文件的数据)】。Spark SQL提供了SQL的API、DateFrame和DataSet的API2.Spark SQL架构前端可以有不同种的访问方式,Hive AST传过来的就是一个字符串(解析成抽象语法树),在Catal...

@Cacheable源码分析——各种参数和最后拼接的key的关系

1.使用具体使用需要先引入相关依赖,然后使用注解在方法上即可。@Cacheable(cacheManager = "myCacheManager", value = "myValue", keyGenerator = "myKeyGenerator")这里主要讲解几个参数:1.cacheManager,缓存管理器,这里可以设置缓存的过期时间,可以设置写缓存的时候是否需要加锁。2.value,对于缓

#缓存#redis#java +1
    共 11 条
  • 1
  • 2
  • 请选择