logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

spring boot整合freemarker及freemarker基础语法超详细讲解

采用模板+数据=HTML实现页面的静态化。也就是服务端的页面静态化技术。JSP/Freemarker/Thymeleaf是常见的模板引擎。引依赖okhttp与HttpClient一样的作用,实现远程访问:实体类@Data等注解:freemarker默认会从templates目录中获取模板,所以不要乱改:freemarker...

spring boot配置文件详解

spring boot配置文件详解application.properties是spring-boot的核心配置文件,这个配置文件基本可以取代我们ssm或者ssh里面的所有的xml配置文件。当我们启动springboot工程做的第一件事就是加载application.properties属性配置文件。application.properties虽然有时候是...

IntelliJ IDEA创建spring boot项目的方法

解决【IDEA新建项目时没有Spring Initializr选项】的问题创建一个新项目(Create New Project)选择 Spring Initializr。然而我发现我的IDEA上面没有Spring Initializr这个选项。解决办法如下:在settings -> Plugins 里面搜索springboot,勾选上,然后再重启下i...

#idea#spring boot
vscode安装jupyter插件运行python代码

选择python内核后才能正常运行python代码。jupyter插件安装为可选行为。

文章图片
#python#vscode#jupyter
docker开放10080端口被浏览器拦截

解决办法:只能换成别的端口,或者是更改浏览器安全配置

spark历史版本下载地址

https://archive.apache.org/dist/spark/

spark on yarn简单部署

spark on yarn无需启动master和worker进程。

spark重要参数调优建议:executor-cores/spark.executor.cores设置每个Executor进程的CPU core数量

executor-cores/spark.executor.cores参数说明:该参数用于设置每个Executor进程的CPU core数量。这个参数决定了每个Executor进程并行执行task线程的能力。因为每个CPU core同一时间只能执行一个task线程,因此每个Executor进程的CPU core数量越多,越能够快速地执行完分配给自己的所有task线程。参数调优建议:Executor

spark重要参数调优建议:spark.default.parallelism设置每个stage默认的task数量

spark.default.parallelism参数说明:该参数用于设置每个stage的默认task数量。这个参数极为重要,如果不设置可能会直接影响你的Spark作业性能。参数调优建议:Spark作业的默认task数量为500~1000个较为合适。很多同学常犯的一个错误就是不去设置这个参数,那么此时就会导致Spark自己根据底层HDFS的block数量来设置task的数量,默认是一个HDFS b

spark 历史版本下载地址

https://archive.apache.org/dist/spark/

    共 70 条
  • 1
  • 2
  • 3
  • 7
  • 请选择