logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Windows环境配置nginx和Jar包自启动(使用NSSM)

最近部署项目遇到一个自启动问题,今天给大家介绍下解决方案。我的项目是前后端分离的,后端有2个api的jar包,前端是vue写的,部署的时候其实很简单,前端项目文件用webpack打包后部署到nginx服务器上,后端的2个jar包A.jar和B.jar,有依赖关系,B依赖A,所以先启动A,再启动B,这样系统就可以运行了,但是这样有个弊端,就是重启后每次都要重新启动nginx服务 和A,B2个jar包

#nginx#jar#java +1
Spark:3.0.3版本报错“java.lang.NoSuchFieldError: JAVA_9“

Exception in thread "main" java.lang.NoSuchFieldError: JAVA_9at org.apache.spark.storage.StorageUtils$.<init>(StorageUtils.scala:207)at org.apache.spark.storage.StorageUtils$.<clinit>(Stor

文章图片
#spark#java#scala
Superset 安装报错: libbz2.so.1.0: cannot open shared object file: No such file or directory

OS : centos 7pbzip2: error while loading shared libraries: libbz2.so.1.0: cannot open shared object file: No such file or directory刚开始,以为此软件没有安装,于是yum install bzip2-libs 。安装之后,依然报错。后来使用find / -name li

文章图片
#linux#大数据#python
正则表达式:用户名只允许字母、数字、下划线组成,首位只能为字母(6-16字符)

用户名只允许字母、数字,首位只能为字母(6-16字符)[a-zA-Z]{1}[a-zA-Z0-9]{5,15}$手机号验证

#正则表达式
spark运行报: Scala module 2.10.0 requires Jackson Databind version >= 2.10.0 and < 2.11.0

这是jackson多版本问题, 我们需要屏蔽所有hadoop 组件中的Jackson ,修改pom文件,之后就不报异常了<dependency><groupId>org.apache.hadoop</groupId><artifactId>hadoop-common</artifactId><version>${hadoop.

文章图片
#spark#scala
spark程序执行报io.netty.util.concurrent.SingleThreadEventExecutor.<init>

io.netty.util.concurrent.SingleThreadEventExecutor.<init>(Lio/netty/util/concurrent/EventExecutorGroup;Ljava/util/concurrent/Executor;ZLjava/util/Queue;Lio/netty/util/concurrent/RejectedExecutio

大数据分析学习第五课 使用pycharm开发hdfs的基本功能-增删改查

在上节第四课中,我们介绍了使用java编程工具idea创建一个maven项目,来操作hadoop集群上的文件,这节我们介绍下怎么使用python开发工具pycharm来读、写和上传文件。我们介绍这2种方式的原因是,通过hadoop hive或spark等数据计算框架完成数据清洗后的数据是存储在HDFS上的,而爬虫和机器学习等程序在Python或java中容易实现,在Linux环境下编写Python

#python#大数据#hadoop +1
大数据分析学习第五课 使用pycharm开发hdfs的基本功能-增删改查

在上节第四课中,我们介绍了使用java编程工具idea创建一个maven项目,来操作hadoop集群上的文件,这节我们介绍下怎么使用python开发工具pycharm来读、写和上传文件。我们介绍这2种方式的原因是,通过hadoop hive或spark等数据计算框架完成数据清洗后的数据是存储在HDFS上的,而爬虫和机器学习等程序在Python或java中容易实现,在Linux环境下编写Python

#python#大数据#hadoop +1
大数据分析 clickhouse安装配置及使用

大数据分析 mysql数据迁移clickhouse最近项目遇到个问题,就是mysql做数据分析高并发情况下,老是报超时错误,主要原因还是因为mysql进行大批量关联查询太耗时间,于是在网上查询了下资料,决定试一下clickhouse一、Clickhouse简介Yandex在2016年6月15日开源了一个数据分析的数据库,名字叫做ClickHouse,这对保守俄罗斯人来说是个特大事。更让人惊讶的是,

大数据分析学习第三课 Hadoop集群使用HDFS和MapReduce

上节我们已经成功配置并启动了hadoop集群,1台namenode节点,2台datanode节点,接下来我们就利用hadoop大杀器,使用HDFS和Mapreduce1、测试HDFS的功能我们先上传一个文件到HDFS,先查看software目录里面有我们之前配置java的jdk包,我们就上传这个文件,输入hadoop可以查看帮助信息,看到有fs我们再输入hadoop fs,可以看到有很多命令可用,

#hadoop#hdfs#mapreduce +2
    共 20 条
  • 1
  • 2
  • 请选择