logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hadoop 8088UI无法查看log日志及Tracking UI(URL)输出信息

运行spark on yarn时,Hadoop 8088UI界面上所有可以点击的链接均无法打开:可能存在的几种情况:第一:配置存在问题。第二:jobhistory没有启动。第三:本机的host文件没有配置别名。如果是配置存在问题,请参考如下配置:core-site.xml文件<configuration><!-- hadoop默认访问nameNode元数据...

#yarn
自动化部署工具jenkins部署及使用

需提前部署jdk、maven、git等。部署:(1)下载jenkins.war包:http://mirrors.jenkins.io/war-stable/latest/jenkins.war(2)执行war包,运行jenkins:在安装包根路径下,运行命令 java -jar jenkins.war --httpPort=28080(可修改)(3)打开浏览器进入链接 http://localho

#jenkins
hive服务的启动和关闭

关闭可以通过ps -ef|grep hive 来看hive 的端口号,然后kill 掉相关的进程。启动java代码访问hive:启动metastorenohup hive --service metastore2>&1 &启动hiveserver2nohup hive --service hiveserver22>&1 &...

#hive
(Java、Scala)读取IDEA maven项目resource下相对路径文件

在使用maven创建的项目中,在编译时会在项目下生成target文件夹,其下面的class文件夹里面生成src->main中的数据如resources中的文件或者是scala文件夹下面的.scala文件的“倒影”。所以寻找文件的相对位置时,要先找到target这个目录下的地址,然后再找具体的文件。如图所示,要读取resource下Excel文件夹下的Excel文件,target目录下已经..

#spark
Tomcat样列目录session 操控漏洞

一、基本情况漏洞级别:中危漏洞类别:session操纵漏洞二、问题描述ApacheTomcat默认安装页面中存在examples样例目录。里面存放着Servlets、JSP、WebSocket的一些服务脚本和接口等样例。Servletsexamples服务样例下存在一个session的样例。该样例可以允许用户对session来进行操控。因为session是全局通用的,所以也就可以利用该样例下的se

#tomcat#java
使用jenkins将程序自动化部署到远程服务器

jenkins部署及配置:https://blog.csdn.net/weixin_44455388/article/details/114540746本文是在基于以上文章,已经部署jenkins并完成代码自动化部署的基础上,思考程序不可能总是部署在jenkins所在服务器,探索将程序部署到远程服务器。(1)首先需要手动添加需要的插件:Publish Over SSH用于连接远程服务器Deploy

#jenkins
Kerberos安装及集成hdfs、hive

环境:1 台Centos6.5主机 部署 master KDC2 台 Centos6.5主机 部署 Kerberos Client1、Master主机安装Kerberosyum install krb5-server krb5-libs krb5-workstation -y1.1 配置kdc.confvim /var/kerberos/krb5kdc/kdc.conf[kdcde...

#hive#hdfs
maven项目手动导入jar包依赖

maven项目手动导入jar包依赖手动添加:1、点击file===>project Structure===>modules2、点击dependencies,再点击右侧加号,选择第一个JARs or directories3、选择下载好的依赖jar包,然后一直点击OK即可4、点击左侧的项目下方的External Libraries会发现刚刚添加的jar包已经存在了5...

#maven
MySQL赋权报错:’the right syntax to use near ‘identified by ‘password‘ with grant option‘

MySQL版本8.0.21,在给新用户授权时,执行如下语句:grant all privileges on *.* to 'root'@'%' identified by '123456' with grant option;报错如下:You have an error in your SQL syntax; check the manual that corresponds to your My

#mysql
Milvus向量数据库索引说明

需求场景推荐索引 (Vector)推荐索引 (Scalar)关键参数(需要调优)数据量小 / 需要绝对精确FLAT无需通用场景,平衡速度与精度IVF_FLATINVERTEDnlist​ (建库),nprobe(查询)内存有限,速度要快IVF_SQ8​,IVF_PQINVERTEDnlist​,nprobe​,m(PQ)搜索延迟极度敏感,内存充足HNSWINVERTEDM​,​ (建库),ef(查

#milvus#数据库
    共 46 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择