logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

为什么mac设置环境变量无法生效?

MAC环境变量设置前提:解决:1、配置后不起作用2、加入export PATH后可以执行3、切换终端后无法执行4、问题解决感谢!前提:mac环境安装kafka,不想每次在kafka目录的bin下启动,而是想实现在各个目录都可以启动kafka,所以想设置kakfa为全局环境变量解决:1、配置后不起作用在~/.bash_profile文件中设置或执行命令source ~/.bash_profile发现

#kafka#java
spark集成odps后排查报错日志

spark of odps 的日志报错排查logview寻找报错executorspark UI开源的spark估计大多人都会使用ui界面来排查日志。但是odps【阿里云】集成的spark,当提交了任务之后,有些时候控制台都打印报错了,但是点击UI界面发现每一个executor都是成功的,没有失败的。下面就一起来看看吧????logview排查日志的第一个界面。点击图中Detail,便可以看到如下

文章图片
#spark#odps#big data
为什么【spark】使用【org.json4s.jackson】报错

spark使用json4s包报错报错代码:报错信息:排查问题:报错代码:import org.apache.spark.ml.feature.BucketedRandomProjectionLSHimport org.apache.spark.ml.linalg.Vectorsimport org.apache.spark.sql.SparkSessionimport org.apache.spa

文章图片
#spark#big data#scala
到底了