logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Hadoop运行wordcount实例任务卡在job running的多种情况及解决方法

第一种:配置问题这是别人的图片,据楼主排查解决是因为hosts配置问题???我想知道hosts没配置好,Hadoop是怎么撑到MR的…现象:各种无法运行、启动解决办法:1、修改日志级别export HADOOP_ROOT_LOGGER=DEBUG,console查看下详细信息,定位到具体问题解决第二种:服务器问题**现象:**运行到job时卡住不动**原因:**服务器配置低下,内存小或磁盘小**解

文章图片
#hadoop#mapreduce#hdfs
OpenAI API(ChatGPT)接口地址https://api.openai.com/v1/chat网络问题无法访问Error: connect ECONNREFUSED ETIMEDOUT

https://api.openai.com/v1/chat是openAI的API接口地址,因为长城的原因,23年年初一次更新后便无法访问,访问接口会提示Error: connect ETIMEDOUT等网络相关的问题。解决办法有三种。

文章图片
#服务器#网络
[spark sql连接kudu]kudu.client.NonRecoverableException: The table does not exist:table_name: “tbname“

报错:原因:没有指定库解决方式:在kudu master ui查看添加到代码中:// 读取kudu// 获取tb对象val kuduTb = ss_kudu.read.format("org.apache.kudu.spark.kudu").option("kudu.master", "10.168.1.12:7051").option("kudu.table", "impala::realtim

文章图片
#java#大数据#spark
Windows下载使用nc(netcat)命令

== ‘nc’ 不是内部或外部命令,也不是可运行的程序?==点击链接地址,下载压缩包。完成后解压使用方式(三种):1、直接双击exe使用2、把这个exe放到cmd启动的默认路径下放到默认路径下,使用nc,会自动运行那个软件3、把解压路径添加到环境变量添加到环境变量后,无论是在哪个路径,只要使用nc命令,都能启动那个软件。Tips:如果杀毒软件报错,请退出杀毒软件。...

文章图片
#windows
到底了