logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

解决SpringCloudGateway Unable to find RoutePredicateFactory with name RewritePath 异常

想要重写访问路径时报错Unable to find RoutePredicateFactory with name RewritePath这时因为你重写路径时并没有启动filter上面为错误示例,既然想重写路由,应该在Filter中添加RewritePath正确的姿势为#配置SpringCloud Gateway的路由cloud:gateway:route...

Anaconda OSError: sndfile library not found

Centos7.x 导入import librosa.display 时出错,提示OSError: sndfile library not found网上找了许多方法,没有起效。这里献上我的解决方法:去这个网站根据自己的电脑下载所需要的tar.gz文件www.linuxfromscratch.org/blfs/view/7.6-systemd/multimedia/libsndfile.h...

SparkStreaming消费不到Kafka的数据

我这边遇到的问题是由于手动维护了offset,指定了分组我新增了一个Topic,新创建了一个Consumer。但是保存Redis里面的分组还是原来的test所以消费不到啊!!!!!...

SparkStreaming maxRatePerPartition参数

SparkStreaming每次读取Kafka数据量的问题假设:我们的Sparkt window窗口设置10s(10s拉取一次kafka数据)Kafka的Partition有3个maxRatePerPartition设置为5000那么Spark每次拉取的数据为 10s * 3 * 5000 = 150000 条我们知道使用SparkStreaming的Direct模式消...

#大数据#spark#kafka
assertion failed: Failed to get records for spark-executor3 24025 after after polling for 1000

这个问题有必要记录一下!!!!报错信息如下任务运行时,Task锯齿图有人说加参数"spark.streaming.kafka.consumer.poll.ms", 512如果你尝试这个成功了那么恭喜你,可以关闭此博客了!我们项目遇到了这个问题,加了参数没得用,而且导致job失败,本来job虽然会慢一点,但是加了这个参数则会报上面截图的错误!左思右想不知道怎么回事儿!带宽问题?...

Missing required configuration "key.serializer" which has no default value.

SparkStreaming写入Kafka报错Missing required configuration "key.serializer" which has no default value.这是因为你在KafkaParams参数时没有指定key.serializer将KafkaParams配置项设置为以下格式就ok了/*** 设置Kafka参数*/...

#kafka#spark
XXL-Job使用GLUE(Java)调度REST接口

这里就不介绍xxl-job的使用教程了,很简单很好用。本次仅仅分享使用xxl-job调用REST接口的过程。首先xxl-job-admin你应该先跑起来,然后新建一个SpringBoot项目里面加上xxl-job的依赖,xxl-job的config等配置信息Maven中加入xxl-job-core的依赖<!-- ===========XXL-JOB-CORE============...

TIA 博途模拟Modbus TCP/IP通信

使用西门子TIA + PLCSIM 模拟配置PLC的Modbus通信。(本次使用的TIA版本为v15.1,S7-PLCSIM Advanced V2.0 SP1)在TIA中创建新项目选择PLC 1500系列(因为我下载的S7-PLCSIM智能模拟1500系列),这里PLC也可以选择1200的哈。下图为最终的项目图。本次MB_HOLD_REG针脚为DB块,(本人已经尝试输入M内存类型也是ok的)PS

For Free Brook 安装教程(Linux -- Centos7.x)

首先去下载安装包[root@cdh03 Rone]# wget -N –no-check-certificate https://raw.githubusercontent.com/ToyoDAdoubi/doubi/master/brook.sh && chmod +x brook.sh && bash brook.sh接着输入命令:[root@cdh03...

Load balancer does not have available server for client:xxxx

Load balancer does not have available server for client:eureka-producerSpring Cloud 报错首先确保这个服务client在注册中心有没有这里我的eureka-producer是存在的,但是为森么Eureka-Produce-Feign找不到呢?我们再去看服务Eureka-Produce-Feign指定的服务提供...

到底了