java.lang.ClassNotFoundException: org.apache.hudi.hadoop.HoodieParquetInputFormat

新建一个.bat文件并编辑start /d "C:\Program Files (x86)\Google\Chrome\Application\chrome.exe" chrome.exestart /d “exe原始路径” exe名想要开机启动可以将其移动到对应文件夹下...

第一次玩selenium+chromedriver拿度娘玩玩#驱动浏览器webdriver不通浏览器有不同的类from selenium import webdriverdriver_path = r"D:\Program\chromedriver\chromedriver.exe"# 驱动google浏览器 用的是driver_path驱动程序driver = webdrive...

首先确保本地hadoop环境正常运行环境：spark 3.0.2| hdfs 3.1.1 | kafka 2.0.0问题描述：执行idea sss读取kafka报错如下Exception in thread "main" java.lang.IllegalArgumentException: Pathname /C:/Users/LZX/AppData/Local/Temp/temporary-e

问题描述：计划将sparksql查询结果数据通过alibaba.druid.pool.存入mysql，结果报错序列化问题User class threw exception: org.apache.spark.SparkException: Task not serializableat org.apache.spark.util.ClosureCleaner$.ensureSerializabl

错误场景描述spark_submit.sh 如下：spark-submit --master yarn --deploy-mode cluster --driver-memory 2g --num-executors 3 --executor-cores 1 --executor-memory 4g --queue spark --class com.aisino.controller.Test1

有一张表结构如下假如想修改一列时间，将其年月日修改为自己想要的时间执行如下sqlUPDATE yield set dataTime = ADDTIME(DATE('2020-06-24') + interval 0 hour,time(dataTime))UPDATE 表名 set 字段名= ADDTIME(DATE(‘修改的年月日’) + interval 0 hour,time(字段名))..

问题描述：sqoop导入历史数据至hive，落地部分日期数据较mysql数据少几条。mysql -> sqoop -> hdfs -> ods问题分析写了jar 逐天比对mysql对应日期和hive对应日期数据量，count(1) 不同的日期保存下来。然后拉对应日期的mysql 和 hive数据查出缺少的数据。我是用navicat 和dbeaver分别将缺少数据日期的mysql数

上一节修改好基本配置后，接下来开始安装集群部署所需依赖。

在一个已有redis的环境下重新建库或者移动redis dump.rdb出现读取的还是之前存储的数据亦或没有读出数据的情况。1.查看环境存在多少个dump.rdbfind / -name dump.rdb2.确定哪个dump.rdb是想要读取的，查看配置redis中配置文件 redis.conf185行左右确定 dbfilename 名字和 dir 位置如果环境中存在多个du...