Topic(s) [……] is/are not present and missingTopicsFatal is true；latest： 消费最新的消息。earliest:（ 表示当没有初始偏移量或者偏移量无效时，）消费者会从最早的可用消息开始消费

“有能力的”还是支持正版吧～序首先吐槽一下，网上各种粘贴复制的帖子，真是害人不浅。下载jar包，修改如下图的内容：结果，一顿骚操作之后，点击idea，闪退？？？？真是欲哭无泪。所以现在专门整理一篇博文，避免再躺坑。话不多说，现在开始。1.前期工作-IntelliJIdea如果还没下载，先去官网下载：https://www.jetbrains.com/idea/download，然后，点击安装。（如

在获取 Hadoop 文件系统对象时，如下所示FileSystem fs = FileSystem.get(hdfsUrl,configuration);错误一如果收到以下错误："No FileSystem for scheme:hdfs"可以通过在配置中设置以下 2 个属性来解决它configuration.set("fs.hdfs.impl","org.apache.hadoop.hdfs.D

最近做笔记发现mac为了拉开间距，双击空格时突然蹦出个句号，瞎浪费时间。还去软件中反馈了意见。最近想关闭碍事的自动首字母大写，意外找到了“祸根”。不多说了，上图：方法：系统偏好设置>>键盘>>文本搞定～～...

应用背景在开发过程中，可能一次对多个表进行操作。比如现在有两个表：用户表和订单表，主键id都是自增的。应用场景：一个新用户添加了一个新的订单。操作过程：在用户表中插入一条新纪录，获取这个用户的id，再在订单表中插入订单的相关信息（比如商品名称、价格……，以及用户的id）。分成三步，就太浪费与数据库链接的资源了。为什么不直接在插入用户记录后，将新用户的主键与插入的结果一起返...

“有能力的”还是支持正版吧～序首先吐槽一下，网上各种粘贴复制的帖子，真是害人不浅。下载jar包，修改如下图的内容：结果，一顿骚操作之后，点击idea，闪退？？？？真是欲哭无泪。所以现在专门整理一篇博文，避免再躺坑。话不多说，现在开始。1.前期工作-IntelliJIdea如果还没下载，先去官网下载：https://www.jetbrains.com/idea/download，然后，点击安装。（如

Spark 超大数据量下OOM的解决

1. 权限问题如果报错 -bash: ./test.sh: Permission denied可以通过下面的命令添加权限：chmod u+x test.sh或chmod a+x test.sh2. 文件格式问题如果报错 command not found按照如下命令，依次输入，三步修改格式：vi test.sh:set ff=unix（改格式）:wq（保存）3. 文件问题【大坑】如果报错 line

spark-sql处理json字符串的几个常用函数

Spark 超大数据量下OOM的解决