logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Apache Atlas 安装部署

atlas 安装部署采坑记录

#apache
Exception in thread "main" java.lang.AbstractMethodError: org.apache.flink.streaming.api.graph..

Exception in thread “main” java.lang.AbstractMethodError: org.apache.flink.streaming.api.graph.StreamGraph.getJobGraph()Lorg/apache/flink/runtime/jobgraph/JobGraph;at org.apache.flink.streaming.api.e.

org.apache.flink.streaming.api.environment.StreamExecutionEnvironment.createLocalEnvironment

运行flink scala 程序报错:Exception in thread "main" java.lang.NoSuchFieldError: MODEat org.apache.flink.streaming.api.environment.StreamExecutionEnvironment.createLocalEnvironment(StreamExecutionEnvironm...

Operation category READ is not supported in state standby 故障问题

意思是:该主机状态为待机,不支持操作类别READ.出错的是hadoop的hdfs。你会发现最基本的hdfs命令都不能执行,例如:hadoop fs -ls /自定义的是nn1还是namenode1等自定义名可以在配置文件hdfs-site.xml中查看:<property><name>dfs.ha.namenodes.mycluster</name><va

机器学习基础概念

机器学习:利用计算机从历史中找规律,并把这些规律用到对未来不确定场景的决策机器学习简单分类:可以分为 监督学习、无监督学习、半监督学习分类、聚类、回归生成模型(给出数据属于各个类别的概率)、判别模型(给出数据所属于的类别)机器学习和数据分析的区别:数据特点:交易数据(订单) VS 行为数据(点击历史)少量数据 VS 海量数据采样分析 VS 全量分析训练数据/验证数据/测试数据建模之前把数据分成三个

Flink Checkpoint 深入理解

如何理解flink中state(状态)state泛指state泛指:flink中有状态函数和运算符在各个元素(element)/事件(event)的处理过程中存储的数据(注意:状态数据可以修改和查询,可以自己维护,根据自己的业务场景,保存历史数据或者中间结果到状态(state)中);使用状态计算的例子:当应用程序搜索某些事件模式时,状态将存储到目前为止遇到的事件序列。在每分钟/小时/天聚合事件时,

Apache DolphinSchedule 安装部署踩坑

Apache DS 安装部署@Author:Michealkz镜像下载地址官方下载地址:https://dolphinscheduler.apache.org/zh-cn/download/download.html国内镜像下载地址:# 清华源下载地址https://mirrors.tuna.tsinghua.edu.cn/apache/incubator/dolphinscheduler/1.3

java.lang.NoSuchMethodError: scala.Predef$.refArrayOps Lscala/collection/mutable/ArrayOps

在idea中配置运行spark程序报错:scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayOps;Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Obje.

hadoop中使用 jps的正确姿势

Hadoop 的 jps 命令jps的主要功能是查看java接口的进程号jps(Java Virtual Machine Process Status Tool) 是JDK 提供给我们的一个查看当前所有java进程PID的命令,缺点是只支持当前用户的Java进程,要显示其他用户还是只能够 用ps命令1.jps命令类似于Linux的ps命令 ,直接运行jps命令,显示的是java程序的进程I...

    共 14 条
  • 1
  • 2
  • 请选择