logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

flink单机部署后,taskslot一直是0

如图,flink安装好后,Task Slots一直是0.修改过很多地方的设置,如jobmanager.memory.process.size: 5gb。最后修改这个地方:最配置文件最后添加一行,重启服务即可。

#flink#大数据
Could not find a suitable table factory for ‘org.apache.flink.table.factories.TableSourceFactory‘ in

少包~flink-connector-jdbc_2.11-1.12.4.jarJDBC的包,放到/opt/cloudera/parcels/FLINK/lib/flink/lib下面,集群的各个节点都放。

#apache#flink#大数据
hive metastore服务启动失败,连接服务失败、拒绝连接等

目录问题描述:访问或者启动hive 服务时,失败!解决:hive.metastore.schema.verification 改为false问题描述:访问或者启动hive 服务时,失败!MetaException(message:Version information not found in metastore. )查看服务是否存在:ps -ef |grep HiveMetaStore启动服务:

#hive
Flink 任务报错:flink FileNotFoundException: JAR file does not exist: -yn

如图:原因:flink从1.10开始不再支持参数 -yn解决:去掉参数 -yn执行

#flink
IO Undefined Error

dbeaver连接oracle报错:IO Undefined Error如下图: 解决:1.找到dbeaver所在目录,修改dbeaver.ini文件,最后添加一句: 2.以管理员身份运行dbeaver软件,打开即可正常连接,问题解决。

#oracle#数据库
flinkSQL写入hbase问题汇总

问题一:Expression 'pay_acct_no' is not being grouped解决:检查下group by 的字段是否正确问题二:要插入的列和hbase的列不匹配.解决:注意ROW(),与hbase保持一致。

#hbase#flink
idea打包,flink任务运行爆错:找不到主类!

如下图:idea打包,flink任务运行爆错:找不到主类!原因:未在程序中指定主类解决:在程序的pom中添加build标签再次打包即可!

clickhouse远程机器连接失败

问题:clickhouse远程机器连接本机失败。telnetip端口,拒绝连接!原因:ck的配置文件中 /etc/clickhouse-server/config.xml中的<listen_host>::</listen_host>

#clickhouse
clickhouse: db::exception: memory limit (for query)overed(超出内存限制)

问题描述:clickhouse进行复杂查询时,包含多个left join和group by,会报错:超出内存限制。原因:默认情况下,ClickHouse会限制group by使用的内存量,默认设置为9.31GB,由users.xml文件中max_memory_usage参数控制,可以分别为每个用户设置不同的内存量。解决:1.临时设置SET max_memory_usage = 1280000000

#clickhouse
    共 45 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择