logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Yarn日志 - Log Aggregation

1. 概述大数据任务的日志,首先保存于本地,但本地存储能力有限,且检索时需要切不同服务器,不够方便Yarn Log Aggregation的主要功能,是将本地日志移动到HDFS或者云存储日志的重要性错误定位历史分析2. 聚合开关yarn.log-aggregation-enable,yarn日志聚合功能开关true表示开启3. 存储路径3.1. 本地存储yarn.nodemanager.local

#yarn#big data
Kafka 0.10, 清空数据

1 问题如何清空kafka数据?文中配置项的含义, 请参考: Kafka 0.10, 配置项清单_Lion…的博客-CSDN博客2 对策2.1 方案一(饥饿法)默认情况下, kafka旧数据保留期限为一周所以, 如果一周内不向topic写入数据, 数据会全部清空缺点:一周太久, 等不起2.2 方案二(重生法)设置delete.topic.enable=true手动删除topic, 然后重建缺点:需

#kafka
JavaFX, GUI库初识

1. 介绍曾以为java不适合桌面应用程序的开发, 直到遇到JavaFX它采用MVC的设计模式, 有过web开发经验的人极易上手JavaFX is an open source, next generation client application platform for desktop, mobile and embedded systems built on Java.2. Scene Bu

#java#开发语言
到底了