logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

flink的基本使用(概念),这俩篇就足够了(一)

flink的重要特点1.1 事件驱动型(Event-driven)事件驱动型应用是一类具有状态的应用,它从一个或多个事件流提取数据,并根据到来的事件触发计算、状态更新或其他外部动作。比较典型的就是以kafka为代表的消息队列几乎都是事件驱动型应用。与之不同的就是SparkStreaming微批次,如图:事件驱动型:1.2:流与批的世界观流与批的世界观批处理的特点是有界、持久、大量,非常...

flume采集数据到hdfs上为什么会生成很多的小文件呢?????

原文链接:https://blog.csdn.net/qq_32502511/article/details/85048594问题:flume监控的目录写入大文件的时候不能同步记录在hdfs中flume监控的目录写入大文件的时候,同步记录到hdfs中后变成多个小文件flume从kafka中读取数据下沉到hdfs中会生成很多小文件解决办法:更改flume的配置信息(主要更改滚动方式),滚动...

#flume#hdfs
3天学完Linux基础-----第一天

)## 今天任务:1.vmware11的安装(提前安装好)2.虚拟机的安装(提前安装好)3.linux系统的目录结构介绍4.linux的基本命令操作5.Linux–环境配置6.用户管理命令7.进程管理命令8.权限管理教学目标:1.能够独立安装虚拟机2.了解linux系统及目录结构3.熟悉linux的基本命令操作4.熟练进行环境配置5.了解基本的用户管理,进程管理命令6...

到底了