logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Excalidraw:开源趣味画图工具(在线和本地均可)

Excalidraw:开源实用的白板画图工具(在线/本地安装)

(八)Flink DataStream API 编程指南 - 4 状态与容错 (中)

广播状态模式提供的 API为了展示所提供的 API,我们将从一个示例开始,然后再展示它们的全部功能。作为我们的运行示例,我们将使用这样的情况:我们有不同颜色和形状的对象流,并且我们想要找到遵循特定模式的相同颜色的对象对,例如矩形后面跟着三角形。我们假设这组有趣的模式会随着时间而演变。在此示例中,第一个流将包含Item具有 aColor和 aShape属性的类型元素。另一个流将包含Rules.从 的

#flink#java#大数据
(六)flink1.15 概念透析

本章将深入分析 Flink 分布式运行时架构如何实现这些概念。概览Flink 中的 APIFlink 为流式/批式处理应用程序的开发提供了不同级别的抽象。Flink API 最底层的抽象为有状态实时流处理。其抽象实现是 Process Function,并且 Process Function 被 Flink 框架集成到了 DataStream API 中来为我们使用。它允许用户在应用程序中自由地处

#big data#flink#大数据
FlinkCEP - Flink的复杂事件处理

FlinkCEP是在Flink上层实现的复杂事件处理库。 它可以让你在无限事件流中检测出特定的事件模型,有机会掌握数据中重要的那部分。如果需要其它依赖,请参照案例地址模式(pattern) API模式API可以让你定义想从输入流中抽取的复杂模式序列。每个复杂的模式序列包括多个简单的模式,比如,寻找拥有相同属性事件序列的模式。从现在开始,我们把这些简单的模式称作模式, 把我们在数据流中最终寻找的复杂

#flink#大数据#big data
hbase shell启动报错

在客户端执行hbaseorg.apache.hadoop.hbase.mapreduce.ImportTsv命令的时候报如下错误:尝试直接执行hbase shell命令,依然报上面的错误,找问题吧。起初是以为服务器的jdk版本的问题,因为开发环境和测试环境的jdk版本的确不一样,一顿操作之后不生效,试着调整之后依然报这个错误,不是这个问题所导致的。度娘-直接百度查询,知道是hbase.tmp.di

#hbase#大数据
(三)Flink1.15 发布最新版本说明

官网 https://nightlies.apache.org/flink/flink-docs-release-1.15/release-notes/flink-1.15变化的依赖概况在Flink 1.15中有几个变化,当从早期版本升级时,需要更新依赖项名称,主要包括从非Scala模块中选择排除Scala依赖项,以及重新组织表模块。 一个快速的依赖变化清单如下:对以下模块的任何依赖都需要更新,以

#big data#java
Flink部署——参数配置

所有的配置都在conf/flink-conf.yaml里面设置,预计将是YAML 键值对格式的平面集合key: value。当 Flink 进程启动时,配置会被解析和评估。更改配置文件需要重新启动相关进程。开箱即用的配置将使用您的默认 Java 安装。如果要手动覆盖要使用的 Java 运行时,可以手动设置环境变量JAVA_HOME或配置键env.java.home。conf/flink-conf.

#flink#大数据
暂无文章信息