二、基本操作1、入门案例(1)批处理wordcount--DataSetval env =ExecutionEnvironment.getExecutionEnvironment// 从文件中读取数据val inputPath ="D:\\Projects\\BigData\\TestWC1\\src\\main\\resources\\hello.txt"val ...

Kafka教程(一)基础入门1.基本概念背景领英->Apache分布式、消息发布订阅系统角色存储系统消息系统流处理平台-Kafka Streaming特点高吞吐、低延迟cg消费不同分区可扩展性(热扩展)持久性、可靠性容错性(n-1个replica)高并发(数千个客户端☆)...

select distinctquantity,standard_cost,sum(a.quantity*a.standard_cost) over(partition by purchase_scence_code,raw_material_code) amount,coalesce(purchase_scence_code,'unknown') as pur...

11111111111111111111111

主要工作：1、使用Postman工具模拟浏览器发送请求，调用api的人脸检测和人脸搜索2、根据api文档，封装工具类为jar包，工具类中实现创建图像集合，寻找图片，检测人脸等操作，通过 静态代码块实现从properties配置文件中读取api的key和秘钥以及人脸集合名称3、导入了fastjson，用于将返回的json字符串转换为json对象4、通过servlet实现登录注册，通过js调用摄像头.

〇、概述1、所需资料窗口函数实现组内百分比、累计值、累计百分比：https://blog.csdn.net/weixin_39751959/article/details/888289222、背景需求：不同场景不同规则下各区间内基线值的计算和MQ发送一、场景介绍二、SQL编写三、最终代码...

一、日期转字符串(一)PG(二)Oracleselect to_char(sysdate,'MM') from dual 输出为:08二、字符串转日期(一)PG(二)Oracle三、数字转换

一、数仓分层概念1、为什么要分层ODS：原始数据层DWD层：明细数据层DWS：服务数据层ADS：数据应用层2、数仓分层3、数据集市与数据仓库概念　4、数仓命名规范ODS层命名为odsDWD层命名为dwdDWS层命名为dwsADS层命名为ads临时表数据库命名为xxx_tmp备份数据数据库命名为xxx_bak二、数仓环境搭建1、Hive&My...

一、质疑分层不合理云上大数据数仓解决方案：https://www.aliyun.com/solution/datavexpo/datawarehouse1、离线数仓--基于hive2、实时数仓--基于kafka中间件每一步都会缓存至datahub二、数仓概念1、数仓的数据源和输出系统分别是什么数据源：用户行为数据、业务数据、爬虫(灰色地带，需要经过授权)数据输出：报表...

11111111111111111111111