logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

开发工具快捷键总结

查看一个类所有的方法:alt + 7。SQL格式化:ctrl+alt+L。

#个人开发
用户行为数据会话(session)切割及spark读写clickhouse完整实现

用户数据统计中会话切割实现,spark读写clickhouse及SQL方式实现session切割

#spark#大数据#etl +2
CDH中将hive计算引擎调整为spark及hive引擎设置相关命令

CDH中将hive计算引擎调整为spark1.在CDH的hive中搜索配置参数:hive.execution.engine2.第一步仅仅是修改的jdbc,也就是beeline远程连接时候计算引擎修改为hive,还需修改hive-site.xml中的hive.execution.engine配置文件为spark<!--Hive执行引擎--><property><name

#spark#hive#cloudera
DolphinScheduler实现python任务调用资源文件

如何实现python任务调度资源文件1.首先已经上传了对应的脚本资源文件2.引用资源文件也可以参考博客:dolphinscheduler-2.0.5 Python任务使用记录(资源栏位)

#数据库
Flink SQL 实现读写redis,并动态生成Hset key

Flink SQL 实现读写redis,并动态生成Hset key

#大数据
Flink CDC mongoDB 使用及Flink sql解析monggo中复杂嵌套JSON数据实现

Flink CDC mongoDB 使用及Flink sql解析monggo中复杂嵌套JSON数据实现

#大数据
到底了