logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

sql中创建表的几种方式

sql中创建表的几种方式。

文章图片
#sql#数据库
hive自定义函数

当Hive的内置函数不能满足需要时,可以通过编写用户自定义函数UDF(User-Defined Functions)插入自己的处理代码并在查询中使用它们。•用户定义表生成函数UDTF(User-Defined Table-Generating Functions),用于操作单个输入行,产生多个输出行。•用户定义聚集函数UDAF(User-Defined Aggregating Functions)

文章图片
#hive#hadoop#数据仓库
hbase建表时设置预分区

在Hbase中,预分区是一种优化手段,用于在创建表时提前规划好Region的分布,以提高数据写入的效率和查询性能,同时避免数据分布不均导致的热点问题。1.减少split操作:随着数据的增长,单个Region超过一定大小会触发split操作,会消耗资源并影响性能。3.提升写入性能:预分区能够使得数据初始写入时直接分散到多个Region,提高并行写入的能力。2.平衡数据分布:通过预知数据的分布特性,更

文章图片
#hbase#数据库#大数据
mysql实现hive里面collect_set函数功能

mysql实现hive里面collect_set函数功能。

文章图片
#mysql#hive#数据库
hive数据仓库构建ods层模型案例

hive数据仓库构建ods层模型案例。

文章图片
#sqoop#hadoop#hdfs +1
git拉取代码报错 xxx has no tracked branch

场景:coding改密码后,用git拉取代码报错:本地分支与远程分支没有关联。git拉取代码报错 xxx has no tracked branch。

文章图片
#git
测试hive是否可以按\001切分字段

场景:hdfs文件是以\001分割的字段,测试hive是否可以按\001切分字段。

#sql#oracle#hadoop
sqoop导入oracle报错,missing in or out parameter

报错原因: 数据导入oracle,表名字段名要一定要大写。

文章图片
#sqoop#oracle#hadoop
flink读kafka写oracle数据库

场景:从kafka读数据,通过jdbc写入oracle。#往kafka测试主题写入数据。–创建oracle测试表。

文章图片
#数据库#flink#kafka
flink读kafka写mysql数据库

场景:从kafka读数据,通过jdbc写入mysql。#往kafka测试主题写入数据。–创建mysql测试表。

文章图片
#redis#数据库#缓存
    共 29 条
  • 1
  • 2
  • 3
  • 请选择