logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

clickhouse的可视化工具DBeaver

1.clickhouse由于其优异的查询性能,目前在大数据领域应用逐渐火热起来,由于navicat不支持clickhouse的可视化查询,我们就用DBeaver来代替navicat2.DBeaver下载DBeaver的官网 https://dbeaver.io/download/3.建立与clickhouse的连接可以直接连接ip也可以通过ssh来连接clickhouse,其实操作和n...

#sql
大数据工程师的日常工作

大数据开发,有几个阶段:1.数据采集【原始数据】2.数据汇聚【经过清洗合并的可用数据】3.数据转换和映射【经过分类,提取的专项主题数据】4.数据应用 【提供api 智能系统 应用系统等】数据采集数据采集有线上和线下两种方式,线上一般通过爬虫、通过抓取,或者通过已有应用系统的采集,在这个阶段,我们可以做一个大数据采集平台,依托自动爬虫(使用python或者nodejs制作爬虫软件),ETL工具、或者

#大数据
理解维度数据仓库——事实表、维度表、聚合表

事实表在多维数据仓库中,保存度量值的详细值或事实的表称为“事实表”。一个按照州、产品和月份划分的销售量和销售额存储的事实表有5个列,概念上与下面的示例类似。SateProductMouthUnitsDollarsWAMountain-100January37.95WACable LockJanuary47.32ORMountain-100January37.95ORCable LockJanuar

#数据仓库
mysql主从同步错误:The slave I/O thread stops because master and slave have equal MySQL server UUIDs

在配置mysql主从复制的时候出现错误: Fatal error: The slave I/O thread stops because master and slave have equal MySQL server UUIDs; these UUIDs must be different for replication to work.1.现象Slave_IO_Running:No,mysql

VMware克隆虚拟机镜像、导入镜像,图文教程

1.克隆虚拟机镜像1.右击当前虚拟机–》选择管理–》选择克隆2.选择克隆自虚拟机当前状态3.选择完整克隆–》选择保存路径即可2.虚拟机导入镜像1.打开虚拟机,选择刚才复制的镜像2.在主页中就可以看到刚才复制的镜像了...

#jvm
django视频上传,python使用opencv截取视频第一帧,并保存图片到指定位置

1.说明笔者使用django做后台,需求是在前端上传文件过来,判断文件类型,如果是图片形式,则保存到磁盘中,并把图片与文章的关联关系写入数据库中。如果上传的是视频,则需要截取第一帧做封面图,同时把视频和封面图一并写入磁盘,并保存到数据库中。图片、视频、封面图都存在同一张表中,用不同的标志位区分。2.环境准备安装好opencv-python,不然import cv2的时候会报错pip install

#python#django#opencv
Cron表达式学习:每天十二点执行一次:0 0 12 * * ?

1.cron表达字符含义语法:Seconds Minutes Hours DayofMonth Month DayofWeek YearSeconds Minutes Hours DayofMonth Month DayofWeek比较多的使用的通常是第二条,因为很少任务是按年份去执行的2.常用表达式示范每隔5秒执行一次:*/5 * * * * ?每隔1分钟执行一次:0 */1...

到底了