logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

理解数据仓库中星型模型和雪花模型

在数据仓库的建设中,一般都会围绕着星型模型和雪花模型来设计表关系或者结构。下面我们先来理解这两种模型的概念。(一)星型模型图示如下:[img]http://my.csdn.net/uploads/201208/21/1345516634_6388.JPG[/img]星型模是一种多维的数据关系,它由一个事实表和一组维表组成。每个维表都有一个维作为主键,所有这些维...

#hive
vue3+vite+ts 组件中自动导入 ref 和 reactive

在每个vue组件中,都去手动引入 ref 和 reactive 是非常繁琐的一件事,我们可以通过插件来完成自动导入。

#前端
pyspark 3.0增加python woker进程崩毁时的日志记录

之所以能够捕捉segmentation fault进程崩溃异常,是利用了python 3.3版本之后的新功能 faulthandler 库,当故障、超时或收到用户信号时,利用本模块内的函数可转储 Python 跟踪信息。这样排查问题就很方便了,可以清晰的看到是那个依赖库导致的。

#python#开发语言
java 修改默认的/tmp/hsperfdata_root目录的生成位置

java程序启动后,默认(请注意是默认)会在/tmp/hsperfdata_userName目录下以该进程的id为文件名新建文件,并在该文件中存储jvm运行的相关信息,其中的userName为当前的用户名,/tmp/hsperfdata_userName目录会存放该用户所有已经启动的java进程信息。这里面就包括我们最常用的 jps 命令,可以只显示 java 进程的功能,就是解析这个目录生成出来

#java#开发语言
如何使用Spark大规模并行构建索引

使用Spark构建索引非常简单,因为spark提供了更高级的抽象rdd分布式弹性数据集,相比以前的使用Hadoop的MapReduce来构建大规模索引,Spark具有更灵活的api操作,性能更高,语法更简洁等一系列优点。 先看下,整体的拓扑图: 然后,再来看下,使用scala写的spark程序: Java代码  package com

#hadoop#spark#lucene +1
spring boot 2.x 使用 jpa 映射 json mysql列数据映射乱码

通过下面的依赖,可以将 mysql 的 json 列字段(mysql 5.7及以上的版本支持),映射成 Java Bean。1,修改 mysql 列为 text 类型,低于 mysql 5.7 版本不支持 json 类型。2,升级 mysql 驱动 jar 的版本,升级 jdbc 驱动 jar 版本大于 5.7。

#spring boot#json#mysql
java 修改默认的/tmp/hsperfdata_root目录的生成位置

java程序启动后,默认(请注意是默认)会在/tmp/hsperfdata_userName目录下以该进程的id为文件名新建文件,并在该文件中存储jvm运行的相关信息,其中的userName为当前的用户名,/tmp/hsperfdata_userName目录会存放该用户所有已经启动的java进程信息。这里面就包括我们最常用的 jps 命令,可以只显示 java 进程的功能,就是解析这个目录生成出来

#java#开发语言
java idea debug 失效debug Skipped breakpoint at java. lang. Class. forName0(java. lang. String,

把这两项勾掉 apply 之后,跑一把之后,然后在选中 apply回来,再次debug就正常了。

#java#intellij-idea#开发语言
使用Java Rest Client操作Elasticsearch

Elasticsearch作为一个成熟的开源框架,对主流的多种客户端语言都支持,比如Java,JavaScript ,PHP,.Net,Python,Ruby,CURL当然还有一些小众的语言,虽然es官网没支持,但是个人开发者也有一些开源的,具体的可在es官网clients地址查看:https://www.elastic.co/guide/en/elasticsearch/client/i

#elasticsearch
分布式助手Zookeeper(八)

[b][color=olive][size=large]散仙,在前几篇关于zookeeper的文章中,介绍了基于zookeeper实现的分布式公平锁,以及非公平锁,那么本篇呢,散仙就来介绍下关于使用zookeeper如何模拟实现一个分布式队列。那么为什么需要分布式队列呢?,我们都知道队列,在我们的编程开发中,是一种比不可少的数据结构,最典型莫过于,生产者与消费者的例子了,我们在程序过经常使...

#zookeeper
    共 17 条
  • 1
  • 2
  • 请选择