logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

电商网站数据库常见表结构设计

商品列表页(loading)事件名称:loading标签含义action动作:开始加载=1,加载成功=2,加载失败=3loading_time加载时长:计算下拉开始到接口返回数据的时间,(开始加载报0,加载成功或加载失败才上报时间)loading...

sparksql中使用with子查询,insert overwrite table的正确用法示例

【代码】sparksql中使用with子查询,insert overwrite table的正确用法示例。

#sql
MapReduce简介

一 MapReduce 入门1.1 MapReduce 定义Mapreduce 是一个分布式运算程序的编程框架,是用户开发“基于 hadoop 的数据分析应用”的核心框架。Mapreduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个 hadoop 集群上。1.2 MapReduce 优缺点1.2.1 优点1)开发简单,易于编程。它简...

spark数据清洗解决方案

数据倾斜的解决方案 之 小表join大表转为小表broadcast+map大表实现。适用场景:在对RDD使用join类操作,或者是在Spark SQL中使用join语句时,并且join操作中的一个RDD或表的数据量比较小(比如几百M或者一两G)。实现原理:普通的join是会走shuffle过程的,而一旦shuffle,就相当于会将相同key的数据拉取到一个shuffle read task...

微积分基本知识

微积分基本知识•什么是导数•偏导数•方向导数和梯度•凸函数和凹函数沿着某一方向的变化率求z=f(x,y),对x求偏导,就是将y设置为某个固定值,求导求任意方向的变化率称为方向导数方便求最小值和最大值梯度是一组偏导数凸函数斜率越来越大...

线性代数:通过向量组个数和维数判别向量组线性相关性

一、当向量组 个数大于维数时????个????维向量组成的向量组,当????<????时向量组线性相关对应矩阵????(????)≤????????????(????,????),由????<????,则????(????)<????(向量个数),故向量组线性相关.维数小于个数,线性相关;维数大于个数,不一定(可能线性相关也可能线性无关)二、当向量组 个数等于维数时当向量个数等于

向量点乘相关公式推导及 几何解释

1.向量点乘公式推导和几何解释01.向量点乘(dot product)是其各个分量乘积的和,公式:用连加号写:02.几何解释:点乘的结果是一个标量,等于向量大小与夹角的cos值的乘积。a•b = |a||b|cosθ如果a和b都是单位向量,那么点乘的结果就是其夹角的cos值。a•b = cosθ03.推导过程:假设a和b都是二维向量,θ1是a与x轴的夹角...

minio简介

1、 前言1.1 Minio 简介1、MinIO 是在 Apache License v2.0 下发布的对象存储服务器。 它与 Amazon S3 云存储服务兼容。 它最适合存储非结构化数据,如照片,视频,日志文件,备份和容器/ VM 映像。 对象的大小可以从几 KB 到最大 5TB。2、MinIO 服务器足够轻,可以与应用程序堆栈捆绑在一起,类似于 NodeJS,Redis 和 MySQL。3

elasticsearch---批量修改,批量更新某个字段

原文链接:http://www.mamicode.com/info-detail-2524351.html1.源生API在这里没有用官方提供的bulk API,而是用的另外一种方式。POST /infomations/infomations/_update_by_queryJSON请求格式{"query": {"match": {"status": "UP_SHELF"}},"script": {

    共 11 条
  • 1
  • 2
  • 请选择