logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

基于阿里云官网文档-大数据开发治理平台 DataWorks研读+数据质量扩展+相应的大数据组件知识扩展

网址:阿里DataWorkers网址:数据集成概述 - 大数据开发治理平台 DataWorks - 阿里云目录网址:阿里DataWorkers网址:数据集成概述 - 大数据开发治理平台 DataWorks - 阿里云一、DataWorks工作流程1、数据集成(1)数据同步过程中几个必要的东西2、数据开发(1)写sql,但又不止写sql(2)调度配置3、运维工作(1)大体如下(2)周期任务实例DAG

#阿里云#hive
Flume介绍、基础架构+Flume安装+Flume开发脚本+编写Flume拦截器+埋点数据装载到Hive

一、Flume是什么?+项目背景1.Flume介绍Flume 基于流式架构是一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。本项目 Flume 实时读取服务器本地目录下生成的埋点数据,将数据实时写入到HDFS。有的公司涉及几十甚至上百的的web服务器操作流程可能如下:二、Flume基础架构1、核心组件(1)AgentAgent 是一个 JVM 进程,它以事件的形式将数据从源头送至目

#flume#大数据
腾讯云Centos7 安装openXXX服务,达到内网IP访问

一、准备工作1、下载证书制作工具创建一个目录 用来存放证书工具使用命令进行下载[root@hadoop openvpn]# wget -Phttp://down.i4t.com/easy-rsa.zip解压 在当前目录[root@hadoop openvpn]# unzip easy-rsa.zip2、配置 vars 文件进入如下目录[root@hadoop 2.0]# pwd/root/open

文章图片
#p2p#网络协议#网络
基于阿里云官网文档-大数据开发治理平台 DataWorks研读+数据质量扩展+相应的大数据组件知识扩展

网址:阿里DataWorkers网址:数据集成概述 - 大数据开发治理平台 DataWorks - 阿里云目录网址:阿里DataWorkers网址:数据集成概述 - 大数据开发治理平台 DataWorks - 阿里云一、DataWorks工作流程1、数据集成(1)数据同步过程中几个必要的东西2、数据开发(1)写sql,但又不止写sql(2)调度配置3、运维工作(1)大体如下(2)周期任务实例DAG

#阿里云#hive
PBI基本函数+日期函数+智能日期函数

目录一、基本的一些函数1、 RELATED 从多端出发,按关系取一端的值(返回列值)2、RELATEDTABLE从一端出发,按关系取多端的值(返回表)3、COUNT(不去重)与DISTINCTCOUNT(去重)二、日期函数1、date函数 转换一个指定日期2、year/month/day/hour/minute/second 返回一个日期指定部分3、DATEVALUE转换文本到日期4、edate日

文章图片
#前端
Excel常用函数+数据透视表

一、四个常用的统计类函数 1、countif 函数 作用: 按条件统计个数 实例: countif(区域, 条件) 我想要知道 L 列姓名出现了几次,可以countif函数 Range:区域, 就是 L 列 Criteria:条件,为 L2 单元格,即等于 A。 2、count 函数 作用: 计算区域中包含数字的单元格的数目——计数 实例: count(区域) 如计算 A 列有多少个数, 用 C

#数据分析
帆软report-全流程

注意:上父格的设置,是受单元格限制的,也就是只有相邻的单元格并且是上下关系,才可以设置上下父格关系。多选框 和单选框的区别就在于,在设置多选框控件后要在多选框如下图处设置,返回类型。首先在红色处对我们的控件进行取名,然后在蓝色处对我们控件所要显示的值进行设置。因此在此项要求中,我们将每个需要随着订单id扩展的数据,左父格均设置订单id。设置参数的名字以及要传入的值,因为排序分升序、降序,这里我们设

文章图片
#学习
帆软report-全流程

注意:上父格的设置,是受单元格限制的,也就是只有相邻的单元格并且是上下关系,才可以设置上下父格关系。多选框 和单选框的区别就在于,在设置多选框控件后要在多选框如下图处设置,返回类型。首先在红色处对我们的控件进行取名,然后在蓝色处对我们控件所要显示的值进行设置。因此在此项要求中,我们将每个需要随着订单id扩展的数据,左父格均设置订单id。设置参数的名字以及要传入的值,因为排序分升序、降序,这里我们设

文章图片
#学习
Power BI前置知识+ 一张报表制作的流程

一、一些前置知识1、BI是什么?通过前端工具实现数据可视化2、常用的一些BI工具PowerBI帆软tableau ibm cognos3、什么是PowerBi简单来说一套连接多个数据源并提供数据分析的商业智能分析工具。4、PBI的产品(面试点)Power bi desktop用于个人开发 (仅仅对于个人)Power bi pro (收费 ) 建立各种工作区(对人员权限开放 )Power bi Pr

文章图片
#前端
到底了