文章目录01 引言02 为何需要数据治理？2.1 数据治理定义2.2 何为数据治理？03 数据治理设计3.1 数据规则3.1.1 标准3.1.2 模型3.2 数据处理中间层3.2.1 元数据3.2.2 主数据3.3 数据共享04 文末01 引言在之前的一篇博客《细谈数据仓库》我大致讲解了为何需要数据仓库？数据仓库的概念以及分层等。与数据仓库紧密相关联的概念就是 “数据治理” 了,也就是本文要讲的内

文章目录01 引言02 IDEA下运行DataX2.1 步骤1：clone源码2.2 步骤2：编译源码2.3 步骤3：配置编译后的包2.4 步骤4：复制用到的插件2.5 步骤5：配置运行环境2.6 步骤6：启动项目01 引言关于DataX，在前面的博文《DataX入门》已经介绍过，因为官方没有IDEA运行的示例文档，网上的资料参差不齐，所以本文主要讲解如何在IDEA的环境下跑起DataX，一次填完

在企业的数据分析系统中，前端展现工具有很多，独立部署专门系统的方式：以Business Objects(BO,Crystal Report),Heperion(Brio),Cognos等国外产品为代表的，它们的服务器是单独部署的，与应用程序之间通过某种协议沟通信息。有WEB程序展现方式：通过独立的或者嵌入式的java web系统来读取报表统计结果，以网页的形式对结果进行展现，如，100...

文章目录1. 前言2. 安装3. 配置CheckStyle3.1 新建CheckStyle代码规范文件3.2 导入CheckStyle文件4. 使用1. 前言CheckStyle是SourceForge下的一个项目，提供了一个帮助JAVA开发人员遵守某些编码规范的工具。它能够自动化代码规范检查过程，从而使得开发人员从这项重要，但是枯燥的任务中解脱出来。CheckStyle检验的主要内容 :&amp

文章目录1. 启动过程组1.1 制定项目章程1.2 识别相关方2. 规划过程组2.1 制定项目管理计划2.2 规划范围管理2.3 收集需求2.4 定义范围2.5 创建WBS2.6 规划进度管理2.7 定义活动2.8 排列活动顺序2.9 估算活动持续时间2.10 制定进度计划2.11 规划成本管理2.12 估算成本2.13 制定预算2.14 规划质量管理2.15 规划资源管理2.16 估算资源2.1

在使用vscode的时候，发现默认的git插件不支持查看提交日志的功能。本文讲解在vscode如何查看git提交日志。① 安装Git History插件②选中我们要查看的文件夹或文件，右键Git: View File History③ 可以查看到该文件夹的提交日志：本文完！...

① 打开idea配置文件选中plugins -> Browse repositories...:②搜索gitnore插件，输入.gitignore然后install并重启IDEA③ 重启后，选择项目，右键 -> new -> .gitignore File -> .gitignore file(Git):④ 选择默认创建的例子就好了⑤ 下面写上我定义的内容（这是Spring

git如何查看当前分支是基于那条分支拉取的

文章目录01 引言02 jenkins打包maven项目02 jenkins构建jar包为镜像2.1 确认编译系统状态2.2 清理构建缓存2.3 构造Dockerfile2.3.1 新建或下载Dockerfile模板2.3.2 定义变量名2.3.3 为Dockerfile变量赋值2.4 打包镜像3. 推送镜像到仓库01 引言本文是一篇笔记，主要记录如下内容：jenkins如何把maven项目构建为

docker以挂载配置文件启动elasticsearch的时候会报如下错误：看错误我们会以为是es容器里的/usr/share/elasticsearch/data/nodes文件夹目录没有读写权限，其实给提示误导了，实际是挂载的目录没有读写权限。比如我们宿主主机的配置目录为:/usr/local/es/data，那么我们需要赋予它读写权限：chmod 777 /usr/local/es/d...