敏捷过程敏捷开发的价值观敏捷开发应遵循的12条原则敏捷开发的原则敏捷团队运作机制关键的团队角色产品负责人（Product Owner）Scrum Master（流程主管）关键的团队活动敏捷团队的五个约定约定1. 业务分析师们，我们其实是同一个角色的两种面孔，请叫上我们参加客户需求会议约定5. 测试人员们，那些敏捷实践对于我们也是有用的。敏捷开发的前置条件...

在当今大数据的应用越来越广泛的情况下，数据治理一直是企业面临的巨大问题。大部分公司只是单纯的对数据进行了处理，而数据的血缘，分类等等却很难实现，市场上也急需要一个专注于数据治理的技术框架，这时Atlas应运而生。Atlas官网地址：https://atlas.apache.org/，Atlas是Hadoop的数据治理和元数据框架。文档查看地址：https://atlas.apache.org/2.

CDM：公共数据层，由DWD+DWS+ADS+DIM共同构成公共处理逻辑收敛和下沉统一公共指标和公共维度，减少数据的不一致性建立整个业务范围内的一致性维度，并确保使用；实体表，不大，就可以做每日全量。对于维度表，比如说商品分类，这种不是很大，也可以做每日全量，有一些不太会发生改变的维度，就可以固定保存一份值，比如说：地区，种族等。像事务型事实表，比如说交易流水，操作日志，出库信息，这种每日比较大，

首先，阿里云也有一款名为DataHub的产品，是一个流式处理平台，本文所述DataHub与其无关。数据治理是大佬们最近谈的一个火热的话题。不管国家层面，还是企业层面现在对这个问题是越来越重视。数据治理要解决数据质量，数据管理，数据资产，数据安全等等。而数据治理的关键就在于元数据管理，我们要知道数据的来龙去脉，才能对数据进行全方位的管理，监控，洞察。DataHub是由LinkedIn的数据团队开源的

个人网站：https://www.lovebetterworld.com/往后余生，只想分享一些干货，分享一些工作，学习当中的笔记、总结，并帮助需要帮助的任何人，关注我，大家一起来学习吧！企业级nosql数据库应用与实战-redis一、NoSQL简介1.1 常见的优化思路和方向1.1.1 MySQL主从读写分离由于数据库的写入压力增加，Memcached只能缓解数据库的读取压力。读写集中在一个数据

开源物联网平台建设、参考解决方案一、什么是物联网平台1.1 物联网应用基础服务平台应具备的能力1.2 物联网平台定位要求1.2.1 提供统一的终端接入平台1.2.2 提供统一的应用基础运行平台1.2.3 提供统一的安全认证1.2.4 提供统一的数据交换平台1.2.5 提供统一的门户支撑平台1.2.6 提供多种业务基础构件1.3 物联网平台功能结构1.3.1 数据通讯模块1.3.2 报警处理模块1.

Web漏洞扫描-Burp Suite一、Burp Suite概述二、功能及特点三、Burp Suite安装四、Burp Suite使用一、Burp Suite概述安全渗透界使用最广泛的漏扫工具之一，能实现从漏洞发现到利用的完整过程。功能强大、配置较为复杂、可定制型强，支持丰富的第三方拓展插件。基于Java编写，跨平台支持，收费，不过有Free版本，功能较少。https://portswigg...

Web漏洞扫描-AWVS一、AWVS概述二、功能以及特点三、AWVS界面四、AWVS使用一、AWVS概述Acunetix Web Vulnerability Scanner（检查AWVS）是一款知名的Web网络漏洞扫描工具，它通过网络爬虫测试你的网站安全，检测流行安全漏洞。它包含有收费和免费两种版本，AWVS官方网站是：http://www.acunetix.com/官方下载地址：http...

前端面试题之计算机网络篇一、HTTP协议1. GET和POST的请求的区别2. POST和PUT请求的区别3. 常见的HTTP请求头和响应头4. HTTP状态码304是多好还是少好5. 常见的HTTP请求方法6. OPTIONS请求方法及使用场景7. HTTP 1.0 和 HTTP 1.1 之间有哪些区别？8. HTTP 1.1 和 HTTP 2.0 的区别9. HTTP和HTTPS协议的区别10

Idea里面远程提交spark任务到yarn集群1.本地idea远程提交到yarn集群2.运行过程中可能会遇到的问题2.1首先需要把yarn-site.xml,core-site.xml,hdfs-site.xml放到resource下面,因为程序运行的时候需要这些环境2.2权限问题2.3缺失环境变量2.4 没有设置driver的ip2.5保证自己的电脑和虚拟机在同一个网段内,而且要关闭自己电脑的