大数据框架，多支持SQL on模式，如何测试？可参考使用TPC-H、TPC-DS。TPC-DS测试基准是TPC组织推出的用于替代TPC-H的下一代决策支持系统（OLAP）测试基准。参考：http://www.csdn.net/article/2015-05-14/2824680

运维日常做运营，常用的工具有 superset、kibana、grafana。1. Grafana2. superset3. kibana

阿里巴巴大数据运维平台实践https://time.geekbang.org/dailylesson/detail/100016734阿里巴巴数据库运维发展与实践https://time.geekbang.org/dailylesson/detail/100022709

/usr/local/fqlhadoop/hadoop/sbin/hadoop-daemon.sh start namenode/usr/local/fqlhadoop/hadoop/sbin/hadoop-daemon.sh stop namenodehdfs haadmin -DFSHAAdmin -getServiceState n1/usr/local/fqlhadoop/hadoop/s

针对不同组件，比较关注以下事项：1. 集群信息集群名称、节点 IP 列表、客户端连接方式（直接连接还是通过 hippo 或是 nginx）、对接业务线、对接开发负责人、重要级别、异常影响范围、特殊情况说明、是否有单点2. 部署拓扑3. 监控告警监控面板指标告警异常处理历史故障4. 管控操作如定时管理、数据清理、重启等不同定时任务5. 代码库......

代码：#!/bin/env pythonimport MySQLdb,MySQLdb.cursorsimport datetimefrom elasticsearch import Elasticsearchfrom elasticsearch import helpersimport sys# start_time = datetime.datetime.strptime('2021-01-01

权限管控，分为有两个步骤：身份认证（authentication）和授权（authorization）。前者鉴定身份，后者根据身份赋予权限。开源项目中常见的权限模型概念：RBAC / ACL / POSIX / SQL Standard。Kerberos 侧重在防止蓄意的身份伪造，无法防止有意或无意的误操作。Ranger 的目标都是统一的授权管理框架/平台https://web.mit.edu/k

https://docs.stackstorm.com/chatops/index.html

在主节点上使用kprop命令将master.dump文件同步至备节点。

https://bigdata.djbook.top/