innodb_force_recovery影响整个InnoDB存储引擎的恢复状况。默认为0，表示当需要恢复时执行所有的恢复操作（即校验数据页/purge undo/insert buffer merge/rolling back&forward），当不能进行有效的恢复操作时，mysql有可能无法启动，并记录错误日志

DataSophon也是个类似的管理平台，只不过与智子不同的是，智子的目的是锁死人类的基础科学阻碍人类技术爆炸，而DataSophon是致力于自动化监控、运维、管理大数据基础组件和节点的，帮助您快速构建起稳定，高效的大数据集群服务。

目录一、Kettle整合Hadoop1、 整合步骤2、Hadoop file input组件3、Hadoop file output组件二、Kettle整合Hive1、初始化数据2、 kettle与Hive 整合配置3、从hive 中读取数据4、把数据保存到hive数据库5、Hadoop Copy Files组件6、执行Hive的HiveSQL语句三、Kettle整合HBase1、HBase初始化

<configuration xmlns:xi="http://www.w3.org/2001/XInclude"><!-- Unix Socker 文件路径 --><property><name>dfs.domain.socket.path</name><value>/var/lib/hadoop-hdfs/dn_socke

为了增强可发现性和治理能力，Atlas 提供了一个业务分类界面，允许用户首先定义一组代表其业务域的业务术语，并将其与 Atlas 管理的元数据实体相关联。例如，将原始数据的 hive 表转换为存储某个聚合的另一个 hive 表的 ETL 过程可以是扩展过程类型的特定类型。在Atlas中查询某一个元数据对象时往往需要遍历图数据库中的多个顶点与边，相比关系型数据库直接查询一行数据要复杂的多，当然使用图

​ Docker是一个客户端-服务器（C/S）架构程序。Docker客户端只需要向Docker服务器或者守护进程发出请求，服务器或者守护进程将完成所有工作并返回结果。Docker提供了一个命令行工具Docker以及一整套RESTful API。你可以在同一台宿主机上运行Docker守护进程和客户端，也可以从本地的Docker客户端连接到运行在另一台宿主机上的远程Docker守护进程。

因为，我们这个A集群是kerberos 环境，B集群是不带kerberos环境，这里使用Distcp的方式。这里仅是为了迁移底层数据，所以选择那种方式都可以。客户集群机房迁移，我们部署的集群也要完成跨集群迁移hbase 表，这里选择迁移Hadoop底层数据来实现hbase的表迁移。从HMaster -web 可以看到表的 2 个Region 的状态为 Other Regions。如果是kerber

基于镜像创建pod,使用deploy控制器暴露服务得到service，使用ingress提供域名访问服务；容器交付流程通常分为四个阶：开发阶段、持续集成阶段、应用部署阶段和运维阶段。对应用程序编译打包、使用Dockerfile构建镜像，把镜像推送到镜像仓库；4.对外暴露应用（Service、Ingress）2.推送到镜像仓库中（阿里云镜像、网易镜像）3.控制器部署镜像（Deployment）1.制

Kuboard，是一款免费的 Kubernetes 图形化管理工具，Kuboard 力图帮助用户快速在 Kubernetes 上落地微服务。Kuboard v3.x 支持 Kubernetes 多集群管理。您可以同时使用 Kuboard v3.x 和 Kuboard v2.0.x；Kuboard v3.x 支持 amd64 (x86) 架构和 arm68 (armv8) 架构的 CPU。

调度大致流程用户使用 create yaml 创建 pod，请求给 apiServer，apiserver 将 yaml 中的属性信息(metadata) 写入 etcdapiServer 触发 watch 机制准备创建 pod，信息转发给调度器，调度器使用调度算法选择node，调度器将node信息给 apiServer，apiServer 将绑定的 node 信息写入etcdapiServer