logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

MySQL游标(cursor) 定义及实例学习

在MySql中,造成游标溢出时会引发mysql预定义的NOT FOUND错误,所以在上面使用下面的代码指定了当引发not found错误时定义一个continue 的事件,指定这个事件发生时修改done变量的值。实例说明:编写两个表 sys_user和 user, 编写存储过程,当 两个表的 id 相同时 将 user 表中的 name 更新为 sys_user 中的 user_name。fetc

文章图片
#mysql#sql
【消息队列】kafka2.0.0安装(单机)及基本命令

本文详细介绍了在Linux系统上安装配置JDK和Kafka的完整流程。主要内容包括:1)JDK环境安装与配置;2)Kafka单机部署,包含Zookeeper配置、Broker参数调整及SASL认证设置;3)Kafka生产者和消费者的启动方法;4)通过systemd实现Zookeeper和Kafka服务的开机自启。重点讲解了Kafka的安全认证配置,包括JAAS文件设置和SASL机制启用,并提供了完

文章图片
#运维#kafka
MySQL数据库断电修复(Database page corruption on disk or a failed)

innodb_force_recovery影响整个InnoDB存储引擎的恢复状况。默认为0,表示当需要恢复时执行所有的恢复操作(即校验数据页/purge undo/insert buffer merge/rolling back&forward),当不能进行有效的恢复操作时,mysql有可能无法启动,并记录错误日志

文章图片
#数据库#mysql
【DataSophon】大数据管理平台DataSophon-1.2.1基本使用

DataSophon也是个类似的管理平台,只不过与智子不同的是,智子的目的是锁死人类的基础科学阻碍人类技术爆炸,而DataSophon是致力于自动化监控、运维、管理大数据基础组件和节点的,帮助您快速构建起稳定,高效的大数据集群服务。

文章图片
【ETL工具】Kettle 整合大数据平台(Hadoop、Hive、HBase)

目录一、Kettle整合Hadoop1、 整合步骤2、Hadoop file input组件3、Hadoop file output组件二、Kettle整合Hive1、初始化数据2、 kettle与Hive 整合配置3、从hive 中读取数据4、把数据保存到hive数据库5、Hadoop Copy Files组件6、执行Hive的HiveSQL语句三、Kettle整合HBase1、HBase初始化

文章图片
#hbase#hadoop#hive
【分布式数据库】hbase-site.xml 配置文件详解

<configuration xmlns:xi="http://www.w3.org/2001/XInclude"><!-- Unix Socker 文件路径 --><property><name>dfs.domain.socket.path</name><value>/var/lib/hadoop-hdfs/dn_socke

文章图片
#hbase
【数据治理】Apache Atlas元数据管理

为了增强可发现性和治理能力,Atlas 提供了一个业务分类界面,允许用户首先定义一组代表其业务域的业务术语,并将其与 Atlas 管理的元数据实体相关联。例如,将原始数据的 hive 表转换为存储某个聚合的另一个 hive 表的 ETL 过程可以是扩展过程类型的特定类型。在Atlas中查询某一个元数据对象时往往需要遍历图数据库中的多个顶点与边,相比关系型数据库直接查询一行数据要复杂的多,当然使用图

文章图片
【Linux】CentOS8.4 安装docker

​ Docker是一个客户端-服务器(C/S)架构程序。Docker客户端只需要向Docker服务器或者守护进程发出请求,服务器或者守护进程将完成所有工作并返回结果。Docker提供了一个命令行工具Docker以及一整套RESTful API。你可以在同一台宿主机上运行Docker守护进程和客户端,也可以从本地的Docker客户端连接到运行在另一台宿主机上的远程Docker守护进程。

文章图片
【分布式数据库】使用HDFS底层文件进行HBase跨集群数据迁移

因为,我们这个A集群是kerberos 环境,B集群是不带kerberos环境,这里使用Distcp的方式。这里仅是为了迁移底层数据,所以选择那种方式都可以。客户集群机房迁移,我们部署的集群也要完成跨集群迁移hbase 表,这里选择迁移Hadoop底层数据来实现hbase的表迁移。从HMaster -web 可以看到表的 2 个Region 的状态为 Other Regions。如果是kerber

文章图片
#hbase
【云原生】kubernetes项目部署

基于镜像创建pod,使用deploy控制器暴露服务得到service,使用ingress提供域名访问服务;容器交付流程通常分为四个阶:开发阶段、持续集成阶段、应用部署阶段和运维阶段。对应用程序编译打包、使用Dockerfile构建镜像,把镜像推送到镜像仓库;4.对外暴露应用(Service、Ingress)2.推送到镜像仓库中(阿里云镜像、网易镜像)3.控制器部署镜像(Deployment)1.制

文章图片
#docker#kubernetes
    共 131 条
  • 1
  • 2
  • 3
  • 14
  • 请选择