云原生大数据组件研究（Hive+Hadoop）前言网上的找的文档大多残缺不靠谱，所以我整理了一份安装最新版本的hive4…0.0+hadoop3.3.4的学习环境，可以提供大家安装一个完整的hive+hadoop的环境供学习。由于在公司担任大数据的培训工作后续还会更新一些基础的文章,希望能帮助到大家。**一、**安装Hadoop3.3.4前置：集群规划机器信息Hostnamek8s-masterk

在安装可视化图形接界面之前，要确保你安装的虚拟机可以正常运行，并且可以连接网络。如果存在不能连接网络的问题，可以参考我的下一篇博客。

这一步在选择项目所需的配置项时，就很直观了：页面内也有很多提示和查看详情的入口，相较于之前命令行的方式，就很银杏了，哈哈Babel；Router；选择Vue语法版本（2.x / 3.x（Preview））；选择路由模式（history mode / hash mode）；简单选择2.x和hash mode，点击创建项目！用完这一圈Vue UI下来，感觉比命令行直观太多了。不过对于程序猿来说，虽然V

4. 在测试类中执行创建。文件夹，上传，下载文件。

因此，我们需要安装Microsoft Build Tools for Visual Studio 或Visual Studio Code，安装时选中相应的。引起的，而这个工具是Microsoft Build Tools for Visual Studio 或Visual Studio Code 等。pip安装报错“error: microsoft visual c++ 14.0 or greate

在安装可视化图形接界面之前，要确保你安装的虚拟机可以正常运行，并且可以连接网络。如果存在不能连接网络的问题，可以参考我的下一篇博客。

我从grafana 官方上搜索了几个dashboard，但指标实在太少。在kafka的broker端无法直接获取消息积压等指标信息，这些数据在消费端上，我们也不太可能去连接所有的消费端获取监控信息。注意job_name不要修改，值就是"kafka"，要不我下面的grafana不能直接用，还需要每个面板依次修改。如果后续有其它指标在jmx里不提供，也可以继续补充kafka-exporter，刮取更多

IOPS是指单位时间内系统能处理的I/O请求数量，一般以每秒处理的I/O请求数量为单位，I/O请求通常为读或写数据操作请求。对于应用系统，需要首先确定数据的负载特征，然后选择合理的IOPS指标进行测量和对比分析，据此选择合适的存储介质和软件系统。影响磁盘的关键因素是磁盘服务时间，即磁盘完成一个I/O请求所花费的时间，它由寻道时间、旋转延迟和数据传输时间三部分构成。每秒查询率QPS是对一个特定的查询

需上传的文件或文件夹的完整路径，若在文件所在文件夹打开终端执行此命令，则只需输入文件名即可。scp是基于ssh的网络文件传输命令，可以将本地文件或文件夹直接上传到服务器指定位置。网卡，然后用ifconfig命令获取虚拟机的ip地址，再在主机上用上述命令操作即可。：大写P，用于指定端口，port为指定端口号，若是默认端口则可省略。：表示filepath是一个文件夹，将整个文件夹上传到服务器。虚拟机上

数据库的主要作用就是对数据进行保存和维护，所以备份数据是数据库管理中最常用的操作。为了防止数据库意外崩溃或硬件损伤而导致的数据丢失，数据库系统提供了备份和恢复策略。保证数据安全的最重要的一个措施就是定期的对数据库进行备份。这样即使发生了意外，也会把损失降到最低。数据库备份是指通过导出数据或者复制表文件的方式来制作数据库的副本。当数据库出现故障或遭到破坏时，将备份的数据库加载到系统，从而使数据库从错