request to httpsregistry.npm.taobao.org failed, reason certificate has expired的解决方案。npm 淘宝镜像已经从 registry.npm.taobao.org 切换到了 registry.npmmirror.com。旧域名也将于 2022 年 5 月 31 日停止服务。

用swagger测试java接口，报错TypeError: Failed to execute ‘fetch‘ on ‘Window‘: Request with GET/HEAD method cannot have body.经过查找原因是由于方法中申明的是get方法却用了@requestBody，我们只要这个参数前的声明去掉就可以了。下面介绍下常用请求方式和参数的对应关系1、Post请求Re

python执行pip install -r requirements.txt 安装第三方库报 metadata-generation-failed

一、hiveserver2简介Hive在生产上是不需要部署集群的，操作Hive只需要通过它提供的客户端即可，Hive提供了大致三类客户端：hive shell：通过hive shell来操作hive，但是至多只能存在一个hive shell，启动第二个会被阻塞，也就是说hive shell不支持并发操作。WebUI： 通过HUE/Zeppelin来对Hive表进行操作。基于JDBC等协议：启动hi

大数据分析 mysql数据迁移clickhouse最近项目遇到个问题，就是mysql做数据分析高并发情况下，老是报超时错误，主要原因还是因为mysql进行大批量关联查询太耗时间，于是在网上查询了下资料，决定试一下clickhouse一、Clickhouse简介Yandex在2016年6月15日开源了一个数据分析的数据库，名字叫做ClickHouse，这对保守俄罗斯人来说是个特大事。更让人惊讶的是，

最近在学习Flink，不可避免的需要用到kafka消息中间件，下面介绍下单机部署流程1.下载2.4.1版本我的Flink版本是1.12，对应的kafka版本要使用2.4.1的 我们下载kafka_2.11-2.4.1这个版本，2.11是scala版本http://kafka.apache.org/downloads同时我们下载kafka eagle监控kafka状态，这里我用的最新版本2.0.6h

我们知道，从Hadoop官网下载的部署包里，提供了不少jar包示例，但是我们不了解内部的实现逻辑，今天我就给大家介绍下，在java开发环境下怎么实现一个MapReducereduceTask聚合操作，就是对key相同的一组数据进行处理，具体的聚合逻辑通过接口的方式暴露给用户，由用户来指定（同mapTask方式）。reduce Task处理结果，将最后的聚合结果写入hdfs中，每个reduceTas

之前了解了很多关于大数据平台一站式部署管理的工具，比如Apache Ambari和CDH，目前最新的CDH已经没有了社区版，也就是说以后使用新版本的Cloudera Manager和CDH都是要收费的，这对于很多小公司来说，可能无法承受。转向Ambari是他们的一个可选项。Ambari是Apache的一个顶级开源项目，开源是其最大的优势，开源也意味着Ambari可以灵活地进行扩展，集成更多的数据组

2004年，葛优的电影《天下无贼》里面有一句台词，给我的印象很深刻，是一句自问自答，“21世纪什么最重要？人才！”，也是在那一年，Google公开发表了一篇论文：《简化大规模集群上的数据处理》，标志着Hadoop的计算框架MapReduce的诞生。到了2021年的今天，我想把那句话扩展一下，“21世纪什么最重要？数据和人才！”，大数据时代已经降临，在商业、经济及其他领域中，决策将日益基于数据和分析

开发工具:Intellij IDEAJava版本:JDK1.8以上在pom.xml文件中添加我们需要的jar包:spark-core<!--定义spark版本--><properties><spark.version>2.2.3</spark.version></properties><!--spark-core核心包-->&