这篇文章介绍了解决在终端中全局代理不生效的方法。作者在使用实时流式SQL平台时遇到了下载速度极慢的问题，尽管他的Mac上开启了全局代理。他发现终端使用的网络配置与系统的全局代理设置是分开的，因此需要在终端中单独配置代理。作者给出了将代理配置封装成alias的方法，方便控制终端是否使用全局代理。经过配置后，他再次尝试下载时速度明显提升。

hadoop原来可以以这么简单的方式学习核心原理

平台：H3C DataEngine表现形式：启动hive shell第一次执行走计算流程的sql时，打开计算引擎的session时卡死，可视化查看任务正常提交，就是无法执行。原因解释：无论什么yarn调度器默认都是单队列，H3C使用的是公平调度器，但队列中存在其他正在执行的任务导致队列资源占用达到10%，导致后面的任务需要等待前面的任务走完，卡死的根本原因是安装了spark，导致后台会启动spar

Hadoop 的诞生改变了企业对数据的存储、处理和分析的过程，加速了大数据的发展，受到广泛的应用，给整个行业带来了变革意义的改变；随着云计算时代的到来， 存算分离的架构受到青睐，企业开开始对 Hadoop 的架构进行改造。

1.上传文件到linux文件系统[root@node1 mydata]# lltotal 129648-rw-r--r--. 1 root root 120734753 Dec6 12:53 bigtable.bigtable-rw-r--r--. 1 root root12018355 Dec6 12:51 smalltable.smalltable2.加载数据到hive创建表create ta

基于 kubeshpere 的 flink on k8s 实践

从未有过如此详细的kafka源码解析-生产者篇

使用 sarama 开发 go 的 kafka client

拓展kafka删除功能 by timestamp

kafka无限重复消费，导致数据严重积压