废话不多说，我在apache Hadoop2.2.0测试集群上配置支持使用LZO进行压缩的时候，遇到很多坑，不过最后到搞定了，这里把具体过程记录下来，以供参考。环境：Centos6.4 64位Hadoop2.2.0Sun JDK1.7.0_45hive-0.12.0准备工作：yum -y install  lzo-devel  zlib-devel  gcc aut

最近在防火墙的配置吃了一亏，清除预先配置之后，直接就把SSH给拒绝了！这里把今天看到用到的一些点给记录下来，便于下次使用。（一）防火墙常见命令（1）防火墙规则配置文件vi /etc/sysconfig/iptables（2）保存防护墙命令配置规则/etc/rc.d/init.d/iptables save（3）重启防火墙生效service iptables rest

      代理模式隶属于对象的结构型模式。代理模式给某一个对象提供一个代理对象，并由代理对象控制对原对象的引用。      所谓代理，就是一个人或者一个结构代表另一个人或者另一个机构采取行动。在一些情况下，一个客户不想或者不能直接引用一个对象，而代理对象可以在客户端和目标对象之间起到中介作用。      代理模式的典型类图如下图所示。               

rook-ceph安装部署到位后，就可以开始来尝试使用StorageClass来动态创建pv了。有状态的中间件在kubernetes上落地基本上都会用到StorageClass来动态创建pv（对于云上应用没有那么多烦恼，云硬盘很好用，但是对于自己学习和练习来说还是Ceph更加靠谱），这里小试一试动态创建pv的威力，为后续用它来玩转redis、zookeeper、elasticsearch做准备。

这将允许192.168.10网断的主机以RW模式访问共享目录。2、创建共享目录share并且授权所有人可以访问。这将允许任何主机以只读模式访问共享目录。看到了自己设置的共享目录则认为成功。1、在服务端安装nfs服务端组件。首先，创建一个用于挂载的目录。4、重新加载配置、重启服务。1、安装客户端NFS组件。2、挂载共享目录到客户端。一、服务端安装与配置。二、客户端安装与配置。

这篇文章讲述了一位前阿里员工从2012年离职后的职业历程。他先后加入嘀咕网和懒人听书创业公司，在懒人听书工作十年后于2023年离开。之后经历了旅游、求职不顺的过程，最终与几位前同事在2023年底开始创业。团队最初尝试AI写小说未果，又考虑转行做新疆民宿但未能实施。最终回归老本行，在2024年底启动了"万象有声"项目——一个利用AI技术优化有声书制作全流程的平台，涵盖智能拆章、画

现在这个美好的时代，作为一个技术人，如果连Spark的大名都不知道，那显然是说不过去的，话说大数据的时候，必提Hadoop、Spark。我跟进Spark也好些日子，这次用最新搭建的Hadoop实验集群用最新的Spark来体验了一把酸甜苦辣!

hadoop-2.7.3 + Centos 6.7 64位环境下使用弄一套Hadoop环境过程的中使用 hadoop checknative -a来检查环境支持Hadoop native 的状态。

正如上一篇记录的那样，采用sqoop1.99.4 + hadoop2.2.0来将mysql的表数据导入到HDFS的时候，死活没有找到如何制定字段分隔符号，这才有了试用sqoop1.4.5这番折腾。从架构上来将，Sqoop2确实在安全性等方面有很好的提升，但是Sqoop2目前还不推荐在生产环境中使用，它很多功能还缺失，不够完善，不过，对我们小规模的使用Hadoop的公司来讲，Sqoop1.4.X足够

kubelet组件，systemd方式部署，journalctl -u kubelet查看；其他组件，pod方式部署kubectl logs查看；容器运行时将日志写入 /var/log/pods；系统日志，/var/log/message