大数据学习笔记（一）大数据概论大数据是什么1大数据概念：（big data ) : 指无法在一定时间内用常规软件工具进行捕捉、管理和处理数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。2 数据的存储单位 ： bit , byte, KB, MB,GB,TB,PB,EB, ZB,YB,BB,NB,DB。其中1 byte = 8 bit1K

粒子群算法实例计算，必须弄懂！

详细介绍sql中与时间日期有关的所有函数。

VM多台虚拟机网路设置背景：我需要多台联网的虚拟机搭建集群，使用vmmare构建，设置网路使得：虚拟机1，虚拟机2 能联通外网虚拟机1，虚拟机2能相互ping虚拟机1，虚拟机2ping通主机第一步查看当前主机网路的ip、子网掩码、网关在cmd中使用 ipconfigC:\Users\brisk>ipconfigWindows IP 配置...无线局域网适配器 WLAN:连接特定的 DNS 后

需求： 在VMware虚拟机上新增一个2GB磁盘，并挂载在/home/newdisk 目录下整个过程分为 5 个步骤如下 ：设置虚拟机新增磁盘将新增磁盘分区fdisk格式化mkfs挂载mount设置永久挂载/etc/fstab步骤一：虚拟机增加磁盘打开虚拟机设置，然后添加磁盘，只要选择大小 ，其他的都点下一步就可以了步骤二：分区命令为fdisk/dev/sdb开始后输入n 新增分区， 然后选择p，

Kubernetes的核心技术概念和API对象API对象是K8s集群中的管理操作单元。K8s集群系统每支持一项新功能，引入一项新技术，一定会新引入对应的API对象，支持对该功能的管理操作。例如副本集Replica Set对应的API对象是RS。每个API对象都有3大类属性：元数据metadata、规范spec和状态status。元数据是用来标识API对象的，每个对象都至少有3个元数据：namesp

pod通信和服务发现在没有k8s的世界里，系统管理员要在用户端配置文件中明确服务的精确的ip地址或主机名来配置客户端的应用，但是在k8s中并不是需要。k8s中应用运行在pod中， 而pod的高可用设计使得无法保证准确的ip, 这里总结一下pod与服务的工作方式。1 pod特点pod随时可能启动或关闭，是短暂的客户端不会提前知道pod的地址，水平伸缩以为着pod可能会提供相同的服务，每个pod ip

三个k8s小技巧解放双手

使用rke部署集群时，虽然已经很方便了，但是如果节点个数较多，每个节点要手动配置，防火墙，selinux, iptables等等。还是挺麻烦的， 这些配置每个节点都一样，完全可以通过脚本批量配置。过程参考RKE部署K8S脚本主要分为四个部分：批量配置服务器环境配置免密登录自动生成cluster.yml文件下载安装RKE,部署集群。主要使用的工具就是expecet, 关于expcet的使用参考exp

1准备工作1.1 集群配置一台nignxf负载均衡，2台使用RKE配置k8s集群，然后在这个集群上配置高可用Rancher主机IP主机名角色1.117.61.155nginxcontrolplane,etcd81.68.101.212k8s-node01controlplane,etcd,worker81.68.229.215k8s-node02controlplane,etcd,worker分开