Scrapy爬虫框架安装配置及创建使用Scrapy爬虫框架安装创建一个Scrapy爬虫框架Scrapy爬虫框架安装在命令提示符下载conda install scrapy如果安装失败，可能的原因是Scrapy爬虫框架所依赖的twisted安装失败。twisted是用Python实现的基于事件驱动的网络引擎框架（从这里可以看出，一个框架可以依赖于另一个框架），但其安装形式比较特殊，须先下载源码，再在

Hive函数及性能优化Hive函数分类内置函数字符函数类型转换函数数学函数日期函数集合函数条件函数聚合函数表生成函数Hive UDF开发流程Hive UDF实现示例一：把小写字母转换成大写字母示例二：输入一个时间，添加小时示例三：两个时间相减使用hive实现函数建立hive临时函数建立hive永久函数Hive事务Hive事务的特点和局限性Hive事务的开启和设置Hive PLSQLHive性能调优

JDBC操作数据库JDBCJDBC访问数据库的步骤（1）Class.forName()加载驱动（2）DriverManager获取Connection连接（3）创建Statement执行SQL语句（4）返回ResultSet查询结果（5）释放资源JDBCJava数据库连接技术(Java DataBase Connectivity)，能实现Java程序对各种数据库的访问由一组使用Java语言编写的类

Hive基础什么是HiveHive的优势和特点Hive的发展里程碑和主流版本Hive与MapReduceHive的基本架构Hive元数据管理Hive体系架构Hive操作Hive Interface-命令窗口模式（1）Hive Interface-命令窗口模式（2）Hive工具操作Hive Interface-其他使用环境Hive数据类型原始类型复杂数据类型Hive元数据结构数据库（Database

hadoop之hbase安装和配置安装HBase前，需要的准备条件安装HBase配置HBase单机模式伪分布式模式完全分布式模式（集群）安装HBase前，需要的准备条件HBASE运行需要JDKJDK安装和配置HBase的底层存储依赖于HDFS,需要安装hadoop环境hadoop环境安装和配置HBase依赖于ZooKeeper来做分布式协调工作,所以需要安装Zookeeper的环境,博主所用的伪分

一维数组理解数组定义数组数组元素的表示和赋值数组的初始化遍历数组示例一示例二示例三示例四示例五增减删除数组增加元素数组删除元素理解数组在Java中，数组是用来存储一组相同类型数据的数据类型。当数组初始化完毕后，java为数组在内存中分配一段连续的空间，其在内存中开辟的空间也将之固定，此时数组的长度就不能再发生改变。即使数组中没有保存任何数据，数组所占据的空间依然存在。（现在所说的数组暂时都是一维数

VMware安装虚拟机安装虚拟机所需要的安装包：https://pan.baidu.com/s/1PvIg8Hzr9y_Fvs2RWwSVIA提取码：6l1f解压：MobaXterm backup.zipMobaXterm_Portable_v12.3.zip虚拟机–VM15.5.1版本.zip解压完虚拟机–VM15.5.1版本.zip会出现个VM15.5.1版本的文件打开文件，点击：VMware

Hbase和Hive集成以及性能优化Hive与HBase集成使用场景Hive与HBase集成原理Hive与HBase集成示例名称空间（NameSpace）安全权限（Security with GRANT）安全权限（revoke&user_permission）Region SplitHBase Compaction-LSMHBase Compaction-实现HBase Compactio

QuickHit项目需求项目环境准备项目覆盖的技能点难点分析需要用到的类项目需求QuickHit游戏考验学员键盘输入内容的速度和正确率。根据输入速率和正确率将玩家分为不同级别，级别越高，一次显示的字符数越多，玩家正确输入一次的得分也越高。如果玩家在规定时间内完成规定次数的输入，正确率达到规定要求，则玩家升级（为了简单起见，规定用户只要输入错误一次，则游戏结束）。玩家最高级别为6级，初始级别一律为一

hadoop高可用集群搭建配置HDFS-HA集群启动HDFS-HA集群配置HDFS-HA集群保证hadoop集群搭建成功。hadoop集群搭建保证zookeeper时区同步和集群搭建成功。zookeeper的安装配置和zookeeper集群的时区同步配置以三台机器为例，hadoop01为主节点，hadoop06为备用节点，hadoop07为参与高可用集群的普通机器。主机名ip地址namenodeQ