数据来源：搜狗实验室官方网站的用户查询日志，http://www.sogou.com/labs/resource/q.php第一列：搜索时间第二列：用户ID第三列：搜索内容第四列：搜索内容出现在搜索结果页面的第几行第五列：用户点击的是页面的第几行第六列：用户点击的超链接可以看到第四列和第五列之间是空格不是tap，使用记事本查找替换，记事本输入tap无效，可以复制...

IDEA代码：import org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.SparkContext._object WordCount {def main(args: Array[String]): Unit = {val inputPath=args(0)val outputP...

linux：https://blog.csdn.net/cui2839255227/article/details/53289563 给pycharm配置anaconda环境 https://blog.csdn.net/baoxiao7872/article/details/80328224 https://blog.csdn.net/u010083327/arti...

1. 老毛桃安装windows102. 选个大的磁盘分100g空间，用来装centos7右键计算机，管理，磁盘管理，右键E盘或F盘，压缩卷，分100g3. 软碟通安装centos,注意！按tap修改，这一步非常重要参考：https://www.cnblogs.com/xiaoyao-lxy/p/5561728.htmlhttps://blog.csdn....

1.官网下载64位安装包2.解压3.解压后的目录里会有start_navicat在此目录打开终端，运行它： ./start_navicat 会弹出对话框，要安装wine，你要很高兴很爽快的确定，没它你的navicat没法在linux里运行。4.安装好wine后，运行navicat，会弹出对话框，可选择使用或输入注册码注册。不要去找注册码，选“试用”，除非你有可用的注册码。5...

1. 老毛桃安装windows102. 选个大的磁盘分100g空间，用来装centos7右键计算机，管理，磁盘管理，右键E盘或F盘，压缩卷，分100g3. 软碟通安装centos,注意！按tap修改，这一步非常重要参考：https://www.cnblogs.com/xiaoyao-lxy/p/5561728.htmlhttps://blog.csdn....

使用正则定位价格，更简单import requestsimport reurl = 'https://www.amazon.cn/s/field-keywords=spark'# 隐藏爬虫head = {'user-agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko)...

sbt 是 scala 的编译工具安装：curl https://bintray.com/sbt/rpm/rpm > bintray-sbt-rpm.reposudo mv bintray-sbt-rpm.repo /etc/yum.repos.d/sudo yum install sbt验证：（会等很长时间）root@hadoop01 ~]# sbtsbt...

pycharm配置运行pyspark1. 安装pycharm2. 配置3. 测试  1. 安装pycharm官网下载pycharm：https://www.jetbrains.com/pycharm/下载 pycharm-community-2018.3.2.tar.gz解压：可以bash，也可以右键归档管理器提取此时进入bin目录 ./pycharm.sh...