简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
首先说下,这里一共五个虚拟机,ip地址只有最后的网段不同。1 .首先在五个虚拟机上都执行 ssh-keygen这个命令,这里后面加上 -t rsa不是必须的,以为这里默认生成的密钥类型就是rsa类型 2 .一路按y,其他按回车生成密钥,位置在/root/.ssh下面 3 .接下来在master节点,也就是第一台虚拟机上进入/root/.ssh目录,将生成的公钥id_rsa.pub放入到...
C:\Users\data>pythonPython 3.7.0 (v3.7.0:1bf9cc5093, Jun 27 2018, 04:59:51) [MSC v.1914 64 bit (AMD64)] on win32Type "help", "copyright", "credits" or "license" for more information.Failed calli...
机器学习Java、Python是一门语言,机器学习是一门技术或方法,数据挖掘是一件事情。语言------------------------->机器学习----------------------->数据挖掘、模式识别、人工智能也许你和这个叫『机器学习』的家伙一点也不熟,但是你举起iphone手机拍照的时候,早已习惯它帮你框出人脸;也自然而然点开今日头条推给你的新闻;...
稀疏矩阵的存储格式CSC理解。目的Compressed Sparse Column Format (CSC)的目的是为了压缩矩阵,减少矩阵存储所占用的空间。这很好理解,手法无法就是通过增加一些"元信息"来描述矩阵中的非零元素存储的位置(基于列),然后结合非零元素的值来表示矩阵。这样在一些场景下可以减少矩阵存储的空间。Spark API在Spark中我们一般创建这样的稀疏矩阵的API...
C:\Users\data>pythonPython 3.7.0 (v3.7.0:1bf9cc5093, Jun 27 2018, 04:59:51) [MSC v.1914 64 bit (AMD64)] on win32Type "help", "copyright", "credits" or "license" for more information.Failed calli...
一、简答题1.Spark master使用zookeeper进行HA的,有哪些元数据保存在Zookeeper?答:spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置,包括Worker,Driver和Application以及Executors。standby节点要从zk中,获得元数据信息,恢复集群运行状态,才能对外...