logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

[0.1] spark相关问题及解决办法记录

场景记录一些常见的spark问题,特别是环境类问题及相关的解决办法分析问题 1 :机器可用物理内存不足现象:通过 # ./start-all.sh 启动 Spark 时出现异常,根据提示 参看相关logcat spark-hadoop-org.apache.spark.deploy.master.Master-1-master.out,发现:There is insufficient memo

泛型一条街

参考张孝祥系列JDK 1.8 API场景为什么java后来要引入泛型?泛型原理与特性?如何自定义方法泛型与类泛型?如何通过反射获取参数化类型的实际类型参数分析package cool.pengych.java.generic;import java.lang.reflect.InvocationTargetException;import java.lang.ref

周-工作总结(1)

场景上周做了什么事情?搭建了开发环境初步理解什么是机器学习理解基于spark mllib机器学习的开发过程以ALS算法为例,尝试搭建自己的推荐系统(目前还没有搞定)分析一. 搭建开发环境。周五发现目前的开发环境不可用:从svn下载后的工程无法在idea下运行。于是从新搭建了一下开发环境,项目已上传至SVN,具体搭建过程文档见附件相关文档。二. 什么是机器学习从功能的角度来讲就是,计算机

到底了