logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Spark GraphX进行图计算时的OOM问题

目前Spark的社区十分活跃,在Hadoop2.0上部署更能体现出其计算价值。但是作为Spark的五大成员组件之一的GraphX在计算图时的效果究竟怎样呢?     我们都知道Spark立足于内存计算,所以计算速度快。但是这却不可避免的导致OOM的问题。GraphX中的七大算法大都是基于pregel模型实现的,它集成了原生的pregel模型和GAS模型的公共优势,减少了算法的复杂度。利用该模型

#spark
到底了