logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

如何查看spark与hadoop、kafka、Scala、flume、hive等兼容版本【适用于任何版本】

问题导读1.通过什么途径,可以查看与spark兼容的组件版本?2.如何获取pom文件?3.pom文件中包含了哪些信息?4.spark编译通过什么参数可以指定hadoop版本?当我们安装spark的时候,很多时候都会遇到这个问题,如何找到对应spark的各个组件的版本,找到比较标准的版本兼容信息。答案在spark源码中的pom文件。首先我们从官网下载源码。进入官网

大数据集群资源预估规划【适用于面试与工作集群规划】

问题导读1.如何判断数据增量?2.QPS如何计算?3.存储空间需要考虑哪些因素?4.内存估算和哪些因素有关?我们在实际工作,或者面试中,经常会遇到这么一个问题,集群该如何规划,一台机器多...

#大数据#java#hadoop +2
机器学习算法之砖瓦:向量详解

问题导读1.你认为什么是向量?2.向量最开始是来自于哪门学科?3.本文例子中如何将原始数据转换为向量的?上一篇算法系列讲解之:社交网络之共同好友模型讲解机器学习向量在非常多的地方会用到,...

区块链开发语言之go语言学习线路指导

问题导读1.为什么学习go语言?2.你认为该如何入门go语言?3.你认为go语言需要哪些学习过程?转载注明本文链接http://www.aboutyun.com/forum.php?mod=viewthread&tid=24344区块链可以使用各种语言开发,很多开发者使用的是go语言,因为它的并发能力。所以这里对go语言进行一个汇总,节省大家时间。首先,我们可能只是知道go是一门不错的语言,然后我

Kafka +深度学习+ MQTT搭建可扩展的物联网平台【附源码】

问题导读1.本项目包含哪些源码?2.本文使用了哪些框架?3.KSQL UDF如何实现?文中链接查看,可点击:阅读原文物联网+大数据+机器学习将会是以后的趋势,这里介绍一篇...

spark零基础学习线路指导【包括spark2】

问题导读1.你认为spark该如何入门?2.你认为spark入门编程需要哪些步骤?3.本文介绍了spark哪些编程知识?转载注明链接:http://www.aboutyun.com/forum.php?mod=viewthread&tid=21959 spark学习一般都具有hadoop基础,所以学习起来更容易多了。如果没有基础,可以参考零基础学习hadoop到上手工作线路指导(初级篇)。具有基础

Kafka +深度学习+ MQTT搭建可扩展的物联网平台【附源码】

问题导读1.本项目包含哪些源码?2.本文使用了哪些框架?3.KSQL UDF如何实现?文中链接查看,可点击:阅读原文物联网+大数据+机器学习将会是以后的趋势,这里介绍一篇...

比Hive快279倍的数据库-ClickHouse到底是怎样的

问题导读1.什么是ClickHouse?2.ClickHouse适合哪些场景?3.为什么面向列的数据库查询如此快?1.什么是ClickHouseClickHouse是一个...

Kafka +深度学习+ MQTT搭建可扩展的物联网平台【附源码】

问题导读1.本项目包含哪些源码?2.本文使用了哪些框架?3.KSQL UDF如何实现?文中链接查看,可点击:阅读原文物联网+大数据+机器学习将会是以后的趋势,这里介绍一篇...

基于Flink商品实时推荐系统项目【大数据及算法】

介绍:基于Flink实现的商品实时推荐系统。flink统计商品热度,放入redis缓存,分析日志信息,将画像标签和实时记录放入Hbase。在用户发起推荐请求后,根据用户画像重排序热度榜,...

    共 15 条
  • 1
  • 2
  • 请选择