logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据实战项目之---搜狗用户日志分析系统

第一章:项目需求分析与设计1.项目需求分析2.系统架构设计3.数据流程设计4.集群角色规划1.项目需求分析(1)采集用户海量浏览日志信息(2)实时统计分析TopN用户浏览最高的新闻话题(3)实时用户分析已经曝光的新闻话题总量(4)实时统计用户新闻浏览量最高的时间段2.系统架构设计3.数据流程设计4.集群角色规划第二章:环境的准备1.项目需求分析2.系统架构设计3.数据流程设计4.集群角色规划...

#hdfs#spark#kafka +1
基于Flink实时计算Demo—关于用户行为的数据分析

项目是有关于电商的用户行为数据分析,包括以下几部分内容:1.批处理和流处理2.电商用户行为分析3.数据源分析4.项目模块划分1.批处理和流处理1.批处理概念批处理主要操作大容量静态数据集,并在计算过程完成后返回结果。可以认为,处理的是用一个固定时间间隔分组的数据点集合。批处理模式中使用的数据集通常符合下列特征:1.有界:批处理数据集代表数据的有限集合2.持久:数据通常始终存储在某种类型的持久存储位

#flink
安装Tableau时出现Error 1310 Error writing to file:C:\Windows\...*.dll. Verify that you have access to...

Error 1310 Error writing to file:C:\Windows\...*.dll. Verify that you have access to that directory安装Tableau时出现这个问题,解决方法很简单,把360关掉就可以。

#大数据
Centos的安装与配置(超详细)

Centos的安装与配置(超详细)1.下载1.官网下载centos2.下载VMware2.安装1.计算机的名字2.磁盘的布局3.修改配置4.共享文件夹3.网络配置1.Hadoop集群2.网络配置4.防火墙5.自动同步时间6.搭建Hadoop集群7.SSH免密钥登陆1.下载1.官网下载centoscentos 6.x 或centos 7.x2.下载VMware2.安装1.计算机的名字虚拟机名:had

#大数据#centos
kafka的零拷贝(零复制)技术

1.传统的读取数据并发送到网络的步骤如下:1.操作系统将数据从磁盘文件中读取到内核空间的页面进行缓存;2.应用程序将数据从内核空间读入用户空间缓冲区;3.应用程序将读到的数据协会到内核空间并放入socket缓冲区;4.操作系统将数据从socket缓冲区复制到网卡接口,此时数据才能通过网络进行发送。2.kafka的零拷贝技术通常情况下,kafka的消息会有多个订阅者,生产者发布的消息会被不同的消费者

#kafka
Grafana安装后web打开报错

Grafana安装后web打开报错如下:If you're seeing this Grafana has failed to load its application files1. This could be caused by your reverse proxy settings.2. If you host grafana under subpath make sure your gra

#前端#javascript#开发语言
到底了