logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Spark Streaming实战对论坛网站动态行为pv,uv,注册人数,跳出率的多维度分析,实时统计每天pv,uv的sparkStreaming结合redis结果存入mysql供前端展示

论坛数据运行代码自动生成,该生成的数据会作为Producer的方式发送给Kafka,然后SparkStreaming程序会从Kafka中在线Pull到论坛或者网站的用户在线行为信息,进而进行多维度的在线分析数据格式如下:date:日期,格式为yyyy-MM-ddtimestamp:时间戳userID:用户IDpageID:页面IDchanelID:板块的IDaction:点击和注册...

#spark#uv
spark笔记spark优化

基本概念(Basic Concepts)RDD - resillient distributed dataset 弹性分布式数据集Operation - 作用于RDD的各种操作分为transformation和actionJob - 作业,一个JOB包含多个RDD及作用于相应RDD上的各种operationStage - 一个作业分为多个阶段Partition - 数据分区, ...

#spark
解决Ubuntu的root账号无法登录SSH问题-Permission denied, please try again.

有时,我们登录SSH的时候,会出现如下问题:此时,是因为系统默认禁止root用户登录ssh,此时我们可以这样解决:首先,Ctrl+C退出密码输入界面:然后输入:su -tips:一定是su -,不是su然后出现如下界面:然后,我们编辑sshd_config文件,我们输入:vi /etc/ssh/sshd_config出现如下文件编辑的界面:

#虚拟机#ubuntu#centos +1
mysql explain详解

explain包含的信息十分的丰富, 主要关注以下几个字段信息.id: select子句或表执行顺序, id相同, 从上到下执行, id不同, id值越大, 执行优先级越高.type: type主要取值及其表示sql的好坏程度(由好到差排序):systemconsteq_refrefrangeindexALL. 保证range, 最好到ref.key: 实际被使用的索引列.ref: 关联的字段,

#mysql#数据库#sql
mysql explain详解

explain包含的信息十分的丰富, 主要关注以下几个字段信息.id: select子句或表执行顺序, id相同, 从上到下执行, id不同, id值越大, 执行优先级越高.type: type主要取值及其表示sql的好坏程度(由好到差排序):systemconsteq_refrefrangeindexALL. 保证range, 最好到ref.key: 实际被使用的索引列.ref: 关联的字段,

#mysql#数据库#sql
java.lang.UnsatisfiedLinkError解决方法汇集

运行JSP报表程序页面出现java.lang.UnsatisfiedLinkError: CC错误有以下几种原因和处理方法:1、请查看控制台的错误信息a:如果控制台的消息是类似java.lang.UnsatisfiedLinkError: no MRChkLib in java.library.path,Error loading library MRChkLib这样的错误信息

#java#web app
K8S常见异常事件与解决方案

比如容器的内存限制值配置了1Gi,而容器的内存随着容器内进程内存使用量的增加超过了1Gi,就会导致容器被操作系统Cgroup Kill。发生容器被Kill之后,容器已经被停止,所以后续会出现应用实例被重启的情况。集群中的coredns组件发生重启(重新创建),一般是由于coredns组件压力较大导致oom,请检查业务是否异常,是否存在应用容器无法解析域名的异常。检查应用进程内存配置,如Java的j

#kubernetes#jvm#java
java实现记事本之Java记事本源码及实现

今天给大家介绍一下关于如何用Java实现记事本功能,是学习Java swing的一个非常好的案例,下面先看一下运行结果(下载地址在最下面):下面我们来看源码:[java] viewplain copy import java.awt.*;   import java.awt.event.*;   import j

#java
networking restart is deprecated

命令是:sudo /etc/init.d/networking restart但是可能会遇到下面的提示:Running /etc/init.d/networking restart is deprecated because it may not enable again some interfaces如果在VMware中修改了 Ubuntu 虚拟机

#ubuntu
Elasticsearch+Hbase实现海量数据秒回查询

一、ElasticSearch和HbaseElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。Elasticsearch的性..

    共 12 条
  • 1
  • 2
  • 请选择