logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据篇 --(错题集)Output directory F:/aa already exists

程序报错:检查代码,发现没有任何错误,检查查询文件,无误,查询结果目录,发现已有结果,此目录已被占用,个换目录尝试!程序正常,无误当结果输出的目标地址已经被其他程序占用时,会报以上错误,跟换路径到新文件夹就行...

linux挂载新的硬盘

模拟将买的硬盘插入到 服务器中1. 选中 目标虚拟机 右键 设置2. 选中 硬盘 点击 添加按钮3. 点击 下一步4. 选择 创建新虚拟磁盘5. 指定 磁盘大小为10G6. 完成7. 注意: 重启 才可以生效没有操作前成功之后:分区:命令 英文 含义fdisk /dev/sdb partition 开始指定磁盘分区 ...

linux挂载 持有系统镜像 光驱(方法一)( you must specify the filesystem type 错误解决方法)

1. 目标虚拟机, 右键 设置2. 选中 CD/DVD, 浏览 选中本地的 centOS 镜像3. 创建目录 mkdir -p /mnt/cdrom4. 挂载镜像文件 mount /dev/sr0 /mnt/cdrom如出现:you must specify the filesystem type,说明未连接。挂载成功:mount: block device...

Spark --Spark Streaming实战 WordCount他来啦!!! updateStateByKey reduceByKeyAndWindow

WordCount需求&准备●图解●首先在linux服务器上安装nc工具nc是netcat的简称,原本是用来设置路由器,我们可以利用它向某个端口发送数据yum install -y nc●启动一个服务端并开放9999端口,等一下往这个端口发数据nc -lk 9999●发送数据话不多说!!!上代码!package cn.itcast.st...

#spark
linux的用户权限相关命令

1.对文件/目录的权限:序号权限英文缩写数字序号01读readr402写write...

kafka -- 集群操作

1、创建topic创建一个名字为test的主题, 有三个分区,有两个副本node01执行以下命令来创建topiccd /export/servers/kafka_2.11-1.0.0bin/kafka-topics.sh --create --zookeeper node01:2181 --replication-factor 2 --partitions 3 --topic t...

#kafka
kafka --学前须知(消息队列)

消息队列介绍消息(Message):是指在应用之间传送的数据,消息可以非常简单,比如只包含文本字符串,也可以更复杂,可能包含嵌入对象。消息队列(Message Queue):是一种应用间的通信方式,消息发送后可以立即返回,由消息系统来确保信息的可靠专递,消息发布者只管把消息发布到MQ中而不管谁来取,消息使用者只管从MQ中取消息而不管谁发布的,这样发布者和使用者都不用知道对方的存在。...

#kafka
kafka --集群环境搭建

kafka集群环境搭建1、初始化环境准备安装jdk,安装zookeeper并保证zk服务正常启动2、下载安装包并上传解压通过以下地址进行下载安装包node01执行以下命令,下载并解压cd /export/softwareswget http://archive.apache.org/dist/kafka/1.0.0/kafka_2.11-1.0.0.tgztar...

#kafka
kafka --主要组件

kafka主要组件说明kafka当中的producer说明producer主要是用于生产消息,是kafka当中的消息生产者,生产的消息通过topic进行归类,保存到kafka的broker里面。kafka当中的topic说明1、kafka将消息以topic为单位进行归类2、topic特指kafka处理的消息源(feeds of...

#kafka
Spark -- spark on kafka Receiver & Direct Kafka手动维护偏移量

kafka回顾!!!上图完事!常用命令#启动kafka/export/servers/kafka/bin/kafka-server-start.sh -daemon /export/servers/kafka/config/server.properties#停止kafka/export/servers/kafka/bin/kafka-server-stop.sh#查看t...

#kafka#spark
    共 14 条
  • 1
  • 2
  • 请选择