logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

数据采集+数据可视化练习(2022-1-6)

任务书3赛题说明竞赛内容分布竞赛时长任务一:Spark 组件部署管理(Standalone 模式)15%任务二:数据采集20%任务三:数据清洗与分析30%任务四:数据可视化20%任务五:综合分析...

#big data#hadoop#spark
记一次腾讯云搭建Hadoop伪分布报错

在腾讯云上搭建Hadoop伪分布式集群的时候格式化成功,启动进程不报错,查看进程发现少了namenode,去看日志发现以下报错问题ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.java.net.BindException: Problem binding to [hadoop:9000

#大数据
2022年江苏省大数据技能大赛训练(2022.1.8)

任务书4任务说明请按照下面步骤完成本次技术展示任务,并提交技术报告。模块一:环境搭建任务一:Hadoop组件部署管理(集群模式)说明:本环节需要使用 root 用户完成相关配置,具体部署要求如下:1、 在 master节点(/opt/package) 解 压 java、hadoop安装包 ,将解压后的安装文件移动到各个节点“/usr/local/src”路径下并更名为jdk ,将全部命令复...

#big data#spark#scala
Qwen-Image开源模型实战

阿里云开源的Qwen-Image模型凭借200亿参数MMDiT架构,在AI绘图领域实现重大突破,尤其擅长中英文文本渲染。本文详细介绍了如何通过量化技术将模型部署至消费级显卡(如RTX 3060),推荐选择Q4_K_M版本平衡性能与显存占用(6-8GB)。同时提供ComfyUI工作流部署指南,包括模型加载、显存优化等关键设置,并分享中文海报设计的黄金公式和实战案例(如非遗美食、音乐节海报等),展示其

文章图片
#开源
Hadoop分布式集群搭建

Hadoop分布式集群搭建环境说明:Hadoop分布式集群架构是主从架构,这里要搭建一个3台服务器的集群三台centos7主机,其中一个主节点master,两个从节点服务器slave用户名都为root,主机名分别为master,slave1,slave2步骤如下:1.安装CentOS7创建虚拟机单击左上角文件→新建虚拟机,创建虚拟机选择指定的Centos7系统镜像文件填写虚拟机信息默认一直下一步即

文章图片
#hadoop
Hadoop集群搭建HA高可用版

Hadoop HA搭建前提需要准备三台虚拟机创建三台虚拟机,主机名分别更改为hadoop01,hadoop02,hadoop03Hadoop部署如下主机名主机IPhadoop01192.168.197.101hadoop02192.168.197.102hadoop03192.168.197.103以下更改

文章图片
#hadoop
MapReduce单词计数实验(WordCount)

MapReduce单词计数WordCount大致流程一:启动Hadoop集群二.编写mapreduce程序代码三:将写好的java代码打包jar四:将jar上传至服务器,即Hadoop集群中五:运行jar程序hadoop jar Word.jar hdfs://hadoop01:9000/word.txt output命令:hadoop jar jar包名 输入文件名 输出目录详细步骤前期准备工作

文章图片
#hadoop#mapreduce#java
基于Django Web框架(Python)实现简单的学生管理系统 -------学习笔记

环境准备安装python环境已安装,此处忽略安装Djangopip install django检验安装Django版本import djangoprint("Django版本为",django.get_version())# 输出结果为:Django版本为 3.2.7构建项目创建Django项目django-admin startproject project_name创建appdjango-a

文章图片
#django#python#mysql
    共 14 条
  • 1
  • 2
  • 请选择