logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

spark和hadoop的区别

Spark:提供了更广泛的数据处理功能,包括批处理、流处理(Spark Streaming)、机器学习(MLlib)、图计算(GraphX)和交互式查询(Spark SQL)。Hadoop:主要用于批量数据处理,虽然它的生态系统中包括其它工具(如Hive、Pig、HBase等),可以实现不同的功能,如查询、流处理和NoSQL数据库等。Hadoop:有一个庞大的生态系统,包含不同的组件,如Hadoo

文章图片
#spark#hadoop#大数据
Windows 的 docker 删除容器后 WSL2 磁盘空间不释放的问题

见这里的文章: https://blog.csdn.net/ppppppppila/article/details/139653675。Windows 的 docker 删除容器后 WSL2 磁盘空间不释放的问题,成功搞定。

文章图片
#docker#容器#运维
Docker (error getsockopt: connection refused ,使用http无法使用 docker login 登录的问题)

方案解决:Docker (error getsockopt: connection refused ,使用http无法使用 docker login 登录的问题)因部署Harbor 镜像仓库,部署完了之后根据提示上传 images,需要使用docker login ip:port 进行登录,登录的时候发现因为docker 默认是https,因为测试环境就没有配置证书,所以必须添加非...

#docker#http
Spring Cloud配置ip注册找不到${spring.cloud.client.ipAddress}

如果你的Eureka client程序中,配置${spring.cloud.client.ipAddress}不生效,则需要按以下步骤搞:1.首先,在SpringCloud 2.x已经改成${spring.cloud.client.ip-address}了,所以你得首先修改eureka:instance:prefer-ip-address: trueins...

mybatis动态script加入 >=号

@Select({"<script>"," SELECT * FROM ext_statement_records WHERE business_system_id=#{businessSystemId} AND <![CDATA[date1 <=#{toDate} ]]> "," AND id IN ","<foreach collection='idList

centos 磁盘测试工具FIO工具 安装和实战

//磁盘IPOs测试在centos 7.4上,执行下面步骤yum -y install gccwget http://brick.kernel.dk/snaps/fio-2.0.7.tar.gzcd fio-2.0.7/; make ; make install;fio -filename=/dev/mapper/vg0-lv0 -direct=1 -iodepth 1 -th...

解决 python CV2 imread读取中文文件名的问题

cv2.imread 默认情况下可能不支持包含非ASCII字符(如汉字)的文件路径,因为 OpenCV 底层使用的是 C++ 的 fopen 函数,它通常不支持 UTF-8 或 Unicode 文件名。这会导致当文件路径中含有汉字时无法正常读取文件。一个通用的解决办法是先将图片读入一个字节流(bytes),然后使用 OpenCV 的 imdecode 函数从内存中解码图像。以下是如何做到这一点的代

文章图片
#python#开发语言
pip3 用阿里云加速

pip3 install -i http://mirrors.cloud.aliyuncs.com/pypi/simple pip -U &&pip3 install -r requirements.txt -ihttp://mirrors.cloud.aliyuncs.com/pypi/simple

文章图片
#阿里云#云计算
    共 99 条
  • 1
  • 2
  • 3
  • 10
  • 请选择