logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

【大数据实战】Spark 2.2.2 完全分布式集群搭建

前言本文将详细介绍如何在 Ubuntu 16 系统上搭建 spark 2.2.2 完全分布式集群。整个集群由 3 台虚拟机组成:1 台主节点(master)和 2 台从节点(slave1、slave2)。文章涵盖从环境准备、免密登录配置、JDK 安装,到 spark 部署与启动验证的完整流程,适合初学者跟着一步步操作。环境概览角色主机名操作系统主要进程主节点masterUbuntu 16从节点sl

#分布式#spark#大数据
open claw(小龙虾)U盘版教程

本文介绍了一种基于U盘的简易AI部署方案。用户只需将安装包解压至U盘,运行Windows-Start.bat文件即可自动跳转浏览器界面。操作步骤包括选择AI模型、输入API密钥(支持免费和付费版本),并可选择接入微信/QQ聊天机器人。该方案无需电脑预装环境,部署完成后即可通过对话使用AI功能。文中提供了百度网盘下载链接(提取码:ts6u)和简要使用指南,并承诺对用户问题给予回复。

文章图片
#opencv
open claw(小龙虾)U盘版教程

本文介绍了一种基于U盘的简易AI部署方案。用户只需将安装包解压至U盘,运行Windows-Start.bat文件即可自动跳转浏览器界面。操作步骤包括选择AI模型、输入API密钥(支持免费和付费版本),并可选择接入微信/QQ聊天机器人。该方案无需电脑预装环境,部署完成后即可通过对话使用AI功能。文中提供了百度网盘下载链接(提取码:ts6u)和简要使用指南,并承诺对用户问题给予回复。

文章图片
#opencv
大众点评店铺信息及好评,中评,差评的爬虫程序最新版2024-5月份之好评数据的采集

将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来,都是直接换个cookie就可以用了

文章图片
#爬虫
google浏览器使用edge浏览器的插件

在C:\Users\用户名\AppData\Local\Microsoft\Edge\User Data\Profile 1\Extensions找到lpmhmbogdfoddanepgnbngfeofdjdnge(这个是GS的文件夹)这个是我的目录C:\Users\23138\AppData\Local\Google\Chrome\User Data\Default。3:把这个文件夹复制到谷歌浏

文章图片
#edge#前端
oracle vm virtualbox 搭建Ubuntu18(最详细教程)

将对每一步安装步骤进行解析,不光让大家清楚知道安装整个流程,更让大家懂每一步的含义,方面我们自定义一些参数

文章图片
#ubuntu#linux
小程序端的懂车帝二手车数据采集

懂车帝小程序端的二手车数据爬取。无加密清空,设置异常结束,下一次不会从头爬取策略

文章图片
#小程序
Python + Selenium + OpenCV 自动化识别与破解缺口滑动验证码实战

利用selenium+opencv识别含缺口的滑块验证码,识别率高达99%

文章图片
大众点评店铺信息及好评,中评,差评的爬虫程序最新版2024-5月份之店铺详情信息采集

将2024-5最新系列的大众点评的美食店铺信息采集流程分段分享出来,都是直接换个cookie就可以用了

文章图片
#爬虫
25年8月份最新文章—爬取某无忧网的岗位信息

本文介绍了一个基于Python和Playwright的爬虫程序,用于采集前程无忧网站上19个热门城市的1000条岗位信息。程序通过处理URL参数和验证码滑块,获取岗位名称、薪资、公司信息等关键字段,并使用pandas保存为CSV文件。代码包含详细的注释,实现了自动翻页、数据解析和异常重试机制,支持自定义搜索岗位名称。该爬虫可有效收集全国主要城市的招聘数据,为就业市场分析提供数据支持。

文章图片
#python
    共 12 条
  • 1
  • 2
  • 请选择