logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

数据处理-23大数据

【代码】数据处理-23大数据。

#大数据
大数据专业实践作业

使用 HTML、CSS 和 JavaScript 构建一个天气查询网页,并结合 Python 后端实现天气数据调用和展示。学生将通过浏览器输入城市,点击查询按钮后,查看实时天气数据。所有过程可在本地完成,无需复杂工具。HTML页面结构CSS样式美化JavaScript实现交互Python获取天气数据使用,从豆瓣读书的公开榜单中爬取书籍的相关信息(如书名、作者、评分、出版日期、评价人数等),进行数据

#大数据
实训8 大数据实训项目全链路成果展示

项目立项-->数据采集(python爬虫)-->数据处理(pandas)-->数据库搭建与数据导入(MySQL)-->中间层构建(ETL)-->应用层构建与接口(python)-->数据分析与可视化(Echarts)实训1 数据采集基础知识-CSDN博客实训2 MySQL zip安装-CSDN博客实训3 建库、数据处理并导入库-CSDN博客实训4 ETL构建中间层-CSDN博客实训5 python

#大数据
实训7 json文件数据用python导入数据库

项目分值说明环境准备10分Python、MySQL、pymysql 安装成功JSON读取15分成功读取并解析 JSON 文件数据库连接15分成功连接 MySQL,用户名密码正确创建表20分自动创建bookstore数据库和book_info表批量插入25分成功插入所有数据,无报错异常处理10分有合理的try-except保护代码规范5分注释清晰,结构合理✅总分:100。

#json#python#数据库
实训5 python连接mysql数据库

项目分值说明环境准备10分正确安装Python、MySQL、驱动数据库连接15分成功连接并输出提示数据增删改查40分每项操作完整、正确代码规范15分有注释、模块化、命名规范问题排查10分能正确处理异常与错误总分100分使用建立连接。使用执行SQL。使用提交事务。使用关闭连接。所有参数必须使用%s占位符,防止SQL注入。所有脚本运行成功,数据查询正确,无异常报错,即为实训完成!```pythontr

#数据库#python#mysql
实训4 ETL构建中间层

能力点掌握程度MySQL字符串函数应用✅ 掌握分隔符嵌套拆分逻辑设计✅ 理解正则表达式清理文本✅ 实践类型转换与空值处理✅ 熟练ETL流程设计与调试✅ 能独立完成通过本实训,你已掌握了从原始杂乱数据 → 结构化中间表的全过程,是构建企业级数据仓库的重要基石。掌握这些技能,意味着你已迈入数据工程师的核心能力圈!🔹下一步建议:尝试将该流程封装为存储过程或接入数据调度平台(Airflow),实现自动化

#etl#数据仓库
【python】发送表格邮件

#!/usr/bin/env python# -*- coding: utf-8 -*-from html import HTMLfrom email.mime.text import MIMETextimport mysql.connectorimport smtplibfrom email.mime.text import MIMETextfrom email.header ...

到底了