个人介绍

熟悉 Python 基础语法,掌握网络爬虫、Pandas 数据处理、MySQL 数据库等技术栈,可独立完成数据采集、清洗入库等常规任务,支持提供测试demo验证效果,代码规范,沟通及时,能快速响应需求调整,适合中小型数据类项目合作。

核心技能
网络爬虫 Pandas MySQL 数据处理 Python
精选作品集
全国城市天气数据采集系统
开发了一套完整的全国城市天气数据采集系统,分为两个核心模块: 城市基础信息爬虫:自动爬取全国所有城市的名称、所属省份、URL 及热门城市标记,数据清洗后同步存入 MySQL 数据库并备份为 CSV 文件; 天气数据爬虫:基于 Playwright 无头浏览器,批量爬取 362 个城市近 30 天的历史天气数据,包含日期、天气状况、最高 / 最低气温、温差等字段,内置反爬伪装、异常重试、日志记录机制,确保采集稳定可靠。 项目实现了从城市列表采集到天气数据入库的全流程自动化,为后续数据分析提供了完整、结构化的数据源。
全国天气数据清洗与可视化分析
基于采集到的全国天气数据,完成了从数据清洗到多维度可视化分析的完整流程: 1.数据预处理:对 362 个城市近 30 天的天气数据进行清洗、筛选、去重与异常值处理,统一字段格式并生成分析用结构化数据集; 2.多维度分析:从气温、昼夜温差、雨天占比三个维度,分别计算全国各省平均指标,挖掘地域气候规律; 3.可视化呈现:使用 Matplotlib 和 Pyecharts 制作了全国气温热力图、温差热力图、雨天占比地图、湖北城市细节分析图等多类图表,直观展示全国天气分布特征,形成了一套完整的数据分析报告。
工作经历
教育背景
武汉大学 · 数学与应用数学 2005-09-01
武汉大学() · 基础数学 2010-09-01