个人介绍

熟悉python编程语言,java编程语言,scala编程语言。熟悉使用大数据集群的组件,如hdfs、hive、spark、flume等;三年开发网络爬虫经验,四年数据ETL经验,在学校代替学校参加过多次省赛并获得前三名。熟悉开发基于spark的数据分析程序,基于python编程语言的网络爬虫程序,熟悉mysql数据库

核心技能
Hadoop NoSQL Redis Java Python HDFS MySQL 爬虫 多线程 多进程
精选作品集
工作经历
广东泓大资产管理有限公司 · Python数据分析 2021-05-01 - 至今
1、负责开发运维公司的爬虫系统,保证数据能稳定,高质量的存入数据库 2、负责响应需求开发ETL程序,将指定数据处理成指定模式输出到指定位置
教育背景
广东水利电力职业技术学院 · 大数据 2018-09-01