个人介绍
熟悉python编程语言,java编程语言,scala编程语言。熟悉使用大数据集群的组件,如hdfs、hive、spark、flume等;三年开发网络爬虫经验,四年数据ETL经验,在学校代替学校参加过多次省赛并获得前三名。熟悉开发基于spark的数据分析程序,基于python编程语言的网络爬虫程序,熟悉mysql数据库
核心技能
Hadoop
NoSQL
Redis
Java
Python
HDFS
MySQL
爬虫
多线程
多进程
精选作品集
工作经历
广东泓大资产管理有限公司 · Python数据分析
2021-05-01 - 至今
1、负责开发运维公司的爬虫系统,保证数据能稳定,高质量的存入数据库
2、负责响应需求开发ETL程序,将指定数据处理成指定模式输出到指定位置
教育背景
广东水利电力职业技术学院 · 大数据
2018-09-01