个人介绍
能够完成以下几项任务：1.python语言的 Django后端+scrapy爬虫+Excel数据转化+pysql与dataframe数据分析+机器学习与自然语言处理+量化交易2.C#语言的 unity游戏开发3.Java语言的 数据开发+数据迁移(Flink+Spark+hive)4.Vue语言的 前端开发
核心技能
python爬虫
Vue
Unity3D
自然语言处理
爬虫
精选作品集
工作经历
杭州炎魂网络科技有限公司 · 数据分析师
2023-11-30 - 1
取数需求：完成80+临时需求，在superset上搭建20+个看板，最长sql达1500行。提供埋点咨询，帮助业务设计10+活动埋点
数据入仓：构建五大建表规范，将亿级数据从iceberg导入到starrocks，并进行数据校验和分区分桶调整
核心指标告警：编写flink的datastream和tableAPI将kafka数据实时聚合并导入starrocks，对dolphin告警组件进行二次开发以满足飞书运维平台接口格式，并结合pysql计算数据在飞书进行告警
数据质量监控：利用opensearch-py
澎贝数科有限公司杭州分公司 · 数据分析师
2023-10-01 - 1
风控检测：利用SQL收集支付订单数据，构建订单id、设备id、用户id、支付时间、创建时间等基本特征，采用随机森林模型进行训练，基于阿里dataworks在钉钉进行定时告警，准确率达80%
转化漏斗：提出betting相关埋点、在dataworks上进行取数、在quickbi上进行报表制作
教育背景
东华大学 · 金融大数据挖掘与分析
2024-09-01
浙江理工大学 · 金融
2020-09-01