爬虫开发和逆向接单
6525/月
后端
Python
浙江
杭州
更新时间:2025-12-16 05:29:34
简介
1.Python中8种数据类型的精通使用2.Python匿名函数、列表推导式、装饰器的熟练使用3.Python中re、requests、beautifulSoup等库的熟练使用4.Python爬虫框架Scrapy的熟练使用5.Python爬虫伪装中代理IP、UserAgent的熟练使用6.Python与scrapyt-redis分布式爬虫的基本使用7.Python操作Mysql数据库增删改查8.Python操作MongoDB数据库增删改查9.Python建立数据库连接池提高效率10.团队协作开发工具git的熟练使用11.熟悉Linux日常工作环境,熟练掌握常用命令和调优监控手段12.python机器学习库scikit-learn库的熟练使用13.python科学计算库numpy、scipy和数据分析库pandas的熟练使用
技能
工作经验
播动师 - 爬虫工程师2020-03-03 - 0000-00-00
爬取抖音系所有网站和app
杭州多麦电子商务股份有限公司 - 爬虫工程师2019-06-01 - 2020-02-11
工作内容
1.负责数据采集爬虫项目的开发与维护,优化爬取性能及采集策略
2.研究和破解电商及自媒体app反爬策略,保证爬取稳定性
3.开发和维护爬虫框架,实现爬虫的常规指标的监控及预警
教育经历
同济大学浙江学院 - 数学2013-07-01 - 2017-07-01
同济大学浙江学院本科毕业 .
作品信息
暂无数据