架构师求职晋升简历模板,适合5~10年招聘投递,也适合其他相关岗位简历参考
超级简历
188-8888-8888
success@jobmail.vip
工作经历
XXX有限公司
2018年01月
-
2019年11月
爬虫架构专家
- 负责分布式网络爬虫系统平台的架构设计与开发(如抓取调度,多样化抓取,页面解析和结构化抽取,海量数据存储和读取等)、技术选型;
- 负责海量数据的爬取、清洗、解析、入库,按时按量完成工作任务;
- 负责多平台信息爬取和页面内容的提取分析,负责破解各类反爬机制;
- 负责 HTTP、AJAX 等各类网络请求分析,探索和研究高效的数据抓取解决方案;
- 研究爬虫策略和防屏蔽规则,解决封账号、封 IP、验证码、页面跳转等难点攻克,提升网页抓取的效率和质量;
- 不断完善和重构现有爬虫系统,通过对抓取、解析、调度、存储等模块的拆分与优化,构建和完善统一的抓取服务平台;
XXX有限公司
2014年06月
-
2017年12月
爬虫架构师
- 负责在 Dcoker 容器上分布式部署 Pyspider,优化框架工具包,开发 Django 与 Pyspider接口;
- 负责编写爬虫模板(微信文章,今日头条,微博等),引用动态 IP,设计防屏蔽规则,实现可视化新增、管理爬虫项目,供非开发人员使用;
- 负责解决微信公众号及今日头条的封禁问题,以及用 selenium 解决微信的验证码滑动验证问题;
- 负责分析网页结构,用 python 语言搭建爬虫架构,抓取指定所需数据,如商品价格、图片等信息,运用 MySQL 存储获取数据、清洗不合要求数据;
教育经历
XX 大学
2010年09月
-
2014年06月
软件工程
本科
其他
- 语言: CET-4,掌握基本的听说读写能力;
- 技能: 熟练使用Scrapy 爬虫框架、Scrapy-redis爬虫框架;熟练使用Requests、urllib、urllib2等网络爬虫模块;熟悉正则表达式、XPath、CSS等网页信息抽取技术;熟练使用Selenium + PhantomJS、XPath、BeautifulSoup等技术进行网站数据的爬取;熟练操作MySQL、Redis、MongoDB数据库,熟练掌握各数据库的增删查改等常用操作;熟悉HTML、CSS、JavaScript、Ajax、JQuery等WEB前端技术;
项目经历
视频网
2018年01月
-
2018年03月
- 制定项目工作目标和计划,对需求进行跟踪,确保项目计划按时,高质量的完成;
- 建设团队的开发规范和流程,并及时地针对特定问题进行合理优化,带领团队进行技术攻关,负责项目技术架构;
- 深入发掘业务需求为软件开发提供架构设计,开发和维护统一的软件开发架构,发现和解决存在的技术问题,从事核心架构部分代码的编写、指导和培训工程师;





















