技能标签
专业技能
精通MySQL数据库设计与优化，具备索引优化及高并发场景下的性能调优经验；熟悉Redis缓存机制，掌握数据持久化策略及集群部署方案；掌握XPath、re、json模块实现数据结构化提取；精通Selenium+PhantomJS动态HTML抓取技术，具备反爬虫策略制定与应对能力；熟悉Scrapy框架及scrapy-redis分布式爬虫组件；熟悉Django全栈开发框架，具备RESTful API设计与部署经验；掌握Linux系统运维及Shell脚本开发；熟悉前端技术栈（HTML/CSS/JavaScript/Ajax）及DOM操作原理。
工作履历（脱敏处理）
专注于Python开发领域，主要负责数据采集系统的架构设计与开发。主导搭建分布式爬虫框架，采用Scrapy-Redis实现任务分发与结果聚合，日均处理百万级数据量。设计反爬虫策略，通过Selenium+PhantomJS模拟浏览器行为，成功突破目标网站的动态内容反爬机制。优化MySQL数据库索引结构，提升高并发场景下的查询效率30%。基于Django开发数据管理平台，实现数据可视化展示与API接口对接。具备Linux系统运维能力，能够编写Shell脚本自动化处理日志与数据校验。
项目经验（脱敏处理）
数据采集系统开发（2022.06-2022.08）
1. 设计分布式爬虫架构，采用Scrapy-Redis实现任务调度与结果存储，支持横向扩展
2. 开发动态内容解析模块，通过Selenium+PhantomJS模拟浏览器环境，解决目标网站的动态渲染反爬问题
3. 实现反爬虫策略，包括请求头伪装、IP代理池、验证码识别等，成功突破目标网站的防护机制
4. 构建数据清洗管道，采用XPath与正则表达式提取结构化数据，日均处理数据量达200万条
5. 部署MySQL数据库集群，优化索引结构与查询语句，使数据查询响应时间缩短至50ms内
6. 开发数据可视化接口，基于Django框架实现数据展示与API对接，支持多维度数据查询
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接