IT人力外包人才简历库

返回列表

数据采集与爬虫工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python爬虫 数据清洗 Excel处理 网络请求 反爬虫 数据可视化 ETL工具 正则表达式 数据存储 网页解析 数据采集 请求模拟 协议分析 数据处理 爬虫框架

专业技能

精通Python爬虫开发,熟练使用Scrapy/BeautifulSoup框架进行网页数据抓取;掌握数据清洗与ETL处理技术(Pandas/NumPy);熟悉数据存储方案(Excel/CSV/数据库);具备基础的数据可视化能力(Matplotlib/Excel图表);了解反爬虫机制及应对策略(请求头模拟/代理IP/验证码识别);熟悉网络协议(HTTP/HTTPS)及请求响应处理

工作履历(脱敏处理)

作为数据采集工程师,主要负责构建自动化数据采集系统,完成多个数据抓取项目。使用Python开发爬虫程序,针对目标网站设计合理的请求策略和反爬虫解决方案,成功采集小说章节内容、动漫排行榜、影视评论等结构化数据。通过Pandas进行数据清洗与分析,使用Excel/CSV进行数据存储和可视化展示,输出可直接用于业务分析的结构化数据集。项目成果包括完整小说内容数据库、多维度动漫排行榜分析报告、微博热榜数据监控系统等。

项目经验(脱敏处理)

1. 小说内容采集系统:基于Python开发小说爬虫,使用BeautifulSoup解析HTML结构,通过模拟浏览器请求绕过反爬机制,实现斗破苍穹全册章节的自动化采集。采用多线程技术提升采集效率,最终将数据导出为PDF格式供用户阅读。2. 动漫排行榜分析平台:构建动漫电影评分爬虫,采集豆瓣/IMDb等平台的榜单数据,通过正则表达式提取关键指标,使用Pandas进行数据清洗和统计分析,生成可视化排行榜图表。3. 社交媒体热榜监控系统:开发微博热榜数据采集程序,处理动态加载内容,采用分布式爬虫架构提升数据获取能力,输出结构化热榜数据供运营分析使用。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接