技能标签
Python开发
Java开发
Spark框架
数据清洗
ETL处理
网络爬虫
MySQL优化
Linux运维
分布式计算
数据可视化
专业技能
精通网络爬虫技术,熟练使用Scrapy、BeautifulSoup等工具进行数据采集。掌握数据清洗与ETL流程,熟悉Hadoop生态体系。精通Python编程语言,具备Java开发能力。熟练使用MySQL数据库进行数据存储与查询优化。精通Linux系统运维,掌握Shell脚本编写。熟悉Spark框架进行分布式数据处理与分析。
工作履历(脱敏处理)
从事大数据开发工作,主要负责数据采集、清洗、分析及可视化。使用Python进行数据处理,利用Java开发核心业务模块,通过Spark框架优化数据计算效率。搭建数据仓库架构,设计ETL流程,实现数据质量监控。主导股票策略回测系统开发,完成数据采集、策略建模、可视化展示等模块开发。
项目经验(脱敏处理)
股票策略回测系统项目:基于Scrapy框架开发网络爬虫,采集沪深300指数历史行情数据。使用Spark进行分布式数据处理,优化数据清洗流程提升处理效率30%。设计策略回测引擎,实现多因子选股模型计算,通过可视化工具展示回测结果。解决高并发数据采集时的网络波动问题,采用Redis缓存机制提升数据采集稳定性。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
3年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接