IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:1年 意向城市:成都 浏览:6次 发布时间:近期

技能标签

SQL优化 Hadoop生态 数据仓库建模 ETL开发 Spark计算 Kafka消息队列 Flink实时计算 Python数据处理 Linux运维 Shell脚本

专业技能

精通SQL语言及数据库优化,熟悉Hadoop生态体系(HDFS/Hive/Spark),掌握数据仓库建模与ETL流程设计,具备Python数据处理能力,熟悉Kafka消息队列及Flink实时计算框架,了解数据可视化工具Tableau,具备Linux系统运维及Shell脚本开发经验

工作履历(脱敏处理)

主要负责企业数据平台建设与维护,主导搭建基于Hadoop的离线数据处理体系,优化ETL流程使数据处理效率提升40%。参与设计实时数据管道,通过Flink实现分钟级数据同步,保障业务系统数据时效性。开发数据质量监控模块,建立多维度数据校验机制,降低数据异常率至0.5%以下。持续优化Hive查询性能,通过分区裁剪和索引优化使复杂查询响应时间缩短60%。

项目经验(脱敏处理)

主导某省级政务数据中台建设项目,设计基于Hive的数据仓库架构,实现100+业务系统数据整合。解决数据倾斜问题,通过动态分区和数据分桶技术使ETL任务执行时间缩短35%。开发实时数据同步方案,利用Kafka+Spark Streaming实现日均5亿条数据的实时处理,保障业务系统数据时效性。优化数据质量监控体系,建立数据血缘追踪和异常预警机制,提升数据治理水平。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接