IT人力外包人才简历库

返回列表

大数据开发工程师(驻场)

驻场外包人员
工作年限:2年 意向城市:上海 浏览:3次 发布时间:近期

技能标签

Java Hadoop HDFS Hive Spark Flink HBase MySQL Kafka Linux Shell JVM调优 分布式系统 数据仓库 实时计算 ETL开发

专业技能

精通Hadoop生态体系,包括HDFS分布式存储、MapReduce计算框架、YARN资源调度。熟练掌握Hive数据仓库工具、Spark实时计算引擎及Flink流处理技术。具备扎实的Java开发能力,熟悉JVM调优及分布式系统设计。精通MySQL数据库优化、HBase列式存储架构,熟悉Kafka消息队列及Redis缓存技术。熟悉Linux系统运维及Shell脚本开发,具备服务器集群部署与监控经验。

工作履历(脱敏处理)

专注于大数据平台架构设计与开发,主导数据中台系统建设,实现日均10TB数据的高效处理。设计基于Hadoop的分布式计算架构,通过优化MapReduce作业并行度,使数据处理效率提升40%。开发实时数据同步ETL流程,采用Flink流处理技术实现秒级数据延迟。主导Hive数据仓库建设,通过分区表优化和索引策略,使查询响应时间缩短60%。具备完整的Java开发能力,独立完成分布式任务调度系统开发,支持动态任务配置与资源弹性伸缩。

项目经验(脱敏处理)

主导企业级数据中台建设项目,基于Hadoop生态构建统一数据处理平台,实现日均10TB业务数据的采集、清洗与分析。采用Spark+Hive架构设计,通过优化数据分区策略和压缩算法,使数据处理效率提升40%。开发实时数据同步系统,基于Flink流处理框架实现分钟级数据延迟,支持百万级并发请求。设计HBase列式存储方案,通过合理配置Region分布和预分区策略,使数据读写性能提升35%。解决HDFS存储瓶颈问题,通过引入Hive ACID特性实现数据事务一致性,保障关键业务指标的准确性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接