技能标签
专业技能
精通Hadoop、Spark等大数据处理框架，掌握Zookeeper、Kafka等分布式系统架构设计。熟练使用Java、Python、Scala进行高并发系统开发，具备JVM调优及内存模型分析能力。熟悉Linux系统开发环境及Shell脚本编写，精通Oracle、MySQL、GBase等关系型数据库设计与调优。掌握HBase、Hive表结构设计及数据转换技术，具备Flink流处理框架应用经验。熟悉ETL数据清洗流程，能够独立搭建技术框架并解决工程化问题。
工作履历（脱敏处理）
专注于大数据平台架构设计与开发，主导ERP系统实时计算功能优化项目，通过Spark流处理框架提升数据查询性能30%。参与统一数据中心数据仓库建设项目，设计Kafka+Storm实时计算架构，实现数据同步效率提升40%。擅长分布式系统调优，成功解决HBase数据倾斜问题，优化查询响应时间。具备丰富的大数据组件整合经验，能够基于Apache生态构建高可用技术框架。
项目经验（脱敏处理）
1、ERP系统实时计算优化项目：基于Spark流处理框架重构实时计算模块，采用Kafka实现数据管道化传输，通过数据分区策略优化将报表查询响应时间缩短40%。设计HBase+Redis双写架构，解决高并发场景下的数据一致性问题。与技术团队协作完成GBase8A内存计算引擎集成，替代Hive实现OLAP查询性能提升。2、统一数据中心数据仓库项目：构建Kafka+Storm实时计算平台，实现PB级数据的分钟级同步。设计基于YARN的资源调度方案，提升集群利用率25%。开发数据质量监控模块，实现数据血缘追踪与异常告警功能。采用MPP架构优化OLAP查询，使复杂报表生成时间缩短60%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
3年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接