IT人力外包人才简历库

返回列表

大数据数仓开发工程师

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Oracle PL/SQL SQL优化 维度建模 Kettle Hadoop Hive Finereport Linux Azkaban Shell脚本 Java 数据清洗 任务调度 数据建模

专业技能

精通Oracle/MySQL/SQL Server数据库架构设计与性能调优,擅长PL/SQL存储过程开发(含自定义函数)、复杂SQL优化与执行计划分析。熟练掌握维度建模(星型/雪花模型)与数据仓库分层架构设计,具备Hadoop生态(Hive/MapReduce)大数据处理经验。精通Kettle数据集成工具(ETL开发/任务调度),熟悉Finereport可视化报表开发。熟练使用Linux系统(Xshell/Xftp)及Shell脚本开发,掌握Azkaban任务调度平台。具备Java语言开发能力,熟悉数据清洗、转换及质量校验流程。

工作履历(脱敏处理)

主导银行逾期贷款项目数仓建设,完成传统数仓与大数据平台双轨开发。传统数仓阶段:基于PL/SQL实现存储过程开发,设计星型模型维度表结构,通过Kettle构建ETL流水线,完成数据清洗、转换及调度任务。大数据阶段:搭建Hadoop集群,采用ods-dim-dwd-dws-ads分层架构,编写Shell脚本实现数据同步与质量校验,通过Azkaban构建任务调度体系。优化SQL执行效率30%以上,支撑可视化报表系统日均处理千万级数据量。

项目经验(脱敏处理)

银行逾期贷款项目:构建多维分析体系,实现客户贷款行为数据的深度挖掘。传统数仓开发阶段:基于业务需求设计维度模型,开发存储过程实现数据同步与指标计算,通过Kettle配置ETL作业完成数据抽取、转换及调度。大数据改造阶段:搭建Hadoop集群环境,采用分层架构(ods-dim-dwd-dws-ads)重构数仓,编写Shell脚本实现数据清洗与质量校验,通过Azkaban构建任务调度体系。解决数据倾斜问题,提升ETL处理效率40%,支撑可视化报表系统日均处理千万级数据量。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接