IT人力外包人才简历库

精通Flink实时计算框架开发，擅长Kafka/Spark Streaming流处理架构设计，具备Hadoop/Spark生态体系搭建经验。熟悉数据仓库建模理论与实践，精通StarRocks/ClickHouse等OLAP引擎应用，掌握数据治理标准体系与元数据管理方案。具备分布式系统调优能力，熟悉Hive/Impala/Presto等查询引擎优化，熟悉数据湖架构设计与Delta Lake/iceberg技术实践。

主导企业级实时数仓架构设计与实施，搭建日均处理PB级数据的流批一体计算平台。设计基于Flink的实时数据管道，实现数据延迟从分钟级降至秒级。主导数据仓库分层设计，构建ODS/DWD/DWS多层架构体系，提升数据查询效率30%。搭建数据治理平台，实现元数据管理、数据血缘追踪与质量监控闭环。设计数据湖架构方案，基于Delta Lake实现数据版本控制与ACID事务支持，支撑多业务线数据服务。

主导秒级数据结算系统开发，设计基于Flink+Kafka的实时数据处理架构，通过状态管理优化实现数据延迟<2秒。完成数据模型设计与ETL流程开发，构建包含12个维度的星型模型，支撑日均5亿+条数据的实时计算。设计数据湖架构方案，基于Delta Lake实现数据版本控制，解决多业务线数据共享冲突问题。开发数据治理平台，实现元数据自动采集与血缘追踪，建立数据质量监控体系，降低数据异常处理时间40%。