个人简介
关于我
8年大数据从业经验,目前专注于金融科技领域的数据架构与ETL工程。先后在股份制银行、金融科技公司负责数据平台建设,主导过银行核心系统数据迁移、实时数仓建设、监管报送自动化等大型项目。
技术专长
- ETL工程:Spark/Hive/Flink 离线与实时数据管道设计,CDC数据同步(Debezium/OGG),调度系统(Airflow/DolphinScheduler)
- 大数据开发:Hadoop/Spark/Flink/ClickHouse 生态,湖仓一体(Iceberg/Hudi),OLAP引擎选型与调优
- 数据建模:维度建模(Kimball)、Data Vault 2.0、指标体系设计与指标平台建设
- 金融科技:银行数据仓库分层(ODS/DWD/DWS/DM)、监管报送(1104/人行接口)、风控数据工程、数据安全与脱敏
博客方向
这个博客主要分享我在金融数据工程领域的实践经验,包括ETL架构设计、大数据平台建设、数据治理与建模、金融监管合规等技术话题。每篇文章力求有深度、有代码、有实战案例。
欢迎交流,共同成长。