职位编号 J20260919175836136765
数据架构师
100-150万北京市本科5-8年招聘 1 人预计佣金 116K22小时前刷新/9月19日 18:54发布
职位信息项目手册职位进展做单须知佣金规则发单顾问
寻访须知
必要条件:统招本科211或985
优先条件:学历985或211,互联网大厂做数据开发,工程能力要强。
目标公司/行业:互联网大厂
必问问题:
待发单方补充
JD基本信息
岗位职责
岗位职责:
1. 架构设计与技术选型:主导数据平台的总体架构设计,负责数据分层、建模、存储引擎与数据链路的技术选型及方案评审,确定架构演进路线。
2. 数仓分层与建模规范:主导数仓分层,制定并维护建模规范、主键与分区约定、口径标准。
3. 公共数据层设计:设计下游可直接消费的公共数据层方案,规划多源原始数据(外部数据源及内部业务数据)的清洗、对齐与口径统一,将口径规则固化进管道框架而非依赖个人自觉。
4. 调度与血缘体系设计:设计统一批量调度(DAG/定时/重跑)与血缘、元数据体系,实现数据生产全链路的可追溯与血缘可查。
5. 核心管道与框架落地:牵头开发核心数据管道(批量分层、增量与全量同步、幂等重跑、确定性重建),沉淀可复用的管道框架与标准组件,交付数据开发工程师维护与扩展。
6. 数据标准与协作:与业务团队、数据研发协作,制定数据标准与治理规范,为数据开发工程师及日常运维提供架构指导与疑难攻坚,推动数据质量体系持续改进。
任职要求
任职要求:
1. 3年以上数据工程/数仓建设经验,有金融行业或大规模数仓经验者优先。
2. 精通数仓建模:数据分层、维度建模、主键与分区设计,熟悉调度编排(Airflow/DolphinScheduler /自研定时等)与血缘、元数据治理。
3. 熟悉OLAP数据库的开发、建设与性能优化:ClickHouse/StarRocks/Doris/DolphinDB等,熟悉数据压缩、缓存、预计算、冷热分层及 Pipeline 优化。
4. 熟悉主流数据链路与数据湖组件:Spark/Flink/Kafka/Iceberg 等。
5. 熟练使用 Python/SQL,能独立完成核心管道的开发与性能调优。
6. 对数据口径与可复现性有体感:时点口径(as-of)、历史重放与对账,知道偏差在哪个环节产生,并懂得在架构上拦截。
7. 工作严谨细致,对数据质量有高要求,能把标准固化进管道。
加分项:
1. 对ClickHouse/Doris等 OLAP 引擎有原理级甚至源码级理解(MergeTree合并、向量化执行、存储引擎内部实现)。
2. 有分布式存储、数据库内核、查询引擎或存储引擎相关开发经验。
3. 有大规模指标计算、数据分析平台、实验平台或推荐/广告类数据系统建设经验。
4. 熟悉实时链路:Kafka 消费、Flink 流处理、实时数仓,能统一批流。
5. 有特征平台、数据湖(Iceberg / Hudi 等)落地经验。
6. 数据源厂商工程侧或金融数据基建侧经验,离数据源与口径近。
7. 有投研 / 分析类业务背景,理解「业务方怎么消费数据」。
8. 有从 0 到 1 搭过一套数据中台或数仓的完整经历。
所属行业:互联网金融、互联网
职能分类:数据开发
工作城市:
北京,招聘1人,详细地址:北京市海淀区鼎好 DH3 大厦
职位要求
学历要求:本科·统招·985/211
工作年限:5-8年
薪资福利
年薪范围:100-150万 18薪
薪资福利:-
面试信息
面试轮次:3轮
视频面试:可以接受
面试流程:2轮技术面试+一轮经理软性面试