**********************
数据架构师
  • 收藏职位
  • 分享职位
100-150万 北京 本科 5-8年 招聘 1 人 预计佣金 116K 18:54发布
72小时新发
JD基本信息
岗位职责
岗位职责: 1. 架构设计与技术选型:主导数据平台的总体架构设计,负责数据分层、建模、存储引擎与数据链路的技术选型及方案评审,确定架构演进路线。 2. 数仓分层与建模规范:主导数仓分层,制定并维护建模规范、主键与分区约定、口径标准。 3. 公共数据层设计:设计下游可直接消费的公共数据层方案,规划多源原始数据(外部数据源及内部业务数据)的清洗、对齐与口径统一,将口径规则固化进管道框架而非依赖个人自觉。 4. 调度与血缘体系设计:设计统一批量调度(DAG/定时/重跑)与血缘、元数据体系,实现数据生产全链路的可追溯与血缘可查。 5. 核心管道与框架落地:牵头开发核心数据管道(批量分层、增量与全量同步、幂等重跑、确定性重建),沉淀可复用的管道框架与标准组件,交付数据开发工程师维护与扩展。 6. 数据标准与协作:与业务团队、数据研发协作,制定数据标准与治理规范,为数据开发工程师及日常运维提供架构指导与疑难攻坚,推动数据质量体系持续改进。
任职要求
任职要求: 1. 3年以上数据工程/数仓建设经验,有金融行业或大规模数仓经验者优先。 2. 精通数仓建模:数据分层、维度建模、主键与分区设计,熟悉调度编排(Airflow/DolphinScheduler /自研定时等)与血缘、元数据治理。 3. 熟悉OLAP数据库的开发、建设与性能优化:ClickHouse/StarRocks/Doris/DolphinDB等,熟悉数据压缩、缓存、预计算、冷热分层及 Pipeline 优化。 4. 熟悉主流数据链路与数据湖组件:Spark/Flink/Kafka/Iceberg 等。 5. 熟练使用 Python/SQL,能独立完成核心管道的开发与性能调优。 6. 对数据口径与可复现性有体感:时点口径(as-of)、历史重放与对账,知道偏差在哪个环节产生,并懂得在架构上拦截。 7. 工作严谨细致,对数据质量有高要求,能把标准固化进管道。 加分项: 1. 对ClickHouse/Doris等 OLAP 引擎有原理级甚至源码级理解(MergeTree合并、向量化执行、存储引擎内部实现)。 2. 有分布式存储、数据库内核、查询引擎或存储引擎相关开发经验。 3. 有大规模指标计算、数据分析平台、实验平台或推荐/广告类数据系统建设经验。 4. 熟悉实时链路:Kafka 消费、Flink 流处理、实时数仓,能统一批流。 5. 有特征平台、数据湖(Iceberg / Hudi 等)落地经验。 6. 数据源厂商工程侧或金融数据基建侧经验,离数据源与口径近。 7. 有投研 / 分析类业务背景,理解「业务方怎么消费数据」。 8. 有从 0 到 1 搭过一套数据中台或数仓的完整经历。
所属行业:
互联网金融、互联网
职能分类:
数据开发
工作城市:
北京,招聘1人,详细地址:北京市海淀区鼎好 DH3 大厦
职位要求
学历要求:
本科·统招·985/211
工作年限:
5-8年
技能/证书:
-
薪资福利
年薪范围:
100-150万*18薪
薪资福利:
-
团队架构
所属部门:
-
下属人数:
-
部门架构:
-
汇报对象:
-
职级职称:
-
面试信息
面试轮次:
3轮
面试流程:
2轮技术面试+一轮经理软性面试
视频面试:
可以接受
为你推荐