职位描述

我们正在寻找一名高级数据工程师，负责设计、构建和运营驱动 Zeta 广告技术平台的数据管道和聚合系统。该职位需要处理大规模的批量和流数据处理，构建可靠的数据显示产品，以及为预测、智能工作流、BI 报告和测量提供可分析的数据集。你将与后端、机器学习和产品团队紧密合作，交付可信、模型良好的数据，确保高性能、质量和可观测性。

任职要求

5 年以上在高规模环境中构建生产数据管道和数据产品的经验（批量和/或流）。熟悉 SQL 和数据建模（维度建模、星型/雪花模式、事件建模）。具有流系统（Kafka 优先）和/或 AWS Kinesis 的实战经验，包括事件驱动设计。精通用于数据工程的一种或多种语言（Python、Java、Scala 或 Go）。有分布式数据处理（Spark、Flink 或等价物）和大规模性能调优经验。熟悉 AWS 数据服务和云原生模式（S3、Glue/EMR、Athena、Redshift 等）。熟悉湖仓/表格格式和大规模存储模式（如 Parquet；Iceberg/Hudi/Delta 等）。有 orchestration 工具（Airflow/Dagster/Step Functions）和数据工作负载的 CI/CD 经验。有数据质量/可观测性实践（测试、监控、血缘；理解 SLAs/SLOs）。有 SQL + NoSQL 数据存储（如 Postgres/MySQL；DynamoDB/Cassandra/Redis）和选择合适存储的经验。