A5 Labs hiring 高级数据工程师（Spark / PySpark 离线数据） in Singapore | LinkedIn

负责构建和维护公司的核心数据基础设施，主要聚焦于基于 Spark / PySpark 的大规模离线数据处理、ETL开发以及数据建模，为数据科学和分析团队提供高质量数据支持。岗位职责包括使用 Spark / PySpark 构建大规模离线数据处理管道、设计端到端 ETL 流程、使用 PySpark / Python / SQL 编写复杂数据处理逻辑、对 Spark 作业进行性能优化、构建数据仓库模型、确保数据一致性、与数据科学团队协作提供可用于分析与建模的数据集。

5年以上数据工程相关经验；具备扎实的 PySpark 实战经验（必须项）；有使用 Spark / PySpark 构建离线ETL pipeline 的经验；熟练掌握 Python 和 SQL（复杂查询、性能优化）；有大规模数据处理经验（TB级及以上优先）；熟悉数据仓库设计与数据建模；理解分布式数据处理原理，具备良好的工程能力；能够独立设计并优化数据处理流程。