高级数据工程师

我们正在寻找一名高级数据工程师加入批量团队，该团队隶属于全球智能平台组织。你将在Mobius平台中扮演核心角色，该平台是Just Eat Takeaway内部统一分析和数据平台，为大规模数据工作负载提供动力。Mobius是一个基于Kubernetes的声明性数据平台，抽象了基础设施复杂性，使数据工程师能够通过简单的、表达性API部署和管理批量和流管道。作为批量团队的一员，你将负责使批量处理成为现实的组件。我们正在寻找能够践行'领导、交付和关怀'行为，带来新想法，挑战现状，推动大胆、创新解决方案的人，以推动Just Eat Takeaway的愿景。

• 强大的编码技能（Python/Java/Scala），有大规模构建和维护可靠数据管道的记录。
• 自信使用Kubernetes原生平台在云环境中部署和操作数据工作负载。熟悉Golang是一个优势。
• 有数据转换工具（如Spark和DBT）的实践经验，专注于构建经过良好测试、可维护的数据产品。
• 熟悉Apache Iceberg表格格式和通过目录（如AWS Glue）管理的模式。
• 熟悉AWS核心数据和消息服务（S3、Glue ETL、DynamoDB、SNS、SQS、Redis）及其在现代数据架构中的作用。
• 熟练掌握SQL，并能使用Athena等引擎查询大规模数据集以获取洞察。
• 有协调和调度数据工作流的经验，理解管道依赖管理原则（例如Airflow）。
• 能够建立监控、日志记录和警报，以推动运营卓越和快速事件响应。
• 理解数据治理——包括元数据管理和数据合同——作为负责任、可信数据产品的基础。

Just Eat Takeaway.com是全球领先的在线外卖平台，致力于通过技术创新为日常生活带来便利。我们通过连接数千万客户与数万家餐厅、超市和便利店，实现全球范围内的便捷服务。