职位描述

我们正在寻找一位经验丰富的高级数据工程师，负责推动我们的数据战略的开发和实施。理想的候选人具备技术专长和数据驱动问题解决能力的完美结合。作为高级数据工程师，您将在设计、构建和优化数据管道和平台方面发挥关键作用，同时指导初级工程师。

职责包括：贡献数据管道、ETL/ELT流程和数据集成解决方案的设计、开发和实施。负责数据管道项目的全生命周期管理，从概念到部署，管理范围、时间和风险。确保通过严格测试和监控保证数据质量和完整性。利用云平台（AWS 优先）构建可扩展和高效的解决方案。与数据分析师、数据科学家和业务利益相关者紧密合作，了解数据需求。识别并解决复杂的数据相关挑战。遵循数据工程最佳实践和标准。保持对最新数据技术和发展趋势的了解。

任职要求

必需技能：具有云平台（AWS、Azure、GCP）的实战经验，并能架构成本效益高且可扩展的数据解决方案。精通 Python、PySpark 和 SQL，具有数据 ETL 性能调优的实战经验。具备强大的分析和问题解决能力，以解决复杂的数据挑战。具备有效的沟通和人际技能，与跨职能团队合作。

加分技能：具有 OLAP 和 OLTP 数据库的数据建模和性能调优经验；熟悉 Apache Spark、Apache Airflow；熟悉软件工程最佳实践，包括版本控制（Git、Subversion 等）、CI/CD（Jenkins、Maven 等）、自动化单元测试和 DevOps；熟悉 AWS、GCP 或 Azure 云服务。