HTC Global Services 招聘高级Azure数据工程师（ADF、Databricks、PySpark）

我们需要一位经验丰富的高级Azure数据工程师，具备使用Azure Data Factory (ADF)、Databricks、PySpark和SQL构建可扩展数据管道的能力。职责包括：设计、开发和维护可扩展的数据管道（ADF和Azure Databricks）；使用PySpark实现数据转换工作流；在Azure数据平台中处理结构化和非结构化数据；优化数据管道的性能、可靠性和成本效率；开发和管理基于Spark的数据处理框架；与利益相关者合作以理解数据需求并交付解决方案；确保数据质量、治理和安全标准；排查数据工作流中的生产问题。

必需技能包括：Azure数据工程栈（ADF）、Azure Data bricks、PySpark和Spark、强大的SQL技能。附加技能包括：熟悉Spark声明式管道/Lakeflow（Delta Live Tables概念）、Delta Lake经验、Azure CI/CD管道知识、数据建模和优化技术。