Databricks数据工程师 - 高级MS顾问

作为高级数据工程师，您将在将数据转化为可操作见解中发挥关键作用。您的时间将花费在各种职责上，包括：设计、构建和运营可扩展的本地或云数据架构；分析业务需求并将它们转化为技术规范；优化目标数据平台设计的数据流；使用Databricks在云平台上设计、开发和实施数据工程解决方案（例如AWS、Azure、GCP）；与客户合作以理解他们的数据需求并提供定制化的解决方案以满足他们的业务目标；领导端到端的数据管道开发，包括数据摄入、转换和存储；确保数据质量、完整性和安全性在整个数据生命周期中；为初级数据工程师和团队成员提供技术指导和导师指导；与利益相关者有效沟通，包括技术性和非技术性受众，以传达复杂的数据概念；管理客户关系和期望，确保高水平的满意度和参与度。

必须具备以下条件：在新西兰居住并工作；持有Databricks认证；具备Delta Live Tables的扎实经验；具备Asset Bundles的扎实经验；具备Delta Lake和Unity Catalog的扎实经验；具备CI/CD流水线的扎实经验；具备基础设施即代码的扎实经验；具备客户面对经验。此外，需要具备计算机科学、工程或相关领域的学士学位（四年制学位），硕士学位优先。通常需要至少2-4年相关数据工程经验，专注于云数据解决方案。5年以上数据工程经验，专注于云数据解决方案。在Databricks和Spark大数据处理方面有专业知识。至少在两个端到端数据工程实施中证明经验，包括：使用Databricks实施数据湖解决方案，整合各种数据源，并为商业智能启用分析；使用Databricks和云服务开发实时数据处理流水线，交付运营决策洞察；在Python、Scala或SQL等语言中具备强大的编程技能；具备数据建模、ETL流程和数据仓库概念的经验；出色的分析和决策技能；在云计算和数据架构设计方面的熟练程度；在数据整合和安全方面的经验；能够管理复杂的问题解决场景。