中级数据工程师（Azure Databricks）

我们正在寻找一名专注于Azure Databricks的中级数据工程师加入我们的数据平台团队。候选人将设计和开发现代数据管道和湖仓架构，利用Azure Databricks、Spark和Azure Data Factory，同时与现有的基于SQL Server的数据仓库环境集成，同时推动我们的数据平台向可扩展的云原生数据架构发展，以支持高级分析和业务智能。关键职责包括：设计和维护使用Azure Databricks的数据管道；使用PySpark和SQL在Databricks中构建和优化数据转换；使用Delta Lake实现和维护湖仓架构；通过Azure Data Factory编排ETL/ELT管道；从多个来源整合数据到数据平台和分析层；设计和维护用于分析的数据模型和数据仓库结构；确保大规模数据处理管道的数据质量、可扩展性和性能；与BI团队合作支持Power BI和报告平台；支持和改进现有的SQL Server数据平台和ETL解决方案（SSIS）；参与现代云原生数据架构的设计。

3年以上数据工程或数据仓库开发经验；熟悉Azure Databricks；有使用PySpark和Spark SQL开发数据管道的经验；对分布式数据处理和大数据概念有扎实的理解；有使用Delta Lake和湖仓架构的经验；有良好的SQL技能和SQL Server关系数据库的经验；有使用Azure Data Factory构建数据管道的经验；有处理大数据集和性能优化的经验。

文化：加入一个99%项目成功率的 unstoppable 技术开发团队，每年增长超过30%；具有竞争力的薪酬和福利：享受全面的薪酬和福利套餐，包括健康保险和搬迁计划；远程工作文化：充分利用远程工作的灵活性；成长心态：享受广泛的职业发展机会，包括认证课程、导师计划、人才投资计划、内部晋升和实习机会；全球影响：与顶级全球客户合作，塑造行业未来；欢迎多元文化环境：成为动态全球团队的一员，在包容和支持的工作环境中茁壮成长，有定期的团队建设公司社交活动；可持续发展价值观：加入专注于五个支柱的可持续业务实践，包括IT教育、社区赋能、公平运营实践、环境可持续性和性别平等。

Miratech是一家全球IT服务和咨询公司，汇集了企业创新和初创公司的创新。今天，我们支持全球最大的企业的数字化转型。通过与大公司和小公司合作，我们始终处于技术前沿，即使作为全球领导者，也能保持灵活，创造帮助客户进一步提升业务的技术。我们是一个以绩效为导向的组织，我们的“无尽绩效”文化使Miratech的99%的项目成功率达到目标，自1989年成立以来，每年都保持超过30%的增长率。