Azure Databricks 中级数据工程师

我们正在寻找一名 Azure Databricks 中级数据工程师加入我们的数据平台团队。候选人将设计和开发现代数据管道和湖仓架构，利用 Azure Databricks、Spark 和 Azure 数据工厂，同时与现有的基于 SQL Server 的数据仓库环境集成，同时推动我们的数据平台向可扩展的云原生数据架构发展，以支持高级分析和商业智能。关键职责包括：设计、开发和维护使用 Azure Databricks 的数据管道；使用 PySpark 和 SQL 在 Databricks 中构建和优化数据转换；使用 Delta Lake 实施和维护湖仓架构；通过 Azure 数据工厂 orchestrate 数据管道；将数据从多个来源集成到数据平台和分析层；设计和维护用于分析的数据模型和数据仓库结构；确保大规模数据处理管道的数据质量、可扩展性和性能；与 BI 团队合作支持 Power BI 和报告平台；支持和改进现有的 SQL Server 数据平台和 ETL 解决方案（SSIS）；参与现代云原生数据架构的设计。

3 年以上数据工程或数据仓库开发经验；熟悉 Azure Databricks；使用 PySpark 和 Spark SQL 开发数据管道的经验；对分布式数据处理和大数据概念有深入理解；熟悉 Delta Lake 和湖仓架构经验；强大的 SQL 技能和 SQL Server 关系型数据库经验；使用 Azure 数据工厂构建数据管道的经验；处理大数据集和性能优化经验。

文化：Relentless Performance，99% 项目成功率，年均 30% 收入增长；有竞争力的薪酬和福利：包括健康保险和搬迁计划；远程办公文化：享受远程工作的灵活性；成长心态：获得专业发展机会，包括认证课程、导师计划、人才投资计划、内部流动性和实习机会；全球影响：与全球顶级客户合作，塑造行业未来；多元文化环境：加入动态全球团队，享受包容和支持的工作环境，有定期的团队建设活动；社会可持续性价值观：加入专注于五个支柱的可持续业务实践，包括 IT 教育、社区赋权、公平运营实践、环境可持续性和性别平等。

Miratech 是一家全球 IT 服务和咨询公司，致力于将企业创新与初创企业创新结合在一起。公司支持全球一些最大企业的数字化转型，通过与大企业和小企业合作，始终处于技术前沿，保持灵活性，创造帮助客户进一步提升业务的技术。公司以价值观驱动，拥有 99% 项目成功率和 30% 年均收入增长。