职位描述

我们正在寻找一名高级数据工程师，负责设计、构建和运营大规模数据平台。您将工作于云原生Azure基础设施、Microsoft Fabric、Azure SQL和AWS，构建可靠的管道、性能良好的数据模型以及驱动真实业务决策的自助分析。该角色的一部分涉及容器化工作负载执行——设计和部署使用Azure Container Apps Jobs的管道作业，用于定时和事件驱动的数据处理。这是一个动手的职位，适合能够适应模糊性、重视干净架构，并能在策略和实现之间自如切换的工程师。

任职要求

Python：精通编写生产级管道、数据转换和自动化脚本。RDBMS：高级T-SQL和/或ANSI SQL；经验包括SQL Server、Azure SQL DB和云仓库查询引擎（Redshift、Fabric）。MS Fabric：仓库、数据湖、数据管道、OneLake和Fabric的统一分析模型。Azure生态系统：Azure Data Factory、Azure SQL Database、Azure Data Lake Storage、Azure Key Vault、Azure Container Apps Jobs、Azure Container Registry及相关服务。容器化：Docker镜像开发、容器注册表管理、部署工作负载作为Container Apps Jobs，具有调度和事件触发、缩放规则和环境变量/秘密注入。AWS数据服务：S3用于数据湖存储，Redshift用于云数据仓库。