数据工程师-数据平台-Azure

作为专注于 Azure 数据平台的数据工程师，您将指导、开发和维护 Azure 云生态系统中的数据工程解决方案。您将设计、构建和操作批处理和实时数据管道，使用各种 Azure 服务。您的主要职责包括：设计和构建数据管道，使用 Azure 服务如 Azure Synapse Analytics、Azure Data Factory、Azure DataBricks 和 Event Hub 设计、构建和操作批处理和实时数据管道；开发数据层，设计、构建和操作 Azure Synapse Analytics、SQL DW 和 Cosmos DB 的数据层；实施 Azure 数据平台，实施和维护 Azure 数据平台组件，包括 ADLS2、Blob Storage、SQLDW、Synapse Analytics 与 Spark 和 SQL、Azure 函数与 Python、Azure Purview 和 Cosmos DB；利用开源技术：应用在数据工程解决方案中熟练使用开源技术如 Apache Airflow 和 dbt、Spark / Python 或 Spark / Scala；确保无缝操作：操作和维护数据工程解决方案以确保无缝的批处理和实时数据处理。

必需的技术和专业能力：Azure 工具集的熟练程度：熟练使用 Azure 服务如 Azure Synapse Analytics、Azure Data Factory、Azure DataBricks 和 Event Hub 来设计、构建和操作批处理和实时数据管道；Azure 数据工程：在 Azure 数据平台组件上工作经验，包括 ADLS2、Blob Storage、SQLDW、Synapse Analytics 与 Spark 和 SQL、Azure 函数与 Python、Azure Purview 和 Cosmos DB；开源技术：对开源技术如 Apache Airflow 和 dbt、Spark / Python 或 Spark / Scala 的接触；数据管道开发：在 Azure 云生态系统中开发和维护数据工程解决方案的经验，包括设计、构建和操作批处理和实时数据管道；Azure 数据层设计：在 Azure Synapse Analytics、SQL DW 和 Cosmos DB 上设计、构建和操作数据层的经验。

IBM 咨询的职业生涯建立在长期的客户关系和全球紧密合作的基础上。您将与各行业领先企业合作，帮助他们塑造混合云和 AI 之旅。通过战略合作伙伴、 robust IBM 技术和 Red Hat 的支持，您将拥有推动变革和加速客户影响的工具。在 IBM 咨询，好奇心推动成功。您将被鼓励挑战常规，探索新想法，创造带来实际成果的创新解决方案。我们注重成长和同理心的文化专注于您的长期职业发展，同时重视您的独特技能和经验。