高级数据工程师

我们正在寻找一位高素质的高级数据工程师，加入我们的成长团队。在这一关键角色中，您将发挥关键作用，构建并维护最佳的数据平台，推动公司交通运输和物流业务的创新与增长。您将利用在Azure数据工程、Snowflake和各种数据工程工具方面的专业知识，设计、开发和实施可扩展的数据管道，用于数据的摄入、转换和加载（ETL/ELT）。您将与组织内的利益相关者紧密合作，通过数据工程解决方案理解他们的需求，并将其转化为清晰简洁的数据可视化。该职位要求6至8年在数据工程或相关领域的工作经验，具备在云原生数据平台（如Snowflake、Databricks或等效平台）上工作的 proven track record。您需要深入的、在大规模环境中设计和操作Medallion架构（Bronze/Silver/Gold）的经验，使用Databricks Delta Lake和/或Snowflake多层模式。您需要在Snowflake上具备高级数据建模、性能优化、动态数据屏蔽和行级安全方面的经验。您需要在Databricks上具备集群管理、Delta Live Tables和Unity Catalog的强专业技能。您需要在生产环境中具有实时和流式数据架构的经验。您需要熟悉数据编排工具如Azure Data Factory。您需要在大规模数据环境中设计和构建ETL/ELT管道的实战经验。您需要熟悉数据仓库概念、维度建模和数据湖架构。您需要在敏捷/Scrum开发环境中工作。您需要熟悉CI/CD流水线和数据工作流的DevOps实践。您需要精通PySpark和/或Python用于数据转换和管道开发。您需要具备强大的SQL技能，包括查询优化、窗口函数和复杂连接。

6至8年在数据工程或相关领域的工作经验；在云原生数据平台（如Snowflake、Databricks或等效平台）上有 proven track record；深入的、在大规模环境中设计和操作Medallion架构（Bronze/Silver/Gold）的经验，使用Databricks Delta Lake和/或Snowflake多层模式；在Snowflake上具备高级数据建模、性能优化、动态数据屏蔽和行级安全方面的经验；在Databricks上具备集群管理、Delta Live Tables和Unity Catalog的强专业技能；在生产环境中具有实时和流式数据架构的经验；熟悉数据编排工具如Azure Data Factory；在大规模数据环境中设计和构建ETL/ELT管道的实战经验；熟悉数据仓库概念、维度建模和数据湖架构；在敏捷/Scrum开发环境中工作；熟悉CI/CD流水线和数据工作流的DevOps实践；精通PySpark和/或Python用于数据转换和管道开发；具备强大的SQL技能，包括查询优化、窗口函数和复杂连接。

我们秉持‘工作努力，生活愉快’的口号，致力于支持员工在专业和个人目标上的发展。我们相信通过招聘合适的人才、领导流程改进和利用技术，我们能够实现卓越的结果。工作主要在办公室或远程环境中进行。可能会面临时间限制和紧 deadlines。可能需要偶尔出差。

Synoptek 是一家专注于交通运输和物流行业的公司，致力于通过先进的数据平台和技术创新推动业务增长和创新。