数据库工程师

负责开发和维护可扩展的数据管道，处理批量和实时数据处理；构建数据摄入框架，使用API、文件摄入和流式数据源；设计并实现基于Python和PySpark的数据转换逻辑；开发Python微服务和REST API；集成数据管道与Databricks、Delta Lake等平台。要求2-4年数据工程经验，精通Python和PySpark，具备SQL技能，有生产环境数据管道经验，熟悉数据处理框架如Spark、AWS Glue等。

2-4年数据工程经验；精通Python和PySpark；熟悉SQL用于数据转换和分析；有生产环境数据管道开发经验；具备API和微服务经验；熟悉Spark、AWS Glue等数据处理框架；能处理多种格式的大规模数据集；理解数据湖仓概念。