数据工程师专业二级

作为数据工程师专业二级，您将负责构建和维护数据系统，构建优化操作和分析的数据表和数据模型，支持多个业务功能需求和下游系统。职责包括：开发和维护可扩展的数据模型和管道以支持增长的数据源、体积和复杂性；与多个业务功能合作改进数据模型和质量以支持数字产品开发；实施流程和系统确保数据 reconciliation、监控数据质量；编写单元、集成和性能测试脚本，参与工程文档编写；执行数据分析以排查和解决数据相关问题；与AGILE SCRUM团队紧密合作，交付集成且可扩展的数据产品。

必需：1. 有认证机构颁发的工程、计算机科学或相关领域学士学位；2. 数据工程、软件开发、数据仓库、数据湖/网格及支持数字产品开发数据产品方面有5年以上经验；3. 精通数据整合、数据建模和现代数据库技术（GraphQL、SQL、No-SQL、Python、pySpark）及AWS云技术（如DMS、Lambda、SQS、Step Functions、Data Streaming）；4. 有Databricks和/或Data Cloud/360经验；5. 深度DBA、schema设计及SQL优化经验；6. 有GenAI经验知识（向量化/RAG/MCP/...）；7. 优秀的书面和口头沟通能力，能有效跨职能团队协作；8. 理解良好工程实践（DevSecOps、源代码版本控制使用GIT...）；9. 熟练使用AGILE SCRUM团队和JIRA、Confluence；10. 熟悉SDLC，版本控制（如Git、GitHub、GitLab）和CI/CD流水线（如Jenkins、GitHub Actions）；11. 熟悉软件安全原理和安全编码实践；12. 熟悉自动化测试工具和框架及实践（单元测试、集成测试、E2E测试）；13. 熟悉关系型和非关系型数据库（PostgreSQL、MongoDB、DynamoDB）。