AI与大数据工程专家

我们正在寻找一位具备高度技能的AI与大数据工程专家，负责设计和实施可扩展的数据管道和先进的分析解决方案，利用机器学习和基于代理的自动化。该角色将专注于构建智能系统，整合现代大数据平台如Databricks、Snowflake和AWS，以在企业数据平台上实现预测洞察和自动化。

关键职责包括：设计和开发使用Spark和Databricks或Snowflake进行大规模数据管道的系统，构建和部署机器学习模型用于异常检测、预测分析和高级洞察，开发基于代理的AI代理，利用Databricks代理框架进行工作流自动化和智能决策，实施特征工程和模型生命周期管理，优化数据工作流以提高性能、可扩展性和成本效率，与分析和业务团队合作将需求转化为技术解决方案，保持对新兴AI/ML技术的了解并将其整合到数据平台解决方案中。

要求：熟练掌握Python和SQL编程；具备Databricks ML功能（Delta Lake、MLflow、AutoML、Feature Store）的经验；精通Spark用于大数据处理；具备机器学习技术（分类、回归、异常检测）的经验；熟悉基于代理的自动化框架（Databricks Agent Bricks或类似框架）；精通AWS服务（S3、Glue、Lambda、IAM）和Snowflake用于数据集成；对数据架构和分布式系统有深入理解。