高级大语言模型工程师

我们的合作伙伴是一家创新型企业，致力于在航天、制造业、广告科技和金融科技领域构建和部署AI解决方案。他们将尖端研究与稳健的工程相结合，解决大规模现实问题。

任务

• 作为高级工程师，您将设计并交付具有自主能力的AI系统，能够规划、调用工具并在生产流程中可靠执行。您将负责生成AI能力的全流程交付——从模型适应和检索到 orchestration、评估和运营 excellence。
• 构建自主系统：设计监督者/规划者/执行者模式，路由，记忆/上下文策略，工具/功能调用，以及可靠的失败处理。
• LLM适应与部署：微调或参数高效地适应开源LLM；优化推理（延迟/成本）并安全地交付到生产环境。
• 增强检索生成（RAG）：实现嵌入、检索、重排序和接地模式；优化质量、速度和成本。
• 结构化和可靠的生成：强制执行模式/结构化输出，守护rails，后处理；减少幻觉和脆性。
• 评估与质量：构建自动化评估 harnesses 用于代理/LLMs（离线基准 + 在线监控），回归测试，和提示/模型版本控制。
• 生产工程：交付容器化服务和API；实施 CI/CD、可观测性和可靠性实践（SLOs、警报、事件准备）。
• 跨职能交付：与产品、平台和数据团队合作，将生成AI功能集成到面向用户和内部的工作流中；指导他人。

5年以上构建生产ML/AI系统经验；2年以上高级/领导层经验。

强大的Python工程（测试、打包、代码质量、性能剖析）。

具有LLM和自主AI在真实系统中的实际经验（工具调用、编排、工作流集成）。

具有LLM适应（LoRA/QLoRA/PEFT或等效）和评估质量/安全性的经验。

具有实现RAG和在生产中操作检索组件的经验。

强大的MLOps基础：容器、CI/CD、模型/服务版本控制、监控。

API/服务开发：REST/gRPC，认证，速率限制，错误处理，韧性模式。

在云环境（AWS/GCP/Azure）中操作的舒适度，具有生产约束。

推理优化：量化，批处理/缓存，GPU服务（例如vLLM/TGI或类似）。

代理安全工程：提示注入防御，工具安全，沙箱，红队测试。

高级评估：LLM-as-judge，偏好测试，基于rubric的评分，A/B测试。

向量数据库操作/调优和检索性能工程。

事件驱动或工作流编排经验（例如Temporal/Airflow/n8n等 equivalents）。

多语言GenAI经验及稳健的国际化实践。

创新型企业，致力于在航天、制造业、广告科技和金融科技领域构建和部署AI解决方案。将尖端研究与稳健的工程相结合，解决大规模现实问题。