数据工程师

我们正在寻找一名数据工程师，支持人工智能研究环境中的数据基础设施和实验。在该角色中，您将构建可靠的管道，探索数据集，并帮助将原始数据转换为结构化的格式，以支持研究和模型开发。关键职责包括：设计、构建和维护可扩展的数据管道以从多个来源摄取、处理和转换数据；与人工智能研究人员和数据科学家协作，为实验和模型训练结构化和准备数据集；开发和维护数据模型、模式和存储系统，以优化大规模数据集；编写高效的 SQL 查询和 Python 脚本以提取、转换和分析数据；确保数据质量、完整性和可靠性；实施数据验证、监控和自动化工作流，以支持迭代研究周期。

精通 Python 和 SQL；有设计和维护 ETL/ELT 管道的经验；熟悉 Pandas 和 NumPy 等数据处理库；有处理结构化和半结构化数据集的经验；熟悉 PostgreSQL 或 MySQL 等关系数据库；有强分析思维和在协作研究驱动环境中的工作能力；优秀的书面和口头沟通技能。

micro1 是一个数据引擎，帮助 AI 实验室训练基础模型，帮助企业构建 AI 代理。我们提供前沿评估和强化学习环境，用于提高 LLM 能力，以及用于监控和改进企业设置中 AI 代理的上下文评估。我们的数据引擎包括一个 AI 招聘代理，用于源和验证领域专家，一个数据平台，用于快速生成高质量的训练数据，以及一个流水线性能系统，确保质量和速度。