数据工程师 - Python 和 Kafka 和 (Hadoop 或 HDFS 或 Hive) 和 Snowflake 和 apache 和 (iceberg

该职位将参与数据存储迁移工厂团队，负责从本地数据湖迁移到 AWS 云托管的 Lakehouse 的端到端数据存储迁移。这是 Goldman Sachs 的关键项目。职责包括：数据管道迁移、逻辑与调度、数据迁移、利益相关者沟通、消费模式迁移、数据 reconciliation 和质量保证。候选人需具备 Python 或 Java 专业能力，熟悉 SDLC、CI/CD 和 K8s 部署，以及 Temporal Data Modeling、Schema Management 和 Performance Optimization 等技能。

教育：计算机科学、应用数学、工程或相关定量领域的学士或硕士。经验：至少 3-5 年的编码经验，具备 SQL 调试和基本脚本能力。语言：Python 或 Java 专业 proficiency。技术栈：Kafka、ANSI SQL、Apache Spark、JSON、Avro、Parquet、Hadoop（HDFS/Hive）、Snowflake、Apache Iceberg、Sybase IQ。

NTT DATA 是一家 3000 亿美元的业务和技术服务领导者，服务于 75% 的全球财富 100 强企业。我们致力于通过负责任的创新加速客户成功并积极影响社会。我们是全球领先的 AI 和数字基础设施提供商，具备企业级 AI、云、安全、连接性、数据中心和应用服务的 unmatched 能力。