大数据工程师

我们支持一家高度技术导向的研究型组织，致力于在安全环境中解决真正复杂的大规模数据问题。这不是传统意义上的‘将数据从A移动到B’的数据工程职位。该职位专注于设计和构建分布式数据处理系统，能够处理、转换和分析数百TB的文本和半结构化数据。工作涉及从碎片化数据集中提取意义和关系，帮助构建高级知识和智能驱动的平台。该环境以工程为主，适合喜欢解决复杂技术挑战的人，包括可扩展性、分布式系统、非结构化数据处理、流架构和高体积数据摄入。

具备处理大规模或技术挑战性数据环境的经验。强项包括：大数据工程、分布式系统、高体积文本或非结构化数据处理、Apache Spark/PySpark/Scala、Kafka或流/事件驱动架构、Elasticsearch/OpenSearch、知识图谱/实体解析/NLP/搜索平台、大数据建模、Kubernetes/Docker/Terraform、AWS数据平台、实时或准实时处理管道、数据血缘、治理或元数据环境。

£80,000 - £85,000基本工资 + 10%奖金 + 丰厚养老金 + 灵活混合工作 + 高度技术导向的工程环境 + 长期复杂项目工作 + 出色的学习和晋升机会

SF Technology Partners是一家专注于大数据工程和分析平台的高科技公司，致力于在安全环境中解决复杂的大规模数据问题。