基础研发平台-大数据计算引擎团队招人 (Spark/Flink)
我们是美团基础研发平台下负责大数据计算引擎的核心团队。团队的主要方向是设计完善计算链路架构、深入优化底层计算引擎、分场景多层次的平台建设,不断提升大数据计算的时效性、可用性和便利性,提升计算效率. 🛠 技术挑战与规模: 集群与数据体量:数万节点规模,EB 级数据处理,覆盖全美团多种核心业务场景。 高并发与高可用:万亿级流计算场景,需要直面流量洪峰与线上高可用挑战。
加载中...
Engineering Support Organization的目标是使平台工程能够有效且可持续地扩展其对客户的支持。团队是客户(即我们的员工)工程支持需求的前线资源,负责处理、排查和解决客户请求和问题。此外,团队还将专注于工作方式、客户倡导、支持工具、平台产品、文档和开发者教育。我们的使命是为Netflix的开发者社区提供出色的支撑体验。要倡导我们的客户,跟进问题并及时解决。如果阻塞因素阻止立即解决,我们需要沟通状态并确保有可见性来解释延迟的原因。提供见解、反馈和倡导客户对所支持工具的看法给Productivity和Data Platform Engineering的合作伙伴。与产品管理、开发者教育和工程团队合作,跟踪和维护对持续问题的可见性,并将客户需求传达给确保这些领域改进被优先考虑。推动协作努力以减少产品摩擦并提高易用性,使Platform Engineering能够构建、部署和交付高度功能性的解决方案给开发者社区。
至少5年专业支持或工程经验,特别是大数据技术(如Spark、Trino、Druid、Iceberg、Hadoop框架、Kafka和Flink)。有支持基于开源技术(如Apache Kafka、Spark和Hadoop)平台的先前经验。你有在大数据仓库存储系统(例如Iceberg)中工作过的经验。你有至少1年在提供Kafka集群或其他pub/sub系统(如Google Cloud Pub/Sub、RabbitMQ)的技术支持经验。能够阅读和编写SQL查询以拉取所需复杂数据以支持任何报告问题/产品缺陷。有云基础设施和/或容器编排平台的先前经验。你有渴望和能力学习大数据平台各部分如何协同工作的意愿。能够快速适应新工具和技术,愿意在大数据和数据移动领域持续学习和成长。你是数据驱动和基于证据决策的决策者。你精通至少一种编程语言,最好是Python和/或Java,使你能够贡献到相关领域的代码库中。有开发工具和脚本自动化流程的经验,重点是持续改进。证明了在复杂组织中提供卓越客户支持的能力,专注于提升客户体验。出色的书面和口头沟通技能,重视全面文档的重要性。强大的协作技能和有跨职能团队工作的经验。对创建技术文档和教程有热情,对有效知识库有深刻理解。强大的问题解决技能和在动态环境中解决复杂问题的能力。在产品早期发展阶段能够提供主动反馈的能力。
Netflix提供全面的福利,包括健康计划、心理健康支持、401(k)退休计划(雇主匹配)、股票期权计划、残疾计划、健康储蓄和灵活支出账户、家庭形成福利、生命和严重伤害福利。我们还提供带薪缺勤计划。全职小时工每年享有35天带薪假期用于度假、假日和带薪病假。全职年薪员工立即享有灵活时间假。了解更多详情请查看我们的福利信息。
Netflix是一家全球领先的流媒体服务提供商,致力于通过创新技术和内容娱乐全球观众。公司以推动故事讲述、全球粉丝文化和实现不可能的目标而闻名,致力于打造令人印象深刻的用户体验。
注册并登录后即可查看
我们是美团基础研发平台下负责大数据计算引擎的核心团队。团队的主要方向是设计完善计算链路架构、深入优化底层计算引擎、分场景多层次的平台建设,不断提升大数据计算的时效性、可用性和便利性,提升计算效率. 🛠 技术挑战与规模: 集群与数据体量:数万节点规模,EB 级数据处理,覆盖全美团多种核心业务场景。 高并发与高可用:万亿级流计算场景,需要直面流量洪峰与线上高可用挑战。
Senior data engineer Job Title: Senior Data Engineer Job Summary: We are seeking an experienced Senior Data Engineer to design, implement, and maintain our data infrastructure and pipelines. The ide
主导区块链数据平台的整体架构设计,负责多链数据采集、清洗、建模与 Pipeline 开发; 基于 Spark / Flink 设计并优化实时与离线数据处理链路,保障数据时效性、准确性与高可用; 主导 StarRocks 数据模型设计与查询性能调优,支撑上层分析、API 服务及高并发查询场景; 规划 S3 数据湖存储架构,制定数据分层策略(ODS / DWD / DWS / A
1.规划游戏分析重点,并独立完成数据分析相关工作,形成明确的结论及建议; 2.覆盖产品上线全周期,设计基础日志和业务指标体系,完成从日志采集到中间表再到报表/看板的搭建工作; 3.定期规划的某些游戏品类的深度分析报告,为项目组战略决策提供依据; 4.了解并熟悉 AI 的发展,协同数据中台产品经理,依赖 AI 设计和规划分析类产品和工具,为业务分析赋能,为流程化工具提效; 5.承