职位描述

Sleek通过专有软件和AI，以及对客户满意度的关注，为小微企业简化后台流程。我们为企业家争取时间，让他们专注于他们热爱的事情——扩展业务并与客户建立联系。Sleek成立于2017年，现在拥有约15,000名客户，业务遍及新加坡、香港、澳大利亚和英国。我们拥有约500名员工，具有初创公司的创业精神。我们最近筹集了系列B融资，基于过去五年超过70%的复合年收入增长率。Sleek已被《金融时报》、《海峡时报》、《福布斯》和LinkedIn评为亚洲最快的成长公司之一。凭借世界级的投资者，我们正朝着成为亚洲太平洋地区少数几家现金流正的、由技术赋能的独角兽公司迈进。我们正在寻找一名技能娴熟且热情的数据工程师加入我们的数据平台团队。使命：您将设计、构建和维护基于Databricks和AWS基础设施的稳健数据管道，为组织的分析和报告能力提供支持。关键职责：设计和实现可扩展的ETL/ELT管道，使用批处理和流式处理模式。构建和维护从多样来源（数据库、API、事件流）的摄入工作流。实施Change Data Capture（CDC）、全载和增量摄入策略。使用Apache Airflow构建和管理数据工作流。使用Airbyte配置和管理数据摄入连接器。与Databricks一起构建和优化数据工程工作负载。编写和优化复杂的SQL查询。具有在Databricks上使用dbt的实践经验，构建模块化、可测试的数据转换模型。在 staging、中间和mart 层维护数据模型，遵循数据仓库最佳实践。了解AWS服务如S3、Lambda、EC2、IAM等。使用Docker和EKS容器化数据服务和应用程序。确保数据质量、可见性和可靠性。文档管道、模型和数据字典以维护平台知识。

任职要求

核心数据工程：3年以上数据工程经验。对数据平台架构有深入理解：Lakehouse、数据仓库、数据湖模式。有ETL/ELT设计模式的实践经验，包括批处理和流处理。熟悉摄入模式：全载、增量、CDC、事件驱动。5年以上在生产环境中担任数据库管理员的经验。对数据库内部机制有深入理解——存储引擎、事务、隔离级别、锁、MVCC、查询规划器。有支持关键OLTP工作负载的经验，具有高可用性要求。熟练使用Bash和/或Python进行自动化脚本。Databricks：在Databricks（Delta Live Tables、Jobs、Notebooks）上构建数据管道的经验。使用PySpark或Spark SQL进行大规模数据处理的熟练程度。熟悉Delta Lake概念：ACID事务、时间旅行、模式演变。Orchestration & Ingestion：熟悉Apache Airflow — 编写、调度和监控DAGs。使用Airbyte管理源到目的地的数据连接器。MongoDB：有管理MongoDB（自托管和/或Atlas）的实践经验。复制集配置、分片、索引策略和聚合管道调优。备份、恢复和灾难恢复使用mongodump/mongorestore或Ops Manager。SQL & dbt：熟练的SQL技能 — 查询优化、窗口函数、CTE和复杂连接。使用dbt（数据构建工具）进行转换、测试和文档。Model layering：staging → intermediate → marts。Writing schema tests, source freshness checks, and macros。Cloud & Infrastructure：有AWS服务（S3、Lambda、IAM、CloudWatch等）的实践经验。Nice to have：使用Docker & Kubernetes（EKS）部署和扩展数据服务的经验。使用数据质量框架（Great Expectations, Soda）的经验。Infrastructure as Code经验（Terraform）。熟悉数据治理工具或数据目录（Databricks Catalog）。熟悉数据工程的CI/CD流水线（GitHub Actions）。使用Python进行流水线脚本和自动化经验。

福利待遇

灵活性：你可以在家工作。如果需要早起或晚起以照顾家庭或其他需求，我们不介意，只要你完成工作并主动沟通。你每年可以完全远程工作一个月。财务福利：我们支付有竞争力的市场薪资，并为员工提供 generous 的带薪假期和假期安排。此外，你将能够访问我们的灵活福利计划，用于家庭办公设备或健康和健身支出。某些员工还符合我们的员工持股计划，可以分享我们卓越增长轨迹的收益，我们正朝着在亚太地区主要股票交易所上市迈进。个人成长：你在Sleek将获得很多责任和自主权。我们以快节奏前进，所以你将做出决策、犯错并学习。我们还运行内部和外部面向的培训计划。我们也是利用AI在我们领域领先，并正在开发区域AI卓越中心的前沿。我们的意图是如果你离开Sleek，你将作为更全面的人和专业人士离开。