GCP数据工程师

设计、开发和维护使用Python和SQL的可扩展数据管道
工作与GCP服务如BigQuery（数据仓库）、Cloud Storage、Dataflow/ Apache Beam、Cloud Composer（Airflow）
执行多源数据导入、转换和集成
优化SQL查询性能和成本效率
确保数据质量、治理和安全标准
与数据分析师和业务利益相关者协作理解需求
监控和排查数据管道问题
实施ETL/ELT流程和自动化

4+年数据工程/数据分析经验
精通Python（Pandas，PySpark加分）
精通SQL（高级连接、窗口函数、优化）
具有Google云平台（GCP）经验
熟悉BigQuery和大规模数据处理
了解ETL/ELT框架
理解数据建模（星型/雪花模式）
熟悉版本控制（Git）
有Apache Airflow/Cloud Composer经验
了解PySpark或Databricks
有CI/CD流水线经验
理解数据湖和数据湖house架构
具备基础机器学习工作流知识

专注于人工智能和大数据解决方案的创新科技公司