职位描述
岗位职责
- 设计并实现可扩展、高效、可靠的数据架构,支撑业务与分析需求。
- 构建并维护数据管道、ETL流程及大容量结构化/非结构化数据集成方案。
- 优化数据管道、数据库、数据仓库和数据湖的性能、可靠性与安全性。
- 指导初级工程师,参与架构决策,主导跨职能大型项目技术交付。
任职要求
- 8年以上数据工程经验,精通数据架构、ETL和数据库管理。
- 精通Python或PySpark,并具备Java或Scala经验。
- 熟悉SQL、关系型/NoSQL数据库及Spark、Kafka、Hadoop等大数据技术。
- 熟悉Airflow、Databricks、Jenkins等编排调度工具及AWS/Azure/GCP云平台。
- 具备Agile开发经验,有指导初级工程师和团队技术领导经验。
加分项
- 计算机科学或数据科学相关本科或硕士学位。
- 有Databricks经验或认证。
- 有数据治理、数据质量或可观测性框架实施经验。
其他说明
福利因雇佣国而异,公司强调以AI工具提升工程效率。