岗位职责
- 设计并维护用于特征提取、训练数据生成和模型监控的可扩展数据管道。
- 优化 SQL 查询、Spark 任务与数据处理流程,提升性能与可扩展性。
- 监控生产数据管道,排查数据质量问题,保障数据可靠性与时效性。
- 与机器学习工程师协作,推动数据版本、血缘与可复现等 MLOps 实践。
任职要求
- 3 年以上数据工程或软件工程相关经验。
- 2 年以上搭建并维护生产级数据管道的经验。
- 熟练掌握 Python 和 SQL,具备生产级数据管道开发经验。
- 熟悉 Spark、Airflow、Kafka 等分布式数据处理技术。
- 熟悉 Databricks、Snowflake、Delta Lake 等云数据平台。
其他说明
远程岗位,薪资按地理区域分四个薪酬档;面试可能通过 BrightHire 录制与转录。
岗位职责
- 建立并维护数据治理体系,包括数据质量监控、血缘分析和影响评估
- 主导Lightdash迁移,设计工作区结构、权限和规范,实现自助分析
- 管理语义层与事件跟踪标准,确保指标定义唯一且一致
- 与业务部门协作制定数据路线图,平衡业务需求与平台健康
任职要求
- 精通Redshift、dbt、Airflow等数据管道技术,具备扎实的SQL能力
- 有数据治理或数据平台管理经验,能制定并推行数据标准
- 具备实际管理团队的经验,并能亲自参与构建与调试
- 熟练使用AI工具(如Claude Code、Copilot)辅助工作,对AI数据准备有认识
其他说明
完全远程,异步协作;年薪$75,000-$120,000;灵活休假
Airflow 远程职位概况
数字只统计当前仍在招聘的职位,与上方列表里已到期的条目不重复计入。
- 在招职位
- 2 个
- 累计收录
- 2 个