最新Spark远程工作招聘信息

岗位职责

• 设计和实现可扩展、高效、可靠的数据架构，支持业务和分析需求。
• 构建和维护数据管道、ETL 流程及海量结构化与非结构化数据的集成方案。
• 优化数据管道、数据库、数据仓库和数据湖的性能、可靠性与安全性。
• 与利益相关方协作，将业务需求转化为数据模型与解决方案，并主导技术落地。

任职要求

• 8 年以上数据工程经验，熟悉数据架构、ETL 和数据库管理。
• 精通 Python 或 PySpark，具备 Java 或 Scala 经验。
• 熟悉 SQL 及关系型/NoSQL 数据库，有 Spark、Kafka、Hadoop 等大数据技术经验。
• 熟悉 Airflow、Databricks、Jenkins 等编排调度工具及 AWS/Azure/GCP 云平台。
• 有敏捷开发经验，能指导初级工程师并推动技术决策。

加分项

• 计算机科学、数据科学或相关领域学士/硕士学位。
• 有 Databricks 经验或认证。
• 有 AWS Redshift、S3、Azure SQL 数据仓库等云数据服务经验。

其他说明

公司总部位于墨西哥，福利因雇佣国家而异。

岗位职责

• 参与数据建模，支持身份安全用例和分析需求。
• 开发和维护数据管道，整合不同系统的数据。
• 优化数据处理效率，使用监控和可观测性最佳实践。
• 协助MLOps，确保模型效率。

任职要求

• 精通Python或其他面向对象语言。
• 具备Spark和分布式处理框架经验。
• 熟悉数据仓库和实时数据处理。
• 了解软件工程原则和数据结构。

加分项

• 有Databricks经验。
• 对身份安全有兴趣。
• 有图数据存储经验。

岗位职责

• 设计并实现可扩展、高效、可靠的数据架构，支撑业务与分析需求。
• 构建并维护数据管道、ETL流程及大容量结构化/非结构化数据集成方案。
• 优化数据管道、数据库、数据仓库和数据湖的性能、可靠性与安全性。
• 指导初级工程师，参与架构决策，主导跨职能大型项目技术交付。

任职要求

• 8年以上数据工程经验，精通数据架构、ETL和数据库管理。
• 精通Python或PySpark，并具备Java或Scala经验。
• 熟悉SQL、关系型/NoSQL数据库及Spark、Kafka、Hadoop等大数据技术。
• 熟悉Airflow、Databricks、Jenkins等编排调度工具及AWS/Azure/GCP云平台。
• 具备Agile开发经验，有指导初级工程师和团队技术领导经验。

加分项

• 计算机科学或数据科学相关本科或硕士学位。
• 有Databricks经验或认证。
• 有数据治理、数据质量或可观测性框架实施经验。

其他说明

福利因雇佣国而异，公司强调以AI工具提升工程效率。

岗位职责

• 管理和改进数据质量、性能、可靠性和自动化
• 构建和维护数据管道及工作流（ETL/ELT）
• 开发内部工具和仪表板以简化数据分析
• 与数据科学家及工程师协作制定数据基础架构策略

任职要求

• 计算机科学或量化专业学士学位
• 3年以上大规模ETL系统经验，熟练Python
• 精通Python、SQL、Spark、Scala
• 有数据建模、数据仓库及工作流（如Airflow）经验

加分项

• 有人工智能辅助开发经验

岗位职责

• 设计并维护用于特征提取、训练数据生成和模型监控的可扩展数据管道。
• 优化 SQL 查询、Spark 任务与数据处理流程，提升性能与可扩展性。
• 监控生产数据管道，排查数据质量问题，保障数据可靠性与时效性。
• 与机器学习工程师协作，推动数据版本、血缘与可复现等 MLOps 实践。

任职要求

• 3 年以上数据工程或软件工程相关经验。
• 2 年以上搭建并维护生产级数据管道的经验。
• 熟练掌握 Python 和 SQL，具备生产级数据管道开发经验。
• 熟悉 Spark、Airflow、Kafka 等分布式数据处理技术。
• 熟悉 Databricks、Snowflake、Delta Lake 等云数据平台。

其他说明

远程岗位，薪资按地理区域分四个薪酬档；面试可能通过 BrightHire 录制与转录。

岗位职责

• 参与高性能、可扩展数据解决方案的架构设计与实现
• 使用 SQL 创建数据模型，编写和优化 SQL 语句
• 设计、构建并自动化数据管道和应用的部署
• 与业务部门和数据科学团队协作处理数据访问、转换和报告需求

任职要求

• 7-9 年云数据模型、ETL 管道和基础设施设计开发经验
• 精通 SQL，熟悉主流数据库
• 有 Spark、Glue、EMR、Kafka 或 Kinesis 经验
• 熟悉 Java、Python、Scala 编程
• 了解 AWS 云平台