ETL 工程师

官网 RYZ Labs

职位描述

RYZ正在寻找一名ELT工程师与我们的一个合作伙伴合作,帮助他们开发和维护 ELT(提取、加载、转换)流程、加载、转换)流程,以构建其中央数据库信息。

职责:

– 与数据科学家密切合作,了解从各种来源提取的数据的性质,确定关键数据验证和丰富流程。

– 设计和实施自动化工作流程,以从不同来源提取原始数据并将其摄取到我们的数据湖环境中。

– 使用高级数据处理技术对原始数据进行结构化和转换,以确保一致性、完整性和可用性。

– 使用上下文信息和元数据来丰富数据,以提高数据科学家和分析师的使用价值。

– 与技术团队密切合作,优化 ELT 流程的性能和可扩展性。

– 通过严格的验证和测试程序确保数据质量和完整性。

– 监控数据管道问题并排除故障,以确保顺利、不间断地运行。

offer要求 [offer requirements]

要求:

– 计算机科学、工程或相关领域的学士学位。

– 拥有在数据密集型环境中设计和实施 ELT 流程的丰富经验。

– 熟练掌握使用 Python (Pandas)、SQL 和 ETL 框架等工具进行数据操作和转换。

-熟悉数据治理最佳实践和法规要求。

– 出色的分析和解决问题的技能,对细节有敏锐的关注。

– 有效的沟通技能和与跨职能团队协作的能力。

-具有从 API 和网络搜刮中获取数据的经验

优先资格:

– 具有使用 Hadoop、Spark 或 Kafka 等大数据技术的经验。

– 以前在体育分析或相关行业工作过。

– 云计算或数据工程方面的认证。

offer福利 [offer benefits]

我们的价值观和期望:

– 客户至上的心态–我们所做的每一项决定都应从客户的角度出发。

-偏重行动–紧迫感至关重要,希望加快完成任务的时间表。

-主人翁精神–如果你发现有机会提供帮助,即使这不是你的核心职责,也要挺身而出。谦虚和尊重 – 乐于学习,勇于承担责任,尊重与 RYZ 互动的每一个人。

– 节俭 – 节俭和成本意识有助于我们事半功倍。

– 交付影响力 – 以最有效的方式完成工作。

-提高我们的标准–始终寻求改进我们的流程、团队和期望。维持现状是不够的,也不应该维持现状。

滚动至顶部