数据平台工程师(印度)

职位描述

Onehouse 是一家使命驱动型公司,致力于将数据从数据平台锁定中解放出来。我们通过基于 Apache Hudi 构建的云原生托管服务提供业界最具互操作性的数据湖。Onehouse使企业能够以分钟级的新鲜度大规模摄取数据、集中存储数据,并提供给任何下游查询引擎和用例(从传统分析到实时人工智能/ML)。

offer要求 [offer requirements]

  • 3 年以上在 Apache Spark 中构建和运行数据管道的经验
  • 2 年以上使用工作流协调工具(如 Apache Airflow 和 Dagster)的经验。
  • 精通 Java、Maven、Gradle 及其他构建和打包工具。
  • 善于编写高效的 SQL 查询并对查询计划进行故障排除。
  • 具有在云存储上管理大规模数据的经验。能够在几分钟内调试失败的作业和查询。
  • 在监控、部署和测试作业工作流方面具有卓越的操作能力。
  • 思想开放、善于协作、自我激励、行动迅速。
  • 希望具备的条件(但不是必需条件):
  • 在云环境中使用 k8s 和相关工具链的实际经验。
  • 操作和优化 TB 级数据管道的经验
  • 深入了解 Spark、Flink、Presto、Hive、Parquet 的内部原理。
  • 开源项目(如 Hadoop、Hive、Delta Lake、Hudi、Nifi、Drill、Pulsar、Druid、Pinot 等)的实践经验
  • 使用 Apache Flink、Kafka Streams 进行流处理管道的操作经验。

offer福利 [offer benefits]

  • 股权报酬;我们的成功就是您的成功,您有资格参与我们公司的股权计划
  • 健康与福利;我们将投资于您的身心健康,为您每月报销高达 20,000 印度卢比的保险费
  • 财务未来;我们将投资于您的财务福利,使该职位符合公积金资格,其中Onehouse将为您缴纳高达1800印度卢比/月的公积金
  • 地点;我们是一家偏远地区友好型公司(分布在美国北部和印度)。膳食津贴;每周午餐津贴、办公室内零食/饮料
  • 设备;我们将为您提供成功所需的设备,并为您的初始办公室/办公桌设置一次性提供 500 美元(USD)津贴
  • 儿童保育!分娩假期为 26 周,代孕和养父母假期为 12 周–全薪,这样您就可以将精力集中在您的新成员身上
滚动至顶部