新加坡web3公司招聘大数据架构师(远程)

新加坡web3公司现寻找一名大数据架构师(远程)

职位职责

  1. 负责相关业务大数据项目整体架构规划及研发,包括:
  1. 网站Web、客户端App埋点数据的收集处理
  2. 区块链数据的 ETL Pipeline Batch&Streaming
  3. 数据后处理以及分析展示平台
  4. 使用代码构建基础设施Infrastructure As Code
  5. 数据链路全平台Automation Devops以及快速灾难恢复
  6. 全链路性能优化和成本优化
  1. 负责技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题;
  2. 根据公司项目和业务发展特点,负责研究相关大数据前沿技术。

职位要求:

  1. 有PB级大数据处理(Batch&Streaming)实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力;
  2. 熟练掌握和使用AWS 大数据相关服务Redshift, Lambda, Athena, Spark, Glue Job, Iceberg etc.
  3. 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
  4. 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。
  5. 精通Python, SQL, Pandas, Spark, Terraform, CDKTF, AWS CLI
  6. 熟练Typescript, Javascript, NodeJS, dbt/dagster
  7. 对区块链/Web3的技术、概念有了解,有经验的优先。

远程职位,必须有区块链项目经验,只有一个HC,欢迎联系!

来源:https://eleduck.com/posts/qzfD8j