[远程] 区块链大数据架构工程师

某头部区块链游戏平台现招募大数据架构师,直接和薪酬对标 P7/P7+。团队分布式办公,远程工作。

岗位描述:

  1. 负责大数据项目的整体架构规划及研发,包括:

    收集和处理网站 Web 端和客户端 App 的数据埋点 构建和维护区块链数据的 ETL 管道(批处理和流处理) 开发数据后处理和分析展示平台 使用基础设施即代码( Infrastructure as Code )进行基础设施构建 实现数据链路全平台的自动化运维及快速灾难恢复 优化全链路的性能和成本

  2. 负责技术验证和实现,攻克关键技术难题,解决项目开发过程中的技术问题。

  3. 根据公司项目和业务发展的需求,研究并应用前沿的大数据技术。

职位要求:

  1. 有区块链行业和相关技术经验
  2. 具备处理 PB 级大数据的实战经验(包括批处理和流处理),熟悉完整的大数据处理流程,拥有优秀的问题解决能力。
  3. 熟练掌握并使用 AWS 的大数据相关服务,如 Redshift 、Lambda 、Athena 、Spark 、Glue Job 、Iceberg 等。
  4. 善于沟通,对业务敏感,能够快速理解业务背景,并具备将技术与业务结合的能力。
  5. 拥有 6 年以上数据仓库或大数据开发经验,具备丰富的实时或离线数据体系建设经验。
  6. 精通 Python 、SQL 、Pandas 、Spark 、Terraform 、CDKTF 、AWS CLI 等技术。
  7. 熟练掌握 TypeScript 、JavaScript 、NodeJS 以及 dbt/dagster 。

感兴趣的同学,请添加微信 happierenee ,烦请注明来意~

来源:https://v2ex.com/t/1052728