新加坡web3公司招聘大数据架构师(远程)
新加坡web3公司现寻找一名大数据架构师(远程)
职位职责
- 负责相关业务大数据项目整体架构规划及研发,包括:
- 网站Web、客户端App埋点数据的收集处理
- 区块链数据的 ETL Pipeline Batch&Streaming
- 数据后处理以及分析展示平台
- 使用代码构建基础设施Infrastructure As Code
- 数据链路全平台Automation Devops以及快速灾难恢复
- 全链路性能优化和成本优化
- 负责技术验证与实现,关键技术问题的攻关,解决项目开发过程中的技术难题;
- 根据公司项目和业务发展特点,负责研究相关大数据前沿技术。
职位要求:
- 有PB级大数据处理(Batch&Streaming)实战经验,熟悉整个大数据的完整处理流程,优秀的问题解决能力;
- 熟练掌握和使用AWS 大数据相关服务Redshift, Lambda, Athena, Spark, Glue Job, Iceberg etc.
- 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
- 6年以上数据仓库或大数据开发,丰富的实时或者离线数据体系建设经验。
- 精通Python, SQL, Pandas, Spark, Terraform, CDKTF, AWS CLI
- 熟练Typescript, Javascript, NodeJS, dbt/dagster
- 对区块链/Web3的技术、概念有了解,有经验的优先。
远程职位,必须有区块链项目经验,只有一个HC,欢迎联系!