实时数仓开发工程
B
Bitget Wallet
6 - 9K USD
Full-time
Remote
岗位职责:
1.负责分布式实时数仓架构的设计和建设,维护实时数仓架构的稳定性和数据质量,确保系统在极端行情下的稳定性(如比特币价格剧烈波动时需快速响应);
2.负责交易所实时交易数据的采集、清洗和存储,支持每秒数百万级的交易量处理;
3.主导实时、离线CDP平台,实时用户标签,线上实时指标,实时风控系统,异常交易行为监控等系统建设;
4.优化数仓性能,降低消费延迟,设计多云多区可用方案,保障生产可用;
任职要求:
扎实的编程基础,熟练掌握Java;
精通Flink,精通Flink SQL&Streaming底层源码,看过相关Connector具体实现,有大规模实时数仓建设经验;
有Flink结合数据湖(Paimon)相关项目经验;
熟悉Flink上下游常用Connector相关存储系统实现原理;
有实时数据质量建设经验;
精通其他大数据生态组件StarRocks、HBase、Kafka、ES等
有链上数据仓库建设经验优先
注:岗位后期出海香港,有出海补贴,优才等公司负责!