Shopee Data Infra团队隶属于Shopee工程技术部门,主要负责公司的大数据系统的开发和保障,其中包括分布式文件系统,分布式计算引擎,实时计算引擎,OLAP查询引擎,KV引擎等系统的开发,测试,升级,稳定性保障,性能优化,以及支撑这些系统背后的成千上万的服务器的管理。我们有来自世界各国的热情的工程师,致力于用最合适的技术构建最好的系统。我们的工程师不仅专注于解决眼前的问题,也放眼未来为长期的需求积累技术经验和实践方案。Shopee的业务在过去几年经历了飞速的发展,并且还在继续更快的进程中,需要热爱技术,喜欢解决问题的你加入我们,一起进步。

 

工作职责

  • 构建分布式大数据服务平台,参与和构建公司包括海量数据存储、离线/实时计算、实时查询系统,大数据管理平台等系统的开发和维护

  • 服务各种业务需求,为业务团队提供稳定,高性能的技术架构,服务日益增长的业务和数据量

  • 深入源码内核改进优化开源项目,解决各种hadoop、spark、hbase,presto, Druid, ClickHouse等系统的疑难问题,参与到开源社区建设和代码贡献

任职要求

  • 计算机或相关专业

  • 精通C++/Java/Scala程序开发(至少一种),熟悉Linux/Unix开发环境

  • 熟悉常用开源分布式系统,熟悉Hadoop/Hive/Spark/Flink/HBase/Presto/Clickhouse之一的源码优先

  • 有大规模分布式系统开发、维护经验,有故障处理能力,源码级开发能力

  • 具有良好的沟通协作能力,具有较强的分享精神

  • 对Druid、Kylin、Impala、ElasticSearch,github等系统(其中一种)有深入使用和底层研究者优先

Apply for this Job

* Required

  
  
+ Add Another Employment