基础研发平台是美团的核心技术平台,立足于“零售+科技”的战略定位,通过打造人工智能、大数据、云计算、安全等核心技术能力,以及研发效能平台、企业应用平台等公共服务,为业务提供稳定安全、扩展易用、技术领先的平台技术和产品服务。
在这里,我们会参与到*前沿的技术研发和探索;能够接触超规模集群、海量数据,挑战高复杂业务场景,有机会与业界一流的工程师一起并肩前行。
在这里,我们有超强的技术氛围,持续向社区贡献业界实践,加速行业技术发展;我们有完善的互联网学习生态圈,重视底层逻辑和方法论,助力职业生涯的非线性成长。
真诚地邀请你,和我们一起驱动技术发展,创造行业价值。
岗位职责
1、负责主导面向AI场景的高性能分布式存储平台的设计和研发工作;
2、面向公司内特有场景, 基于开源模块,设计与落地实现更合理的自研存储架构,接口层面包括但不限于分布式文件/分布式对象存储等;
3、研究AI生态对接、数据访问/处理加速,与存储配合设计解决性能瓶颈,构建AI场景端到端竞争力;
岗位基本需求
1、精通C/C++,具有多线程、高并发及各种IO模型的编程经验,对性能优化有强烈的自我驱动力;
2、熟悉分布式算法(如paxos、raft)、计算机网络(如各种rpc实现和高性能网络收发库),理解大型分布式存储系统工作原理,以及相应的开源实现(例如grpc、zk、etcd、braft等等);
3、有文件存储、块存储、对象存储开发经验(包括但不限于Ceph、GlusterFS、Lustre、ZFS、fuse等等)。
具备以下者优先
1、熟悉主流AI框架,如TensorFlow、PyTorch等。
2、对AI生态有深入理解,能有效对接并优化数据访问流程。
3、对高性能计算场景的存储需求有深刻体会,了解现有开源存储项目在高性能场景下的诸多痛点和不足
4、了解行业发展前沿技术如高速RDMA网络、用户态零拷贝存储SPDK、高性能存储介质NVMe、高并发无锁数据结构等等
岗位亮点
高性能分布式存储领域是当今热门前沿领域,诸多初创公司和存储行业巨头百家争鸣,加入我们能结合美团机器学习平台,和大模型工程团队一起对公司机器学习场景IO工作流进行全新的升级、再造;