超过2亿日活的快手,在业内如何率先完成计算架构的全新升级?

随着快手日常生活的不断增加,用户数据丰富,模型数量越来越复杂,空间占用呈指数增长。 

demo

每天快手有超过2亿条[文]日常生活,超过13[章]0亿条短视频库存,[来]仍然每天增加超过15[自]00万条短视频上传,[Q]有大量的超级数据应[Q]用场景。 快手基础设施已经跻[刷]身国内互联网公司的前[赞]列。 当前快手服务器规模[网]已经超过10万,数[站]据总量达到eb水平,[文]每天超过5个新数据[章]

确保千亿级数据的处理[来]和基础设施稳定高效运[自]行,快手服务器选择[Q]和业务优化团队(以下[Q]简称“快手sat团队[刷]”)部署了业界最先进[赞]的gpu计算平台nv[网]idiat4gpu,[站]选择合作伙伴nvi[文]diateslav1[章]00gpu和新一代图[来]灵结构在业界率先完[自]成计算架构的新升级。[Q]

现在快手sat团队正[Q]在做几件事:引入大容[刷]量低成本nvm和gp[赞]u组成异构计算异构存[网]储服务器;配置100[站]g/200g/400[文]grdma,做cp[章]u卸载架构,提高分布[来]式计算效率;将存储资[自]源与计算资源解耦。 

快手大数据应用场景[Q],如视频推荐平台,音[Q]视频了解,风控,商业[刷]广告,强化学习等,都[赞]是公司的核心业务,据[网]快手sat团队研发人[站]员介绍,sat团队[文]将t后推出新特斯拉产[章]品引进4台和特斯拉v[来]100gpu为优先,[自]使用新一代gpu,[Q]与现有计算平台,第[Q]一次将t4引入新封装[刷],同时以最快的速度适[赞]应公司内部的核心业务[网],确保硬件基础设施[站]处于行业前列。 

选择快手在线流程和nvidia企业级技术支持团队有一年多的合作经验,以最新的gpu引入为契机,团队组织和规范了gpu服务器的引入和应用,优化了一套科学的系统,并在实践中获得了优异的业务效益,节省了大量的时间成本,计算能力好的gpu计算架构也为今后更复杂的模型快手关键业务线奠定了坚实的基础。 

订单商品咨询,下单网址获取,售后服务,请猛戳这里→点击入群

评论