超过2亿日活的快手,在业内如何率先完成计算架构的全新升级?(快手sig算法)
一,超过2亿日活的快手,在业内如何率先完成计算架构的全新升级?
随着快手日活量不断增加,用户数据不断丰富,模型的数量越来越多,越来越复杂,在空间的占用上呈几何级数增长。
快手拥有超过2亿的日活量,超过130亿条的库存短视频,仍以每日超过1500万条短视频上传的速度新增,拥有海量超大数据应用场景。快手基础设施的规模已经处于国内顶级互联网公司头部行列。目前快手服务器规模已经超过十万台,数据总量达到EB级别,每天新增数据超过5PB。
为保障千亿级别数据量的处理和基础设施稳定、高效运行,快手服务器选型和业务优化团队(以下简称“快手SAT团队”)布署业界最先进GPU计算平台,选用合作伙伴NVIDIATesla V100GPU和新一代Turing架构的NVIDIA T4GPU,在业内率先完成计算架构的全新升级。
目前快手SAT团队正在做几件事:引入大容量低成本NVM与GPU组成异构计算+异构存储服务器;搭配100G/200G/400G RDMA,做CPU offload的架构,提高分布式计算的效率;将存储资源和计算资源解耦分离。
据快手SAT团队研发人员介绍,快手大数据应用场景如视频推荐平台、音视频理解、风控、商业化广告、强化学习等都是公司的核心业务,多个业务场景数据处理需求量大,NVIDIA推出新的Tesla产品之后,SAT团队将T4和TeslaV100 GPU的引入列为首要任务,使用新一代的GPU,搭配现有的计算平台,第一时间将T4引入到新的套餐上,同时以最快速度适配给公司内的核心业务,保障硬件基础架构走在业界前列。
快手选型上线流程和NVIDIA企业级技术支持团队已经有了一年多的合作经验,以最新的GPU引入为契机,快手SAT团队整理规范了GPU服务器引入和应用优化一整套的科学体系,并在实践中获得了极佳的业务收益,为快手节省了大量的时间成本,同时计算力更加出色的GPU计算架构也为未来快手关键业务线上线更加复杂的模型打下了坚实的基础。


总结:以上内容就是宝宝游戏提供的超过2亿日活的快手,在业内如何率先完成计算架构的全新升级?(快手sig算法)详细介绍,大家可以参考一下。
相关资讯
- 玩英雄联盟上瘾了,怎么戒?(玩英雄联盟上瘾了怎么办)
- EDGM3-1GK:致胜团无痕吕布吸收成吨伤害,又大中了多人,为何MVP却给了浪浪?
- 绝地求生官方手游推出你们会选择玩正版吗?(绝地求生正版手游叫什么)
- 《第五人格》目前最好上分的监管者有哪些?(第五人格什么监管者适合排位上分)
- QQ炫舞手游3月14日首发,你怎么看?(qq炫舞手游新品爆料)
- 火影忍者手游下个s忍什么时候出啊?(火影忍者手游下一个s忍者什么时候出)
- 一位大佬玩家自制了《守望先锋》手游画面,有人说暴雪可以直接带走,你怎么看?
- qq飞车手游怎么快速拉车头完成CWW?(qq飞车快速拉车头教学)
- QQ飞车手游怎么入弯才最好?(qq飞车入弯角度教学)
热门推荐
- 你们Q飞手游段位和玩的时间都是什么?(qq飞手游)
- 文森特穿甲流德莱文火了,峡谷王者局乱杀捍卫ADC荣耀,爆发不虚刺客,怎么玩?
- 前几天绝地求生手游出了,大家觉得哪款更好?(绝地求生手游推荐)
- 大话西游手游龙族一般可以秒几个?(大话西游手游龙族能秒几个)
- 《明日之后》手游中被感染是怎么样的?(明日之后被感染了该怎么办)
- 魔兽世界十五周年,明星玩家视频道贺,为何玩家纷纷吐槽马伯庸是云玩家?
- CF手游的吃鸡和刺激战场哪个机器人多?(cf手游都是机器人)
- 经典游戏《天之痕》为什么很多玩家在多年后会开始讨厌陈靖仇和拓拔玉儿呢?
- QQ飞车手游颜值最高的男装返场,渣男西装套多少点券保底,三万够吗?
- 新版水浒传的潘金莲和老版潘金莲您认为谁更胜一筹?(老版水浒传潘金莲谁扮演的)