成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

英特爾助力快手實現異構計算加速 顯著提升性能,降低系統TCO

企業動態
將負載卸載到英特爾?FPGA,顯著提升系統吞吐性能,降低請求延時。

昨晚睡得好嗎?睡不好可以刷快手的《11 點睡吧》。這部當代人睡眠困境的微綜藝,總曝光量達到 107億,不但科普睡眠知識,更深度探討都市人的喜怒哀樂[1]。驚人的曝光量背后,是快手對用戶畫像數據的精準分析,離不開強大技術支持下的推薦系統,得以讓優質的內容被更多喜歡它的人看到。

作為超 3 億日活、日均千萬級短視頻上傳、強調社區普惠的短視頻 APP,快手推薦系統在大規模復雜業務中面臨著巨大性能挑戰。想要化解算力瓶頸,異構計算是一個重要選項,這種使用不同類型指令集和體系架構的計算單元組成系統的計算方式,能夠針對不同任務選擇最優的計算架構,從而充分揮各種計算機構的優勢,協同完成復雜的工作任務。

1、異構計算助拳,緩解參數服務器瓶頸

快手作為短視頻內容平臺,內容生產、內容理解、內容分發、內容消費、用戶互動這些環節,構成了大規模的復雜業務,對算力產生更多元的需求。舉例來說:在推薦業務場景中,需要根據用戶畫像推薦感興趣的內容,就要從海量信息中選擇與用戶特征相關的結果,再通過“排序”來劃分內容的優先級別。在這一過程中,參數服務器的作用非常重要,它負責存儲、處理海量數據特征以及排序模型參數,保證任務高效、準確地完成。

 

快手的推薦系統為了應對海量數據沖擊,在架構上分離了計算與存儲。參數服務器屬于存儲型服務,該服務要保存和實時更新上億規模的用戶畫像、數十億規模的短視頻特征、以及千億規模的排序模型參數。受限于容量和帶寬的參數服務器,還要支撐每秒數億次的 KV 請求,耗費大量 CPU 資源。

要解決此類瓶頸,最佳方案是使用不同計算設備處理不同負載。快手的LaoFe NDP 近數據架構,在計算體系結構上實現創新,使用英特爾? 至強?可擴展處理器、英特爾?? Agilex? FPGA 英特爾?? 傲騰? 持久內存,借助軟硬一體化、領域專用加速器設計,從而做到網絡、存儲、計算三重加速,為各個業務系統提供低延遲、高并發、高吞吐、低總體擁有成本的基礎資源。

2、持久內存+FGPA 專用硬件,

確保三重加速創新

在網絡層面,LaoFe NDP 架構將 CPU的網絡數據處理轉移到英特爾? Stratix 10 FPGA 上,同時基于該 FPGA 實現了“軟件定義遠程直接內存訪問”協議(SD-RDMA),大幅降低了請求延時。

在存儲層面,該架構打造了支持 SSD、英特爾? 傲騰? 持久內存、以及 DRAM 的Key-Value 存儲引擎,將CPU 層面的存儲操作也轉移到 FPGA 中,最大程度發揮 FPGA 的能力,相比 CPU 方案,將存儲引擎的吞吐能力提升 5 倍以上。該引擎還利用英特爾? 傲騰? 持久內存的特性,讓基于異構存儲的索引系統幾乎達到純 DRAM 相同的性能指標,成本降低 30%。同時相比之前小時級的故障恢復速度,異構存儲的索引系統只需幾分鐘就能重新上線。

LaoFe NDP 的計算加速仰仗 FPGA 作為領域專用處理,可以更有效地并行處理數據,提供更高效的內存層次結構與定制化的執行單元,從而支持機器學習、深度學習和大數據等場景。英特爾?? FPGA 具備富于彈性的可編程硬件能力,延時低且可精確控制,單位算力功耗低、 片上內存大,適合于快手延時要求高、批處理比較小、
并發性和重復性強的應用場景。

 

快手LaoFe NDP 架構在英特爾軟硬件優化下,最終實現了如下優勢:

■ 系統吞吐顯著提升,延時顯著降低:參數服務器的吞吐性能提升了 5-6 倍,整體請求延時降低了 70%-80%,提供更好的用戶體驗。

■ 更好地控制 TCO:FPGA 的強大性能提供遠超傳統方案的吞吐能力,僅需部署少量的服務器就能滿足特性的性能指標要求,替代比可達到 1:5,有效降低 TCO。

■ 降低性能抖動:基于CPU的軟件方案常因需要進行高頻率更新而出現性能抖動,而通過FPGA來處理負載,能大幅減少性能抖動。

通過快手的實踐能夠看出,以異構計算加速不同負載,能夠顯著提升在推薦等場景下的系統吞吐與延時表現。未來,英特爾還會和快手等合作伙伴一起,推進面向未來數據中心的異構參考架構,通過CPU、IPU、XPU的產品組合以及軟件堆棧,以及智能網絡結構,提供跨越整個數據管道的解決方案,高效挖掘海量數據中的智慧,讓用戶與用戶、用戶與內容、用戶與商品可及時按需建立高效、有溫度的連接互動。

掃描下方二維碼或點擊“閱讀原文”了解更多案例詳情。

 

[1] 微內容時代,快手娛樂憑借創新內容搶先一步?

https://www.sohu.com/a/563124514_121321820

[2] 快手攜手英特爾,通過LaoFeNDP架構加速異構計算提供多元算力

責任編輯:張燕妮 來源: 英特爾數據中心
相關推薦

2021-04-08 09:47:09

云計算

2009-07-02 17:41:08

英特爾高性能計算石油

2012-06-25 09:51:57

AMDARM英特爾

2012-03-19 17:12:05

英特爾軟件大會并行編程高性能計算

2021-02-18 07:23:17

CPU英特爾微軟

2021-08-20 11:14:41

英特爾架構

2015-11-18 17:32:36

英特爾

2017-05-02 14:02:43

華為

2014-11-21 15:48:39

英特爾高性能計算模塊

2021-12-20 17:50:59

元宇宙VR英特爾

2013-07-12 15:24:53

業務英特爾計算力

2010-06-03 18:28:54

英特爾高性能計算

2012-02-13 16:00:30

英特爾Atom

2012-09-24 10:37:33

英特爾零能耗計算

2013-11-06 09:01:49

移動異構計算移動計算

2017-02-20 20:05:19

阿里云英特爾ECS實例

2018-05-10 09:52:15

英特爾傲騰

2024-09-03 09:06:42

2009-09-21 13:18:33

英特爾智能計算

2018-04-17 20:19:24

加速云異構計算AI
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 中日韩av | 成人区精品一区二区婷婷 | 欧美黄色小视频 | 婷婷久久五月天 | 国产欧美精品一区二区色综合朱莉 | 波多野结衣精品 | 亚洲日本国产 | 亚洲少妇综合网 | 国产草草视频 | 人人人人干 | 日韩精品一区二区三区在线播放 | 成人性生交大片 | 999精品在线观看 | 午夜91| 国产精品爱久久久久久久 | 青春草在线 | 久久久高清 | 国产黄色大片在线观看 | 国产精品久久久久久久午夜 | 久久精品91 | 国产精品视频久久久 | 国产黑丝在线 | 午夜久久久 | 久久手机视频 | 色天天综合 | 欧美黄色网 | 国产区在线免费观看 | 欧美高清一区 | 久久久av| 亚洲欧美在线免费观看 | 久久久123| 亚洲视频在线看 | 国产福利在线 | 国产精品久久久久久中文字 | 91成人精品 | 在线免费观看黄a | 国产成人免费视频网站视频社区 | 精品综合在线 | 成人综合一区二区 | 亚洲精品自在在线观看 | 日韩在线播放一区 |