以下文章來源于谷歌云服務(wù),作者 Google Cloud
作者:Dan Lenoski
職位: Google Cloud 工程副總裁
作者:Nandita Dukkipati
職位:Google Cloud 首席軟件工程師
在 Google,我們長期使用以太網(wǎng)解決規(guī)?;瘑栴},重構(gòu)傳輸層,從而滿足突發(fā)高帶寬、高速率和低延遲的工作負載需求。例如對象存儲這一工作負載長期以來需要這些網(wǎng)絡(luò)屬性,但隨著大規(guī)模 AI/ML 訓練和高性能計算 (HPC) 等新用例的涌現(xiàn),此類需求再次大幅增長。過去,我們通過向計算機協(xié)會和互聯(lián)網(wǎng)工程任務(wù)組提供我們的構(gòu)想,與業(yè)界公開分享我們在流量整形、擁塞控制、負載平衡等方面的經(jīng)驗。數(shù)年來,這些構(gòu)想已在軟件和少數(shù)硬件中得以實現(xiàn)。但展望未來,我們相信,借助專用且靈活的硬件輔助來實施這套方案,對整個行業(yè)更加有益。
為此,我們開發(fā)了 Falcon,其性能比純軟件傳輸更上一層樓。在 OCP 全球峰會上,我們通過開放計算項目(Open Compute Project) 向生態(tài)系統(tǒng)開放 Falcon,該項目是利用 Google 的生產(chǎn)經(jīng)驗幫助業(yè)界實現(xiàn)以太網(wǎng)現(xiàn)代化的不二之選。
Falcon 作為硬件輔助傳輸層而設(shè)計,具有可靠性、高性能和低延遲的特點,而且充分利用了經(jīng)過生產(chǎn)驗證的技術(shù),包括 Carousel、Snap、Swift、PLB 以及 CSIG。
![wKgZomVN_M-ASOa4AAEUXaoZ39s142.jpg](https://file1.elecfans.com//web2/M00/AF/56/wKgZomVN_M-ASOa4AAEUXaoZ39s142.jpg)
Falcon 的分層參見下圖,其中包括其相關(guān)功能。我們展示了 RDMA 和 NVM Express 上層協(xié)議 (ULP),不過 Falcon 可根據(jù)生態(tài)系統(tǒng)的需要擴展到其他 ULP。
![wKgZomVN_M-AAZwTAADTQnT8Y9Q351.jpg](https://file1.elecfans.com//web2/M00/AF/56/wKgZomVN_M-AAZwTAADTQnT8Y9Q351.jpg)
Falcon 的底層使用三大關(guān)鍵技術(shù),在有損的高帶寬數(shù)據(jù)中心以太網(wǎng)絡(luò)實現(xiàn)低延遲。細粒度硬件輔助往返時間 (RTT) 測量、基于硬件的流量整形、快速準確的數(shù)據(jù)包重傳,并與支持多路徑和 PSP 加密的 Falcon 連接相結(jié)合。在此基礎(chǔ)上,F(xiàn)alcon 從一開始就被設(shè)計為一種多協(xié)議傳輸,能夠支持性能要求和應(yīng)用語義千差萬別的上層協(xié)議。上層協(xié)議映射層不僅提供與 Infiniband Verbs RDMA 和 NVMe ULP 的開箱即用兼容性,而且包含了對超大規(guī)模應(yīng)用至關(guān)重要的其他創(chuàng)新,例如靈活的排序語義和妥善的錯誤處理。最后一點是,硬件和軟件協(xié)同設(shè)計,配合運行,幫助實現(xiàn)高信息傳輸速率、低延遲和高帶寬等屬性,同時保持靈活性,賦能可編程性和持續(xù)創(chuàng)新。
Falcon 反映出以太網(wǎng)繼續(xù)在我們的行業(yè)中扮演中堅角色。Falcon 旨在實現(xiàn)超大規(guī)模的可預(yù)測高性能以及靈活性和可擴展性。我們期待與社區(qū)和行業(yè)合作伙伴合作,對以太網(wǎng)進行現(xiàn)代化改造,在 AI 驅(qū)動的未來里滿足聯(lián)網(wǎng)需求。我們相信,F(xiàn)alcon 將成為這一領(lǐng)域里正在推進的其他任務(wù)的重要補充。
行業(yè)視角
我們的行業(yè)合作伙伴對 Falcon 開發(fā)下一代以太網(wǎng)的前景充滿期待。
"我們非常認可 Google 對 Falcon 做出的貢獻,它與超以太網(wǎng)聯(lián)盟的愿景一致,即推動以太網(wǎng)成為 AI 和高性能計算的最佳數(shù)據(jù)中心結(jié)構(gòu),我們也期待在這一重要領(lǐng)域繼續(xù)推進行業(yè)創(chuàng)新。"
—— 超以太網(wǎng)聯(lián)盟 (主要成員包括 AMD、Arista、Broadcom、Cisco、Eviden、Hewlett Packard Enterprise、Intel、Meta、Microsoft 和 Oracle)主席
Jetz 博士
"Falcon 率先應(yīng)用在英特爾 IPU E2000 系列產(chǎn)品中。作為以太網(wǎng)傳輸?shù)牡谝粋€應(yīng)用實例,這些 IPU 的價值得到了進一步提升,可大規(guī)模增加長尾端延遲和擁塞處理功能。英特爾是超以太網(wǎng)聯(lián)盟的指導(dǎo)成員,該聯(lián)盟致力于為高性能 AI 和高性能計算工作負載發(fā)展以太網(wǎng)。我們計劃在未來的 IPU 和以太網(wǎng)產(chǎn)品中部署基于此類標準的增強功能。"
——英特爾高級副總裁兼網(wǎng)絡(luò)與邊緣事業(yè)部
總經(jīng)理Sachin Katti
"我們很高興看到針對 AI 和高性能計算等關(guān)鍵工作負載的高性能傳輸協(xié)議能夠在標準以太網(wǎng)/IP 網(wǎng)絡(luò)上運行,并且大規(guī)模實現(xiàn)高應(yīng)用帶寬。"
——Arista Networks 軟件工程副總裁
Hugh Holbrook
"思科很高興看到 Falcon 對開放計算項目的貢獻。長期以來思科始終支持開放標準,堅信廣泛的生態(tài)系統(tǒng)?,F(xiàn)代數(shù)據(jù)中心網(wǎng)絡(luò)特別是 Al/ML 的發(fā)展速度和規(guī)模前所未有,對行業(yè)發(fā)展而言既是挑戰(zhàn)也是機遇。Falcon 解決了這些網(wǎng)絡(luò)面臨的諸多挑戰(zhàn),實現(xiàn)了網(wǎng)絡(luò)的高效利用。"
——思科研究員 Ofer Iny
"瞻博網(wǎng)絡(luò)是開放生態(tài)系統(tǒng)的堅定支持者,因此我們很高興看到 Falcon 向開放計算項目社區(qū)開放。Falcon 允許以太網(wǎng)作為數(shù)據(jù)中心網(wǎng)絡(luò)的首選,為要求苛刻的工作負載帶來高帶寬、低尾延遲和擁塞緩解。如今,F(xiàn)alcon 為業(yè)界提供了一個成熟的解決方案,處理復(fù)雜的 AI/ML 工作負載。"
——瞻博網(wǎng)絡(luò)首席技術(shù)官 Raj Yavatkar
"Marvell 大力支持并致力于開放式以太網(wǎng)生態(tài)系統(tǒng)的發(fā)展,為 AI 等要求苛刻的新興工作負載提供支持。我們贊賞 Falcon 對開放計算項目的貢獻,歡迎 Google 與業(yè)界分享實踐經(jīng)驗。"
——Marvel 高級副總裁兼網(wǎng)絡(luò)交換事業(yè)部總經(jīng)理 Nick Kucharewski
![wKgZomVN_M-AKqgIAAAafJIrrMk991.gif](https://file1.elecfans.com//web2/M00/AF/56/wKgZomVN_M-AKqgIAAAafJIrrMk991.gif)
原文標題:Google 向生態(tài)系統(tǒng)開放可靠的低延遲硬件傳輸系統(tǒng) Falcon
文章出處:【微信公眾號:谷歌開發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
-
谷歌
+關(guān)注
關(guān)注
27文章
6203瀏覽量
106100
原文標題:Google 向生態(tài)系統(tǒng)開放可靠的低延遲硬件傳輸系統(tǒng) Falcon
文章出處:【微信號:Google_Developers,微信公眾號:谷歌開發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
如何在光子學中利用電子生態(tài)系統(tǒng)
![如何在光子學中利用電子<b class='flag-5'>生態(tài)系統(tǒng)</b>](https://file1.elecfans.com/web3/M00/07/AC/wKgZO2epY-aAarX4AAAlb27RJ8s451.png)
安森美PRISM生態(tài)系統(tǒng)助力相機開發(fā)
![安森美PRISM<b class='flag-5'>生態(tài)系統(tǒng)</b>助力相機開發(fā)](https://file1.elecfans.com/web3/M00/07/4C/wKgZO2ekH9eAYTQaAAA-76MGi4M834.png)
英監(jiān)管機構(gòu)或優(yōu)先調(diào)查蘋果谷歌移動生態(tài)系統(tǒng)
英國CMA將對蘋果谷歌移動生態(tài)系統(tǒng)展開調(diào)查
笙泉完善的MCU生態(tài)系統(tǒng)(ECO System),賦能高效開發(fā)、提升競爭優(yōu)勢
對三星而言開放生態(tài)系統(tǒng)是什么
英特爾和AMD組建x86生態(tài)系統(tǒng)咨詢小組
歐盟向蘋果施壓:開放iOS與iPadOS操作系統(tǒng),否則面臨巨額罰款
商湯科技發(fā)布粵語大模型,推動香港人工智能生態(tài)系統(tǒng)發(fā)展
蘋果硬件生態(tài)系統(tǒng)豐富,用戶黏性大
淺談AMD Ryzen AI PC生態(tài)系統(tǒng)
萊迪思舉辦2024萊迪思技術(shù)峰會展示其強大的FPGA合作生態(tài)系統(tǒng)
Meta欲打造巨型AI覆蓋視頻推薦生態(tài)系統(tǒng)
Renesas Ready生態(tài)系統(tǒng)合作伙伴解決方案介紹
![Renesas Ready<b class='flag-5'>生態(tài)系統(tǒng)</b>合作伙伴解決方案介紹](https://file.elecfans.com/web1/M00/D9/4E/pIYBAF_1ac2Ac0EEAABDkS1IP1s689.png)
RA生態(tài)系統(tǒng)合作伙伴解決方案提供卓越的平面航向和6軸IMU性能
![RA<b class='flag-5'>生態(tài)系統(tǒng)</b>合作伙伴解決方案提供卓越的平面航向和6軸IMU性能](https://file.elecfans.com/web1/M00/D9/4E/pIYBAF_1ac2Ac0EEAABDkS1IP1s689.png)
評論