0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI算力應(yīng)用中的光模塊產(chǎn)品

易飛揚通信 ? 來源:易飛揚通信 ? 作者:易飛揚通信 ? 2024-01-02 15:32 ? 次閱讀

以ChatGPT為代表的AI大模型應(yīng)用普及將推動算力需求快速增長,服務(wù)器產(chǎn)業(yè)鏈是其中重要的受益環(huán)節(jié)之一,AI計算的普及將推動服務(wù)器產(chǎn)業(yè)鏈光模塊向800G升級提速。

算力網(wǎng)絡(luò)驅(qū)動下光模塊市場需求預測

光模塊是數(shù)據(jù)中心內(nèi)部互連和數(shù)據(jù)中心相互連接的核心部件。100G和400G是主流產(chǎn)品,800G過去主要用在超算等領(lǐng)域。據(jù)LightCounting預計,2023年800G全球普及率僅0.62%。而以ChatGPT為代表的AI大模型,對數(shù)據(jù)中心內(nèi)外的數(shù)據(jù)流量都提出了新要求,有望推動光模塊加速向800G升級。800G光模塊將從2025年底開始主導光模塊市場。

wKgZomWTvB6ABUeHAAFeabqIMvw245.png

根據(jù)LightCounting的數(shù)據(jù),2016年至2020年,全球光模塊市場規(guī)模從58.6億美元增長到66.7億美元,預測2025年全球光模塊市場將達到113億美元,為2020年的1.7倍。從結(jié)構(gòu)上看數(shù)通市場占60%,電信市場占40%左右。

wKgaomWTvB-AWz3zAAC-Zc-MRkw735.png

AI算力場景光模塊應(yīng)用情況

首先我們以英偉達的SuperPOD為例測算單顆GPU與光模塊的比例。測算僅考慮IB網(wǎng)絡(luò)對應(yīng)的光模塊需求。以140個節(jié)點的集群為例,每臺舉例服務(wù)器需要8顆GPU芯片,共需140×8=1120顆芯片;集群中每20臺服務(wù)器組成一個SU(scalable units,可擴展單元),共7個SU。IB網(wǎng)絡(luò)架構(gòu)下實現(xiàn)了完整的胖樹(Fat-Tree)拓撲結(jié)構(gòu),胖樹架構(gòu)在訓練場景中最優(yōu)的配置是上下行端口數(shù)一樣,即無阻塞的網(wǎng)絡(luò),具體來看:

第一層:每個SU 中配置8臺葉交換機,共有56臺葉交換機;

第二層:每10臺脊交換機組成一個交換機組Spine Group( SG),每個SU 的第一個葉交換機連接到SG1中的每個交換機,每個SU的第二個葉交換機連接到SG2中的每個交換機,共有80個脊交換機;

第三層:每14臺核心交換機組成一個交換機組Core Group(CG),對應(yīng)共28個核心交換機。

使用系統(tǒng)的對應(yīng)計算側(cè)和存儲側(cè)線纜全部采用AOC有源光纜,因此每個端口對應(yīng)一個光模塊,即每條光纜對應(yīng)2個光模塊,因此計算側(cè)和存儲側(cè)共需要(1120+1124+1120)×2+(280+92+288)×2=8048個光模塊,即單顆GPU對應(yīng)所需200G光模塊數(shù)量約為1:7.2

DGX GH200超級計算機搭載256個超級芯片,每個超級芯片可視為一個服務(wù)器,通過交換機進行互聯(lián)。從結(jié)構(gòu)上來看,超級計算機采用兩層的胖樹拓撲結(jié)構(gòu),第一、二層分別使用96個、36個交換機,每臺交換機擁有32個速率為800G的端口;此外超級計算機還配備了24個IB交換機用于IB網(wǎng)絡(luò)。按照端口進行估算,L1層距離較近因此假定使用銅纜進行連接不涉及光模塊,L2層36個交換機在無收斂胖樹架構(gòu)下,第二層交換機端口向下與L1層交換機上行端口互聯(lián),因此共需要36×32×2=1152個800G光模塊;IB網(wǎng)絡(luò)架構(gòu)下,24臺交換機需要24×32=768個800G光模塊;則DGX GH200超級計算機共需要1152+768=1920個800G光模塊,對應(yīng)每顆芯片12個800G光模塊。則GPT-3單日完成訓練需要8萬顆以上200G光模塊,如果考慮到FLOPS的利用率約為20%-30%,則需要光模塊的數(shù)量將約為35萬顆。

易飛揚應(yīng)用于算力場景的光模塊

AI發(fā)展促進了海量光模塊需求,易飛揚則已于2023年完成800G/400G AI應(yīng)用光模塊產(chǎn)線建設(shè)任務(wù),新建成的生產(chǎn)線主要用于4×100G PAM4和8×100G PAM4光模塊和有源光纜的生產(chǎn)。

wKgZomWTvB-AWaavAAAxZYpJhRM309.png

wKgaomWTvB-Aay2pAAA1M0y3A5I336.png

得益于供應(yīng)鏈的支持,易飛揚的系列AI光模塊量產(chǎn)順利,公司本身的產(chǎn)品多樣化設(shè)計能力、訂單能力和供應(yīng)鏈能力形成了較好的匹配關(guān)系??梢詾橹行】蛻籼峁╈`活有效的需求交付和樣品測試。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    29350

    瀏覽量

    267631
  • 光模塊
    +關(guān)注

    關(guān)注

    75

    文章

    1219

    瀏覽量

    58770
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    867

    瀏覽量

    14649
收藏 人收藏

    評論

    相關(guān)推薦

    青云科技強化AI架構(gòu),升級產(chǎn)品與服務(wù)體系

    10月9日,青云科技正式揭曉了其升級版的產(chǎn)品與服務(wù)陣容、行業(yè)及場景定制化解決方案,以及全新的生態(tài)戰(zhàn)略。該公司旨在通過AI平臺、AI
    的頭像 發(fā)表于 10-10 16:42 ?326次閱讀

    九章云極DataCanvas公司「包」產(chǎn)品璀璨亮相2024大會!

    九章云極DataCanvas公司技術(shù)專家向與會者詳細介紹包的產(chǎn)品能力和創(chuàng)新模式,收獲行業(yè)伙伴的高度認可。力作為AI時代的數(shù)字能源,將在
    的頭像 發(fā)表于 09-29 14:44 ?661次閱讀
    九章云極DataCanvas公司「<b class='flag-5'>算</b><b class='flag-5'>力</b>包」<b class='flag-5'>產(chǎn)品</b>璀璨亮相2024<b class='flag-5'>中</b>國<b class='flag-5'>算</b><b class='flag-5'>力</b>大會!

    大模型時代的需求

    現(xiàn)在AI已進入大模型時代,各企業(yè)都爭相部署大模型,但如何保證大模型的,以及相關(guān)的穩(wěn)定性和性能,是一個極為重要的問題,帶著這個極為重要的問題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04

    中科曙光入選2024服務(wù)產(chǎn)業(yè)圖譜及服務(wù)產(chǎn)品名錄

    近日,中國信通院公布首個《服務(wù)產(chǎn)業(yè)圖譜(2024年)》及《服務(wù)產(chǎn)品名錄(2024年)》。曙光智
    的頭像 發(fā)表于 08-06 14:23 ?514次閱讀

    軟通動力亮相2024國移動網(wǎng)絡(luò)大會,共繪網(wǎng)絡(luò)新藍圖

    4月28日至29日,以“網(wǎng)絡(luò)點亮AI新時代”為主題的2024國移動網(wǎng)絡(luò)大會在蘇州隆重舉
    的頭像 發(fā)表于 05-06 10:20 ?406次閱讀
    軟通動力亮相2024<b class='flag-5'>中</b>國移動<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)大會,共繪<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)新藍圖

    DPU技術(shù)賦能下一代AI基礎(chǔ)設(shè)施

    4月19日,在以“重構(gòu)世界 奔赴未來”為主題的2024國生成式AI大會上,中科馭數(shù)作為DPU新型基礎(chǔ)設(shè)施代表,受邀出席了中國智中心創(chuàng)
    的頭像 發(fā)表于 04-20 11:31 ?742次閱讀

    隨著AI需求不斷增強,800G模塊的需求不斷增大

    在人工智能芯片(AIGC)和不斷發(fā)展的背景下,模塊產(chǎn)業(yè)正在迎來快速發(fā)展的時期。隨著模塊
    的頭像 發(fā)表于 04-11 10:54 ?528次閱讀
    隨著<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>需求不斷增強,800G<b class='flag-5'>光</b><b class='flag-5'>模塊</b>的需求不斷增大

    AI的需求推動模塊行業(yè)快速迭代

    近期,由OpenAI發(fā)布的人工智能文生視頻大模型Sora再次引起了不小的轟動,繼ChatGPT之后,Sora的推出讓AIGC(生成式人工智能)再度成為行業(yè)焦點,AI大模型的快速迭代升級對網(wǎng)絡(luò)架構(gòu)提出了更高要求,推動模塊
    的頭像 發(fā)表于 04-10 14:07 ?285次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>的需求推動<b class='flag-5'>光</b><b class='flag-5'>模塊</b>行業(yè)快速迭代

    256Tops!CSA1-N8S1684X服務(wù)器

    (基于BM1684X的高服務(wù)器)高AI處理器BM1684X搭載了BM1684AI
    的頭像 發(fā)表于 03-23 08:02 ?1226次閱讀
    256Tops<b class='flag-5'>算</b><b class='flag-5'>力</b>!CSA1-N8S1684X<b class='flag-5'>算</b><b class='flag-5'>力</b>服務(wù)器

    大茉莉X16-P,5800M大稱王稱霸

    Rykj365
    發(fā)布于 :2024年01月25日 14:54:52

    立足,聚焦AI!順網(wǎng)科技全面走進AI時代

    “立足,聚焦AI”,順網(wǎng)科技進軍AI時代的號角已被吹響。 1月18日,順網(wǎng)科技(300113.SZ)以“躍遷·向未來”為主題的戰(zhàn)略升
    的頭像 發(fā)表于 01-19 10:57 ?402次閱讀
    立足<b class='flag-5'>算</b><b class='flag-5'>力</b>,聚焦<b class='flag-5'>AI</b>!順網(wǎng)科技全面走進<b class='flag-5'>AI</b>智<b class='flag-5'>算</b>時代

    衛(wèi)星通信序幕拉開,AI浪潮澎湃

    AI浪潮催生要求,基礎(chǔ)設(shè)施需求持續(xù)提升。AIGC帶來的超大需求拉動通信基礎(chǔ)設(shè)施建設(shè)及擴容,
    發(fā)表于 01-03 10:22 ?303次閱讀
    衛(wèi)星通信序幕拉開,<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>浪潮澎湃

    認識一下AI應(yīng)用模塊產(chǎn)品

    以ChatGPT為代表的AI大模型應(yīng)用普及將推動需求快速增長,服務(wù)器產(chǎn)業(yè)鏈是其中重要的受益環(huán)節(jié)之一,AI計算的普及將推動服務(wù)器產(chǎn)業(yè)鏈
    的頭像 發(fā)表于 12-29 16:14 ?823次閱讀
    認識一下<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>應(yīng)用<b class='flag-5'>中</b>的<b class='flag-5'>光</b><b class='flag-5'>模塊</b><b class='flag-5'>產(chǎn)品</b>

    弘信電子與AI服務(wù)器合資,助力國產(chǎn)芯片落地

    此外,弘信電子近期在AI業(yè)務(wù)上取得了突破性進展,這并非源自本土化的積累,而是依賴于團隊敏銳的戰(zhàn)略眼光和強烈的創(chuàng)新動力。此次投資是弘信電子在AI
    的頭像 發(fā)表于 12-25 09:30 ?712次閱讀

    人工智能熱潮涌帶動模塊快速發(fā)展

    人工智能點燃需求,帶動模塊產(chǎn)品更新迭代。受益AI
    發(fā)表于 11-30 09:58 ?522次閱讀
    人工智能熱潮涌帶動<b class='flag-5'>光</b><b class='flag-5'>模塊</b>快速發(fā)展