0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

硬杠TensorFlow/PyTorch,這家中國初創(chuàng)企業(yè),乘開源東風、領(lǐng)跑AI賽道

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶 ? 2021-07-16 18:18 ? 次閱讀

目前比較主流的AI深度學習框架主要由國際巨頭領(lǐng)銜,比如谷歌的TensorFlow和Facebook的PyTorch等。2017年中國的一家初創(chuàng)團隊悄悄成立,他們做的是對標這些主流框架的技術(shù)開發(fā)。今年初,這家公司聲名鵲起,并獲得了由高瓴創(chuàng)投領(lǐng)投的5000萬元A輪融資。這家公司叫一流科技,他們的深度學習框架叫做OneFlow,今年7月31日,OneFlow即將迎來自己的開源一周年紀念日。

對框架的超前定位,有力支撐了深度學習領(lǐng)域的創(chuàng)業(yè)

一流科技創(chuàng)始人袁進輝在創(chuàng)辦公司之前,在微軟研究院工作多年,主要從事機器學習、分布式系統(tǒng)的研發(fā)?!爱敃r我們認為隨著AI數(shù)據(jù)和算力需求的不斷增加,現(xiàn)有的深度學習框架在未來會遇到瓶頸,幾年前我多次在公開演講中提到過這個觀點,但當時業(yè)界不以為然?!痹M輝說道。

袁進輝分析,從機器視覺到人機對話,再到認知智能,AI不斷突破能力邊界,同時伴隨著模型參數(shù)的指數(shù)級提升,AI模型加速膨脹導致訓練成本攀升,預計2025年最先進的AI訓練模型成本將達到1億美元。

而單芯片存在算力天花板,單芯片在物理層面存在性能極限,先進制程發(fā)展已難以維持摩爾定律;分布式硬件難以高效協(xié)同運轉(zhuǎn),分布式方案芯片間傳輸帶寬低于片上帶寬,多芯片集群難以像“超級芯片”一樣高效工作。

針對內(nèi)存墻、用戶接口不友好和定制化成本高等AI分布式訓練痛點,OneFlow從底層機制提出Actor機制、一致性視角和自動并行技術(shù)加以解決。

袁進輝表示,隨著大規(guī)模參數(shù)模型爆發(fā),OneFlow需求匹配程度愈發(fā)提高,將超過TensorFlow和PyTorch逐漸占據(jù)更多的市場空間。

近兩年,一些國內(nèi)科技巨頭也紛紛推出深度學習框架,例如百度飛槳PaddlePaddle、華為的MindSpore等。他們大多擁有自己的生態(tài)圈,能夠?qū)⒂布蛙浖钆涫褂?。相比之下,一流科技的OneFlow屬于獨立的第三方框架,更具有中立性,可以廣泛地與芯片廠商進行適配。

GPU芯片巨頭英偉達在美國的軟件棧團隊對我們的深度學習框架表示了密切關(guān)注,每兩個星期我們會就框架優(yōu)化與合作問題進行探討?!痹M輝透露。

雖然TensorFlow和PyTorch等深度學習框架為也英偉達的芯片所適配,不過顯然,英偉達注意到OneFlow這個由獨立的軟件公司研發(fā)的框架的好處和價值。

開源與良好的商業(yè)模式并不沖突

去年OneFlow框架開源之后獲得了非常高的關(guān)注。OneFlow的開源代碼發(fā)布到了Github,開源讓全球開發(fā)者能夠直觀接觸、下載、使用OneFlow。開源十個月Star數(shù)量超過2500,超過華為Mindspore。

袁進輝直言,“在開源社區(qū)里面,有很多基礎軟件,勝出的不是大公司,而是初創(chuàng)團隊,比如主導Spark的Databricks等。一些互聯(lián)網(wǎng)大公司都在用的軟件,剛開始都是小團隊做的。只要技術(shù)上過硬,就有機會?!憋@然,一流科技有這個技術(shù)實力,在其框架開源之后,獲得了谷歌、Facebook、華為、百度等同行的關(guān)注,也受到了資本的青睞。

但是,一個問題是,開源與公司的商業(yè)模式是否沖突呢?公司又如何建立自己的商業(yè)價值?

袁進輝分析,開源的商業(yè)模式主要有兩種,一種是雖然一些有技術(shù)能力的互聯(lián)網(wǎng)公司或開發(fā)者自行下載開源軟件,進行項目開發(fā),但是對于沒有開發(fā)能力的用戶,他們需要付費購買開源軟件的商業(yè)版來使用。

另一種是云上托管。如今很多企業(yè)將數(shù)據(jù)計算在云上進行,在用某個軟件處理大數(shù)據(jù)、AI計算的任務時他可以把開源工具下載下來在云上部署,這種方式下公司必須自己雇用工程師對這一流程進行調(diào)優(yōu),需要承擔較高的人力成本。但也可以直接從云上使用開源公司部署的軟件,這種做法用戶需要承擔的成本較低,也更方便省事。

目前開源云托管是最好的商業(yè)模式,在美國已經(jīng)運用相對成熟。相信在中國也將有越來越多的用戶接受這一模式。

OneFlow用起來不僅是快,下一步打通易用性

OneFlow選擇自上向下占領(lǐng)市場,占據(jù)技術(shù)制高點,從高效性向易用性和完備性延伸。以高效性作為突破口,切入市場打破競爭格局。

目前,用OneFlow訓練比其他框架快的口碑已經(jīng)在業(yè)內(nèi)傳開。一個數(shù)據(jù)是,OneFlowv0.2.0實現(xiàn)了多達17個性能優(yōu)化,使得CNN和BERT的自動混合精度(AMP)訓練速度大幅提升,不僅遠超其他各個主要框架的官方實現(xiàn),同時也超過了NVIDIA深度優(yōu)化過的版本,成為在主流旗艦顯卡(V100 16G)上訓練ResNet50-v1.5和BERT-base模型最快的框架。OneFlow ResNet50-v1.5 AMP單卡比NVIDIA深度優(yōu)化過的PyTorch快80%,比TensorFlow2.3快35%。

袁進輝表示,我們即將發(fā)布新的版本,將重點提升軟件的易用性體驗,首先在單卡代碼上保證和PyTorch的體驗一致,而同時在多卡場景下推出了全新的接口設計,將給用戶帶來革命性的開發(fā)體驗。相信這個版本的發(fā)布將極大地帶動開發(fā)者群體,擴大OneFlow的使用數(shù)量和應用范圍。

在鋪設高效性和易用性之后,OneFlow還將打造完備性,從而形成自上而下、三位一體的布局。袁進輝有信心,在不久的將來和TensorFlow、PyTorch是三分天下的市場格局。

AI軟件生態(tài),OneFlow需當此重任

在移動端,開源的安卓系統(tǒng)形成強大的生態(tài)而成功。深度學習框架就像AI的操作系統(tǒng)一樣,它是模型算法和硬件資源之間的接口,是AI系統(tǒng)資源的管理者,實現(xiàn)對底層硬件資源的調(diào)度,讓開發(fā)者無需關(guān)心實現(xiàn)細節(jié)。

袁進輝認為,生態(tài)建設就是0和1的問題,OneFlow必然建設強大的生態(tài)才能實現(xiàn)更多的可能,取得最終的成功。

目前,OneFlow的硬核創(chuàng)新在核心AI開發(fā)圈樹立了口碑,得到全球框架專家的高度認可,國內(nèi)外深度學習框架產(chǎn)品已在積極跟進OneFlow所開創(chuàng)的設計理念。一流科技已與北京智源人工智能研究院、粵港澳大灣區(qū)數(shù)字經(jīng)濟研究院、之江實驗室、中關(guān)村智用人工智能研究院等頂尖AI科研院所開展深度合作。同時,聯(lián)合芯片、云廠商等上下游企業(yè)加強配合,已與寒武紀、燧原科技等推進超大模型訓練方案。下一步將推動與更多芯片廠商和廣大開發(fā)者的合作,打造AI平臺的繁榮生態(tài)。

開源生態(tài)已經(jīng)得到國家層面的重視,“開源”寫進了今年的十四五規(guī)劃,而開源將是中國占領(lǐng)科技高地的機會。例如硬件方面現(xiàn)在大力發(fā)展的RISC-V開源指令集架構(gòu),軟件方面OneFlow做為中國的深度學習框架,也將借助開源的力量進一步壯大其AI生態(tài)。

基于深度學習的軟件2.0時代將打開30萬億美元的市場,袁進輝表示,中國擁有大量的基礎軟件人才,積累了豐富的AI應用場景,OneFlow有機會在這個AI時代乘風而行。

本文為電子發(fā)燒友網(wǎng)原創(chuàng)文章,作者黃晶晶,微信號kittyhjj,轉(zhuǎn)載請注明以上來源。如需入群交流,請?zhí)砑游⑿舉lecfans999,投稿發(fā)郵件到huangjingjing@elecfans.com。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    29401

    瀏覽量

    267702
  • pytorch
    +關(guān)注

    關(guān)注

    2

    文章

    795

    瀏覽量

    13081
  • OneFlow
    +關(guān)注

    關(guān)注

    0

    文章

    9

    瀏覽量

    8781
收藏 人收藏

    評論

    相關(guān)推薦

    AI初創(chuàng)公司SandboxAQ尋求超50億美元估值融資

    AI初創(chuàng)公司SandboxAQ近日宣布,正尋求按超過50億美元的估值進行新一輪股權(quán)融資。這家融合了AI與量子物理學技術(shù)的創(chuàng)新企業(yè),專注于開發(fā)
    的頭像 發(fā)表于 10-21 15:44 ?311次閱讀

    真格基金宣布捐贈開源AI項目vLLM

    開源技術(shù)處于 AI 革命的中心。Llama 3、Mistral 等開源大模型迅速追趕 GPT-4,TensorFlowPytorch
    的頭像 發(fā)表于 09-24 16:13 ?256次閱讀

    RISC-V在中國的發(fā)展機遇有哪些場景?

    ,RISC-V在這些領(lǐng)域都有廣闊的發(fā)展前景。 6. 政策支持與產(chǎn)業(yè)生態(tài) 政策推動:中國政府高度重視信息技術(shù)的發(fā)展,積極支持RISC-V等開源技術(shù)的研發(fā)和應用。 產(chǎn)業(yè)生態(tài):中國已經(jīng)涌現(xiàn)出一批關(guān)注RISC-V
    發(fā)表于 07-29 17:14

    tensorflowpytorch哪個更簡單?

    TensorFlowPyTorch都是用于深度學習和機器學習的開源框架。TensorFlow由Google Brain團隊開發(fā),而PyTorc
    的頭像 發(fā)表于 07-05 09:45 ?613次閱讀

    tensorflowpytorch哪個好

    tensorflowpytorch都是非常不錯的強大的框架,TensorFlow還是PyTorch哪個更好取決于您的具體需求,以下是關(guān)于這兩個框架的一些關(guān)鍵點:
    的頭像 發(fā)表于 07-05 09:42 ?563次閱讀

    TensorFlowPyTorch深度學習框架的比較與選擇

    深度學習作為人工智能領(lǐng)域的一個重要分支,在過去十年中取得了顯著的進展。在構(gòu)建和訓練深度學習模型的過程中,深度學習框架扮演著至關(guān)重要的角色。TensorFlowPyTorch是目前最受歡迎的兩大深度
    的頭像 發(fā)表于 07-02 14:04 ?760次閱讀

    阿里成為中國生成式AI初創(chuàng)企業(yè)領(lǐng)先投資者

    阿里巴巴,中國電商巨頭,正憑借其強大的云計算基礎設施,成為中國生成式人工智能初創(chuàng)企業(yè)的主要投資者。該公司為這些初創(chuàng)公司提供稀缺的網(wǎng)絡資源,以
    的頭像 發(fā)表于 05-15 09:29 ?348次閱讀

    新火種AI|Kimi概念股火了,這家估值180億的AI公司什么來頭?

    Sora之后,這一家中國AI獨角獸又掀起了熱潮
    的頭像 發(fā)表于 03-22 18:25 ?1487次閱讀
    新火種<b class='flag-5'>AI</b>|Kimi概念股火了,<b class='flag-5'>這家</b>估值180億的<b class='flag-5'>AI</b>公司什么來頭?

    英偉達擬將收購AI基礎設施虛擬化初創(chuàng)企業(yè)Run:ai

    據(jù)外媒最新報道,英偉達公司正考慮收購一家名為Run:aiAI基礎設施虛擬化初創(chuàng)企業(yè),雙方的交易金額最高可能達到驚人的10億美元。
    的頭像 發(fā)表于 03-22 10:47 ?606次閱讀

    新火種AI|在AI賽道上,這家中國初創(chuàng)總是和OpenAI“不期而遇”

    中美AI之間的差距,沒有想象中的大。
    的頭像 發(fā)表于 03-16 11:13 ?460次閱讀

    微軟攜手法國AI初創(chuàng)企業(yè)Mistral推動AI模型商業(yè)化

    微軟近日與法國人工智能初創(chuàng)企業(yè)Mistral達成合作協(xié)議,旨在推動AI模型的商業(yè)化應用。據(jù)悉,微軟將提供全方位支持,幫助這家成立僅10個月的公司將其先進的
    的頭像 發(fā)表于 02-28 10:23 ?454次閱讀

    李開復初創(chuàng)AI公司擬融資2億美元,估值已超10億美元

    此外,01.AI在11月成功收獲開源領(lǐng)域LLM社區(qū)的認可,其所研發(fā)的Yi-34B模型在Huggingface排行榜排名居首,成為首個登頂?shù)?b class='flag-5'>中國LLM。該平臺依托生成式AI的發(fā)展勢頭,許
    的頭像 發(fā)表于 12-15 09:56 ?502次閱讀

    XLA和PyTorch的鏈接代碼示例

    XLA (Accelerated Linear Algebra)是一個開源的機器學習編譯器,對PyTorch、Tensorflow、JAX等多個深度學習框架都有支持。最初XLA實際上是跟
    的頭像 發(fā)表于 11-17 10:54 ?620次閱讀

    PyTorchTensorFlow的優(yōu)點和缺點

    轉(zhuǎn)載自:冷凍工廠 ? 深度學習框架是簡化人工神經(jīng)網(wǎng)絡 (ANN) 開發(fā)的重要工具,并且其發(fā)展非常迅速。其中,TensorFlowPyTorch 脫穎而出,各自在不同的機器學習領(lǐng)域占有一席之地
    的頭像 發(fā)表于 10-30 09:56 ?929次閱讀
    <b class='flag-5'>PyTorch</b>與<b class='flag-5'>TensorFlow</b>的優(yōu)點和缺點

    PyTorchTensorFlow的區(qū)別分析

    PyTorch是一個開源的深度學習框架,建立于Torch之上,底層為C++,并標榜Python First,強調(diào)其為Python 語言量身打造的,使用上就與Python項目的撰寫并沒有太大的差異,也能夠與Python的套件相整合。
    發(fā)表于 10-27 10:41 ?1399次閱讀
    <b class='flag-5'>PyTorch</b> 與 <b class='flag-5'>TensorFlow</b>的區(qū)別分析