0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

ChatGPT和OPEN AI的現(xiàn)有困局和可預(yù)見的未來(lái)

jh18616091022 ? 來(lái)源:AIOT大數(shù)據(jù) ? 2023-03-10 11:44 ? 次閱讀

近日AMD掌門人蘇女士表示,隨著以ChatGPT為代表的大語(yǔ)言模型(LLM)逐漸流行,AI模型的參數(shù)量指數(shù)級(jí)上升,而相應(yīng)地對(duì)于計(jì)算芯片和內(nèi)存的需求也在快速提升,但是目前芯片的效率并不足以滿足模型的需求。根據(jù)目前計(jì)算效率每?jī)赡晏嵘?.2倍的規(guī)律,預(yù)計(jì)到2035年,一個(gè)超級(jí)計(jì)算機(jī)需要的功率可達(dá)500mW,相當(dāng)于半個(gè)核電站能產(chǎn)生的功率。

這不由讓人想起空氣幣的操作,為了從網(wǎng)上“挖礦”,大量的GPU礦機(jī)一起運(yùn)行,同樣需要大量的電力來(lái)維持,高峰時(shí)期曾有空氣幣公司把一個(gè)國(guó)家一半的電力給消耗掉。

與空氣幣不停的生產(chǎn)區(qū)塊鏈碎末又不停的在網(wǎng)上搜索區(qū)塊鏈碎末并拼湊區(qū)塊類似,大語(yǔ)言模型(LLM)也是通過(guò)在網(wǎng)上搜索大量的數(shù)據(jù),并依賴數(shù)據(jù)的關(guān)聯(lián)性,拼湊出輸入端描述的“語(yǔ)言畫像”。

如ChatGPT 是由 OpenAI 研發(fā)的一種語(yǔ)言 AI 模型,使用海量語(yǔ)料庫(kù)來(lái)生成與人類相 似的反應(yīng)。ChatGPT 是基于 GPT(generativef pretrained’ transformer)架構(gòu)搭建的, 主要用深度學(xué)習(xí)來(lái)生成連貫且具有意義的文字。這個(gè)模型使用了來(lái)自于網(wǎng)站、書本和社交媒體的海量文字?jǐn)?shù)據(jù),因此也為 ChatGPT 在保證準(zhǔn)確性和細(xì)節(jié)的同時(shí),提供了廣泛 的對(duì)話反饋。對(duì)話反饋是 ChatGPT 的核心功能之一,也使它成為了實(shí)現(xiàn)聊天機(jī)器人或 其他對(duì)話型 AI 的理想技術(shù)。

除對(duì)話功能外,ChatGPT 也具有實(shí)現(xiàn)各類語(yǔ)言相關(guān)任務(wù)的能力,包括文章精煉、翻譯以及情緒分析等。以上各類語(yǔ)言能力在大規(guī)模的訓(xùn)練數(shù)據(jù)和升讀學(xué)習(xí)架構(gòu)下,使 ChatGPT 成為目前應(yīng)用最為先進(jìn)的語(yǔ)言模型之一。總體上,ChatGPT 標(biāo)志著自然語(yǔ)言處理(NLP)和對(duì)話 AI 領(lǐng)域的一大步,其高質(zhì)量文字產(chǎn)出能力在商業(yè)、研究和開發(fā)活動(dòng)中提高用戶體驗(yàn)的方向上非常有應(yīng)用價(jià)值的。

不過(guò)很多人忽略了一個(gè)問(wèn)題,就是類似的大語(yǔ)言模型(LLM)在運(yùn)行過(guò)程中,同時(shí)也在不斷的生成各種垃圾數(shù)據(jù),大語(yǔ)言模型(LLM)只是把符合輸入端的數(shù)據(jù)給呈現(xiàn)出來(lái)了,但運(yùn)行過(guò)程中產(chǎn)生的各種數(shù)據(jù)片斷,和一些并不怎么“正確”的數(shù)據(jù),甚至完全是大語(yǔ)言模型(LLM)自己生產(chǎn)出來(lái)的無(wú)效垃圾數(shù)據(jù)等數(shù)據(jù)量,也將在網(wǎng)絡(luò)上大量生成,并塞爆各種服務(wù)器的存儲(chǔ)器和用戶端存儲(chǔ)器。

另外,每一個(gè)大語(yǔ)言模型(LLM)的計(jì)算機(jī),都會(huì)因?yàn)榇罅繉?duì)抗訓(xùn)練和獎(jiǎng)勵(lì)訓(xùn)練生產(chǎn)出很多“數(shù)字籬笆”,各個(gè)“數(shù)字籬笆”為了提高自己的效率,也會(huì)生成很多有自己“審查監(jiān)管標(biāo)識(shí)”影子數(shù)據(jù),很有可能造成整個(gè)網(wǎng)絡(luò)的數(shù)據(jù)不停在的每一個(gè)超級(jí)計(jì)算機(jī)的服務(wù)器里重復(fù)備份。而大語(yǔ)言模型(LLM)的這個(gè)特性,在網(wǎng)絡(luò)資源消耗上,要比空氣幣惡劣得多。

因此,未來(lái)誰(shuí)來(lái)審核大語(yǔ)言模型(LLM)結(jié)果與現(xiàn)實(shí)之間的相容性,形成大語(yǔ)言模型(LLM)生產(chǎn)的有毒數(shù)據(jù)進(jìn)行篩查,并形成網(wǎng)絡(luò)免疫機(jī)制,同時(shí)控制大語(yǔ)言模型(LLM)的數(shù)據(jù)復(fù)制權(quán)限與數(shù)據(jù)生產(chǎn)權(quán)限,避免大語(yǔ)言模型(LLM)在網(wǎng)絡(luò)上自動(dòng)生產(chǎn)海量的數(shù)據(jù)導(dǎo)致網(wǎng)絡(luò)資源耗盡,將會(huì)是一個(gè)很大的課題。

目前一個(gè)類似ChatGPT的模型運(yùn)行軟件包只有25G左右,大部分智能終端都可以安裝運(yùn)行,并不一定需要高大上的數(shù)據(jù)中心或服務(wù)器才可以安裝ChatGPT之類運(yùn)行軟件,因此大語(yǔ)言模型(LLM)的網(wǎng)絡(luò)生存條件其實(shí)十分低。

雖然在普能智能終端上運(yùn)行大語(yǔ)言模型(LLM)速度會(huì)大受影響,但最大的好處是不用因?yàn)椤氨O(jiān)管”只能生成“缺陷數(shù)據(jù)模型”,對(duì)于有大語(yǔ)言模型(LLM)輔助需求的個(gè)人或企業(yè)來(lái)講,裝載一個(gè)自己私有的大語(yǔ)言模型(LLM),并從網(wǎng)上“慢慢”搜索并生成對(duì)自己真正有用的“結(jié)果畫像”,將是一個(gè)很難阻擋的趁勢(shì)。

那么,最后又只能回到之前的情況,只有大力整頓各個(gè)服務(wù)器的內(nèi)容端,并且不斷的加強(qiáng)“網(wǎng)警”巡查,甚至像現(xiàn)在歐盟提出的一樣收“數(shù)字稅”,誰(shuí)要使用網(wǎng)絡(luò)上的數(shù)據(jù),或上傳數(shù)據(jù)到網(wǎng)上,不但要先申請(qǐng)審查,而且還要為流量交稅才可以獲得大語(yǔ)言模型(LLM)在網(wǎng)絡(luò)上的運(yùn)行權(quán)。

因此大語(yǔ)言模型(LLM)最終還是會(huì)推動(dòng)整個(gè)網(wǎng)絡(luò)透明化,所有在線終端的數(shù)據(jù)都是公開免費(fèi),這樣才能去掉大語(yǔ)言模型(LLM)的復(fù)制功能,只有瀏覽提取分析的功能,并且還不能把數(shù)據(jù)隨便上傳到網(wǎng)絡(luò),各個(gè)終端自己負(fù)責(zé)自己內(nèi)容與現(xiàn)實(shí)生活的相容性審查,重回開放自由精神的原始網(wǎng)絡(luò)數(shù)據(jù)世界。

而這個(gè)原始網(wǎng)絡(luò)數(shù)據(jù)世界,最終就進(jìn)化成了人類現(xiàn)實(shí)世界的“數(shù)字孿生虛擬世界”,這個(gè)虛擬世界生成后,里面的虛擬數(shù)字警察才有機(jī)會(huì)管理各自自己的虛擬區(qū)域,而且能管理到的,也是整個(gè)世界極少的一部分。

形象點(diǎn)說(shuō),每個(gè)人在“數(shù)字孿生虛擬世界”的對(duì)應(yīng)身份,都是一個(gè)類似大語(yǔ)言模型(LLM)程序,而整個(gè)“數(shù)字孿生虛擬世界”相當(dāng)于一個(gè)“數(shù)字詞?!惫ぞ撸沂且粋€(gè)公共工具,每個(gè)大語(yǔ)言模型(LLM)程序要使用這個(gè)工具時(shí)就去“借閱”,然后生產(chǎn)自己需要的“私有數(shù)據(jù)”,并且不能把這個(gè)“私有數(shù)據(jù)”留在“數(shù)字孿生虛擬世界”里對(duì)“數(shù)字孿生虛擬世界”進(jìn)行污染,只有通過(guò)一定審核的“私有數(shù)據(jù)”才能存在于“數(shù)字孿生虛擬世界”里。

而要走到那一步,目前看起來(lái),并不太容易。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    29475

    瀏覽量

    267807
  • 聊天機(jī)器人
    +關(guān)注

    關(guān)注

    0

    文章

    329

    瀏覽量

    12273
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1536

    瀏覽量

    7290

原文標(biāo)題:ChatGPT和OPEN AI的現(xiàn)有困局和可預(yù)見的未來(lái)

文章出處:【微信號(hào):AIOT大數(shù)據(jù),微信公眾號(hào):AIOT大數(shù)據(jù)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    ChatGPT背后的AI背景、技術(shù)門道和商業(yè)應(yīng)用

    ,但是當(dāng)一篇篇文章/報(bào)告不斷推送到我的眼前,我后知后覺地發(fā)現(xiàn)這次真的不一樣。 很直接的一點(diǎn)是,ChatGPT已經(jīng)影響到非AI、非互聯(lián)網(wǎng)、非計(jì)算機(jī)的每一個(gè)人了。 你會(huì)看到,眾多科技界大佬,馬斯克、納德拉、李開復(fù)、李彥宏、周鴻祎等,都在發(fā)聲稱
    的頭像 發(fā)表于 10-18 15:42 ?1569次閱讀
    <b class='flag-5'>ChatGPT</b>背后的<b class='flag-5'>AI</b>背景、技術(shù)門道和商業(yè)應(yīng)用

    NVIDIA預(yù)見AI技術(shù)賦能電網(wǎng)革新

    NVIDIA 首席執(zhí)行官黃仁勛在愛迪生電氣研究所的演講中表示,生成式 AI 這一新的工業(yè)革命正在改變公用事業(yè)及該領(lǐng)域客戶的未來(lái)。
    的頭像 發(fā)表于 09-09 09:27 ?373次閱讀

    EVASH Ultra EEPROM:助力ChatGPTAI應(yīng)用的嵌入式存儲(chǔ)解決方案

    EVASH Ultra EEPROM:助力ChatGPTAI應(yīng)用的嵌入式存儲(chǔ)解決方案
    的頭像 發(fā)表于 06-26 18:13 ?790次閱讀

    微軟CEO納德拉:全力押注AI未來(lái)

    微軟首席執(zhí)行官納德拉在AI領(lǐng)域的布局引人注目。在與ChatGPT背后的OpenAI建立合作關(guān)系后,他更是將微軟的未來(lái)AI的潛在發(fā)展緊密相連。然而,這位執(zhí)掌微軟十年的領(lǐng)導(dǎo)者并未止步于此
    的頭像 發(fā)表于 06-17 17:11 ?552次閱讀

    名單公布!【書籍評(píng)測(cè)活動(dòng)NO.34】大語(yǔ)言模型應(yīng)用指南:以ChatGPT為起點(diǎn),從入門到精通的AI實(shí)踐教程

    之后,讓我們來(lái) 展望一下大語(yǔ)言模型的未來(lái) 。在這里,我們將進(jìn)行簡(jiǎn)單的預(yù)測(cè)。 在應(yīng)用層面,我們可以預(yù)見應(yīng)用將沿著無(wú)狀態(tài)、有狀態(tài),以及具備自主決策能力的趨勢(shì)不斷演化。自主 Agent 系統(tǒng)將成
    發(fā)表于 06-03 11:39

    OpenAI 深夜拋出王炸 “ChatGPT- 4o”, “她” 來(lái)了

    增強(qiáng) OpenAI仍然致力于擴(kuò)大其技術(shù)的獲取范圍: · 免費(fèi)用戶的訪問(wèn)性 :確保初創(chuàng)企業(yè)和個(gè)人可以利用最先進(jìn)的人工智能,而無(wú)需初始投資。 · 改進(jìn)的API功能 :提供更好的與現(xiàn)有系統(tǒng)的集成以及增強(qiáng)
    發(fā)表于 05-27 15:43

    在FPGA設(shè)計(jì)中是否可以應(yīng)用ChatGPT生成想要的程序呢

    當(dāng)下AI人工智能崛起,很多開發(fā)領(lǐng)域都可看到ChatGPT的身影,F(xiàn)PGA設(shè)計(jì)中,是否也可以用ChatGPT輔助設(shè)計(jì)呢?
    發(fā)表于 03-28 23:41

    Open RAN的未來(lái)及其對(duì)AT&amp;T的意義

    3月14日消息,在“Connected America 2024”會(huì)議上,AT&T高級(jí)副總裁兼網(wǎng)絡(luò)首席技術(shù)官Yigal Elbaz討論了Open RAN 的未來(lái)及其對(duì)AT&T的意義。
    的頭像 發(fā)表于 03-14 14:40 ?615次閱讀

    【國(guó)產(chǎn)FPGA+OMAPL138開發(fā)板體驗(yàn)】(原創(chuàng))6.FPGA連接ChatGPT 4

    訪問(wèn)ChatGPT 4這樣的AI模型是非常復(fù)雜的,因?yàn)檫@涉及到大量的數(shù)據(jù)傳輸、協(xié)議實(shí)現(xiàn)、并行處理、優(yōu)化等等。更重要的是,ChatGPT 4這樣的模型通常是運(yùn)行在強(qiáng)大的服務(wù)器集群上。不過(guò),我可以寫一個(gè)非常
    發(fā)表于 02-14 21:58

    【先楫HPM5361EVK開發(fā)板試用體驗(yàn)】(原創(chuàng))5.手把手實(shí)戰(zhàn)AI機(jī)械臂

    HPM5361EVK開發(fā)板。現(xiàn)在開始設(shè)計(jì)實(shí)戰(zhàn)AI機(jī)械臂的程序。 代碼結(jié)構(gòu) 由于編寫一個(gè)完整的用先楫HPM5361EVK開發(fā)板控制三組四自由度機(jī)械臂,并加入紅外線傳感器、機(jī)器視覺和ChatGPT連接
    發(fā)表于 02-06 10:28

    2024年預(yù)見的藍(lán)牙技術(shù)發(fā)展趨勢(shì)

    近期,Silicon Labs(亦稱“芯科科技”)負(fù)責(zé)藍(lán)牙技術(shù)的高級(jí)產(chǎn)品經(jīng)理Parker Dorris先生參與藍(lán)牙技術(shù)聯(lián)盟(Bluetooth SIG)的會(huì)員訪談,就2024年預(yù)見的藍(lán)牙技術(shù)發(fā)展趨勢(shì)進(jìn)行了討論,包括電子貨架標(biāo)簽(ESL)、高精度距離測(cè)量(HADM)、藍(lán)牙
    的頭像 發(fā)表于 01-08 17:27 ?1315次閱讀

    驅(qū)動(dòng) AI未來(lái)

    人工智能(AI) 性能的新突破,掀起了一場(chǎng)未來(lái)強(qiáng)大數(shù)據(jù)中心的競(jìng)賽。隨著 AI 應(yīng)用的復(fù)雜性不斷提高,以及對(duì)計(jì)算的需求呈指數(shù)級(jí)增長(zhǎng), 電源 可能決定著哪些數(shù)據(jù)中心提升到更高一級(jí)的處理水
    的頭像 發(fā)表于 12-07 15:10 ?302次閱讀

    ChatGPT原理 ChatGPT模型訓(xùn)練 chatgpt注冊(cè)流程相關(guān)簡(jiǎn)介

    ChatGPT注冊(cè)沒有外國(guó)手機(jī)號(hào)驗(yàn)證怎么辦? ChatGPT作為近期火爆網(wǎng)絡(luò)的AI項(xiàng)目,受到了前所未有的關(guān)注。我們可以與AI機(jī)器人實(shí)時(shí)聊天,獲得問(wèn)題的答案。但受
    的頭像 發(fā)表于 12-06 16:28 ?791次閱讀
    <b class='flag-5'>ChatGPT</b>原理 <b class='flag-5'>ChatGPT</b>模型訓(xùn)練 <b class='flag-5'>chatgpt</b>注冊(cè)流程相關(guān)簡(jiǎn)介

    【嵌入式AI簡(jiǎn)報(bào)20231117期】面對(duì)未來(lái)AI的三大挑戰(zhàn)!

    AI 簡(jiǎn)報(bào) 20231117期 1.面對(duì)未來(lái)AI:三大挑戰(zhàn) 當(dāng)AIChatGPT在2022年末突然嶄露頭角時(shí),不僅展現(xiàn)了
    的頭像 發(fā)表于 11-17 21:10 ?797次閱讀
    【嵌入式<b class='flag-5'>AI</b>簡(jiǎn)報(bào)20231117期】面對(duì)<b class='flag-5'>未來(lái)</b><b class='flag-5'>AI</b>的三大挑戰(zhàn)!

    微軟內(nèi)部禁止員工使用ChatGPT

    近期消息報(bào)道,微軟內(nèi)部禁止員工使用OpenAI產(chǎn)品ChatGPT。最新的微軟內(nèi)部網(wǎng)站消息顯示,:“出于安全和數(shù)據(jù)方面的考慮,許多AI工具不再供員工使用?!?/div>
    的頭像 發(fā)表于 11-10 15:39 ?844次閱讀