0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

嵌入式如何與AI相結(jié)合,什么是端側(cè)AI~

朱老師物聯(lián)網(wǎng)大講堂 ? 2023-06-21 17:28 ? 次閱讀

什么叫端測AI

這個問題搞清楚之前,大家必須要去了解我們整個計算機行業(yè)的一個系統(tǒng)架構(gòu),它的發(fā)展方向是云·邊·端協(xié)同,也就是未來各行各業(yè),不管做啥的,與計算機行業(yè)相關(guān)的這種硬件和軟件架構(gòu),它都會往這個方向去發(fā)展,所謂的云邊端協(xié)同。那么是怎么個云邊端協(xié)同法呢?首先我們要知道這幾個關(guān)鍵字的意思,云就是云計算,邊就是邊緣計算,端就是設(shè)備端。設(shè)備端一般就是拿在用戶手里的、放在用戶桌子上的、裝在用戶家里面的、其實就是跟用戶直接相關(guān)的這一端,我們叫端;邊是邊緣計算,那什么叫邊緣計算,這個其實很好理解,譬如說裝在你們小區(qū)里面的、裝在你們公司那棟樓里面的,對于你來說,這就叫邊緣計算;所以其實就是:云端指的是離你很遠的設(shè)備,邊緣端就是離你很近的云端,端呢就是你自己的設(shè)備,所以云邊端加起來就構(gòu)成了我們整個的計算機架構(gòu)。所以呢,在未來你開發(fā)硬件的時候,你開發(fā)的要么就是云端的硬件,要么就是邊緣端的硬件,要么就是設(shè)備端,就所謂的端測的硬件。那么你開發(fā)軟件也是一樣,要么就是云端的軟件,要么就是邊緣端的軟件,要么就是設(shè)備端的軟件。

那么AI也是一樣,我們把AI這種技術(shù)應(yīng)用在云端和邊緣計算端和設(shè)備端,那么就構(gòu)成了所謂的云端AI,邊緣計算的AI以及設(shè)備端的AI,所以端測AI,其實指的就是設(shè)備端的AI。那我們作為嵌入式工程師為什么需要關(guān)注端側(cè)AI而不是云端的AI和邊緣的端的AI呢?這個是有原因的,首先第一個云端的AI呢,就是類似于那種像這個“小度小度”這類東西?比如說像這個“小度”音箱,它的實現(xiàn)原理,其實就是你在這邊說的話,它這個音箱其實是一個錄音設(shè)備,把你說的話呢錄下來,然后把你這段語音直接傳到百度的服務(wù)器上去,所以音箱本身是不會做語音識別的,那百度的云服務(wù)器端有一個模型,就在那里做這個語言的一個處理和語言的識別,識別出來之后把結(jié)果再回傳到音響,所以呢,像這種“小度”音箱的這種產(chǎn)品,它其實就是典型的云端智能,就是云端AI,那這種產(chǎn)品跟我們嵌入式有關(guān)系嗎?其實關(guān)系并不大,因為一個普通的音箱跟一個“小度”音箱這種智能音箱幾乎沒有區(qū)別,你可以認為,因為它的AI并不在設(shè)備端,嵌入式端根本就不需要AI設(shè)備,所以說呢,云端AI跟嵌入式開發(fā)幾乎沒有關(guān)系,所以云端AI不該我們管。那么邊緣計算的AI跟我們有關(guān)系嗎?有,因為邊緣計算,還是有那么一點嵌入式開發(fā)在的,但是目前來說,邊緣計算這個東西還是概念比較多,實際落地的非常少,而且邊緣計算本身還在發(fā)展當(dāng)中。根據(jù)目前邊緣計算的最新技術(shù)發(fā)展方向,實際上將來是更像云端,而不太像設(shè)備端,也就是說邊緣端其實就是一個簡化的云端,你可以理解為就是一個簡化的本地處理過的云端。所以呢,邊緣計算一方面是當(dāng)前用的很少,幾乎沒什么落地,另一方面來說呢,它跟云端更像,所以我們作為嵌入式工程師就沒必要碰它。

那對于我們嵌入式開發(fā)者來說,AI跟我們關(guān)系最大的是什么?那就是所謂的設(shè)備端的AI,也就是我們所謂的端測AI,那端側(cè)AI的概念就是整個的AI的過程全部是發(fā)生在設(shè)備端的。舉個例子,比如說我現(xiàn)在做一個人臉識別,我的設(shè)備端攝像頭負責(zé)拍照,拍完照之后把圖像傳給我設(shè)備端的CPU,然后設(shè)備端這邊的硬件和軟件負責(zé)調(diào)用AI做數(shù)據(jù)處理,進而來做人臉識別,最后把結(jié)果在我的設(shè)備端展示出來,進行開鎖、報警等動作執(zhí)行。整個AI的過程都在設(shè)備端,根本就不會去連接云,也不會去連接邊緣,這樣來做有兩個最大的好處,第一個好處就是速度快,不用聯(lián)網(wǎng)就不受網(wǎng)絡(luò)的限制,所以速度快。第二個好處就是因為不用聯(lián)網(wǎng)所以低功耗。第三個最重要的一點就是隱私問題,不會把照片等私密數(shù)據(jù)上傳云端,現(xiàn)場拍現(xiàn)場用,用完之后銷毀,這樣是比較安全的。所以說基于這三個原因,當(dāng)然還有別的一些原因,端測AI實際上在未來的應(yīng)用是很廣泛的,而且端測AI本身跟嵌入式開發(fā)的關(guān)系非常大,那咱們做嵌入式開發(fā)的,就需要去關(guān)心端測AI,去搞端側(cè)AI,去掌握這方面的技術(shù),成為一個可以結(jié)合AI人工智能技術(shù)的更有發(fā)展的一名嵌入式軟件工程師。再額外介紹一點,目前國內(nèi)外,在端側(cè)AI方向上有所建樹的企業(yè)和芯片廠商有:ST(NanoEdgeAIStudio、CubeAI)、NXPMCU:imxRT10xx、MPU+linuximx8、imx9352)、聆思(科大訊飛的芯片公司),英偉達,谷歌以及我們熟悉的ARM,我們需要做的就是從最簡單的端側(cè)AI項目開始,嘗試讓自己去熟悉和去體會端側(cè)AI相關(guān)的嵌入式項目開發(fā),逐步尋找新技術(shù)形態(tài)和新技術(shù)方向上的更多機會,并尋求進一步發(fā)展。

所以今天給大家推薦我們第一個端側(cè)AI方向的性價比超高的企業(yè)級實戰(zhàn)項目~

讓大家用非常低的成本來接觸AI人工智能開發(fā),做自己第一個端側(cè)AI項目。

03c9c00c-1016-11ee-a579-dac502259ad0.gif

03d6277a-1016-11ee-a579-dac502259ad0.png03df9a58-1016-11ee-a579-dac502259ad0.png

項目名稱:端側(cè)AI異常振動檢測

第一視角做項目

項目介紹

本項目使用STM32單片機和三軸加速度傳感器,實現(xiàn)了一個異常振動檢測功能,該產(chǎn)品可用于風(fēng)扇、水泵、工業(yè)電機等產(chǎn)品的預(yù)測性維護場景,譬如將本項目實現(xiàn)的模塊固定在工業(yè)風(fēng)扇上,當(dāng)風(fēng)扇出現(xiàn)異常(如風(fēng)葉變形、風(fēng)路阻擋、形變導(dǎo)致的剮蹭等)時該模塊可實時發(fā)現(xiàn)并報警。


適合人群

有一些單片機和C語言基礎(chǔ),對做實戰(zhàn)項目感興趣,對積累項目經(jīng)驗感興趣,對嵌入式項目規(guī)劃和管理感興趣,想要學(xué)會如何實戰(zhàn)做項目的人。

項目核心技術(shù)

1.AI人工智能:機器學(xué)習(xí)、深度學(xué)習(xí)、監(jiān)督學(xué)習(xí)、分類學(xué)習(xí)、數(shù)據(jù)集、訓(xùn)練、模型2.端側(cè)AI:端側(cè)AI理論、ST端側(cè)AI解決方案、NanoEdgeAIStudio工具3.AI項目開發(fā)技能:數(shù)據(jù)收集、算法選取和模型訓(xùn)練、項目集成4.STM32技術(shù)棧:STM32CubeMX、HAL庫開發(fā)、Keil MDK5.常用外設(shè):三軸加速度傳感器

  • 學(xué)完收益(可以體現(xiàn)在簡歷中的核心內(nèi)容)

1.快速掌握帶AI功能的單片機項目的典型流程和代碼實戰(zhàn)。2.深度理解AI相關(guān)的重要概念,將概念和實戰(zhàn)項目中的操作對應(yīng)起來。3.全面了解ST的端側(cè)AI解決方案體系,尤其是NanoEdgeAIStudio工具的設(shè)計理論和項目使用。4.掌握典型的AI項目完整研發(fā)落地流程,從數(shù)據(jù)收集到模型訓(xùn)練,最后到項目集成,完成功能并交付。5.深度理解三軸加速度傳感器,并掌握實戰(zhàn)開發(fā)和驅(qū)動移植適配。6.系統(tǒng)掌握STM32嵌入式開發(fā)完整流程,從硬件設(shè)計到軟件設(shè)計、代碼實戰(zhàn)、調(diào)試技巧等。

項目硬件

項目所需硬件自購(提供推薦購買鏈接)

主體模塊:

①STM32L432KCU6 MCU

② LIS3DSH 三軸高分辨率 加速度計傳感器模塊

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 嵌入式
    +關(guān)注

    關(guān)注

    5052

    文章

    18912

    瀏覽量

    300796
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    29383

    瀏覽量

    267668
收藏 人收藏

    評論

    相關(guān)推薦

    AMD分析嵌入式邊緣AI的發(fā)展

    隨著人工智能( AI )技術(shù)廣泛應(yīng)用于各行各業(yè),從云到邊緣的解決方案逐漸成為信息技術(shù)領(lǐng)域新的熱點。嵌入式邊緣 AI 在當(dāng)今的各種邊緣應(yīng)用中能夠大幅提升作業(yè)人員的生產(chǎn)力,帶動整個 AI
    的頭像 發(fā)表于 09-18 09:30 ?202次閱讀
    AMD分析<b class='flag-5'>嵌入式</b>邊緣<b class='flag-5'>AI</b>的發(fā)展

    開啟全新AI時代 智能嵌入式系統(tǒng)快速發(fā)展——“第六屆國產(chǎn)嵌入式操作系統(tǒng)技術(shù)與產(chǎn)業(yè)發(fā)展論壇”圓滿結(jié)束

    嵌入式系統(tǒng)是電子信息產(chǎn)業(yè)的基礎(chǔ),是智能系統(tǒng)的核心。大模型催生AI走入千家萬戶、喚醒側(cè)AI的需求爆發(fā)。以機器人、無人駕駛和智能制造為代表的智
    發(fā)表于 08-30 17:24

    恩智浦加速嵌入式AI創(chuàng)新應(yīng)用開發(fā)

    AI應(yīng)用飛速發(fā)展的今天,如何能夠?qū)?b class='flag-5'>AI與嵌入式系統(tǒng)開發(fā)有機結(jié)合起來,營造新的開發(fā)生態(tài),打造與眾不同的創(chuàng)新用例,一直是嵌入式開發(fā)者追求的目標
    的頭像 發(fā)表于 08-27 09:46 ?736次閱讀

    廣和通側(cè)AI解決方案驅(qū)動性能密集型場景商用型場景商用

    2024世界機器人大會期間,廣和通宣布:基于高通QCS8550平臺的廣和通側(cè)AI解決方案高效使能性能密集型場景。該側(cè)
    的頭像 發(fā)表于 08-23 16:05 ?554次閱讀
    廣和通<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>解決方案驅(qū)動性能密集型場景商用型場景商用

    AI普及給嵌入式設(shè)計人員帶來新挑戰(zhàn)

    探討了人工智能(AI)的普及給嵌入式設(shè)計人員帶來的新挑戰(zhàn)。在創(chuàng)建“邊緣機器學(xué)習(xí)(ML)”應(yīng)用時,設(shè)計人員必須確保其能有效運行,同時最大限度地降低處理器和存儲開銷,以及物聯(lián)網(wǎng)(IoT)設(shè)備的功耗
    發(fā)表于 08-22 14:20 ?600次閱讀
    <b class='flag-5'>AI</b>普及給<b class='flag-5'>嵌入式</b>設(shè)計人員帶來新挑戰(zhàn)

    嵌入式軟件開發(fā)與AI整合

    嵌入式軟件開發(fā)與AI整合是當(dāng)前技術(shù)發(fā)展的重要趨勢之一。隨著人工智能技術(shù)的快速發(fā)展,嵌入式系統(tǒng)越來越多地集成了AI算法,以實現(xiàn)更復(fù)雜的智能功能。以下是關(guān)于
    的頭像 發(fā)表于 07-31 09:25 ?570次閱讀
    <b class='flag-5'>嵌入式</b>軟件開發(fā)與<b class='flag-5'>AI</b>整合

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲解決方案

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲解決方案
    的頭像 發(fā)表于 06-26 18:13 ?777次閱讀

    芯原AI技術(shù)研討會:引領(lǐng)嵌入式AI新潮流

    在2024年上海國際嵌入式展的熱烈氛圍中,芯原股份以其前瞻性的技術(shù)視角和豐富的產(chǎn)品線布局,吸引了眾多業(yè)界目光。此次展會期間,芯原股份舉辦了一場以“從云到AI觸手可及”為主題的AI
    的頭像 發(fā)表于 06-15 14:53 ?652次閱讀

    AI引爆邊緣計算變革,塑造嵌入式產(chǎn)業(yè)新未來AI引爆邊緣計算變革,塑造嵌入式產(chǎn)業(yè)新未來——2024研華嵌入式

    中國北京,2024年5月30日?- 2024年研華嵌入式產(chǎn)業(yè)合作伙伴會議在北京·中關(guān)村皇冠假日酒店成功舉辦,現(xiàn)場參會嘉賓逾300人。會議以“AI引爆邊緣計算變革,塑造嵌入式產(chǎn)業(yè)新未來”為主題展開
    發(fā)表于 05-31 13:53 ?237次閱讀
    <b class='flag-5'>AI</b>引爆邊緣計算變革,塑造<b class='flag-5'>嵌入式</b>產(chǎn)業(yè)新未來<b class='flag-5'>AI</b>引爆邊緣計算變革,塑造<b class='flag-5'>嵌入式</b>產(chǎn)業(yè)新未來——2024研華<b class='flag-5'>嵌入式</b>

    AI與開源力推嵌入式系統(tǒng)創(chuàng)新升級

    AMD在此次展會上宣布擴大AMD Versal?自適應(yīng)片上系統(tǒng)(SoC)產(chǎn)品線,推出全新第二代Versal AI Edge和Versal Prime系列自適應(yīng)SoC。該系列將預(yù)處理、AI推理和后處理集成于單一器件中,為AI驅(qū)動的
    的頭像 發(fā)表于 04-29 11:11 ?425次閱讀

    五項功能可提升邊緣嵌入式AI性能

    AI 驅(qū)動型系統(tǒng)正催生指數(shù)級算力需求,使得在緊湊的空間和功率限制內(nèi)設(shè)計嵌入式應(yīng)用變得更具挑戰(zhàn)性。
    的頭像 發(fā)表于 04-24 10:06 ?484次閱讀

    AMD Versal SoC刷新邊緣AI性能,單芯片方案驅(qū)動嵌入式系統(tǒng)

    與后處理集成于單器件中,能夠為 AI 驅(qū)動型嵌入式系統(tǒng)提供加速。 AI驅(qū)動型嵌入式系統(tǒng)的三
    的頭像 發(fā)表于 04-11 09:06 ?3608次閱讀
    AMD Versal SoC刷新邊緣<b class='flag-5'>AI</b>性能,單芯片方案驅(qū)動<b class='flag-5'>嵌入式</b>系統(tǒng)

    AMD推出第二代Versal器件,為AI驅(qū)動型嵌入式系統(tǒng)提供加速

    Versal AI Edge 系列和第二代 Versal Prime 系列自適應(yīng) SoC,其將預(yù)處理、AI 推理與后處理集成于單器件中,能夠為 AI 驅(qū)動型嵌入式系統(tǒng)提供
    的頭像 發(fā)表于 04-10 10:25 ?1038次閱讀

    AMD Versal SoC全新升級邊緣AI性能,單芯片方案驅(qū)動嵌入式系統(tǒng)

    與后處理集成于單器件中,能夠為 AI 驅(qū)動型嵌入式系統(tǒng)提供加速。 ? AI驅(qū)動型嵌入式系統(tǒng)
    的頭像 發(fā)表于 04-09 21:32 ?932次閱讀
    AMD Versal SoC全新升級邊緣<b class='flag-5'>AI</b>性能,單芯片方案驅(qū)動<b class='flag-5'>嵌入式</b>系統(tǒng)

    榮耀引領(lǐng)側(cè)AI新時代

    在今年的MWC盛會上,榮耀宣布與高通、Meta攜手,將70億參數(shù)大模型引入側(cè),這一創(chuàng)新舉措預(yù)示著側(cè)AI新時代的到來。榮耀終端CEO趙明在
    的頭像 發(fā)表于 03-01 10:28 ?521次閱讀