0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Jetson 百萬開發(fā)者故事 | 為了孩子的健康成長,他用 NVIDIA Jetson 做了一個象棋機器人

NVIDIA英偉達 ? 來源:未知 ? 2023-03-28 04:30 ? 次閱讀

文科生是否也可以成為人工智能領(lǐng)域里的創(chuàng)客?答案是肯定的!

素為是一名在司法系統(tǒng)里工作的法律工作者,本科就讀于法律專業(yè)。同時,他還是一名計算機愛好者,作為智能硬件的創(chuàng)客,平時他喜歡用電子硬件做一些有趣的項目。

幾年前,Alpha Go 對戰(zhàn)圍棋大師李世石的畫面令世界贊美人工智能的發(fā)展速度,但是素為卻覺得“這還不夠酷”!Alpha Go 是通過它的研發(fā)者黃士杰來執(zhí)棋的,直播畫面看起來還是兩個人在對弈,怎么能說是人機大戰(zhàn)呢?

“加個機械臂執(zhí)棋,很難嗎?”從那時起,素為就決定要做一個真正的象棋機器人,還向朋友夸下了海口。為了讓正在一天天長大的孩子少看電子屏幕,通過下象棋鍛煉思維能力,素為覺得必須加快制作出真正的象棋機器人。

硬件的選擇和系統(tǒng)框架的搭建

之前素為準(zhǔn)備用 PC 電腦來實現(xiàn)這個想法,后來發(fā)現(xiàn)NVIDIA Jetson Nano開發(fā)套件可為全桌面 Linux 給予開箱即用支持,并且與許多常見的外部設(shè)備和配件兼容,相關(guān)的開發(fā)教程也很豐富。

“這個小小的板子功耗不高,而且樹莓派能做的它基本都能實現(xiàn),關(guān)鍵是還具備 AI 功能,這可以滿足我的需要,”素為表示。

很快,素為就規(guī)劃出了一個系統(tǒng)框架:

1255e446-ccde-11ed-bfe3-dac502259ad0.jpg

素為的目標(biāo)就是要做一款名副其實的“人機對戰(zhàn)”中國象棋機器人。在制作過程中,他以 Jetson Nano 為中控主機,利用其邊緣計算能力,無需聯(lián)網(wǎng)即可實現(xiàn)對棋盤的視覺識別和棋步策略計算,再運用一部 XYZ 三軸滑臺加氣泵吸盤即可挪動棋子,實現(xiàn)真正的“人機對戰(zhàn)”。

使用這個系統(tǒng)進行人機對弈的流程如下:

  1. 人類下一步棋;

  2. 人類點擊 GPIO 按鈕,Jetson Nano 啟動指令;

  3. 棋盤上方的攝像頭對著棋盤拍攝 1 張照片;

  4. 運用 OpenCV 對照片進行四角對齊、裁切邊緣等處理;

  5. 將棋盤部分裁切為 9×10 個小圖片;

  6. 運用事先訓(xùn)練好的圖片分類模型在 Jetson Nano 上進行推理,該模型可分辨 15 種情況(7 種紅方棋子、7 種黑方棋子、無棋子);

  7. 將識別結(jié)果拼接為棋盤狀態(tài),以 FEN 規(guī)范格式進行表達;

  8. 將 FEN 文本傳遞給開源中國象棋引擎 elephantfish,在 Nano 上進行計算,獲取機器決定走的下一步棋;

  9. 生成并執(zhí)行 gcode 指令控制滑臺模組和氣泵,將某個棋子在棋盤上挪動;

  10. 機器執(zhí)行完畢,進入等候狀態(tài),等待人類發(fā)出下一步棋及按鈕指令

從以上流程中,我們可以看到 Nano 作為主控機,除了指揮全過程運轉(zhuǎn),在第 4 至第 8 步驟為圖片預(yù)處理、棋盤識別和計算下棋策略均提供了必不可少的算力。

127465b0-ccde-11ed-bfe3-dac502259ad0.jpg

圖1:步驟4(a)

12995aaa-ccde-11ed-bfe3-dac502259ad0.jpg

圖2步驟4(b

12b5967a-ccde-11ed-bfe3-dac502259ad0.jpg

克服深度學(xué)習(xí)的挑戰(zhàn)

作為一名專業(yè)學(xué)習(xí)法律的文科生,素為表示對深度學(xué)習(xí)其實是一知半解的,“就是能夠把開源代碼 debug 跑起來那種水平?!睘榱税严笃鍣C器人做出來,素為在 Jetson Nano 上先后用 TensorFlow 嘗試了 VGG、ResNet 和 Inception。

“要么調(diào)參數(shù)總是調(diào)不好,要么準(zhǔn)確度不高,”素為說,“曾經(jīng)一度很沮喪?!?/p>

然而,功夫不負(fù)有心人,一個偶然的機會,素為看到 NVIDIA 與百度合作的EasyDL平臺,在該平臺上,可以零代碼訓(xùn)練,并將模型一鍵部署在 NVIDIA Jetson 設(shè)備上。于是素為手工準(zhǔn)備和標(biāo)注了 4000 張訓(xùn)練素材圖片,這些圖片有的清晰,有的模糊,有的用光照亮、有的故意制造陰影,還有不同的旋轉(zhuǎn)角度。之后在此基礎(chǔ)上,對素材圖片進行批量加噪點處理,一共生成了 5 萬張圖片數(shù)據(jù)用于深度學(xué)習(xí)訓(xùn)練。經(jīng)過 EasyDL 的訓(xùn)練,生成了“圖像分類”模型(因為運用場景有限可控,因此該模型不怕過擬合,準(zhǔn)確率 100%),之后一鍵部署在 Jetson Nano 上,再配合素為寫的主代碼(https://gitee.com/lawup/chess-robot.git),象棋機器人終于運轉(zhuǎn)起來了!

成為 Jetson 百萬開發(fā)者一員

開心地看著自己的孩子和老父親與機器鏖戰(zhàn)幾盤,歡聲笑語無疑是這一路艱辛的最好補償!

2022 年年底,素為帶著這個項目,參加了 NVIDIA 舉辦的Jetson Edge AI 開發(fā)者大賽,榮獲特別獎。

很高興能成為 NVIDIA Jetson 百萬開發(fā)者的一員。最關(guān)鍵的是,我是用 NVIDIA Jetson Nano 套件做出來的,而且充分發(fā)揮了 Nano 的性能和效用。不得不說,人生就是這么神奇,雖然我一度都絕望了,但自己夸下的??诰妥约喝崿F(xiàn)!”素為談到這個項目,依舊一臉自豪。

素為用自己的開發(fā)經(jīng)歷對廣大 NVIDIA Jetson 開發(fā)者提出建議:“定下了目標(biāo)就一定要去實現(xiàn)。因為是嵌入式環(huán)境,很多東西需要編譯,這是一個比較漫長的過程,一定要有耐心。在經(jīng)歷反復(fù)的嘗試和漫長的等待后,終于成功的那一刻就會有一種‘山窮水盡疑無路,柳暗花明又一村’的欣喜感,讓你覺得’人間值得’ ?!?/p>


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 英偉達
    +關(guān)注

    關(guān)注

    22

    文章

    3690

    瀏覽量

    90541

原文標(biāo)題:Jetson 百萬開發(fā)者故事 | 為了孩子的健康成長,他用 NVIDIA Jetson 做了一個象棋機器人

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    NVIDIA提供套服務(wù)、模型以及計算平臺 加速人形機器人發(fā)展

    的發(fā)展,NVIDIA 于今日宣布,為全球領(lǐng)先的機器人制造商、AI 模型開發(fā)者和軟件制造商提供套服務(wù)、模型以及計算平臺,以開發(fā)、訓(xùn)練和構(gòu)建下
    的頭像 發(fā)表于 07-31 10:41 ?566次閱讀

    NVIDIA 加速人形機器人發(fā)展

    —SIGGRAPH— 當(dāng)?shù)貢r間 2024 年 7 月 29 日— 為加速全球人形機器人的發(fā)展,NVIDIA 于今日宣布,為全球領(lǐng)先的機器人制造商、AI 模型開發(fā)者和軟件制造商提供
    發(fā)表于 07-30 09:15 ?690次閱讀
    <b class='flag-5'>NVIDIA</b> 加速人形<b class='flag-5'>機器人</b>發(fā)展

    全球機器人開發(fā)領(lǐng)域采用NVIDIA 機器人開發(fā)和生產(chǎn)

    機器人開發(fā)領(lǐng)域的領(lǐng)先企業(yè)正在采用NVIDIA Isaac機器人平臺來研究、開發(fā)和生產(chǎn)下代 AI
    的頭像 發(fā)表于 06-03 18:25 ?1133次閱讀

    NVIDIA將全球數(shù)百萬開發(fā)者轉(zhuǎn)變?yōu)樯墒?AI 開發(fā)者

    ,開發(fā)者能夠輕松地為 copilots、聊天機器人等構(gòu)建生成式 AI 應(yīng)用,所需時間從數(shù)周縮短至幾分鐘。 NVIDIA 創(chuàng)始
    的頭像 發(fā)表于 06-03 18:21 ?951次閱讀

    NVIDIA NIM 革命性地改變模型部署,將全球數(shù)百萬開發(fā)者轉(zhuǎn)變?yōu)樯墒?AI 開發(fā)者

    部署在云、數(shù)據(jù)中心或工作站上。借助 NVIDIA NIM,開發(fā)者能夠輕松地為 copilots、聊天機器人等構(gòu)建生成式 AI 應(yīng)用,所需時間從
    發(fā)表于 06-03 09:12 ?198次閱讀
    <b class='flag-5'>NVIDIA</b> NIM 革命性地改變模型部署,將全球數(shù)<b class='flag-5'>百萬</b><b class='flag-5'>開發(fā)者</b>轉(zhuǎn)變?yōu)樯墒?AI <b class='flag-5'>開發(fā)者</b>

    Nvidia Jetson Nano + CYW55573/AWXB327MA-PUR M.2無法使用操作系統(tǒng)內(nèi)置的網(wǎng)絡(luò)管理器管理Wi-Fi如何解決?

    我們使用的是 Nvidia Jetson Nano + CYW55573/AWXB327MA-PUR M.2 ,請參閱 Nvidia Jetson 與英飛凌 AIROC Wi-Fi 6
    發(fā)表于 05-23 06:47

    FPGA模擬MIPI相機接入Jetson方案

    視覺相機是機器智能/自動化的關(guān)鍵,NVIDIA Jetson支持多個合作伙伴的Camera,這些相機包括USB、以太網(wǎng)、MIPI等接口的相機。
    的頭像 發(fā)表于 01-04 09:51 ?2069次閱讀
    FPGA模擬MIPI相機接入<b class='flag-5'>Jetson</b>方案

    使用 NVIDIA Isaac 仿真并定位 Husky 機器人

    由 Clearpath Robotics 公司開發(fā)的 Husky 機器人多功能的四輪平臺,可用于室內(nèi)和室外研究。其改裝非常簡單,只需添加其他傳感器和更改高級電路板即可。本文將介紹
    的頭像 發(fā)表于 12-26 18:05 ?1118次閱讀
    使用 <b class='flag-5'>NVIDIA</b> Isaac 仿真并定位 Husky <b class='flag-5'>機器人</b>

    有獎?wù)魑牡?b class='flag-5'>一彈 | 攜手百萬開發(fā)者 共創(chuàng) AI 新未來

    攜手百萬開發(fā)者,共創(chuàng) AI 新未來 NVIDIA 百萬中國開發(fā)者故事有獎?wù)魑?活動已于 12 月
    的頭像 發(fā)表于 12-22 17:15 ?322次閱讀
    有獎?wù)魑牡?b class='flag-5'>一</b>彈 | 攜手<b class='flag-5'>百萬</b><b class='flag-5'>開發(fā)者</b> 共創(chuàng) AI 新未來

    有獎?wù)魑?| NVIDIA 攜手中國百萬開發(fā)者共創(chuàng) AI 美好未來

    科技生態(tài)的建設(shè)與成熟, 都需要歷經(jīng)時間的醞釀和發(fā)酵。 只有當(dāng)生態(tài)中的“細(xì)胞”都活躍起來時, 所構(gòu)筑的生態(tài)才能步步走向繁榮, 也才能不斷結(jié)出新的果實, 甚至孕育出新的物種。 而開發(fā)者
    的頭像 發(fā)表于 12-14 16:35 ?304次閱讀

    NVIDIA Jetson 的嵌入式系統(tǒng)AI應(yīng)用

    在這個平臺上可以使用多個不同的芯片 ,案例的主角是AIMobile AIM Edge Ncox,款基于NVIDIA Jetson Orin NX的小型被動冷卻嵌入式系統(tǒng)。該系統(tǒng)具有6-8
    發(fā)表于 12-11 17:37 ?482次閱讀

    NVIDIA再出手!加速開發(fā)邊緣AI應(yīng)用,迎接生成式AI新紀(jì)元

    NVIDIA 近日宣布,對適用于邊緣 AI 和機器人NVIDIA Jetson 平臺上的兩框架進行大規(guī)模擴展。
    的頭像 發(fā)表于 11-23 17:31 ?990次閱讀
    <b class='flag-5'>NVIDIA</b>再出手!加速<b class='flag-5'>開發(fā)</b>邊緣AI應(yīng)用,迎接生成式AI新紀(jì)元

    在線研討會 | 在 Jetson 上使用 Metropolis API 和微服務(wù)加速邊緣人工智能開發(fā)

    ? API 和微服務(wù)集合具備強大功能,能夠幫助開發(fā)者們加快在 NVIDIA Jetson 平臺上開發(fā)和部署視覺 AI 的速度,使用時從數(shù)年縮短到數(shù)月。 在本次研討會中,您將了解到: M
    的頭像 發(fā)表于 11-10 17:35 ?246次閱讀
    在線研討會 | 在 <b class='flag-5'>Jetson</b> 上使用 Metropolis API 和微服務(wù)加速邊緣人工智能<b class='flag-5'>開發(fā)</b>

    利用 NVIDIA Jetson 實現(xiàn)生成式 AI

    近日,NVIDIA 發(fā)布了 Jetson 生成式 AI 實驗室(Jetson Generative AI Lab),使開發(fā)者能夠通過 NVIDIA
    的頭像 發(fā)表于 11-07 21:25 ?863次閱讀
    利用 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Jetson</b> 實現(xiàn)生成式 AI

    Banana Pi為何選擇rk3588開發(fā)Jetson Nano引腳兼容的嵌入式產(chǎn)品

    引言: 當(dāng)Banana PI&armsom決定采用RK3588芯片開發(fā)款與Jetson Nano引腳兼容的產(chǎn)品時,這意味著次重要的技術(shù)決策,為
    發(fā)表于 11-02 12:30