電子發(fā)燒友App

硬聲App

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示
創(chuàng)作
電子發(fā)燒友網(wǎng)>電子資料下載>電子資料>Milvus向量數(shù)據(jù)庫

Milvus向量數(shù)據(jù)庫

2022-06-21 | zip | 18.02 MB | 次下載 | 2積分

資料介紹

授權(quán)協(xié)議 Apache
開發(fā)語言 Java C/C++ Python Google Go
軟件類型 開源軟件
所屬分類 程序開發(fā)索引

軟件簡介

Milvus 向量數(shù)據(jù)庫能夠幫助用戶輕松應(yīng)對海量非結(jié)構(gòu)化數(shù)據(jù)(圖片/視頻/語音/文本)檢索。單節(jié)點(diǎn) Milvus 可以在秒內(nèi)完成十億級的向量搜索(請參考:在線教程),分布式架構(gòu)亦能滿足用戶的水平擴(kuò)展需求。

Milvus 向量數(shù)據(jù)庫的應(yīng)用場景包括:互聯(lián)網(wǎng)娛樂(圖片搜索/視頻搜索)、新零售(以圖搜商品)、智慧金融(用戶認(rèn)證)和智能物流(車輛識別)等領(lǐng)域。

希望?Milvus 向量數(shù)據(jù)庫能幫助更多的用戶應(yīng)對非結(jié)構(gòu)數(shù)據(jù)和AI帶來的機(jī)遇與挑戰(zhàn)。

數(shù)據(jù)智能的挑戰(zhàn)

隨著信息化技術(shù)的不斷進(jìn)步,人們正經(jīng)歷爆炸式的數(shù)據(jù)增長。非結(jié)構(gòu)數(shù)據(jù)(如圖片、視頻、語音和文字)比傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)增長更快,數(shù)據(jù)量更大。之所以稱其為非結(jié)構(gòu)數(shù)據(jù),是因?yàn)檫@些數(shù)據(jù)無法以傳統(tǒng)方式進(jìn)行處理與價值挖掘。如何從非結(jié)構(gòu)數(shù)據(jù)中提取有價值的內(nèi)容與信息,已經(jīng)逐漸成為企業(yè)進(jìn)一步挖掘數(shù)據(jù)價值的關(guān)鍵。

pYYBAGKn8euAJvenAAGCrJ5_IdU247.jpg

深度學(xué)習(xí)目前被認(rèn)為是最有效的非結(jié)構(gòu)數(shù)據(jù)處理方式之一。非結(jié)構(gòu)數(shù)據(jù)經(jīng)過深度學(xué)習(xí)模型的處理,會被向量化。于是,海量非結(jié)構(gòu)數(shù)據(jù)的分析處理被轉(zhuǎn)化為對海量向量的近似搜索。雖然處理圖片,視頻,語音和文字的深度學(xué)習(xí)模型各不相同,但最終的向量處理需求卻是相同的。因此,向量數(shù)據(jù)庫是 AI 應(yīng)用的基石之一。

Milvus,開源 AI 基礎(chǔ)組件

pYYBAGKn8e2AHOsSAAJQ1TnfwW4809.jpg

Milvus 是一個開源的分布式向量數(shù)據(jù)庫。Milvus 數(shù)據(jù)庫不但集成了業(yè)界成熟的向量相似度搜索技術(shù),更在此基礎(chǔ)上對高性能計(jì)算框架進(jìn)行了大幅度優(yōu)化。Milvus 為 AI 應(yīng)用開發(fā)者帶來了如下價值:

高性能

Milvus 數(shù)據(jù)庫為海量向量搜索場景而設(shè)計(jì)。Milvus 不但集成了業(yè)界成熟的向量搜索技術(shù)如 Faiss 和 SPTAG,Milvus 也實(shí)現(xiàn)了高效的 NSG 圖索引。同時,Milvus 團(tuán)隊(duì)針對 Faiss IVF 索引進(jìn)行了深度優(yōu)化,實(shí)現(xiàn)了 CPU 與多 GPU 的融合計(jì)算,大幅提高了向量搜索性能。Milvus 數(shù)據(jù)庫可以在單機(jī)環(huán)境下完成 SIFT1b 十億級向量搜索任務(wù)。

更多信息請參考 GitHub 文檔:https://github.com/milvus-io/bootcamp/blob/master/docs/milvus101/hardware_platform.md

智能索引

針對不同應(yīng)用場景,Milvus 數(shù)據(jù)庫提供多種向量相似度計(jì)算方式和索引類型。Milvus 數(shù)據(jù)庫目前支持主流的歐式距離、點(diǎn)積、余弦相似度(未來 Milvus 數(shù)據(jù)庫會集成更多的相似度計(jì)算方式)。同時,Milvus 數(shù)據(jù)庫提供適用于 n:N 查詢的量化索引,適用于 1:N 查詢的圖索引或樹圖混合索引。

Milvus 索引類型:

  • IVF:Faiss IVF(CPU計(jì)算,或GPU計(jì)算),Milvus 深度優(yōu)化的IVF(CPU/GPU混合計(jì)算)
  • Graph:Milvus 數(shù)據(jù)庫實(shí)現(xiàn)的 NSG 索引
  • Tree & Graph:集成微軟 SPTAG
  • IVF & Graph:Milvus 實(shí)現(xiàn)中

易于開發(fā)

Milvus 數(shù)據(jù)庫為用戶提供向量數(shù)據(jù)管理服務(wù),以及集成的應(yīng)用開發(fā) SDK(Java/Python/C++/RESTful API)。相比直接調(diào)用 Faiss 和 SPTAG 那樣的程序庫,Milvus 數(shù)據(jù)庫上的應(yīng)用開發(fā)更便捷,數(shù)據(jù)管理更簡單。

計(jì)算成本可控

Milvus 數(shù)據(jù)庫不僅提供傳統(tǒng)的 CPU 計(jì)算方案,通過引入 GPU 等高算力 ASIC,Milvus 數(shù)據(jù)庫可以有效降低大規(guī)模向量搜索所需的硬件規(guī)模,從而降低系統(tǒng)的成本。

應(yīng)用場景廣泛

Milvus 向量數(shù)據(jù)庫可以對接包括圖片識別,視頻處理,聲音識別,自然語言處理等深度學(xué)習(xí)模型。為向量化后的非結(jié)構(gòu)數(shù)據(jù)提供搜索分析服務(wù)。

歡迎加入Milvus社區(qū)

  • 主頁:?milvus.io
  • Github:github.com/milvus-io/milvus
  • 知乎:?zhuanlan.zhihu.com/milvus
  • Slack:?milvusio.slack.com
  • Twitter:twitter.com/milvusio
  • Facebook:www.facebook.com/io.milvus.5
?

下載該資料的人也在下載 下載該資料的人還在閱讀
更多 >

評論

查看更多

下載排行

本周

  1. 1山景DSP芯片AP8248A2數(shù)據(jù)手冊
  2. 1.06 MB  |  532次下載  |  免費(fèi)
  3. 2RK3399完整板原理圖(支持平板,盒子VR)
  4. 3.28 MB  |  339次下載  |  免費(fèi)
  5. 3TC358743XBG評估板參考手冊
  6. 1.36 MB  |  330次下載  |  免費(fèi)
  7. 4DFM軟件使用教程
  8. 0.84 MB  |  295次下載  |  免費(fèi)
  9. 5元宇宙深度解析—未來的未來-風(fēng)口還是泡沫
  10. 6.40 MB  |  227次下載  |  免費(fèi)
  11. 6迪文DGUS開發(fā)指南
  12. 31.67 MB  |  194次下載  |  免費(fèi)
  13. 7元宇宙底層硬件系列報告
  14. 13.42 MB  |  182次下載  |  免費(fèi)
  15. 8FP5207XR-G1中文應(yīng)用手冊
  16. 1.09 MB  |  178次下載  |  免費(fèi)

本月

  1. 1OrCAD10.5下載OrCAD10.5中文版軟件
  2. 0.00 MB  |  234315次下載  |  免費(fèi)
  3. 2555集成電路應(yīng)用800例(新編版)
  4. 0.00 MB  |  33566次下載  |  免費(fèi)
  5. 3接口電路圖大全
  6. 未知  |  30323次下載  |  免費(fèi)
  7. 4開關(guān)電源設(shè)計(jì)實(shí)例指南
  8. 未知  |  21549次下載  |  免費(fèi)
  9. 5電氣工程師手冊免費(fèi)下載(新編第二版pdf電子書)
  10. 0.00 MB  |  15349次下載  |  免費(fèi)
  11. 6數(shù)字電路基礎(chǔ)pdf(下載)
  12. 未知  |  13750次下載  |  免費(fèi)
  13. 7電子制作實(shí)例集錦 下載
  14. 未知  |  8113次下載  |  免費(fèi)
  15. 8《LED驅(qū)動電路設(shè)計(jì)》 溫德爾著
  16. 0.00 MB  |  6656次下載  |  免費(fèi)

總榜

  1. 1matlab軟件下載入口
  2. 未知  |  935054次下載  |  免費(fèi)
  3. 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
  4. 78.1 MB  |  537798次下載  |  免費(fèi)
  5. 3MATLAB 7.1 下載 (含軟件介紹)
  6. 未知  |  420027次下載  |  免費(fèi)
  7. 4OrCAD10.5下載OrCAD10.5中文版軟件
  8. 0.00 MB  |  234315次下載  |  免費(fèi)
  9. 5Altium DXP2002下載入口
  10. 未知  |  233046次下載  |  免費(fèi)
  11. 6電路仿真軟件multisim 10.0免費(fèi)下載
  12. 340992  |  191187次下載  |  免費(fèi)
  13. 7十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
  14. 158M  |  183279次下載  |  免費(fèi)
  15. 8proe5.0野火版下載(中文版免費(fèi)下載)
  16. 未知  |  138040次下載  |  免費(fèi)