0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

存儲(chǔ)三部曲的第一部——NAS

SSDFans ? 來源:ssdfans ? 作者:ssdfans ? 2020-12-03 14:11 ? 次閱讀

目前數(shù)據(jù)存儲(chǔ)的形態(tài),主要就是SAN、NAS和OBJ這三種。作為存儲(chǔ)三部曲的第一部,先來說說我最喜歡的NAS。

NAS(Network Attached Storage),網(wǎng)絡(luò)附加存儲(chǔ)。簡(jiǎn)單的說,NAS就是一個(gè)專業(yè)的網(wǎng)絡(luò)文件系統(tǒng)。

NAS的主要場(chǎng)景與分類:

主要用于應(yīng)用系統(tǒng)存儲(chǔ)非結(jié)構(gòu)化數(shù)據(jù)(文檔、圖片、語音、視頻等),不僅是為了存儲(chǔ),更是為了共享。在應(yīng)用負(fù)載均衡架構(gòu)下,更能體現(xiàn)出一種簡(jiǎn)約。

關(guān)于數(shù)據(jù)中心級(jí)的NAS產(chǎn)品,主要分為商用和開源兩個(gè)技術(shù)陣營(yíng)。

商用:主要是NetApp的FAS、EMC的Isilon,還有新的Qumulo

開源:主要是Ceph和Gluster兩個(gè)社區(qū)項(xiàng)目

NAS的使用經(jīng)驗(yàn)與教訓(xùn):

產(chǎn)品,就像人一樣有故事。我有個(gè)朋友,就跟我講過一個(gè)他和NetApp“小故事”。

早些年,朋友還是個(gè)無知少年的時(shí)候,在展會(huì)上看到NetApp,不知道是干啥的,回來就開始學(xué)習(xí)了解,感覺技術(shù)很不錯(cuò),再后來還就真有機(jī)會(huì)引入了NetApp的NAS解決方案,用于支撐辦公類文件存儲(chǔ)。

只是沒想到在最后存儲(chǔ)割接過程中發(fā)生了嚴(yán)重的性能瓶頸。費(fèi)了半天勁定位到問題,是因?yàn)橐粋€(gè)文件目錄里存了254萬多個(gè)“垃圾”文件,算是文件存儲(chǔ)規(guī)劃踩了產(chǎn)品技術(shù)限制的雷。

因?yàn)镹AS是基于文件系統(tǒng)的,所以受制于文件系統(tǒng)特性,使用NAS支撐非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)時(shí),特別是對(duì)于海量小文件的情況,一定要提前做好相應(yīng)的存儲(chǔ)目錄層次設(shè)計(jì),最好有4-5層的目錄深度,日期就是很重要的維度,最終目的就是為了控制單一目錄中的文件數(shù)目,降低系統(tǒng)開銷。

要深刻認(rèn)識(shí)到碼農(nóng)的技術(shù)局限性,尤其是對(duì)于IT基礎(chǔ)架構(gòu),可以說幾乎沒有經(jīng)驗(yàn),必須建立開發(fā)對(duì)于數(shù)據(jù)存儲(chǔ)目錄的設(shè)計(jì)規(guī)范,反復(fù)宣導(dǎo),定期排查,否則,搞不好哪天就會(huì)在NAS上長(zhǎng)出一個(gè)瘤,運(yùn)氣不好還會(huì)癌變。

分布式NAS的現(xiàn)狀與對(duì)比:

再說說開源,隨著互聯(lián)網(wǎng)的飛速發(fā)展,傳統(tǒng)的NAS在并發(fā),擴(kuò)展和容量上無法支撐互聯(lián)網(wǎng)業(yè)務(wù)模式。所以,后來BAT們都通過自研的方式解決了他們于非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)支持,而這一切的改變都要?dú)w功于亞馬遜的S3,這一點(diǎn)留到下一次再細(xì)說。

其實(shí)早期的商業(yè)產(chǎn)品也有過Scale-Out NAS的嘗試,但缺少分布式和互聯(lián)網(wǎng)的基因。但隨著開源技術(shù)的發(fā)展,分布式的NAS的出現(xiàn)也是必然。

關(guān)于分布式NAS,恰巧我有個(gè)客戶正在做相關(guān)測(cè)試,順便問了問情況。

關(guān)于Ceph的CephFS,各方認(rèn)為都不成熟,無法用于生產(chǎn),客戶不考慮測(cè)試。

客戶對(duì)Gluster比較感興趣,測(cè)試后感覺還不錯(cuò),但目前不支持?jǐn)?shù)據(jù)分層。

Ceph和Gluster的背后都有Redhat和IBM的身影,再算上GPFS,產(chǎn)品有重疊。

考慮到支持國(guó)貨,客戶還測(cè)了一款叫OpenFS的軟件,并與Gluster做了對(duì)比。

OpenFS,是國(guó)產(chǎn)存儲(chǔ)公司宏杉科技基于Gluster做的SDS(Software Define Storage,軟件定義存儲(chǔ))產(chǎn)品,并針對(duì)元數(shù)據(jù)(metadata)和存儲(chǔ)塊(brick)的存儲(chǔ)做了優(yōu)化和改進(jìn),因此相比傳統(tǒng)的Gluster,OpenFS的讀寫性能提升了不少。

對(duì)于國(guó)產(chǎn),還是有要給于足夠的寬容和耐心,如果你有一點(diǎn)點(diǎn)心動(dòng),有一點(diǎn)點(diǎn)風(fēng)控,可以嘗試一下國(guó)產(chǎn)分布式NAS。

要說客戶的常規(guī)需求,傳統(tǒng)的NAS設(shè)備都能解決,而且還有豐富的功能和完善的容災(zāi)解決方案。但是如果不是分布式的,估計(jì)大概率會(huì)被鄙視。為了能站在鄙視鏈的頂端,我這個(gè)客戶特意對(duì)分布式NAS做了些學(xué)習(xí)研究,僅供參考。

當(dāng)下,正處于一個(gè)基于X86的分布式時(shí)代。科技進(jìn)步會(huì)演進(jìn)掉一些產(chǎn)品,但市場(chǎng)才是檢驗(yàn)產(chǎn)品的試金石。目前看,企業(yè)內(nèi)部的IT基礎(chǔ)架構(gòu)中還是離不開NAS,至于商業(yè)和開源,那就是仁者見仁,智者見智的事情了。而所謂的鄙視鏈,只不過是個(gè)怪圈,這一點(diǎn),友商們最清楚不過了!

原文標(biāo)題:存儲(chǔ)三部曲:誰將站在NAS鄙視鏈的頂端?

文章出處:【微信公眾號(hào):ssdfans】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 存儲(chǔ)器
    +關(guān)注

    關(guān)注

    38

    文章

    7402

    瀏覽量

    163387
  • NAS
    NAS
    +關(guān)注

    關(guān)注

    11

    文章

    276

    瀏覽量

    112310

原文標(biāo)題:存儲(chǔ)三部曲:誰將站在NAS鄙視鏈的頂端?

文章出處:【微信號(hào):SSDFans,微信公眾號(hào):SSDFans】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    0.5mm層疊封裝應(yīng)用處理器的PCB設(shè)計(jì)指南,第一部

    電子發(fā)燒友網(wǎng)站提供《0.5mm層疊封裝應(yīng)用處理器的PCB設(shè)計(jì)指南,第一部分.pdf》資料免費(fèi)下載
    發(fā)表于 10-14 11:15 ?0次下載
    0.5mm層疊封裝應(yīng)用處理器的PCB設(shè)計(jì)指南,<b class='flag-5'>第一部</b>分

    實(shí)際的正弦波震蕩電路主要由哪三部分組成

    實(shí)際的正弦波振蕩電路主要由以下三部分組成,盡管有時(shí)在更詳細(xì)的描述中可能會(huì)提及四分(包括穩(wěn)幅環(huán)節(jié)),但以下三部分是構(gòu)成正弦波振蕩電路的核心: 放大電路 : 放大電路是振蕩電路的核心部分,負(fù)責(zé)提供足夠
    的頭像 發(fā)表于 10-09 16:59 ?181次閱讀

    0.4毫米層疊封裝(PoP)的PCB設(shè)計(jì)指南,第一部

    電子發(fā)燒友網(wǎng)站提供《0.4毫米層疊封裝(PoP)的PCB設(shè)計(jì)指南,第一部分.pdf》資料免費(fèi)下載
    發(fā)表于 09-19 11:00 ?0次下載
    0.4毫米層疊封裝(PoP)的PCB設(shè)計(jì)指南,<b class='flag-5'>第一部</b>分

    學(xué)習(xí)hypervisor嵌入式產(chǎn)品安全設(shè)計(jì)

    第一部分(第1~2章)介紹Hypervisor基礎(chǔ),涵蓋虛擬化技術(shù)與實(shí)現(xiàn)、主流的嵌入式Hypervisor產(chǎn)品,以及基于分離內(nèi)核的嵌入式Hypervisor等內(nèi)容。第二分(第3~12章)介紹嵌入式
    發(fā)表于 08-25 09:11

    EPSON(愛普生)獲得高頻輸出的方法(第一部:鎖相環(huán)電路)

    EPSON(愛普生)獲得高頻輸出的方法(第一部:鎖相環(huán)電路)
    的頭像 發(fā)表于 06-20 10:42 ?368次閱讀
    EPSON(愛普生)獲得高頻輸出的方法(<b class='flag-5'>第一部</b>:鎖相環(huán)電路)

    三部:信號(hào)、電路與系統(tǒng)新說課程啟動(dòng)

    出合理的系統(tǒng),者缺不可。 但是,無論是課堂、上還是工作中,甚至是書籍里,并沒有相關(guān)的內(nèi)容,導(dǎo)致同學(xué)們難以入門 模擬電路,因此看海親自創(chuàng)作了 《運(yùn)放秘籍》第三部:信號(hào)電路與系統(tǒng)新說! 計(jì)劃目錄如下: ?
    的頭像 發(fā)表于 04-07 08:41 ?442次閱讀
    第<b class='flag-5'>三部</b>:信號(hào)、電路與系統(tǒng)新說課程啟動(dòng)

    智慧能源管理三部曲

    智慧能源管理系統(tǒng)項(xiàng)目旨在實(shí)現(xiàn)能源級(jí)監(jiān)測(cè)(設(shè)備級(jí))的實(shí)際需求,幫助企業(yè)實(shí)現(xiàn)能源的在線監(jiān)測(cè)、精細(xì)化管理、能耗追蹤和預(yù)測(cè)以及智能運(yùn)檢等目標(biāo)。在雙碳背景政策的推動(dòng)下,重點(diǎn)用能單位的能耗在線監(jiān)測(cè)系統(tǒng)建設(shè)得到了進(jìn)步的加強(qiáng)。
    的頭像 發(fā)表于 12-28 10:28 ?288次閱讀
    智慧能源管理<b class='flag-5'>三部曲</b>

    智慧能源管理三部曲

    第一步:完善計(jì)量體系,對(duì)電、水、汽等耗用情況進(jìn)行采集。改造或新增計(jì)量表計(jì),并與現(xiàn)有MES、SCADA、DCS、ERP等系統(tǒng)進(jìn)行對(duì)接,實(shí)現(xiàn)能耗數(shù)據(jù)共享與對(duì)接。
    的頭像 發(fā)表于 12-13 16:37 ?457次閱讀

    差分驅(qū)動(dòng)ADC 第一部

    電子發(fā)燒友網(wǎng)站提供《差分驅(qū)動(dòng)ADC 第一部分.pdf》資料免費(fèi)下載
    發(fā)表于 11-23 16:36 ?0次下載
    差分驅(qū)動(dòng)ADC <b class='flag-5'>第一部</b>分

    使用Σ-Δ轉(zhuǎn)換器——第一部

    電子發(fā)燒友網(wǎng)站提供《使用Σ-Δ轉(zhuǎn)換器——第一部分.pdf》資料免費(fèi)下載
    發(fā)表于 11-23 14:31 ?0次下載
    使用Σ-Δ轉(zhuǎn)換器——<b class='flag-5'>第一部</b>分

    用于高頻接收器和發(fā)射器的鎖相環(huán)——第一部

    電子發(fā)燒友網(wǎng)站提供《用于高頻接收器和發(fā)射器的鎖相環(huán)——第一部分.pdf》資料免費(fèi)下載
    發(fā)表于 11-23 10:32 ?0次下載
    用于高頻接收器和發(fā)射器的鎖相環(huán)——<b class='flag-5'>第一部</b>分

    用于高頻接收器和發(fā)射器的鎖相環(huán)——第三部

    電子發(fā)燒友網(wǎng)站提供《用于高頻接收器和發(fā)射器的鎖相環(huán)——第三部分.pdf》資料免費(fèi)下載
    發(fā)表于 11-23 10:18 ?0次下載
    用于高頻接收器和發(fā)射器的鎖相環(huán)——第<b class='flag-5'>三部</b>分

    學(xué)習(xí)如何使用萬用表第一部

    電路萬用表
    油潑辣子
    發(fā)布于 :2023年11月18日 11:44:52

    智能手機(jī)鏡頭模組設(shè)計(jì)的挑戰(zhàn)

    本文是 3 篇系列文章的一部分,該系列文章將討論智能手機(jī)鏡頭模組設(shè)計(jì)的挑戰(zhàn),從概念、設(shè)計(jì)到制造和結(jié)構(gòu)變形的分析。本文是三部分系列的第一部分,將專注于OpticStudio中鏡頭模組的設(shè)計(jì)、分析和可制造性評(píng)估。后續(xù)文章我們也將陸續(xù)
    的頭像 發(fā)表于 11-13 14:52 ?831次閱讀
    智能手機(jī)鏡頭模組設(shè)計(jì)的挑戰(zhàn)

    更換電機(jī)后需要做哪些優(yōu)化?

    電機(jī)優(yōu)化三部曲進(jìn)行靜態(tài)計(jì)算、靜態(tài)優(yōu)化和動(dòng)態(tài)優(yōu)化。另外當(dāng)更換電機(jī)后,上電前需要從變頻器輸出端脫開給電機(jī)做絕緣測(cè)試,這個(gè)是很有必要的。
    發(fā)表于 11-07 07:35