大數(shù)據(jù)時代的冷數(shù)據(jù)該怎么處理

大數(shù)據(jù)時代，人們的生活、工作都在數(shù)據(jù)化，時時刻刻都有新的數(shù)據(jù)產(chǎn)生，數(shù)據(jù)正在呈幾何倍數(shù)爆炸式增長。如何存儲、管理和使用這些數(shù)據(jù)，是現(xiàn)代企業(yè)面臨的難題。

Forrester報告顯示，組織中經(jīng)常有多達(dá)73％的數(shù)據(jù)未使用，但很少有數(shù)據(jù)被丟棄。這些組織仍然保留舊的但很少或從未訪問過的數(shù)據(jù)，原因主要是：

新的分析類型，比如長期趨勢分析可能會使這些幾乎被遺忘的數(shù)據(jù)變得必要。

訴訟的可能性，這可能要追溯到幾年前的舊文檔和電子郵件。

這些數(shù)據(jù)可以被稱作“冷數(shù)據(jù)”，顧名思義，冷數(shù)據(jù)即是那些不經(jīng)常訪問、但又無法刪除的信息，比如用戶在社交媒體上存儲的大量信息、企業(yè)備份數(shù)據(jù)、業(yè)務(wù)與操作日志數(shù)據(jù)、話單與統(tǒng)計數(shù)據(jù)等信息。

組織在這方面面臨的挑戰(zhàn)是，如何有效管理此類數(shù)據(jù)的存儲，即使大部分時間組織看不到也用不到這些數(shù)據(jù)。

其中一個問題是，存儲被IT界視為一種商品。存儲很便宜，所以沒有人會考慮在需要的時候訂購更多的磁盤。

但是存儲真的便宜嗎？

帶寬和基礎(chǔ)架構(gòu)成本不斷增長，而這些成本通常需要支持更多存儲（甚至便宜的存儲）以及包含大數(shù)據(jù)的更大文件。更多的存儲空間需要更多的資金用于處理、網(wǎng)絡(luò)和人員等支持資源。與存儲相關(guān)的成本會增加的另一個原因是，保留大型文件的多個版本時災(zāi)難恢復(fù)和備份過程變得復(fù)雜。

結(jié)果是，需要為很少使用或根本不使用的數(shù)據(jù)留出額外的存儲空間，尤其是大數(shù)據(jù)的需要超出了存儲空間的規(guī)模。這增加了總體IT支出。

公司可以采取以下四個方法來有效地管理其冷存儲數(shù)據(jù)。

1、使用便宜但可靠的冷存儲

對于很少使用或存檔的數(shù)據(jù)，慢速硬盤驅(qū)動器和磁帶是最常用的存儲介質(zhì)。重要的是定期測試磁盤和磁帶，以確保它們工作正常。另外，要避免將舊的驅(qū)動器和磁帶降級為歸檔和數(shù)據(jù)備份功能——這些資源仍然有使用壽命，如果它們太舊，則更有可能出現(xiàn)故障。

2.考慮基于云的冷存儲

如果您不想在現(xiàn)場或物理外部設(shè)施中存儲大數(shù)據(jù)，則可以選擇使用云?；谠频睦浯鎯τ泻芏噙x擇，您可能會找到一種存儲所有冷數(shù)據(jù)最合適的選擇。

3.對冷數(shù)據(jù)進(jìn)行年度評估

即使您已經(jīng)有存儲冷數(shù)據(jù)的方法，也并不意味著您應(yīng)該存儲所有數(shù)據(jù)。如果您還沒有，您可以與管理層和法律部門商議確定應(yīng)該保留哪些數(shù)據(jù)、丟棄哪些數(shù)據(jù)，每年評估一次即可。

4. 使用數(shù)據(jù)/存儲自動化

大多數(shù)存儲提供商提供分層的數(shù)據(jù)存儲，這種存儲是通過人工智能實現(xiàn)的。人工智能會采用您定義的存儲數(shù)據(jù)的規(guī)則，并自動應(yīng)用它們來確定數(shù)據(jù)的存儲位置。

數(shù)據(jù)存儲的主要層是內(nèi)存存儲或固態(tài)驅(qū)動器，您經(jīng)常訪問的數(shù)據(jù)存儲就在其中。不常訪問的數(shù)據(jù)可以存儲在更便宜的硬盤存儲的二級數(shù)據(jù)層上。

很少使用的數(shù)據(jù)或冷數(shù)據(jù)將被分配給速度較慢的磁盤驅(qū)動器或磁帶，這些磁盤或磁帶是您最便宜的存儲介質(zhì)。通過利用這種自動化，您可以確保經(jīng)常以最低的成本存儲冷數(shù)據(jù)的同時，始終可以將大量熱數(shù)據(jù)提供給用戶。

結(jié)束語

大多數(shù)大數(shù)據(jù)存儲管理策略的重點(diǎn)是讓用戶隨時可以實時獲得數(shù)據(jù)，但這也增加了存儲和處理的預(yù)算支出。公司可以通過管理很少使用的數(shù)據(jù)來幫助抵消這些較大的支出，這樣就可以以最低的成本存儲這些數(shù)據(jù)。對于這些數(shù)據(jù)，冷存儲是一種安全、可靠、經(jīng)濟(jì)的解決方案。

來源：IT168企業(yè)級