波音噴氣發(fā)動機每運行 30 分鐘，就會產(chǎn)生 10 TB 的數(shù)據(jù)。那是 1 萬億字節(jié)，或相當于美國國會圖書館整個印刷館藏的數(shù)字化等價物。將其乘以每天在美國上空推動超過 87，000 次航班的噴氣發(fā)動機數(shù)量，您就會獲得大量數(shù)據(jù)。

盡管一些人猜測大數(shù)據(jù)不會轉(zhuǎn)化為分析療法，但它仍然與物聯(lián)網(wǎng) （IoT） 密不可分。如果思科等公司的預(yù)測是正確的，那么到 2020 年，我們將有大約 500 億個支持互聯(lián)網(wǎng)的“事物”不斷地啁啾，雖然它們可能不會都在噴氣發(fā)動機剪輯上生成數(shù)據(jù)，但這絕對構(gòu)成了數(shù)據(jù)海嘯。

那么，我們將如何處理所有這些數(shù)據(jù)？收獲的信息必須在某種程度上具有價值，否則它一開始就不會被收獲。另一方面，并??非所有數(shù)據(jù)都是平等的。收集到的絕大多數(shù)數(shù)據(jù)可能會被存檔和遺忘，直到偶爾報告需要它，訪問一次或兩次，然后再次被遺忘。根據(jù) Enterprise Strategy Group 的研究，這種“不經(jīng)常訪問”的信息（也稱為第 3 層或“冷”數(shù)據(jù)）占記錄數(shù)據(jù)的 80%。而且，盡管這些年來內(nèi)存的平均成本急劇下降，但在大數(shù)據(jù)規(guī)模上，每 GB 幾美分的成本可以很快加起來。

這種信息過載的明顯答案是冷數(shù)據(jù)存儲替代方案，它們比用于定期訪問的數(shù)據(jù)更便宜且容量更大。因此，公司通常選擇以下兩種解決方案之一：歷史悠久的磁帶庫，或者最近的云。

磁帶庫已經(jīng)使用了幾十年，非常適合以極低的成本存儲大量數(shù)據(jù)。它們也可以被認為是“綠色的”，因為磁帶驅(qū)動器僅在使用時旋轉(zhuǎn)（這可以節(jié)省電力），并且位于內(nèi)部可以相對快速地訪問冷數(shù)據(jù)。然而，磁帶庫也有一些缺點，包括大中型存儲系統(tǒng)的前期費用高昂、遠程訪問困難、磁帶退化的可能性以及在單個現(xiàn)場位置維護檔案的漏洞。而不是“數(shù)據(jù)海嘯”想想“數(shù)據(jù)”和“海嘯”）。

公司探索云存儲的可能性，通過提供無限的存儲空間、低成本以及防止盜竊、自然災(zāi)害等的遠程容量，彌補了磁帶庫的一些疑慮。然而，云解決方案的主要特點是檢索數(shù)據(jù)通常非常耗時，并且可能會變得昂貴，具體取決于檢索的數(shù)據(jù)量。例如，Amazon Glacier 之類的服務(wù)至少需要 3-5 小時來檢索數(shù)據(jù)集（可在 24 小時內(nèi)下載），如果在給定的數(shù)據(jù)中檢索到超過 5% 的數(shù)據(jù)，則按千兆字節(jié)收費月。

兩者的交叉點似乎會有所改進，并包含優(yōu)化訪問的硬件和軟件元素，同時確保每 GB 存儲的成本盡可能低。

冷藏：冰上的大數(shù)據(jù)

軟件定義存儲 （SDS） 是一個新術(shù)語，但從技術(shù)角度來看，它類似于軟件定義網(wǎng)絡(luò) （SDN），因為硬件邏輯被抽象為管理存儲基礎(chǔ)設(shè)施的軟件層。從本質(zhì)上講，這意味著可以虛擬化存儲功能或服務(wù)（如重復(fù)數(shù)據(jù)刪除、復(fù)制、快照和精簡配置），從而實現(xiàn)在商用硬件上運行的融合存儲架構(gòu)。因此，可以實施具有成本效益的存儲策略，將磁帶庫的可訪問性和效率與云的可擴展性和遠程功能相結(jié)合。

例如，由 Storiant 提供支持的 RGS Cold Storage 是針對第 3 層數(shù)據(jù)的本地存儲解決方案，它基于 Avnet， Inc. 的業(yè)務(wù)部門 RGS 的現(xiàn)成硬件。機柜級設(shè)備與 60 個提供 PB 級容量的 HDD 托架完全集成，并利用基于 OpenZFS 的 Storiant 軟件（以前稱為 SageCloud）與私有云接口。Storiant 數(shù)據(jù)管理軟件還提高了訪問性能，將處于停滯狀態(tài)的數(shù)據(jù)的檢索時間縮短至 30 秒，同時允許 HDD 在不使用時減速以顯著降低功耗。可擴展的 RGS 冷存儲架構(gòu)每月每 GB 存儲 0.01 美元，針對大多數(shù)大數(shù)據(jù)部署進行了成本優(yōu)化。

雖然 SDS 等存儲管理技術(shù)有助于為有價值的業(yè)務(wù)分析奠定基礎(chǔ)，但它們還確保財務(wù)和計算資源可用于定期執(zhí)行的“第 1 層”數(shù)據(jù)。在一個過多的信息實際上會變成一件壞事的環(huán)境中，將其中的一些信息保持在深度凍結(jié)狀態(tài)是很重要的。

審核編輯：郭婷