目前,全球正處於「資料大爆炸」時代。隨著 5G 與物聯網的到來,網際網路從過去人與人的連接轉變為所有事物之間的互聯。不僅有大量的連結,以及許許多多由單一節點產生的資料。資料量將迎來新一輪爆炸性成長。再加上近年來視訊平台的興起,加速了資料流量的成長,巨量的資料使得多種場景的資料應用也隨之爆發。
無論是哪種類型的資料,都有從極熱/熱、溫、冷與極冷資料的變更過程。所謂資料的生命週期,不同階段對處理需求也不相同。例如,熱資料處理需要高 IOPS 及低延遲功能。相較之下,冷資料則對IOPS 及延遲需求很低,主要著重在容量上,強調每 GB 成本與長期儲存。
隨著儲存技術的不斷演進,同一資料中心通常會有多個不同效能設定的儲存裝置。在較慢的儲存裝置儲存較少使用的冷資料為常見應用。在目前資料龐大的情況下,自動化資料分層成為最佳作法。Bigtera VirtualStor® Scaler 根據多個儲存資源池,透過自動資料分層技術設定彈性的資料分層解決方案,利用資料的冷熱條件在叢集中自動儲存分層,在不影響資料讀寫效率的情況下,降低使用者資料儲存的成本。
資料分層技術:
VirtualStor Scaler 儲存叢集系統可根據不同的磁碟類型分割多個儲存資源集區,且可提供各種效能的儲存資源集區,滿足不同的應用需求,進而加快資料讀寫速度。個別儲存資源集區的大小可根據需求自由調整,依照不同的資料安全空間,彈性選取複製或刪除程式碼的資料保護。
智慧型資料分層技術:
藉由多重資源集區功能與自動資料分層,VirtualStor Scaler 提供 NAS 或 S3 資料的智慧分層。以S3 物件儲存的資料分層為例,透過不同的儲存類別和生命週期設定儲存媒介,符合條件的冷資料會從速度較快的S3儲存類別,調整至較慢速度的S3 儲存類別。當指定的S3 儲存貯體自動分層後,使用者仍可存取 VirtulStor Scaler 系統的分層物件,系統將協助或根據使用者設定重新導向使用者存取資料,確保資料的可用性。
VirtualStor Scaler還支援判別是熱資料還是冷資料,包含資料存取時間,修正時間或根據特定的名稱前綴。使用者可根據需求設定規則以進行判斷。另外,VirtualStor Scaler深入支援多個 S3 儲存類別,讓使用者能夠更彈性整合並管理現有 S3 物件儲存系統。考慮到設定自動分層很麻煩,在每個Bucket設定自動分層也會增加維護成本。因此VirtualStor Scaler精心提供了「遠端儲存系統資訊範本」功能,方便使用者預先設定各種S3 類型的 Storage 類別,套用設定好的範本即可以輕鬆完成S3自動分層。
對使用者而言,利用儲存分層技術的優勢如下: