選單

隨時隨地更好地協作:使用Amazon FSx for NetApp ONTAP進行資料緩存

目錄

分享本頁

Yifat Perry
Yifat Perry

當今不斷擴大的數據資產和遠端工作的分散式團隊已經改變了對數據的需求。無論資料託管在何處,快速檢索資料並在不同環境中對共享資料集進行有效協作至關重要。

這種資料分佈對於協調來說可能是一場噩夢,資料完整性、不相容性和效能問題都會造成困難。組織需要找到方法來加速資料存取並促進資料敏捷性和協作,而不會面臨這些挑戰。

NetApp和 AWS 合作提供解決方案:使用Amazon FSx for NetApp ONTAP 。這篇文章探討了 FSx for ONTAP的資料快取功能,它有助於解決處理全球分散資料的挑戰。

請繼續閱讀以了解完整詳細信息,或使用這些連結跳至您感興趣的部分:

分散式資料的複雜挑戰

分散式資料為組織帶來了一些需要克服的挑戰:

  • 數據整合。當資料分散在不同位置時,您需要整合來自不同來源的資料。如果您無法將數據連貫地視為單一檔案系統,那麼您就無法有效地讀取和寫入數據,或者分析數據以從中獲取任何有意義的商業價值。
  • 多個命名空間。不同來源的資料之間缺乏一致的命名空間,這增加了額外的複雜性。為了一致地存取和使用數據,您需要統一不同的命名約定和結構,但這個過程可能需要大量的努力。
  • 性能下降。讓所有使用者都可以使用資料可能會很困難,而且在此過程中效能也不會下降。使用者距離資料集越遠,他們遇到的延遲就越大。

    您需要在低延遲存取、優化頻寬和成本之間取得良好的平衡。在不同環境和地區創建數據孤島並不是解決方案,儘管它可以讓本地用戶更快地存取數據,但卻會導致同步問題。
  • 資料複製。跨多個環境複製的資料需要保持一致且最新。最大的風險是複製過程中可能出現差異,這會導致資料完整性缺失。
  • 成本增加。邊緣和雲端系統的分散式特性帶來了一些與成本相關的挑戰。您最終可能會在不同位置獲得不同的完整資料副本——您必須為此付費。您需要考慮管理與資料傳輸和集中管理相關的成本。

處理分散式資料的複雜性可能極具挑戰性。這就是 FSx for ONTAP可以提供幫助的地方。

使用 FSx for ONTAP進行資料緩存

FSx for ONTAP是 AWS 提供的完全託管儲存服務,可提供值得信賴的NetApp ® ONTAP ®數據管理解決方案。

FSx for ONTAP配備資料快取功能,可實現更快的資料存取以及跨多個環境的無縫即時協作。 FSx for ONTAP主要透過兩種方式實現這一點:在邊緣整合資料和在本機快取資料的可寫副本。

整合邊緣數據

FSx for ONTAP協助企業整合非結構化數據,以獲得高效能體驗、營運效率和大規模協作NetApp全域檔案快取 (GFC) 技術。 FSx for ONTAP僅在對應位置快取所需的數據,並使用伺服器訊息區塊 (SMB) / 通用互聯網檔案系統 (CIFS) 協定。它對使用者來說是透明的,透過 GFC 進行協作就像使用本機檔案一樣。

GFC 可以透過在邊緣位置提供具有分散式資料快取的集中式儲存解決方案來支援由內部ONTAP和 FSx for ONTAP系統組成的混合雲架構。全球各地的用戶都可以存取這一組數據,並且可擴展至 PB 級。

由於經常使用的資料被緩存,因此協作應用程式可以獲得更好的效能。即使使用全域命名空間從多個位置存取數據,智慧型文件鎖定功能也能維護數據完整性。

Picture1 2024年3月12日 12:01 20:29 下午NetApp全域檔案快取高階架構

遠端位置完全可寫入的快取數據

FSx for ONTAP可讓您在遠端位置建立可寫入的持久性緩存,其中包含最新、最一致和最連貫的資料副本。這些稀疏填充的可寫入快取卷可用於在同一系統或不同的系統上建立緩存,以便更快地存取資料。 NetApp FlexCache ®技術使這成為可能。

FlexCache1FSx for ONTAP中的FlexCache 。

可以透過網路檔案系統 (NFS) 和 SMB/CIFS 存取快取數據,這意味著您可以使用快取數據,而無需以任何方式重新建構系統。這些資料在讀取密集型環境中非常有用,因為資料由多個主機共享並且被多次存取。

為了優化快取資料副本的大小,僅快取客戶端讀取的資料。客戶端可以安裝任何磁碟區以從多個位置存取相同的預先填入的最新資料。快取磁碟區充當主機和資料來源之間的臨時儲存位置,它儲存經常存取的資料區塊,以便可以比從來源取得更快地提供它們。

FlexCache2快取副本指向來源資料中的相關資料區塊,以最佳化副本的大小。

使用 FSx for ONTAP進行資料快取的用例

使用 FSx for ONTAP進行資料快取可以在多種情況下提供協助:

  • 遠端辦公室或分支機構 (ROBO) 位置
  • 高效能運算 (HPC) 工作負載
  • 人工智慧/機器學習 (AI/ML) 和深度學習 (DL) 用例
  • 使用雲端處理暴增需求

使用 FSx for ONTAP和資料快取的優勢

借助 FSx for ONTAP,您可以獲得滿足所有資料快取需求的低開銷解決方案:

  • 快速存取遠端數據。資料快取使遠端資料更接近用戶,並且幾乎不需要或根本不需要額外的架構要求。
  • 高效能。使用 FSx for ONTAP進行資料快取可消除與存取全球資料相關的延遲挑戰,同時不會影響資料完整性或品質。
  • 文件鎖定。 FSx for ONTAP檔案鎖定機制可防止可能導致資料完整性問題的平行寫入操作。
  • 零接觸設定。 FSx for ONTAP可輕鬆保持所有不同環境中(包括快取和原點)的資料集的一致性。
  • 資料保護和復原能力。 FSx for ONTAP預設具有高可用性和彈性,使用單一或多個可用區域來維持正常運作時間。憑藉其自動化的跨區域備份和災難復原功能,即使發生損壞或區域災難,資料仍然可用。
  • 單一命名空間。 FSx for ONTAP解決了資料儲存在多個位置時出現的命名空間問題。可以透過單一命名空間整合和存取數據,而無需任何基礎設施整合。
  • 降低儲存成本。使用 FSx for ONTAP進行資料快取可以節省空間,因為它只快取活動數據,而不是完整副本。此外,內建的 FSx for ONTAP儲存效率功能可與智慧型檔案快取配合使用。這降低了儲存和傳輸成本。

一家製造商如何在 AWS 上與 FSx for ONTAP合作 

一家使用 FSx for ONTAP資料快取功能的公司是一家專注於生產印刷電路板 (PCB) 設備的歐洲製造商。其業務遍及全球 40 多個國家。

但由於雲端資料分散在歐盟、美國和亞太地區,該公司遇到了延遲和生產力問題。分佈在 ROBO 各個地點的團隊無法就相同數據進行有效協作。

具有全域檔案快取的ONTAP FSx 解決了 ROBO 位置之間的延遲問題,並提供了其他一些優勢:

  • 全域存取檔案。與分散式檔案系統命名空間 (DFS-N) 的整合保留了命名空間和存取控制清單 (ACL)。這意味著員工可以存取儲存在全球中心的任何 FSx for ONTAP檔案系統上的文件,就像這些文件儲存在本地一樣。
  • 文件鎖定。此功能使公司的團隊能夠在共享專案文件上進行協作而不會產生衝突的更改,並提高了全球各地團隊的工作效率。
  • 全面託管服務的便利性。底層資源、軟體更新和維護均由 AWS 處理,從而減輕了您的營運負擔。同樣,GFC 是一個簡單的附加元件,不需要任何特殊的最終用戶培訓。
  • 成本節省源自於幾個因素:
    • FSx for ONTAP應用儲存效率和冷資料分層,降低儲存共用檔案的整體成本。
    • 每個 GFC 實例僅快取該邊緣網站上經常存取的文件,並且每當文件發生更改時,僅傳輸更改的區塊。這種方法可以最大限度地減少資料流量和出口傳輸成本。
    • FSx for ONTAP檔案共享使用經濟高效的NetApp Snapshot 進行保護技術。您不需要在邊緣站點實施額外的資料保護解決方案。

使用 FSx for ONTAP將您的資料和團隊整合在一起

您的團隊需要一種方法來跨整個資料資產進行協作,而不會遇到延遲或創建會增加成本並損害資料完整性的資料孤島。對於多樣化的資料資產,使用 FSx for ONTAP可以輕鬆做到這一點。

FSx for ONTAP使用由NetApp FlexCache和 GFC 技術支援的資料快取功能,將資料快取作為第一方 AWS 服務的無縫組成部分來提供。

建立可靠的分散式資料架構,讓您的使用者保持同步,並防止成本失控。

欲了解更多信息,請訪問使用Amazon FSx for NetApp ONTAP快取數據

Drift chat loading