(文章來源:金馬科技)
在推出基于微服務的第二代智能云服務幾年之后,Informatica的最新季度版本終于發現了無服務器錯誤。它是一系列新功能中的一部分,這些新功能增加了用于管理數據管道和集成流傳輸的新功能。
無服務器計算很自然地適合于數據攝取和集成過程,因為它們通常是成批運行的,并且根據來源的不同,它們也可能具有高度可變的資源消耗配置文件。無服務器的指導思想是消除提供“以防萬一”的能力來處理高峰的需求,系統會根據流量自動調整供應。新的無服務器選項會自動擴展,并已內置到高可用性和恢復中??蛻羧匀豢梢允褂没诜掌鞯倪x項來處理可預測的長期運行的工作負載。
盡管無服務器通過讓系統自動配置資源來簡化用戶的生活,但缺點是成本可能無法預測。作為新的無服務器選件的一部分,Informatica提供了一個計算器,該計算器將機器學習應用到新的工作負載中,從而根據客戶對性能(通過并行處理)還是成本(通過單個節點)進行優先級估算成本。
借助無服務器,Informatica從基于云的服務中竊取了一個頁面,這些服務已經使無服務器成為基于數據管道的ETL和集成產品的主要內容。其中包括AWS Glue,Azure數據工廠,Google Cloud Data Fusion甚至Databricks,它們添加了無服務器選項。
一個相關功能是應用機器學習來幫助組織合理化其數據管道。由于基于云的低代碼/無代碼工具幾乎很容易構建管道,因此客戶可以輕松地構建令人困惑的一次性項目。Informatica的新工具將對管道進行內部檢查,掃描數據源,操作和目標,以識別哪些管道使用類似的轉換模式,并指導用戶構建可配置的模板,以減少擴散并使它們更易于配置和維護。
而且,在攝取流時,Informatica新增了一項功能,可以掃描Kafka存儲庫以跟蹤數據沿襲,就像對數據庫和文件源所做的一樣。在進行數據準備時,Informatica的云服務可以推薦加入。Informatica的云ETL服務的可視化集成設計器通過推薦基于掃描源和目標的轉換操作,進而從數據準備中竊取了頁面。
在增量更新中,去年推出的數據質量服務中增加了重復數據刪除功能。盡管重復數據刪除對于Informatica來說并不是什么新事物,但以前它只能在本地使用,也可以作為自帶許可證(BYOL)支持的一部分,以在Amazon EC2或其他云基礎設施服務上運行Informatica Data Quality。通過菜單,用戶可以選擇元數據的邏輯或物理視圖,從而為數據工程師,業務分析師和數據科學家提供了多種視圖,從而增強了目錄的功能。該目錄已從數據庫資源的常規花名冊擴展到從Microsoft Power BI,Qlik Sense,AWS Glue,Google Cloud,Snowflake等云服務中檢索元數據,以及其他來源。
春季發布的結果是使用基礎圖形數據庫公開了客戶主數據,該數據庫提供了一種更直觀的表示和探索客戶關系的方式。新版本現已在AWS,Azure以及Google Cloud的 beta版中可用。
(責任編輯:fqj)
-
數據
+關注
關注
8文章
7239瀏覽量
90971 -
無服務器
+關注
關注
0文章
16瀏覽量
4119
發布評論請先 登錄
評論