北京2023年10月18日 /美通社/ -- 近日，亞馬遜云科技宣布Amazon DataZone正式可用。Amazon DataZone讓客戶能夠跨組織邊界發(fā)現、訪問、共享和治理大規(guī)模數據，并減少企業(yè)內部成員訪問數據和使用分析工具時繁重的工作量。通過Amazon DataZone，數據工程師、科學家和分析師等數據使用者可以通過統一的數據分析門戶，在亞馬遜云科技賬戶之間共享和訪問數據，實現跨部門、跨組織地使用數據及開展數據協作。此外，數據所有者和數據管理者可以通過在用戶界面中使用預定義的審批工作流來平衡數據訪問治理，以及通過向數據添加業(yè)務上下文而簡化數據發(fā)現。
數據管理和治理的常見問題：
- 數據發(fā)現，特別是跨賬戶及區(qū)域分布的數據：企業(yè)所擁有的PB級數據往往分散在數十甚至數千個數據源中，為發(fā)現可用于分析的數據帶來極大挑戰(zhàn)。
- 數據訪問：不同企業(yè)采用不同的數據管理方式，且通常需要手動批準，這導致數據訪問控制變得繁瑣耗時，而且很難及時同步更新，這讓分析師常常無法及時獲取所需數據。
- 工具使用：每個工具都以不同的方式管理數據訪問，每個用戶在治理數據時使用的工具可能各不相同。
- 協作：分析師、數據科學家和數據工程師通常在端到端的分析過程中處于不同的階段，但沒有一種簡單的方式可以讓他們選擇不同的工具來協作處理同一個經過治理的數據。
- 數據治理：數據治理的構建通常隱藏在各個工具中，并由不同的團隊以不同方式進行管理，這導致企業(yè)無法跟蹤誰正在訪問什么數據以及為什么訪問。
Amazon DataZone的三個核心優(yōu)勢
Amazon DataZone允許客戶跨組織邊界大規(guī)模發(fā)現、共享和治理數據。
- 管理跨組織邊界的數據訪問：幫助確保正確的用戶以符合企業(yè)安全規(guī)定的方式訪問正確的數據，而無需依賴個人憑證；同時，通過經過治理的工作流提供數據資產的透明度，并批準數據訂閱；此外，審計功能可監(jiān)控跨項目的數據資產使用情況。
- 通過共享數據和工具連接數據用戶，驅動業(yè)務洞察：通過團隊之間無縫協作和提供數據和分析工具的自助訪問，提升業(yè)務團隊的效率；使用業(yè)務術語搜索、共享和訪問數據目錄，使數據對所有授權用戶可用，并通過業(yè)務詞匯表了解他們想要使用的數據。
- 利用機器學習實現數據發(fā)現和編目自動化：縮短了在業(yè)務數據目錄手動輸入數據屬性所需的時間，同時減少了錯誤的發(fā)生；數據目錄中數據的增多會提升搜索體驗，將搜索和使用數據的時間從幾周縮短到幾天。
為了實現上述優(yōu)勢，Amazon DataZone內置了多項功能，其中包括：
- 業(yè)務驅動領域：一個DataZone數據域代表了企業(yè)內的一條業(yè)務線（LOB）或一個業(yè)務領域的明確邊界，它可以管理自己的數據，包括數據資產、數據定義或業(yè)務術語，以及數據治理標準。數據域是用戶開啟Amazon DataZone旅程的起點。當用戶首次開始使用DataZone時，將創(chuàng)建一個包含所有核心組件的數據域，如業(yè)務數據目錄、項目和環(huán)境。
- 企業(yè)內部的業(yè)務數據目錄：企業(yè)可以為數據增加業(yè)務上下文，從而增加數據的可見性，以便數據使用者可以更加快速高效地查找和理解數據。目錄的核心功能是對不同來源的數據編目，并通過附加的業(yè)務背景來增強元數據，為尋找數據的使用者提供更好的決策支持。
- 利用數據項目進行聯邦治理：Amazon DataZone 數據項目基于業(yè)務用例將用戶、數據資產和分析工具進行分組，簡化了訪問亞馬遜云科技分析工具的過程。數據項目提供了可供項目成員一起協作、交換數據和共享工件（artifact）的空間。只有被添加到項目中的用戶才能參與協作，因此，整個項目的安全性可以得到最大限度的保證。通過這些項目，Amazon DataZone將數據所有權分散到不同團隊中的數據所有者身上，所有者通過訪問管理權控制用戶的數據訪問請求。
- Amazon DataZone現已提供外部API，以編程的方式與系統交互。用戶可以將Amazon DataZone添加到現有架構中。例如，用戶可以在Amazon DataZone中使用數據管道編目數據，使客戶能夠無縫搜索、查找、訂閱和訪問數據。在此版本中，Amazon DataZone引入了一個新的目錄數據模型。編目API支持基于類型系統的模型，允許用戶定義和管理目錄中實體的類型。通過使用該類型的系統模型，用戶將擁有一個靈活且可擴展的目錄，在表示不同類型對象的同時可以將其（資產或列）關聯到元數據。類似地，用戶也可以用編程方式使用Amazon DataZone的API。
Amazon DataZone常見客戶應用場景
數據發(fā)現
Bristol Myers Squibb研究IT解決方案架構總監(jiān)David Y. Liu表示："Bristol Myers Squibb正在積極推進一項計劃，旨在將藥物發(fā)現和研發(fā)時間縮短超過30%。這項計劃的關鍵環(huán)節(jié)是解決數據共享所面臨的挑戰(zhàn)并優(yōu)化數據可用性。通過與亞馬遜云科技合作，我們發(fā)現Amazon DataZone能夠幫助我們創(chuàng)建、管理、歸類整理我們的數據產品，使數據更容易被找到、訪問、進行協作處理和復用。目前我們正在評估Amazon DataZone在企業(yè)內更廣泛的可用性，以確定是否與我們的運營目標相符。"
共享治理數據以支持生成式AI項目
Guardant Health數據、CRM和分析高級總監(jiān)Rajesh Kucharlapati表示："通過在多個業(yè)務領域之間協調數據，我們可以培養(yǎng)數據共享的文化。為此，我們一直在使用Amazon DataZone，將開發(fā)人員從構建和維護平臺的任務中解放出來，使他們能夠專注于定制解決方案。亞馬遜云托管服務對我們具有重要意義，因為利用亞馬遜云科技生態(tài)系統功能，我們能夠更快地從數據分析中獲得業(yè)務洞察，標準化數據定義，以及充分利用生成式AI的潛力。我們期待繼續(xù)與亞馬遜云科技合作，為Guardant Health注入活力，并為我們服務的患者提供更優(yōu)質的服務。與亞馬遜云服務的合作已遠遠超出了數據范疇，這是一段充滿活力的旅程。"
聯邦式數據治理
Itaú Unibanco數據治理和隱私主管Priscila Cardoso Ferreira表示："實現數據驅動是我們的戰(zhàn)略目標之一。我們始終遵循更優(yōu)的數據治理、數據隱私保護和安全性實踐。在Itaú，數據被視為最主要的資產之一，良好的數據定義和管理是我們解決方案的核心組成部分，這在使用亞馬遜云科技分析服務的每一個環(huán)節(jié)中都得到了體現。與亞馬遜云科技團隊一起，我們使用Amazon DataZone預覽版提出了與Itaú技術和業(yè)務需求相匹配的功能——例如按數據域劃分的數據可以簡化數據治理的流程，并幫助業(yè)務部門間分配責任。隨著Amazon DataZone的正式可用，我們希望能夠迅速而輕松地為團隊建立跨數據域工作規(guī)則，幫助數據分析師、工程師和科學家在多個業(yè)務用例中進行數據假設實驗，實現簡化治理。"
