架構概觀
開始建置雲端規模分析架構的資料架構之前,請先檢閱下表中的文章。
區段 | 描述 |
---|---|
建置初始策略 | 如何建置您的資料策略和樞紐,以成為資料驅動組織。 |
定義您的計劃 | 如何開發雲端規模分析的計畫。 |
準備分析資產 | 資料管理和資料登陸區域的概觀,其中包含企業註冊、網路、身分識別和存取管理、原則、商務持續性和災害復原等重要設計區域考慮。 |
控管您的分析 | 管理資料、資料目錄、譜系、主要資料管理、資料品質、資料共用合約和中繼資料的需求。 |
保護您的分析資產 | 如何使用驗證和授權、資料隱私權和資料存取管理來保護分析資產。 |
組織人員和小組 | 如何組織有效的作業、角色、小組和小組功能。 |
管理您的分析資產 | 如何布建案例的平臺和可檢視性。 |
實體架構
雲端規模分析的實體實作包含兩個主要架構: 資料管理登陸區域 和資料 登陸區域。
資料應用程式
資料應用程式 是傳遞資料產品的核心概念,可配合 Lakehouse 和資料網格模式。
雲端級分析
您可以使用多個資料登陸區域來 調整 雲端規模的分析部署。
資料網格
使用雲端規模分析實作 資料網格 。 雖然大部分的雲端規模分析指引都適用,但對於資料網域、自助資料平臺、上線資料產品、治理、資料市集和資料共用有一些差異。
雲端規模分析的部署範本
下表列出您可以部署的參考範本。
Repository | Content | 必要 | 部署模型 |
---|---|---|---|
資料管理範本 | 中央資料管理服務和共用資料服務,例如資料目錄和自我裝載整合執行時間 | 是 | 每個雲端規模分析一個 |
資料登陸區域範本 | 資料登陸區域共用服務,包括擷取、管理和資料儲存服務 | Yes | 每個資料登陸區域一個 |
資料整合範本 - 批次處理 | 批次處理所需的其他服務 | No | 每個資料登陸區域一或多個 |
資料整合範本 - 串流處理 | 資料流程處理所需的其他服務 | No | 每個資料登陸區域一或多個 |
資料產品範本 - 分析與資料科學 | 資料分析和 AI 所需的其他服務 | No | 每個資料登陸區域一或多個 |
這些範本包含 Azure Resource Manager 範本、範本的參數檔案,以及用於資源部署的 CI/CD 管線定義。
範本可能會隨著時間而變更,因為新的 Azure 服務和需求。 保護每個存放庫的主要分支,使其保持無錯誤狀態,並可供取用和部署。 使用開發訂用帳戶來測試範本組態變更,再將功能增強功能合併回主要分支。
私下連線至環境
參考架構是安全設計。 其使用多層式安全性方法來克服常見的資料外泄風險。
最簡單的安全性解決方案是在資料管理登陸區域或資料登陸區域的虛擬網路上 裝載 Jumpbox ,以透過私人端點連線到資料服務。
常見問題集
如需有關雲端規模分析的問題和解答清單,請參閱 常見問題。