东京热专区免费精品人妻视频-国产av麻豆精品第一页-亚洲十八禁精品一区二区三区-欧洲高清无专砖区2021

數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)處理單元構(gòu)成了數(shù)據(jù)中臺體系架構(gòu)的核心，而數(shù)據(jù)治理則是提升數(shù)據(jù)價值的關(guān)鍵手段。該體系架構(gòu)的通用性表現(xiàn)在以下多個方面：

該數(shù)據(jù)中臺體系架構(gòu)充分考慮了各種數(shù)據(jù)中臺元素，有效提升了數(shù)據(jù)資產(chǎn)的價值，同時為數(shù)據(jù)的共享和服務(wù)提供了有力的支持。

在規(guī)劃和實施過程中，企業(yè)可以參考這個數(shù)據(jù)中臺體系架構(gòu)進行逐步的建設(shè)。首先需要建設(shè)處理和存儲子系統(tǒng)，然后在業(yè)務(wù)發(fā)展過程中逐步引入數(shù)據(jù)采集、安全管理和數(shù)據(jù)治理子系統(tǒng)。

該數(shù)據(jù)中臺由六個相互獨立的子系統(tǒng)構(gòu)成。企業(yè)在建設(shè)過程中可以根據(jù)實際需求靈活選擇，每個子系統(tǒng)都可以單獨進行招標(biāo)建設(shè)，也可以將多個子系統(tǒng)合并招標(biāo)建設(shè)。

此外，數(shù)據(jù)中臺體系架構(gòu)包含了以下六個部分：

1.數(shù)據(jù)存儲框架作為數(shù)據(jù)中臺的核心部分，它負(fù)責(zé)數(shù)據(jù)的采集、處理、管理和安全監(jiān)控，最終為外部提供有價值的數(shù)據(jù)服務(wù)。

對于不同類型和來源的數(shù)據(jù)，該框架采用了獨立的技術(shù)架構(gòu)進行存儲和管理。

2，數(shù)據(jù)源主要由采集框架管理，而根據(jù)數(shù)據(jù)的特征，治理框架將其分為結(jié)構(gòu)化和非結(jié)構(gòu)化兩大類。規(guī)范化分域數(shù)據(jù)是治理框架對全量數(shù)據(jù)進行規(guī)范化分域整理的結(jié)果。寬表數(shù)據(jù)是一種數(shù)據(jù)關(guān)聯(lián)的結(jié)果，可以用于更完整地描繪人、事、地、物、組等對象，也可以作為上層模型數(shù)據(jù)的中間層數(shù)據(jù)。

3，元數(shù)據(jù)和標(biāo)簽是數(shù)據(jù)的描述。其中元數(shù)據(jù)描述了數(shù)據(jù)的客觀屬性，而標(biāo)簽則更多地表達了管理者對數(shù)據(jù)的觀點和等級劃分。主數(shù)據(jù)需要在各系統(tǒng)間頻繁地更新和交換，因此需要獨立的存儲空間進行維護管理。

4，數(shù)據(jù)采集框架負(fù)責(zé)對所有納入數(shù)據(jù)中臺的各種源數(shù)據(jù)進行統(tǒng)一采集和管理。為了實現(xiàn)這一點，它提供了多種數(shù)據(jù)采集方式，例如通過文件傳輸協(xié)議采集、數(shù)據(jù)庫采集、接口應(yīng)用程序接入采集、流式采集及網(wǎng)絡(luò)爬蟲采集等。同時，它還按照數(shù)據(jù)采集規(guī)范對源數(shù)據(jù)進行預(yù)處理，以去除不需要的數(shù)據(jù)和冗余數(shù)據(jù)，并對采集過程進行實時監(jiān)控和管理。盡管每個企業(yè)的數(shù)據(jù)采集框架可能有所不同，但它們的基本構(gòu)成是一致的。

5。數(shù)據(jù)處理框架是每個數(shù)據(jù)應(yīng)用的基礎(chǔ)環(huán)節(jié)之一，包括數(shù)據(jù)的抽取、轉(zhuǎn)換、加載等過程。為了提高效率并降低成本，需要建立一個專門的數(shù)據(jù)處理框架來負(fù)責(zé)這些處理任務(wù)，包括批量處理和流式處理、人工智能分析、數(shù)據(jù)清洗、交換和查詢等任務(wù)。此外，該框架還負(fù)責(zé)配置數(shù)據(jù)處理工具組件的任務(wù)，以及協(xié)調(diào)和調(diào)度數(shù)據(jù)處理任務(wù)的進程。

6.數(shù)據(jù)治理框架是一個廣義的概念，它不僅包括提升數(shù)據(jù)價值的內(nèi)容（如數(shù)據(jù)管理、數(shù)據(jù)目錄、數(shù)據(jù)質(zhì)量等），也包括數(shù)據(jù)安全管理及數(shù)據(jù)共享服務(wù)。然而，由于安全管理和共享服務(wù)與提升數(shù)據(jù)價值之間可能存在矛盾，因此本文不建議包含這兩個方面的內(nèi)容。

7.數(shù)據(jù)安全框架：由于數(shù)據(jù)已經(jīng)成為一種寶貴的資產(chǎn)，因此必須確保其安全。為此，安全框架是必不可少的組成部分。它疊加在數(shù)據(jù)中臺其他功能框架之上，并貫穿于數(shù)據(jù)的采集、處理、交換和共享等各個過程之中。安全框架可以分為日志管理、用戶認(rèn)證、權(quán)限管理及加解密等幾個功能模塊。此外，安全全門戶也可以對外提供安全能力封裝，展示數(shù)據(jù)中臺的安全態(tài)勢及安全視圖。