▌數(shù)據(jù)治理應(yīng)運(yùn)而生
有效的數(shù)據(jù)治理計(jì)劃可以最大限度地提高數(shù)據(jù)的價(jià)值,從而提高運(yùn)營(yíng)效率,決策制定和法規(guī)遵從性,同時(shí)最大限度地降低與不良數(shù)據(jù)管理相關(guān)的風(fēng)險(xiǎn)。 許多公司已經(jīng)擁有良好的數(shù)據(jù)治理基礎(chǔ),但由于它們采用了更新的數(shù)據(jù)和分析平臺(tái),因此需要重新審視其戰(zhàn)略。 其中一些功能增強(qiáng)將以組織或流程為重點(diǎn),而其他功能可能依賴(lài)于自動(dòng)化和認(rèn)知等技術(shù)來(lái)提高數(shù)據(jù)質(zhì)量,工作流管理,信息安全性以及業(yè)務(wù),技術(shù)和操作元數(shù)據(jù)的獲取。
在這種不斷發(fā)展的數(shù)據(jù)和技術(shù)環(huán)境中,組織可以通過(guò)關(guān)注四個(gè)主要支柱來(lái)制定前瞻性的企業(yè)數(shù)據(jù)治理計(jì)劃。
▌流程,政策,標(biāo)準(zhǔn)和程序
數(shù)據(jù)治理反映了組織在數(shù)據(jù)管理相關(guān)領(lǐng)域的戰(zhàn)略方向和預(yù)期成果,包括質(zhì)量和元數(shù)據(jù)管理,信息安全,架構(gòu)和數(shù)據(jù)建模。 不斷發(fā)展的流程,政策,標(biāo)準(zhǔn)和程序是實(shí)現(xiàn)有效數(shù)據(jù)治理的關(guān)鍵。 在實(shí)施現(xiàn)代數(shù)據(jù)平臺(tái)的組織中,有幾點(diǎn)需要考慮:
1 ▏過(guò)程自動(dòng)化
處理大量數(shù)據(jù)的較新平臺(tái)可以實(shí)現(xiàn)更多交互式,實(shí)驗(yàn)性和漸進(jìn)式分析。 信息規(guī)模和復(fù)雜性的增加直接影響組織執(zhí)行數(shù)據(jù)管理操作的方式。 諸如元數(shù)據(jù)發(fā)現(xiàn)或數(shù)據(jù)質(zhì)量驗(yàn)證的許多過(guò)程可以受益于使用認(rèn)知技術(shù)自動(dòng)化并且被視為數(shù)據(jù)生命周期的組成部分。
2 ▏數(shù)據(jù)治理民主化
隨著數(shù)據(jù)的規(guī)模和復(fù)雜性的增加,管理它的責(zé)任轉(zhuǎn)移到其所有者 - 他們最了解他們的數(shù)據(jù) - 來(lái)自消費(fèi)者的投入。 兩者都可以配備正確的協(xié)作工具,流程,標(biāo)準(zhǔn)和程序,以實(shí)現(xiàn)有效的管理。
3 ▏新架構(gòu)模式的標(biāo)準(zhǔn)和程序的演變
組織正在改變其運(yùn)營(yíng)和分析領(lǐng)域,并利用微服務(wù)等新架構(gòu)模式。 在這種分布式和松散耦合的環(huán)境中,相同數(shù)據(jù)的副本通常存儲(chǔ)在不同的物理位置,這可能使管理更加困難并且易受安全性的影響。 因此,組織可能會(huì)尋求發(fā)展其數(shù)據(jù)架構(gòu)和安全性的標(biāo)準(zhǔn)和程序。
▌組織,角色和責(zé)任
許多公司已經(jīng)建立了具有明確角色和職責(zé)的數(shù)據(jù)治理組織,以監(jiān)督和促進(jìn)數(shù)據(jù)管理流程。 隨著更新的平臺(tái)變得可用,組織,角色和職責(zé)可能會(huì)發(fā)生變化。 一些關(guān)鍵考慮因素是:
1 ▏將數(shù)據(jù)治理拓展到開(kāi)發(fā)
對(duì)數(shù)據(jù)的問(wèn)責(zé)可能需要更多的治理,不僅僅是在數(shù)據(jù)管理領(lǐng)域,而且還在軟件開(kāi)發(fā)生命周期本身,從而產(chǎn)生更主動(dòng)的數(shù)據(jù)治理流程,并減少修復(fù)生產(chǎn)平臺(tái)問(wèn)題的需要。
2 ▏高效的管家
管理員(尤其是技術(shù)管理員)的角色可以進(jìn)行調(diào)整,以適應(yīng)新興技術(shù)的變化,例如支持云的平臺(tái),大數(shù)據(jù),流數(shù)據(jù)和微服務(wù)。 組織可以提供培訓(xùn),幫助管理員在現(xiàn)代數(shù)據(jù)平臺(tái)上有效工作。
3 ▏專(zhuān)注于數(shù)據(jù)安全角色
通過(guò)組織內(nèi)外的多個(gè)渠道訪問(wèn)信息可能會(huì)產(chǎn)生額外的數(shù)據(jù)安全風(fēng)險(xiǎn)。 因此,不僅要關(guān)注數(shù)據(jù)安全角色,還要引入顛覆性技術(shù)來(lái)管理數(shù)據(jù)訪問(wèn)和使用,這一點(diǎn)至關(guān)重要。
▌技術(shù)和工具
有效實(shí)施數(shù)據(jù)治理流程需要適當(dāng)?shù)钠脚_(tái)和工具。 對(duì)于實(shí)施現(xiàn)代數(shù)據(jù)平臺(tái)的組織,一些關(guān)鍵考慮因素是:
1 ▏?yán)谜J(rèn)知和自動(dòng)化技術(shù)
根據(jù)現(xiàn)代數(shù)據(jù)平臺(tái),許多組織正在轉(zhuǎn)向更新的技術(shù),如認(rèn)知和自動(dòng)化,用于元數(shù)據(jù)發(fā)現(xiàn),攝取,解釋和豐富。 這些技術(shù)可以大規(guī)模運(yùn)行并實(shí)時(shí)評(píng)估數(shù)據(jù)質(zhì)量,為執(zhí)行算法提供即時(shí)反饋,以便在事件處理等場(chǎng)景中修復(fù)已識(shí)別的質(zhì)量問(wèn)題。
2 ▏實(shí)現(xiàn)數(shù)據(jù)治理工具的無(wú)縫集成
鑒于復(fù)雜的技術(shù)環(huán)境,數(shù)據(jù)治理工具與運(yùn)營(yíng)和分析平臺(tái)集成,利用代表性狀態(tài)轉(zhuǎn)移(REST)API等模式非常重要。這樣可以在整個(gè)組織內(nèi)對(duì)數(shù)據(jù)沿襲,質(zhì)量和元數(shù)據(jù)進(jìn)行集成查看。
3 ▏不斷變化的安全環(huán)境
通過(guò)較新的數(shù)據(jù)平臺(tái)提供的一些行業(yè)標(biāo)準(zhǔn)協(xié)議可以幫助提高信息安全性。 例如,嚴(yán)重依賴(lài)微服務(wù)的分布式環(huán)境通常容易受到與訪問(wèn)控制和授權(quán)處理相關(guān)的破壞。 使用OAuth 1.0 / OAuth 2.0等標(biāo)準(zhǔn)協(xié)議有助于解決安全問(wèn)題。 與此同時(shí),組織可以強(qiáng)調(diào)對(duì)數(shù)據(jù)安全領(lǐng)先實(shí)踐的廣泛認(rèn)識(shí)。
▌數(shù)據(jù)編目
雖然傳統(tǒng)工具更側(cè)重于技術(shù)和操作元數(shù)據(jù)并支持有限的各種元數(shù)據(jù)資產(chǎn),但現(xiàn)代平臺(tái)中元數(shù)據(jù)的增加會(huì)導(dǎo)致收集,編目和發(fā)現(xiàn)過(guò)程更加復(fù)雜 - 通常需要先進(jìn)的技術(shù)和方法。 數(shù)據(jù)編目有助于建立企業(yè)數(shù)據(jù)的整體視圖,并幫助消費(fèi)者發(fā)現(xiàn),理解和信任可能相關(guān)的資產(chǎn)。 在實(shí)施現(xiàn)代數(shù)據(jù)平臺(tái)的組織中,關(guān)鍵考慮因素包括:
1 ▏元數(shù)據(jù)管理的語(yǔ)義方法
在使用不同符號(hào)定義和描述數(shù)據(jù)資產(chǎn)的平臺(tái)中,業(yè)務(wù)語(yǔ)義和本體變得越來(lái)越重要。 相關(guān)標(biāo)準(zhǔn)可用于開(kāi)發(fā)通用語(yǔ)言和參考模型,以解決各種數(shù)據(jù)架構(gòu)組件及其相互關(guān)聯(lián)。
2 ▏元數(shù)據(jù)內(nèi)容發(fā)現(xiàn)和增強(qiáng)
元數(shù)據(jù)的主要目的是從整體上表示數(shù)據(jù),以幫助用戶(hù)管理和使用它。 因此,捕獲和管理元數(shù)據(jù)資產(chǎn)的多樣性以及它們之間的相互關(guān)系非常重要。 認(rèn)知技術(shù)和自動(dòng)化可以幫助發(fā)現(xiàn)元數(shù)據(jù)資產(chǎn)之間的隱藏關(guān)聯(lián),并改善數(shù)據(jù)編目潛力 - 例如,通過(guò)發(fā)現(xiàn)業(yè)務(wù)和技術(shù)元數(shù)據(jù)之間的關(guān)系,以及通過(guò)自動(dòng)數(shù)據(jù)沿襲。 此外,諸如數(shù)據(jù)標(biāo)記之類(lèi)的技術(shù)有助于從大數(shù)據(jù)存儲(chǔ)庫(kù)(例如, 數(shù)據(jù)湖 )中的原始數(shù)據(jù)中識(shí)別,組織和提取值。
3 ▏業(yè)務(wù)和技術(shù)協(xié)作努力
數(shù)據(jù)編目是一項(xiàng)協(xié)作工作。 起點(diǎn)是為用戶(hù)提供具有現(xiàn)代用戶(hù)界面和集成工作流功能的適當(dāng)技術(shù),以支持有效使用并實(shí)現(xiàn)對(duì)數(shù)據(jù)目錄資產(chǎn)和內(nèi)容的額外增強(qiáng)。
基于這四大支柱的成功數(shù)據(jù)治理可以幫助組織更好地理解,管理和利用新平臺(tái)中存儲(chǔ)和處理的信息 - 幫助他們闡明更多以見(jiàn)解為導(dǎo)向的決策,并將自己定位為市場(chǎng)領(lǐng)導(dǎo)者。
想了解更多IT資訊,請(qǐng)?jiān)L問(wèn)中培偉業(yè)官網(wǎng):中培偉業(yè)