大數(shù)據(jù)的發(fā)展已經(jīng)走到盡頭了嗎?
對于很多企業(yè)來說，數(shù)據(jù)是一個規(guī)模巨大的、幾乎沒有被開發(fā)的資源。很多機(jī)構(gòu)和組織大多已經(jīng)認(rèn)識到，數(shù)據(jù)是一項關(guān)鍵資產(chǎn)，利用從企業(yè)數(shù)據(jù)中獲得的洞察力比以往任何時候都更為重要。在實踐中，創(chuàng)新者、顛覆者和初創(chuàng)企業(yè)在利用數(shù)據(jù)進(jìn)行變革、競爭和贏得市場方面要靈活得多。而且，如果他們很好地利用了這些數(shù)據(jù)，那么他們獲得更多的客戶。他們很可能沒有大企業(yè)擁有那么多的數(shù)據(jù)，但他們更有能力利用這些數(shù)據(jù)。
大數(shù)據(jù)是一個流行術(shù)語，它定義了一系列方法，許多企業(yè)都使用這些方法來開發(fā)解決方案，從而產(chǎn)生所需的洞察力。然而，根據(jù)Gartner公司和其他機(jī)構(gòu)的統(tǒng)計數(shù)，大多數(shù)公司都未能通過大數(shù)據(jù)方法實現(xiàn)其目標(biāo)。
大數(shù)據(jù)方法的核心是在企業(yè)的大部分?jǐn)?shù)據(jù)中集中攝取、轉(zhuǎn)換、治理和洞察。這將導(dǎo)致在有意義的時間范圍內(nèi)顯著抑制業(yè)務(wù)價值交付的瓶頸。它非但沒有促進(jìn)數(shù)據(jù)流動，反而被扼殺了。
那么還有別的選擇嗎?
如果有一種基于聯(lián)邦制而非集權(quán)制的新方法來幫助企業(yè)獲得保持競爭力所需的洞察力，那么會怎樣?
對于許多企業(yè)來說，數(shù)據(jù)網(wǎng)格方法解決了他們面臨的挑戰(zhàn)。數(shù)據(jù)網(wǎng)格的核心是一種基于軟件工程的經(jīng)過驗證和測試的原則的數(shù)據(jù)聯(lián)邦方法，許多企業(yè)已經(jīng)將其應(yīng)用于客戶旅程開發(fā)。
數(shù)據(jù)網(wǎng)格的三個原則
數(shù)據(jù)網(wǎng)格方法利用了現(xiàn)代軟件工程的三個核心原則：
域所有權(quán)
產(chǎn)品開發(fā)
自助軟件平臺
這些原則使數(shù)據(jù)解決方案的開發(fā)能夠聯(lián)合起來，從而可以更快地解鎖重要的更大的洞察力，從而使企業(yè)能夠?qū)崿F(xiàn)業(yè)務(wù)價值。
?。?）域所有權(quán)
這采用了當(dāng)前的域建模原則，并在模型上添加了數(shù)據(jù)覆蓋層。域模型是問題領(lǐng)域的關(guān)鍵概念/對象的可視化表示，是企業(yè)的最高級別。它分解一個企業(yè)，為業(yè)務(wù)功能和技術(shù)解決方案建立明確的所有權(quán)和邊界。這使得基于微服務(wù)的軟件工程方法能夠驅(qū)動自治和重用。
同樣的域模型可以在企業(yè)內(nèi)部用于建立域數(shù)據(jù)集的所有權(quán)。每個數(shù)據(jù)集都應(yīng)該屬于創(chuàng)建/生成數(shù)據(jù)的域。目的是讓每個數(shù)據(jù)集由單個域擁有，在需要的地方調(diào)整域模型以實現(xiàn)這一結(jié)果。
?。?）產(chǎn)品開發(fā)
這表明，企業(yè)將數(shù)據(jù)視為產(chǎn)品，就像他們將客戶旅程視為產(chǎn)品一樣。
重點是客戶想做的工作，以及幫助他們做到這一點的最佳解決方案。產(chǎn)品團(tuán)隊是一組具有多種技能的個人，他們將業(yè)務(wù)人員和技術(shù)人員聚集在一起，以盡可能地創(chuàng)造最佳的客戶結(jié)果。
將這一應(yīng)用到數(shù)據(jù)中，意味著理解企業(yè)中不同的數(shù)據(jù)角色，包括客戶、內(nèi)部業(yè)務(wù)用戶、其他工程團(tuán)隊、B2B合作伙伴和監(jiān)管機(jī)構(gòu)。這將有助于定義針對不同用戶組要做的工作，從而允許產(chǎn)品團(tuán)隊專注于解決每個用戶組的挑戰(zhàn)。與域所有權(quán)相一致的產(chǎn)品開發(fā)將為數(shù)據(jù)集和用戶結(jié)果創(chuàng)建明確的問責(zé)結(jié)果，使團(tuán)隊能夠保持步調(diào)一致。
?。?）自助軟件平臺
數(shù)據(jù)的自助服務(wù)軟件平臺是實現(xiàn)數(shù)據(jù)網(wǎng)格方法交付結(jié)果所需的自主權(quán)和敏捷性的核心。在其核心，企業(yè)需要像云計算服務(wù)提供商一樣思考，并創(chuàng)建一個API驅(qū)動的自助數(shù)據(jù)平臺。該平臺需要提供三組功能，首先是存儲、數(shù)據(jù)庫、訪問控制等基礎(chǔ)基礎(chǔ)設(shè)施。工作流的工程工具，通過基礎(chǔ)設(shè)施如代碼和DevOps抽象出基礎(chǔ)設(shè)施的復(fù)雜性。最后，該平臺需要提供發(fā)現(xiàn)、法規(guī)遵循和監(jiān)視的中央管理功能。
實現(xiàn)數(shù)據(jù)網(wǎng)格的三個原則有助于消除大數(shù)據(jù)方法中固有的瓶頸。有了數(shù)據(jù)平臺，每個產(chǎn)品團(tuán)隊都可以定義他們要做的數(shù)據(jù)工作，并根據(jù)對企業(yè)的價值釋放來確定不同用戶結(jié)果的優(yōu)先級。每個產(chǎn)品團(tuán)隊都可以在分配給他們的投資預(yù)算范圍內(nèi)自主快速地工作。
如何為成功做準(zhǔn)備?
實現(xiàn)數(shù)據(jù)網(wǎng)格方法需要將領(lǐng)域建模和產(chǎn)品開發(fā)作為正常軟件工程生命周期的一部分。成功地實現(xiàn)領(lǐng)域所有權(quán)和產(chǎn)品開發(fā)影響人員、技能和企業(yè)設(shè)計，這需要從高級利益相關(guān)者那里購買才能成功地實現(xiàn)。
許多企業(yè)已經(jīng)在以這種方式對他們的企業(yè)進(jìn)行改造，將數(shù)據(jù)網(wǎng)格方法作為更廣泛的改造的一部分應(yīng)該會減少實現(xiàn)數(shù)據(jù)網(wǎng)格所涉及的總體工作和成本。如果企業(yè)已經(jīng)改變了他們的運營模型，那么數(shù)據(jù)網(wǎng)格方法是合乎邏輯的下一步，它可以從模型中獲得更多的價值，并緩解大數(shù)據(jù)方法中固有的許多挑戰(zhàn)。
成功實現(xiàn)數(shù)據(jù)網(wǎng)格的另一個關(guān)鍵因素是確保正確設(shè)置自助服務(wù)數(shù)據(jù)平臺。這需要一些預(yù)先的思考來定義平臺所需的功能、架構(gòu)、團(tuán)隊技能和結(jié)構(gòu)，以實現(xiàn)產(chǎn)品團(tuán)隊的自主權(quán)。它還需要一個理解自助服務(wù)平臺的愿景并擁有實現(xiàn)它所需技能的團(tuán)隊。
最后，建議從小處開始。創(chuàng)建一個MVP自助服務(wù)平臺，使一小組非關(guān)鍵數(shù)據(jù)集能夠在企業(yè)環(huán)境中證明技術(shù)和操作模型。
大數(shù)據(jù)是靈丹妙藥嗎?
數(shù)據(jù)網(wǎng)格可以通過在更廣泛的利益相關(guān)方之間驅(qū)動更高級別的自治和數(shù)據(jù)工程聯(lián)盟，克服大數(shù)據(jù)中固有的許多挑戰(zhàn)。然而，大數(shù)據(jù)并不是一種靈丹妙藥，它為企業(yè)帶來了一系列需要管理的風(fēng)險。
了解了數(shù)據(jù)網(wǎng)格方法所帶來的風(fēng)險，制定了如何降低這些風(fēng)險的計劃，選擇了支持自助服務(wù)平臺的正確架構(gòu)和支持愿景的利益相關(guān)者，企業(yè)利用數(shù)據(jù)的能力就可以發(fā)生重大變化。
NeilMulholland自從2010年以來擔(dān)任EnterpriseBlueprint公司的首席架構(gòu)師，自從20世紀(jì)90年代以來一直從事數(shù)字與集成架構(gòu)工作。最近，他在幫助企業(yè)大規(guī)模采用敏捷方法方面發(fā)揮了重要作用，他關(guān)注的是架構(gòu)和架構(gòu)治理如何在這種環(huán)境中工作。
Neil認(rèn)為，信任是通過展示專注于對客戶最重要的事情的能力來獲得的。理解客戶的需求，實現(xiàn)他們想要的結(jié)果，對于確定成功的解決方案和建立長期、互利的伙伴關(guān)系至關(guān)重要。
Neil通過非正式和正式的架構(gòu)團(tuán)隊指導(dǎo)為客戶的企業(yè)做出貢獻(xiàn)，幫助他們通過更好的解決方案和操作方法提高整個架構(gòu)團(tuán)隊的技能。他非常喜歡嘗試新技術(shù)，并學(xué)習(xí)如何最好地將其應(yīng)用于解決客戶問題，但不喜歡在引入新技術(shù)時出現(xiàn)陡峭的學(xué)習(xí)曲線，因為這會延遲真正的采用。
來源：e-works