云中的分析：關(guān)鍵挑戰(zhàn)以及如何克服它們

作者：佚名 2021-04-16 14:05:32
云計(jì)算 與傳統(tǒng)方法內(nèi)部進(jìn)行的分析相比，將分析遷移到云需要新的方法，技能和體系結(jié)構(gòu)。

  【51CTO.com快譯】

像許多其他IT功能一樣，數(shù)據(jù)分析也正在遷移到云中。與其他基于云的努力一樣，這既帶來(lái)機(jī)遇，也帶來(lái)挑戰(zhàn)。
Gartner引用了2021年十大數(shù)據(jù)和分析技術(shù)趨勢(shì)之一，即使用開(kāi)放的，容器化的分析架構(gòu)，從而使分析功能更易組合。這家研究公司表示，這使企業(yè)能夠快速創(chuàng)建靈活，智能的應(yīng)用程序，以幫助數(shù)據(jù)分析師將見(jiàn)解與行動(dòng)聯(lián)系起來(lái)。
“隨著數(shù)據(jù)重心轉(zhuǎn)移到云中，可組合數(shù)據(jù)和分析將成為構(gòu)建由云市場(chǎng)以及低代碼和無(wú)代碼解決方案支持的分析應(yīng)用程序的更加敏捷的方式，” Gartner指出。
云可以將公司的數(shù)據(jù)分析提高到一個(gè)新的水平。
創(chuàng)意服務(wù)機(jī)構(gòu)Loveurope and Partners（LEAP）的系統(tǒng)和技術(shù)總監(jiān)Aidan Taub表示：“云可為我們提供高計(jì)算量工作負(fù)載所需的可伸縮性?！?br /> Taub說(shuō)：“隨著世界繼續(xù)將一切數(shù)字化，組織需要能夠以指數(shù)級(jí)的規(guī)模構(gòu)建文件數(shù)據(jù)。” “當(dāng)您擁有大量的非結(jié)構(gòu)化數(shù)據(jù)，例如我們?cè)贚EAP處理的視頻，圖像和音頻時(shí)，您將永遠(yuǎn)無(wú)法知道下一份工作的規(guī)模。傳統(tǒng)分析無(wú)法像云一樣擴(kuò)展規(guī)模?！?br /> 然而，與傳統(tǒng)方式內(nèi)部進(jìn)行批處理分析相比，云中的分析需要不同的方法，技能，架構(gòu)和經(jīng)濟(jì)性。伴隨著所有這些變化，勢(shì)必需要克服一些障礙。
這是組織可能會(huì)面臨的一些挑戰(zhàn)，以及當(dāng)他們轉(zhuǎn)向在云中執(zhí)行數(shù)據(jù)分析時(shí)如何解決這些挑戰(zhàn)。
害怕失去控制-未知
數(shù)據(jù)分析對(duì)于企業(yè)來(lái)說(shuō)具有高度的戰(zhàn)略意義，對(duì)于習(xí)慣于完全控制此類(lèi)資源的技術(shù)領(lǐng)導(dǎo)者而言，將分析過(guò)程遷移到云中的想法可能令人望而生畏。

德勤咨詢(xún)公司高級(jí)分析支持主管負(fù)責(zé)人Anthony Abbattista

“我們看到客戶(hù)面臨的主要挑戰(zhàn)之一是組織慣性/對(duì)失去控制的恐懼，” Deloitte Consulting高級(jí)分析支持主管負(fù)責(zé)人Anthony Abbattista說(shuō)道，他曾與眾多高級(jí)IT高管合作過(guò)，轉(zhuǎn)向基于云的技術(shù)。分析。
Abbattista說(shuō)：“ IT和CIO的傳統(tǒng)角色是保護(hù)并成為數(shù)據(jù)資產(chǎn)的守護(hù)者?！?在某些情況下，云挑戰(zhàn)了現(xiàn)狀，因?yàn)樗梢愿斓赝葡蚴袌?chǎng)。他說(shuō)，例如，產(chǎn)品選擇和評(píng)估，點(diǎn)擊配置的需求有限，無(wú)需大量增加資本支出等等。
Abbattista說(shuō)：“首席數(shù)據(jù)官和CIO需要共同努力，以審核和熟悉云平臺(tái)，因此他們可以幫助他們至少與競(jìng)爭(zhēng)對(duì)手一樣快地獲得業(yè)務(wù)價(jià)值和競(jìng)爭(zhēng)優(yōu)勢(shì)?！?“這可能需要采用市場(chǎng)上可接受的，經(jīng)過(guò)驗(yàn)證的和新興的模型，而不是從頭開(kāi)始設(shè)計(jì)/架構(gòu)分析環(huán)境?！?/p>

布蘭登·瓊斯（Brandon Jones），CIO，公共機(jī)構(gòu)員工全球保障（WAEPA）

保險(xiǎn)提供商公共機(jī)構(gòu)雇員全球保障（WAEPA）的CIO布蘭登·瓊斯（Brandon Jones）說(shuō)，由于現(xiàn)有分析流程的靈活性，許多組織在探索新的分析功能方面進(jìn)展緩慢。他說(shuō)：“這減少了嘗試新功能并推動(dòng)創(chuàng)新的激勵(lì)措施和計(jì)劃?！?br /> 為了克服這個(gè)問(wèn)題，WAEPA的IT部門(mén)使用了具有云功能的沙箱環(huán)境來(lái)建立試錯(cuò)法構(gòu)想流程，并利用主要利益相關(guān)者的關(guān)鍵績(jī)效指標(biāo)，并創(chuàng)建了原型優(yōu)先的分析環(huán)境。
做出轉(zhuǎn)變
除了克服人們認(rèn)為的失控之外，IT領(lǐng)導(dǎo)者還需要應(yīng)對(duì)向云的實(shí)際遷移，并確保不中斷服務(wù)。
“這令人生畏。對(duì)于許多IT領(lǐng)導(dǎo)者來(lái)說(shuō)，他們要做的最困難的事情就是導(dǎo)航到云的道路?！?Taub說(shuō)?！暗?，如果他們選擇正確的解決方案，就不必那樣做?！?br /> Taub說(shuō)，在將數(shù)據(jù)分析遷移到云中時(shí)，在許多情況下，IT領(lǐng)導(dǎo)者將從“提升和轉(zhuǎn)移”方法開(kāi)始，將現(xiàn)有的操作移植到云中。他補(bǔ)充說(shuō)：“通常，這意味著需要重新構(gòu)建應(yīng)用程序和系統(tǒng)的工具，以便為云重新架構(gòu)它們。”
作為2019年對(duì)其舊數(shù)據(jù)基礎(chǔ)架構(gòu)的全面改革的一部分，LEAP使用Qumulo的分析平臺(tái)將大量非結(jié)構(gòu)化文件數(shù)據(jù)遷移到了云中。LEAP的文件數(shù)據(jù)以前分散在各種不同的舊式存儲(chǔ)系統(tǒng)中，并且數(shù)據(jù)管理員在工作流中不同位置管理和定位數(shù)據(jù)非常耗費(fèi)人力。
“幸運(yùn)的是，Qumulo幫助我們轉(zhuǎn)移了所有數(shù)據(jù)，而無(wú)需為云重構(gòu)應(yīng)用程序，” Taub說(shuō)?！拔医ㄗh您找到一種[工具]，使在多個(gè)環(huán)境中復(fù)制和提取數(shù)據(jù)變得簡(jiǎn)單。”

這一轉(zhuǎn)變使該公司能夠優(yōu)化其數(shù)據(jù)分析，并將性能提高多達(dá)240倍。通過(guò)Analytics（分析），公司可以查看已連接的客戶(hù)端數(shù)量，使用帶寬最多的客戶(hù)端以及系統(tǒng)在何處快速增長(zhǎng)。

Taub說(shuō)：“創(chuàng)造性工作流程的成功很大程度上取決于我們?cè)谠浦性L(fǎng)問(wèn)數(shù)據(jù)分析的能力。” “我們擁有由數(shù)百名藝術(shù)家，設(shè)計(jì)師和動(dòng)態(tài)圖形編輯人員組成的全球網(wǎng)絡(luò)，因此，我們需要利用云來(lái)有效，安全地協(xié)作創(chuàng)意項(xiàng)目。如果沒(méi)有基于云的數(shù)據(jù)分析，我們的生產(chǎn)流程將停止?！?/p>

Loveurope and Partners（LEAP）系統(tǒng)與技術(shù)總監(jiān)Aidan Taub

掌握正確的技能
成功的IT工作似乎總是歸功于掌握必要的技能。將分析遷移到云也不例外。
德勤咨詢(xún)（Deloitte Consulting）看到對(duì)技能的需求開(kāi)始發(fā)生變化?！安皇怯蓪?zhuān)家來(lái)支持傳統(tǒng)分析/ BI（商業(yè)智能）中技術(shù)堆棧的每個(gè)部分，而是云分析環(huán)境需要更多的“全?！彼季S，” Abbattista說(shuō)。
他補(bǔ)充說(shuō)：“為應(yīng)對(duì)這一挑戰(zhàn)，支持這些新時(shí)代環(huán)境的技術(shù)團(tuán)隊(duì)需要了解云平臺(tái)上的產(chǎn)品，采用標(biāo)準(zhǔn)模式，然后隨著新技術(shù)，工具和產(chǎn)品的出現(xiàn)而發(fā)展?！?/p>

美元樹(shù)前首席信息官Josh Jewett

喬什·杰維特（Josh Jewett）說(shuō)，選擇在云環(huán)境中構(gòu)建自己的分析平臺(tái)或依賴(lài)供應(yīng)商系統(tǒng)的公司將需要具有特定的內(nèi)部技術(shù)專(zhuān)業(yè)知識(shí)，而喬什·杰維特（Josh Jewett）則是零售商Dollar Tree的首席信息官。
Jewett說(shuō)，這些技能包括創(chuàng)建，維護(hù)和從數(shù)據(jù)湖中獲取分析的技能，以及如何最好地利用云原生或第三方人工智能和機(jī)器學(xué)習(xí)功能來(lái)從環(huán)境中汲取更多見(jiàn)解。
“這些缺點(diǎn)可以通過(guò)經(jīng)驗(yàn)豐富的合作伙伴和顧問(wèn)來(lái)克服，” Jewett說(shuō)。他說(shuō)，理想的安排是從這些外部專(zhuān)家那里獲取經(jīng)驗(yàn)，以便與他們簽訂合同后，該公司便擁有知識(shí)和專(zhuān)業(yè)知識(shí)，可以根據(jù)需要繼續(xù)發(fā)展基于云的分析。
在Dollar Tree任職期間，Jewett在幫助公司現(xiàn)代化許多系統(tǒng)（包括數(shù)據(jù)分析）方面發(fā)揮了重要作用。他說(shuō)：“像其他許多零售商一樣，我的公司采取了混合策略?！?它部署了軟件即服務(wù)平臺(tái)，以為關(guān)鍵業(yè)務(wù)功能提供特定的分析功能。
Jewett說(shuō)：“例如，這些工具包括用于庫(kù)存生產(chǎn)率，價(jià)格優(yōu)化，減輕損失預(yù)防以及人才獲取和績(jī)效管理的工具。” 該公司還在云環(huán)境中開(kāi)發(fā)了一些自己的分析應(yīng)用程序，以利用云的靈活性，可伸縮性和加快產(chǎn)品上市的優(yōu)勢(shì)。
保護(hù)數(shù)據(jù)
無(wú)論有多少云服務(wù)提供商強(qiáng)調(diào)其基礎(chǔ)架構(gòu)的安全性，許多客戶(hù)將始終擔(dān)心其數(shù)據(jù)在云中的實(shí)際安全性。
對(duì)于分析尤其如此，因?yàn)閺臄?shù)據(jù)分析中獲得的見(jiàn)解可以成為競(jìng)爭(zhēng)優(yōu)勢(shì)。還擔(dān)心公開(kāi)諸如客戶(hù)信息之類(lèi)的高度敏感的數(shù)據(jù)。
Taub說(shuō)，“任何時(shí)候?qū)⒐镜膶氋F數(shù)據(jù)移出私有數(shù)據(jù)中心時(shí)，安全都是頭等大事”。“ LEAP利用了包括自由職業(yè)者在內(nèi)的全球員工網(wǎng)絡(luò)，這意味著我們必須確保我們的數(shù)據(jù)將在內(nèi)部和外部用戶(hù)訪(fǎng)問(wèn)的云中得到保護(hù)?！?br /> 最大的安全隱患之一是控制對(duì)云應(yīng)用程序和數(shù)據(jù)的訪(fǎng)問(wèn)。
軟件提供商首席數(shù)據(jù)和信息官艾米·奧康納（Amy O'Connor）表示：“人們使用云應(yīng)用程序的便捷性帶來(lái)了挑戰(zhàn)，其中許多根源在于人們可能會(huì)無(wú)意中引發(fā)安全，隱私和經(jīng)濟(jì)方面的擔(dān)憂(yōu)?！鼻∏?。
O'Connor說(shuō)：“在云帳戶(hù)之間進(jìn)行安全切換以及安全地存儲(chǔ)和交換密鑰是一個(gè)安全問(wèn)題?！?“需要圍繞適當(dāng)使用數(shù)據(jù)進(jìn)行強(qiáng)有力的治理。在云中，這比本地部署更為緊急，因?yàn)槿藗兛梢院苋菀椎貜?fù)制數(shù)據(jù)并以未經(jīng)授權(quán)的方式使用它們?！?br /> 精確地具有混合的多云模型，可以利用多個(gè)云供應(yīng)商來(lái)滿(mǎn)足其計(jì)算和存儲(chǔ)需求。O'Connor說(shuō)：“基于云的數(shù)據(jù)湖是我們存儲(chǔ)大量數(shù)據(jù)的地方。” “如果數(shù)據(jù)源自云，我們將在云中開(kāi)始處理。如果我們具有本質(zhì)上突發(fā)性的分析需求，則可以利用云。如果我們需要快速開(kāi)始分析處理，則從云開(kāi)始。當(dāng)我們需要處理非結(jié)構(gòu)化數(shù)據(jù)以及使用包括機(jī)器學(xué)習(xí)在內(nèi)的高級(jí)分析處理時(shí)，我們可以利用基于云的數(shù)據(jù)湖?！?/p>

精確數(shù)據(jù)首席信息官艾米·奧康納（Amy O'Connor）

避免錢(qián)坑
盡管使用云服務(wù)可以幫助組織避免諸如本地存儲(chǔ)系統(tǒng)之類(lèi)的成本，但支出可能會(huì)很快失控或超出預(yù)期。
“預(yù)算始終是個(gè)問(wèn)題，”陶布說(shuō)。“一刀切的所有數(shù)據(jù)架構(gòu)可能是IT支出陷阱。在做出將分析遷移到云的決定時(shí)，企業(yè)通常會(huì)感到壓力，需要支付高昂的前期成本并陷入無(wú)法滿(mǎn)足其當(dāng)前需求的長(zhǎng)期合同中?！?br /> 關(guān)鍵是要找到一個(gè)不會(huì)強(qiáng)制云鎖定的提供商。Taub說(shuō)：“在評(píng)估云平臺(tái)時(shí)，不要害怕四處尋找可以滿(mǎn)足您當(dāng)前分析需求的靈活解決方案，并可以根據(jù)需要靈活地?cái)U(kuò)展以滿(mǎn)足您的未來(lái)需求?！?br /> O'Connor說(shuō)，盡管在云中上手很容易，但也很容易將錯(cuò)誤的作業(yè)類(lèi)型遷移到云中，并在不再需要云應(yīng)用程序和資源后讓它們繼續(xù)運(yùn)行。
O'Connor說(shuō)，控制云成本的兩種最有效方法是控制云帳戶(hù)的創(chuàng)建方式，并且對(duì)于誰(shuí)在使用云資源完全透明。
“為了解決第一點(diǎn)，我們將每個(gè)提供商下的所有云帳戶(hù)都遷移到一個(gè)'主'帳戶(hù)中，” O'Connor說(shuō)?！拔覀兗辛苏l(shuí)可以創(chuàng)建新的云帳戶(hù)。需要新的云資源的個(gè)人和團(tuán)體都要經(jīng)過(guò)正式的請(qǐng)求流程。該請(qǐng)求必須包括業(yè)務(wù)理由，部門(mén)預(yù)算信息和業(yè)務(wù)所有者?！?br /> 至于透明性，只要請(qǐng)求得到批準(zhǔn)，中央團(tuán)隊(duì)就會(huì)在主帳戶(hù)下創(chuàng)建任何新的云帳戶(hù)。O'Connor說(shuō)：“該治理政策使我們能夠透明化我們的云提供商開(kāi)具發(fā)票的費(fèi)用?！?“使用請(qǐng)求中提供的信息創(chuàng)建每個(gè)帳戶(hù)，然后我們可以使用云提供商的門(mén)戶(hù)或控制臺(tái)來(lái)監(jiān)視與每個(gè)初始請(qǐng)求匹配的支出?！?br /> 精確地利用此支出信息建立內(nèi)部費(fèi)用分?jǐn)偰Ｐ停瑢?yīng)計(jì)的云成本應(yīng)用到請(qǐng)求者的預(yù)算中。O'Connor說(shuō)，IT使用這些方法“以提高對(duì)云成本的責(zé)任感，并確保出于正確的業(yè)務(wù)原因適當(dāng)?shù)刂С觥薄?/p>

來(lái)源：CIO.com 原文鏈接：https://www.cio.com/article/3614196/analytics-in-the-cloud-key-challenges-and-how-to-overcome-them.html

【51CTO譯稿，合作站點(diǎn)轉(zhuǎn)載請(qǐng)注明原文譯者和出處為51CTO.com】

當(dāng)前標(biāo)題：云中的分析：關(guān)鍵挑戰(zhàn)以及如何克服它們
分享地址：http://www.5511xx.com/article/djjdiih.html