|
新聞中心
當(dāng)前位置：網(wǎng)站首頁(yè) > 新聞中心
如何首次構(gòu)建云數(shù)據(jù)倉(cāng)庫(kù)
對(duì)很多組織來(lái)說(shuō)，如何首次成功地構(gòu)建云數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)難題，因此需要了解一些知識(shí)和技巧。
那么組織應(yīng)該如何進(jìn)入這個(gè)未知領(lǐng)域?第一次構(gòu)建和使用云數(shù)據(jù)倉(cāng)庫(kù)聽(tīng)起來(lái)可能讓人望而生畏，但對(duì)于希望將其數(shù)據(jù)更好地分類的組織來(lái)說(shuō)，云數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)可行的選擇，而且云平臺(tái)通常允許靈活性和可擴(kuò)展性。
數(shù)據(jù)虛擬化提供商Denodo公司最近進(jìn)行的一項(xiàng)研究發(fā)現(xiàn)，56%的組織在云平臺(tái)中部署了數(shù)據(jù)倉(cāng)庫(kù)技術(shù)，并經(jīng)常發(fā)現(xiàn)可以獲得很多好處，其中包括有效的工作負(fù)載管理和供應(yīng)商鎖定功能。
但是，初次嘗試使用這種技術(shù)的組織可能想知道從哪里開(kāi)始，并且如果失誤將在時(shí)間和費(fèi)用方面的代價(jià)很高。那么，組織應(yīng)該怎么做才能最大程度地降低風(fēng)險(xiǎn)，并確保獲得回報(bào)?1.提高勞動(dòng)力技能
需要努力解決的一個(gè)問(wèn)題是確保組織的員工技能已為過(guò)渡做好準(zhǔn)備。
云數(shù)據(jù)倉(cāng)庫(kù)技術(shù)的一個(gè)主要方面是它提供了大量的數(shù)據(jù)，并且在監(jiān)控客戶行為方面非常有益，但是如果組織的員工沒(méi)有足夠的技能來(lái)知道如何正確地利用它，就無(wú)法發(fā)揮它的潛力。
SolarWinds公司首席技術(shù)官ThomasLaRock說(shuō)，“在全球范圍內(nèi)建立數(shù)據(jù)倉(cāng)庫(kù)，具有低延遲和巨大的計(jì)算能力，已經(jīng)不再是標(biāo)準(zhǔn)業(yè)務(wù)無(wú)法企及的。在以往花費(fèi)數(shù)百萬(wàn)美元才能實(shí)現(xiàn)的工作，如今只需幾百美元和一些PowerShell腳本就可以完成。
組織可以輕松利用MicrosoftAzure和AWS之類的云計(jì)算提供商來(lái)為其數(shù)據(jù)分析需求分配硬件資源。但是，處理大數(shù)據(jù)需要認(rèn)真的技能提升，這是毫無(wú)疑問(wèn)的。但是這些新技能將拓寬組織IT專業(yè)人員的視野。對(duì)數(shù)據(jù)處理需要有著充分的了解，再加上傳統(tǒng)的網(wǎng)絡(luò)工程，最終將促進(jìn)IT專業(yè)人員的職業(yè)發(fā)展，因此應(yīng)被視為一項(xiàng)必要的投資?！?
2.建立充分的數(shù)據(jù)治理
LaRock繼續(xù)強(qiáng)調(diào)說(shuō)，必須確保以不會(huì)產(chǎn)生無(wú)用的重復(fù)數(shù)據(jù)或孤立數(shù)據(jù)的方式管理組織數(shù)據(jù)的重要性。
他說(shuō)：“在實(shí)現(xiàn)數(shù)據(jù)倉(cāng)庫(kù)時(shí)，最常見(jiàn)的陷阱是管理、收集和聚合同一數(shù)據(jù)的多個(gè)副本。企業(yè)通常有很多數(shù)據(jù)倉(cāng)庫(kù)，如果它們構(gòu)成數(shù)據(jù)倉(cāng)庫(kù)的一部分，就會(huì)產(chǎn)生冗余。如果要開(kāi)始構(gòu)建云數(shù)據(jù)倉(cāng)庫(kù)，則必須考慮建立適當(dāng)?shù)臄?shù)據(jù)治理策略。有了這樣的策略，就可以在實(shí)施數(shù)據(jù)倉(cāng)庫(kù)之前確定孤島?！?
3.從小處開(kāi)始
組織在首次嘗試建立云數(shù)據(jù)倉(cāng)庫(kù)時(shí)，最好是通過(guò)降低期望來(lái)最大程度地減少發(fā)生錯(cuò)誤時(shí)的風(fēng)險(xiǎn)。
SnapLogic公司的首席技術(shù)官CraigStewart說(shuō)：“這將是一個(gè)從小事做起的過(guò)程，在一個(gè)小項(xiàng)目中獲得一些經(jīng)驗(yàn)和價(jià)值，然后從中學(xué)習(xí)。從第一個(gè)項(xiàng)目中獲得經(jīng)驗(yàn)，然后就可以逐步獲得更多價(jià)值。
關(guān)于云計(jì)算的偉大之處在于，組織可以增加從RedShift和AzureSynapse之類獲得的彈性，這確實(shí)使組織能夠做到這一點(diǎn)。而從小事開(kāi)始就意味著，如果組織嘗試的項(xiàng)目遭遇失敗，可以從中學(xué)到經(jīng)驗(yàn)和教訓(xùn)，然后繼續(xù)進(jìn)行下一步，而不必付出巨大的成本，無(wú)論是資金來(lái)源，還是人力成本。
使用自助服務(wù)方式的非代碼類型工具。這種結(jié)合意味著組織可以尋求快速獲得價(jià)值，學(xué)習(xí)所做的并沒(méi)有給組織帶來(lái)價(jià)值，然后也可以快速發(fā)展，而不會(huì)遇到代價(jià)非常昂貴的失敗，而失敗本身就是一個(gè)獲得價(jià)值的學(xué)習(xí)過(guò)程?！?
4.規(guī)劃新的架構(gòu)是關(guān)鍵
除了從小處做起，組織還必須通過(guò)仔細(xì)規(guī)劃其云數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)來(lái)保持耐心，這一點(diǎn)至關(guān)重要。
WhereScape公司副總裁兼歐洲、中東和非洲地區(qū)總經(jīng)理RobMellor說(shuō)：“組織需要注意在研究過(guò)程中會(huì)聽(tīng)到的一些誤導(dǎo)。組織不僅可以將所有數(shù)據(jù)都放入云平臺(tái)中，而且無(wú)需進(jìn)行任何設(shè)計(jì)或架構(gòu)即可開(kāi)始對(duì)其進(jìn)行分析。分析環(huán)境是經(jīng)過(guò)計(jì)劃和架構(gòu)的，因此所有用戶都可以理解和使用它。
組織也無(wú)需將所有數(shù)據(jù)倉(cāng)庫(kù)遷移到云端，而無(wú)需重新設(shè)計(jì)。組織原有的數(shù)據(jù)倉(cāng)庫(kù)在清理過(guò)程中會(huì)遇到很多麻煩。
但這是組織清除低效流程，浪費(fèi)未使用資產(chǎn)(例如原有報(bào)表、可視化和分析已不再使用)空間的好時(shí)機(jī)。這也是使許多流程自動(dòng)化以提高其效率的絕好機(jī)會(huì)。”
6.利用現(xiàn)有模型
第一次將數(shù)據(jù)倉(cāng)庫(kù)遷移到云中的決定可能不需要完全的新工作，并且可能需要從需要改進(jìn)的現(xiàn)有體系結(jié)構(gòu)中吸取教訓(xùn)。
除了其他好處外，這還可以幫助組織滿足上述對(duì)足夠數(shù)據(jù)治理的需求。
Exasol公司市場(chǎng)情報(bào)經(jīng)理HelenaSchwenk表示：“應(yīng)將遷移視為合理化和修改現(xiàn)有本地?cái)?shù)據(jù)倉(cāng)庫(kù)的機(jī)會(huì)。組織需要確定可以修改、擴(kuò)充或添加哪些數(shù)據(jù)資產(chǎn)和源，并采用漸進(jìn)式遷移策略，以實(shí)現(xiàn)具有凝聚力的云數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)，包括適當(dāng)?shù)闹卫砗捅O(jiān)督?！?
7.確?？赡艿难葑?
Schwenk表示，組織需要了解如何使用內(nèi)部經(jīng)常使用的數(shù)據(jù)以外的其他種類數(shù)據(jù)的重要性。云計(jì)算的大數(shù)據(jù)(尤其是公共云)可以從外部影響的整合中受益。
她說(shuō)：“組織需要研究公共云如何支持新的數(shù)據(jù)工作負(fù)載或業(yè)務(wù)用例。例如，考慮通過(guò)利用云數(shù)據(jù)倉(cāng)庫(kù)的規(guī)模和彈性來(lái)支持更多的數(shù)據(jù)可供分析使用，從而在云數(shù)據(jù)倉(cāng)庫(kù)中支持高級(jí)分析和數(shù)據(jù)科學(xué)。那些更新的云原生數(shù)據(jù)源(例如社交媒體數(shù)據(jù)和來(lái)自傳感器的數(shù)據(jù))，在提供對(duì)業(yè)務(wù)的更深入，更深刻的理解方面可能會(huì)極大地受益?！?
8.考慮采用無(wú)服務(wù)器技術(shù)
UnravelData公司國(guó)際區(qū)域副總裁JustynGoodenough建議考慮使用無(wú)服務(wù)器技術(shù)。
他說(shuō)：“無(wú)服務(wù)器關(guān)系數(shù)據(jù)庫(kù)是商業(yè)智能應(yīng)用程序和發(fā)布數(shù)據(jù)以供其他系統(tǒng)使用的常見(jiàn)選擇。它們提供了規(guī)模，性能以及最重要的是對(duì)準(zhǔn)備好的數(shù)據(jù)的基于SQL的訪問(wèn)。
供應(yīng)商的示例包括AWSRedshift、GoogleBigQuery和AzureSQL數(shù)據(jù)倉(cāng)庫(kù)。這些對(duì)大小適中和相對(duì)簡(jiǎn)單的數(shù)據(jù)結(jié)構(gòu)非常有用。
對(duì)于更高的性能和復(fù)雜的關(guān)系數(shù)據(jù)模型，大規(guī)模并行處理(MPP)數(shù)據(jù)庫(kù)在內(nèi)存中存儲(chǔ)大量數(shù)據(jù)，并且可以快速發(fā)展，但往往代價(jià)高昂?！?
9.研究和尋求專業(yè)知識(shí)
最后，首次開(kāi)始使用云數(shù)據(jù)倉(cāng)庫(kù)技術(shù)時(shí)應(yīng)考慮的兩個(gè)技巧可能適用于任何新的業(yè)務(wù)活動(dòng)，甚至是生活中的風(fēng)險(xiǎn)。
ZenInternet公司云計(jì)算與托管總經(jīng)理GMLyons說(shuō)，“重要的是要準(zhǔn)確地了解組織需要尋找的內(nèi)容，因?yàn)椴煌钠脚_(tái)在數(shù)據(jù)類型、分析和處理方面具有不同的優(yōu)勢(shì)。例如，有些組織可能會(huì)發(fā)現(xiàn)多云服務(wù)更合適，不要以為從特定提供商那里獲得了一項(xiàng)云計(jì)算服務(wù)，因?yàn)樗鼈円矊⑹菨M足組織其他云計(jì)算需求的最佳提供商。
最后，除了開(kāi)展自己的研究之外，組織還應(yīng)與具有該領(lǐng)域框架和經(jīng)驗(yàn)的專家合作。這將有助于最大程度地降低采用云數(shù)據(jù)倉(cāng)庫(kù)的任何風(fēng)險(xiǎn)或挑戰(zhàn)，并確保組織獲得競(jìng)爭(zhēng)優(yōu)勢(shì)，以充分利用其帶來(lái)的收益?！?
|
