跟蹤大數(shù)據(jù)趨勢(shì)、研究和統(tǒng)計(jì)數(shù)據(jù)為 IT 專業(yè)人員規(guī)劃大數(shù)據(jù)項(xiàng)目奠定了堅(jiān)實(shí)的基礎(chǔ)。以下是每個(gè) IT 專業(yè)人員都應(yīng)該知道的 15 個(gè)重要的大數(shù)據(jù)事實(shí)。每個(gè)人都在談?wù)摯髷?shù)據(jù)，從挑戰(zhàn)到年度支出、創(chuàng)造就業(yè)機(jī)會(huì)，甚至是大數(shù)據(jù)項(xiàng)目所需的工具。許多人認(rèn)為大數(shù)據(jù)將幫助企業(yè)做出更好的決策，事實(shí)上，近十分之八的高管同意或強(qiáng)烈同意“如果我們能夠利用所有數(shù)據(jù)，我們將成為一家更強(qiáng)大的企業(yè)”的說法。

跟蹤大數(shù)據(jù)趨勢(shì)、研究和統(tǒng)計(jì)數(shù)據(jù)為 IT 專業(yè)人員規(guī)劃大數(shù)據(jù)項(xiàng)目奠定了堅(jiān)實(shí)的基礎(chǔ)。Webopedia 編制了每個(gè) IT 專業(yè)人員都應(yīng)該知道的重要大數(shù)據(jù)事實(shí)和統(tǒng)計(jì)數(shù)據(jù)列表。

大數(shù)據(jù)：我們是如何到達(dá)這里的？

1. 有多少數(shù)據(jù)？

每天，我們創(chuàng)建了 2.5 萬億字節(jié)的數(shù)據(jù)，以至于當(dāng)今世界上 90% 的數(shù)據(jù)都是在過去兩年中創(chuàng)建的。這些數(shù)據(jù)來自各處：用于收集氣候信息的傳感器、社交媒體網(wǎng)站的帖子、數(shù)字圖片和視頻、購買交易記錄以及手機(jī) GPS 信號(hào)等等。

2. 結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)

在對(duì)大數(shù)據(jù)進(jìn)行分類時(shí)，Tata Consultancy Services Limited (TCS) 研究了公司數(shù)據(jù)中有多少是結(jié)構(gòu)化的與非結(jié)構(gòu)化的，以及有多少是內(nèi)部生成的與外部生成的。

– 51% 的數(shù)據(jù)是結(jié)構(gòu)化的

– 27% 的數(shù)據(jù)是非結(jié)構(gòu)化的

– 21% 的數(shù)據(jù)是半結(jié)構(gòu)化的

遠(yuǎn)高于預(yù)期的數(shù)據(jù)百分比不是非結(jié)構(gòu)化或半結(jié)構(gòu)化的，只有不到四分之一的數(shù)據(jù)是外部數(shù)據(jù)。

大數(shù)據(jù)工作

3. 大數(shù)據(jù)創(chuàng)造就業(yè)機(jī)會(huì)

到 2015 年，全球?qū)?chuàng)造 440 萬個(gè) IT 工作崗位來支持大數(shù)據(jù)，在美國(guó)創(chuàng)造 190 萬個(gè) IT 工作崗位。在美國(guó)，每一個(gè)大數(shù)據(jù)相關(guān)的職位都會(huì)為 IT 以外的三個(gè)人創(chuàng)造就業(yè)機(jī)會(huì)，因此未來四年，信息經(jīng)濟(jì)將在美國(guó)創(chuàng)造 600 萬個(gè)就業(yè)崗位。挑戰(zhàn)？行業(yè)人才不足。

4. 大數(shù)據(jù)人才短缺

組織利用大數(shù)據(jù)所需的人才將會(huì)短缺。到 2018 年，僅美國(guó)就可能面臨 140,000 至 190,000 名具有深厚分析技能的人才以及 150 萬名具備利用大數(shù)據(jù)分析做出有效決策的專業(yè)知識(shí)的管理人員和分析師的短缺。

5. 重新思考工作角色和頭銜

81% 的 IT 領(lǐng)導(dǎo)者和 77% 的 IT 專業(yè)人員認(rèn)為，具有規(guī)劃、執(zhí)行和利用組織數(shù)據(jù)資產(chǎn)潛力所需技能的員工嚴(yán)重短缺。大數(shù)據(jù)項(xiàng)目可能意味著重新考慮工作角色和頭銜，以及充分利用數(shù)據(jù)所需的非技術(shù)技能。

大數(shù)據(jù)挑戰(zhàn)與困境

6. 不同的系統(tǒng)

66% 的 IT 領(lǐng)導(dǎo)者和 53% 的 IT 專業(yè)人員聲稱他們的數(shù)據(jù)存儲(chǔ)在不同的系統(tǒng)中，這些組織必須構(gòu)建新平臺(tái)來滿足這些增加的數(shù)據(jù)管理需求。

7. 從大數(shù)據(jù)中獲取商業(yè)價(jià)值

從大數(shù)據(jù)中獲取商業(yè)價(jià)值的最大挑戰(zhàn)是文化和技術(shù)。當(dāng)被要求對(duì) 16 項(xiàng)挑戰(zhàn)進(jìn)行評(píng)分時(shí)，公司將組織挑戰(zhàn)排在首位：讓業(yè)務(wù)部門跨組織孤島共享信息。緊隨其后的是技術(shù)問題：處理眾所周知的大數(shù)據(jù)的三個(gè) V：數(shù)據(jù)量、速度和多樣性。第三個(gè)挑戰(zhàn)是確定將哪些數(shù)據(jù)用于不同的業(yè)務(wù)決策。

8. 數(shù)據(jù)質(zhì)量

超過一半的 IT 領(lǐng)導(dǎo)者 (57%) 和 IT 專業(yè)人員 (52%) 表示他們并不總是知道誰擁有數(shù)據(jù)。如果不知道誰擁有數(shù)據(jù)，就沒有人對(duì)其質(zhì)量負(fù)責(zé)。由于大數(shù)據(jù)項(xiàng)目將不同來源和種類的數(shù)據(jù)融合在一起，確保數(shù)據(jù)的準(zhǔn)確性和質(zhì)量將是成功的關(guān)鍵。

大數(shù)據(jù)投資的主要原因

9. 創(chuàng)建更強(qiáng)大的業(yè)務(wù)

CompTIA 發(fā)現(xiàn)，在其組織中負(fù)責(zé)涉及數(shù)據(jù)的技術(shù)或戰(zhàn)略決策的高管中有近十分之八的人同意，利用所有企業(yè)數(shù)據(jù)將帶來更強(qiáng)大的業(yè)務(wù)。調(diào)查還發(fā)現(xiàn)，93% 的調(diào)查參與者表示數(shù)據(jù)對(duì)他們的業(yè)務(wù)至關(guān)重要；同樣的百分比認(rèn)為這在 2014 年也很重要。投資于數(shù)據(jù)計(jì)劃的最有力論據(jù)之一來自以下數(shù)據(jù)點(diǎn)：近十分之八的高管同意或強(qiáng)烈同意“如果我們能夠利用所有數(shù)據(jù)，我們將成為一家更強(qiáng)大的企業(yè)”的說法。

10. 更好地管理數(shù)據(jù)

不到五分之一的企業(yè)報(bào)告說他們?cè)诠芾砗褪褂脭?shù)據(jù)時(shí)正好處于他們想要的位置。誠(chéng)然，這代表了一個(gè)很高的標(biāo)準(zhǔn)，但即使包括那些“非常接近”目標(biāo)的企業(yè)，它仍然讓大多數(shù)企業(yè)在數(shù)據(jù)方面有大量工作要做。

11. 三大大數(shù)據(jù)業(yè)務(wù)驅(qū)動(dòng)力

前三大大數(shù)據(jù)業(yè)務(wù)驅(qū)動(dòng)因素包括：

– 加快運(yùn)營(yíng)或分析工作負(fù)載的時(shí)間 (39%)

– 通過業(yè)務(wù)解決方案中使用的數(shù)據(jù)靈活性提高競(jìng)爭(zhēng)優(yōu)勢(shì) (34%)

– 對(duì)更高級(jí)別高級(jí)分析的業(yè)務(wù)需求 (31%)。

大數(shù)據(jù)支出和實(shí)施

12. 大數(shù)據(jù)實(shí)施

生產(chǎn)中的大數(shù)據(jù)實(shí)施從 2012 年的 27% 上升到 2013 年的 34.3%。此外，作為大數(shù)據(jù)計(jì)劃的一部分，68% 的公司正在運(yùn)行兩個(gè)或多個(gè)大數(shù)據(jù)項(xiàng)目。對(duì)于制定了分析戰(zhàn)略的公司來說，最重要的業(yè)務(wù)驅(qū)動(dòng)因素是需要將銷售信息與運(yùn)營(yíng)分析相結(jié)合（57%）。

13. 大數(shù)據(jù)工具

80% 的響應(yīng)者表示，他們已經(jīng)在或計(jì)劃在生產(chǎn)環(huán)境中使用專用的大數(shù)據(jù)工具或架構(gòu)來應(yīng)對(duì)海量數(shù)據(jù)的涌入。56% 的受訪者表示他們計(jì)劃將現(xiàn)有應(yīng)用程序從 RDBMS 遷移到 NoSQL 數(shù)據(jù)存儲(chǔ)。

14. 大數(shù)據(jù)支出

在大數(shù)據(jù)上的支出存在兩極分化，少數(shù)公司花費(fèi)大量資金，而大部分公司花費(fèi)很少。2012 年，大約 15% 的被調(diào)查公司在大數(shù)據(jù)計(jì)劃上每家花費(fèi)至少 1 億美元，7% 的公司投資至少 5 億美元。相比之下，近四分之一 (24%) 的人每人花費(fèi)不到 250 萬美元。

15. 在大數(shù)據(jù)上花費(fèi)最多的行業(yè)

支出最多的行業(yè)是電信、旅游相關(guān)、高科技和銀行業(yè)；生命科學(xué)、零售和能源/資源公司的支出最少。