找出過(guò)去事件的特征，最大的作用是可以幫助企業(yè)更好地認(rèn)識(shí)消費(fèi)者。通過(guò)分析用戶(hù)以往的行為軌跡，就能夠了解這個(gè)人，并預(yù)測(cè)他的行為。“你可以知道他是什么樣的人、他的年紀(jì)、興趣愛(ài)好，是不是互聯(lián)網(wǎng)付費(fèi)用戶(hù)、喜歡玩什么類(lèi)型的游戲，平常喜歡在網(wǎng)上做什么事情。”騰訊云計(jì)算有限公司北京研發(fā)中心總經(jīng)理鄭立峰說(shuō)。下一步到了業(yè)務(wù)層面，就可以針對(duì)各類(lèi)人群推薦相關(guān)服務(wù)，比如手游，或是基于不同特征和需求衍生出新的業(yè)務(wù)模式，比如微信的電影票業(yè)務(wù)。

2.預(yù)測(cè)未來(lái)可能發(fā)生的事情

通過(guò)引入關(guān)鍵因素，大數(shù)據(jù)工程師可以預(yù)測(cè)未來(lái)的消費(fèi)趨勢(shì)。在阿里媽媽的營(yíng)銷(xiāo)平臺(tái)上，工程師正試圖通過(guò)引入氣象數(shù)據(jù)來(lái)幫助淘寶賣(mài)家做生意。“比如今年夏天不熱，很可能某些產(chǎn)品就沒(méi)有去年暢銷(xiāo)，除了空調(diào)、電扇，背心、游泳衣等都可能會(huì)受其影響。那么我們就會(huì)建立氣象數(shù)據(jù)和銷(xiāo)售數(shù)據(jù)之間的關(guān)系，找到與之相關(guān)的品類(lèi)，提前警示賣(mài)家周轉(zhuǎn)庫(kù)存。”薛貴榮說(shuō)。

在百度，沈志勇支持“百度預(yù)測(cè)”部分產(chǎn)品的模型研發(fā)，試圖用大數(shù)據(jù)為更廣泛的人群服務(wù)。已經(jīng)上線的包括世界杯預(yù)測(cè)、高考預(yù)測(cè)、景點(diǎn)預(yù)測(cè)等。以百度景點(diǎn)預(yù)測(cè)為例，大數(shù)據(jù)工程師需要收集所有可能影響一段時(shí)間內(nèi)景點(diǎn)人流量的關(guān)鍵因素進(jìn)行預(yù)測(cè)，并為全國(guó)各個(gè)景點(diǎn)未來(lái)的擁擠度分級(jí)—在接下來(lái)的若干天時(shí)間里，它究竟是暢通、擁擠，還是一般擁擠?

3.找出最優(yōu)化的結(jié)果

根據(jù)不同企業(yè)的業(yè)務(wù)性質(zhì)，大數(shù)據(jù)工程師可以通過(guò)數(shù)據(jù)分析來(lái)達(dá)到不同的目的。

以騰訊來(lái)說(shuō)，鄭立峰認(rèn)為能反映大數(shù)據(jù)工程師工作的最簡(jiǎn)單直接的例子就是選項(xiàng)測(cè)試(AB Test)，即幫助產(chǎn)品經(jīng)理在A、B兩個(gè)備選方案中做出選擇。在過(guò)去，決策者只能依據(jù)經(jīng)驗(yàn)進(jìn)行判斷，但如今大數(shù)據(jù)工程師可以通過(guò)大范圍地實(shí)時(shí)測(cè)試—比如，在社交網(wǎng)絡(luò)產(chǎn)品的例子中，讓一半用戶(hù)看到A界面，另一半使用B界面，觀察統(tǒng)計(jì)一段時(shí)間內(nèi)的點(diǎn)擊率和轉(zhuǎn)化率，以此幫助市場(chǎng)部做出最終選擇。

6. 企業(yè)級(jí)大數(shù)據(jù)平臺(tái)構(gòu)建:架構(gòu)與實(shí)現(xiàn)

就業(yè)難。

數(shù)據(jù)科學(xué)與大數(shù)據(jù)就業(yè)方向包括：在IT企業(yè)從事大數(shù)據(jù)系統(tǒng)架構(gòu)師、大數(shù)據(jù)系統(tǒng)分析師、hadoop開(kāi)發(fā)工程師等職業(yè)；考取軟件工程，計(jì)算機(jī)科學(xué)與技術(shù)，應(yīng)用統(tǒng)計(jì)學(xué)等專(zhuān)業(yè)的研究生。

不同行業(yè)中，專(zhuān)門(mén)從事行業(yè)數(shù)據(jù)搜集、整理、分析，并依據(jù)數(shù)據(jù)做出行業(yè)研究、評(píng)估和預(yù)測(cè)的專(zhuān)業(yè)人員。在工作中通過(guò)運(yùn)用工具，提取、分析、呈現(xiàn)數(shù)據(jù)，實(shí)現(xiàn)數(shù)據(jù)的商業(yè)意義。

7. 大數(shù)據(jù)平臺(tái)基礎(chǔ)架構(gòu)指南

您好，很開(kāi)心為您解答。大數(shù)據(jù)是指無(wú)法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。

在維克托·邁爾-舍恩伯格及肯尼斯·庫(kù)克耶編寫(xiě)的《大數(shù)據(jù)時(shí)代》 中大數(shù)據(jù)指不用隨機(jī)分析法（抽樣調(diào)查）這樣的捷徑，而采用所有數(shù)據(jù)進(jìn)行分析處理。大數(shù)據(jù)的4V特點(diǎn)：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（價(jià)值）。

大數(shù)據(jù)技術(shù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息，而在于對(duì)這些含有意義的數(shù)據(jù)進(jìn)行專(zhuān)業(yè)化處理。換而言之，如果把大數(shù)據(jù)比作一種產(chǎn)業(yè)，那么這種產(chǎn)業(yè)實(shí)現(xiàn)盈利的關(guān)鍵，在于提高對(duì)數(shù)據(jù)的“加工能力”，通過(guò)“加工”實(shí)現(xiàn)數(shù)據(jù)的“增值”。

大數(shù)據(jù)應(yīng)用

大數(shù)據(jù)雖然孕育于信息通信技術(shù)，但它對(duì)社會(huì)、經(jīng)濟(jì)、生活產(chǎn)生的影響絕不限于技術(shù)層面。更本質(zhì)上，它是為我們看待世界提供了一種全新的方法，即決策行為將日益基于數(shù)據(jù)分析，而不是像過(guò)去更多憑借經(jīng)驗(yàn)和直覺(jué)。具體來(lái)講，大數(shù)據(jù)有以下作用。

1）對(duì)大數(shù)據(jù)的處理分析正成為新一代信息技術(shù)融合應(yīng)用的結(jié)點(diǎn)。移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、數(shù)字家庭、電子商務(wù)等是新一代信息技術(shù)的應(yīng)用形態(tài)，這些應(yīng)用不斷產(chǎn)生大數(shù)據(jù)。

云計(jì)算為這些海量、多樣化的大數(shù)據(jù)提供存儲(chǔ)和運(yùn)算平臺(tái)。通過(guò)對(duì)不同來(lái)源數(shù)據(jù)的管理、處理、分析與優(yōu)化，將結(jié)果反饋到上述應(yīng)用中，將創(chuàng)造出巨大的經(jīng)濟(jì)和社會(huì)價(jià)值，大數(shù)據(jù)具有催生社會(huì)變革的能量。

2）大數(shù)據(jù)是信息產(chǎn)業(yè)持續(xù)高速增長(zhǎng)的新引擎。面向大數(shù)據(jù)市場(chǎng)的新技術(shù)、新產(chǎn)品、新服務(wù)、新業(yè)態(tài)會(huì)不斷涌現(xiàn)。

在硬件與集成設(shè)備領(lǐng)域，大數(shù)據(jù)將對(duì)芯片、存儲(chǔ)產(chǎn)業(yè)產(chǎn)生重要影響，還將催生出一體化數(shù)據(jù)存儲(chǔ)處理服務(wù)器、內(nèi)存計(jì)算等市場(chǎng)。

在軟件與服務(wù)領(lǐng)域，大數(shù)據(jù)將引發(fā)數(shù)據(jù)快速處理分析技術(shù)、數(shù)據(jù)挖掘技術(shù)和軟件產(chǎn)品的發(fā)展。

3）大數(shù)據(jù)利用將成為提高核心競(jìng)爭(zhēng)力的關(guān)鍵因素。各行各業(yè)的決策正在從“業(yè)務(wù)驅(qū)動(dòng)”向“數(shù)據(jù)驅(qū)動(dòng)”轉(zhuǎn)變。

在商業(yè)領(lǐng)域，對(duì)大數(shù)據(jù)的分析可以使零售商實(shí)時(shí)掌握市場(chǎng)動(dòng)態(tài)并迅速做出應(yīng)對(duì)，可以為商家制定更加精準(zhǔn)有效的營(yíng)銷(xiāo)策略提供決策支持，可以幫助企業(yè)為消費(fèi)者提供更加及時(shí)和個(gè)性化的服務(wù)。

在醫(yī)療領(lǐng)域，可提高診斷準(zhǔn)確性和藥物有效性。

在公共事業(yè)領(lǐng)域，大數(shù)據(jù)也開(kāi)始發(fā)揮促進(jìn)經(jīng)濟(jì)發(fā)展、維護(hù)社會(huì)穩(wěn)定等方面的重要作用。

4）大數(shù)據(jù)時(shí)代，科學(xué)研究的方法手段將發(fā)生重大改變。例如，抽樣調(diào)查是社會(huì)科學(xué)的基本研究方法，在大數(shù)據(jù)時(shí)代，研究人員可通過(guò)實(shí)時(shí)監(jiān)測(cè)、跟蹤研究對(duì)象在互聯(lián)網(wǎng)上產(chǎn)生的海量行為數(shù)據(jù)，進(jìn)行挖掘分析，揭示出規(guī)律性的東西，提出研究結(jié)論和對(duì)策。

大數(shù)據(jù)涉及到各個(gè)行業(yè)，現(xiàn)在能學(xué)好大數(shù)據(jù)技術(shù)，加上自己持續(xù)的學(xué)習(xí)，高薪是肯定的。

8. 大數(shù)據(jù)平臺(tái)架構(gòu)、每塊的功能介紹

大數(shù)據(jù)領(lǐng)域每年都會(huì)涌現(xiàn)出大量新的技術(shù)，大數(shù)據(jù)技術(shù)可以挖掘出大規(guī)模數(shù)據(jù)中隱藏的信息和知識(shí)，為人類(lèi)社會(huì)經(jīng)濟(jì)活動(dòng)提供依據(jù)，提高各領(lǐng)域的運(yùn)行效率，甚至提高整個(gè)社會(huì)經(jīng)濟(jì)的集約化程度。那么大數(shù)據(jù)計(jì)算包含哪些結(jié)構(gòu)層次

　　(1)統(tǒng)一數(shù)據(jù)基礎(chǔ)層

　　我們通過(guò)各種方式采集到的豐富數(shù)據(jù)，在清洗、結(jié)構(gòu)化后進(jìn)入統(tǒng)一的ODS數(shù)據(jù)基礎(chǔ)層。

　　其主要功能包括：

　　-同步：結(jié)構(gòu)化數(shù)據(jù)增量或全量同步到數(shù)據(jù)中臺(tái)

　　-結(jié)構(gòu)化：非結(jié)構(gòu)化(日志)結(jié)構(gòu)化處理并存儲(chǔ)到數(shù)據(jù)中臺(tái)

　　累積歷史、清洗：根據(jù)數(shù)據(jù)業(yè)務(wù)需求及稽核和審計(jì)要求保存歷史數(shù)據(jù)、數(shù)據(jù)清洗

　　在權(quán)責(zé)方面，所有數(shù)據(jù)應(yīng)該在源頭統(tǒng)一，統(tǒng)一所有的數(shù)據(jù)基礎(chǔ)層，并由一個(gè)團(tuán)隊(duì)負(fù)責(zé)和管控，其他團(tuán)隊(duì)無(wú)權(quán)復(fù)制數(shù)據(jù)基礎(chǔ)層的數(shù)據(jù)。

　　(2)數(shù)據(jù)中間層

　　我們進(jìn)行數(shù)據(jù)建模研發(fā)，并處理不因業(yè)務(wù)特別是組織架構(gòu)變動(dòng)而輕易轉(zhuǎn)移的數(shù)據(jù)中間層。包括DWD明細(xì)數(shù)據(jù)中間層和DWS匯總數(shù)據(jù)中間層。

　　其主要功能包括：

　　-組合相關(guān)和相似數(shù)據(jù)：采用明細(xì)寬表，復(fù)用關(guān)聯(lián)計(jì)算，減少數(shù)據(jù)掃描。

　　-公共指標(biāo)統(tǒng)一加工：基于OneData體系構(gòu)建命名規(guī)范、口徑一致和算法統(tǒng)一的統(tǒng)計(jì)指標(biāo)，為上層數(shù)據(jù)產(chǎn)-品、應(yīng)用和服務(wù)提供公共指標(biāo);建立邏輯匯總寬表;

　　-建立一致性維度：建立一致數(shù)據(jù)分析維度表，降低數(shù)據(jù)計(jì)算口徑、算法不統(tǒng)一的風(fēng)險(xiǎn)。

　　在權(quán)責(zé)方面，面向業(yè)務(wù)提供服務(wù)之前，由統(tǒng)一的團(tuán)隊(duì)負(fù)責(zé)從業(yè)務(wù)中抽象出源于業(yè)務(wù)而又不同于業(yè)務(wù)的數(shù)據(jù)域，再主導(dǎo)統(tǒng)一建設(shè)數(shù)據(jù)中間層，包括側(cè)重明細(xì)數(shù)據(jù)預(yù)JOIN等處理的明細(xì)中間層、側(cè)重面向應(yīng)用可復(fù)用維度和指標(biāo)的匯總數(shù)據(jù)中間層。特別是要由團(tuán)隊(duì)負(fù)責(zé)將核心業(yè)務(wù)數(shù)據(jù)統(tǒng)一加入數(shù)據(jù)中間層。允許部分業(yè)務(wù)數(shù)據(jù)有獨(dú)立的數(shù)據(jù)團(tuán)隊(duì)按照統(tǒng)一的OneModel體系方法論建設(shè)數(shù)據(jù)體系，ODS數(shù)據(jù)基礎(chǔ)層和DWD+DWS數(shù)據(jù)中間層因其統(tǒng)一性和可復(fù)用性，被稱(chēng)為數(shù)據(jù)公共層。

　　(3)數(shù)據(jù)應(yīng)用層

　　在面向應(yīng)用提供服務(wù)時(shí)，業(yè)務(wù)團(tuán)隊(duì)或深入業(yè)務(wù)線的數(shù)據(jù)團(tuán)隊(duì)有極大的自由度，只要依賴(lài)數(shù)據(jù)公共層，即可自由的建設(shè)ADS數(shù)據(jù)應(yīng)用層。

　　其主要功能包括：

　　-個(gè)性化指標(biāo)加工：不公用性;復(fù)雜性(指數(shù)型、比值型、排名型指標(biāo))

　　-基于應(yīng)用的數(shù)據(jù)組裝：大寬表集市、橫表轉(zhuǎn)縱表、趨勢(shì)指標(biāo)串

　　大數(shù)據(jù)技術(shù)包含哪些結(jié)構(gòu)層次.中琛魔方大數(shù)據(jù)平臺(tái)(www.zcmorefun.com)表示不同功能的模塊組合成一個(gè)具有實(shí)際應(yīng)用價(jià)值的大數(shù)據(jù)分析平臺(tái)，實(shí)現(xiàn)對(duì)各種業(yè)務(wù)的前瞻性預(yù)測(cè)和分析，為用戶(hù)提供統(tǒng)一的決策分析支持，從而更好地突出平臺(tái)本身的價(jià)值。