預(yù)測(cè)是數(shù)據(jù)分析的終極目的

預(yù)測(cè)的必要性和誤差的必然性

經(jīng)驗(yàn)預(yù)測(cè)法

類(lèi)比預(yù)測(cè)法

慣性法與時(shí)間序列分析

邏輯關(guān)系預(yù)測(cè)法

1.1?預(yù)測(cè)是數(shù)據(jù)分析的終極目的

數(shù)據(jù)分析最重要的目的就是從數(shù)據(jù)中尋找規(guī)律，找到能夠指導(dǎo)我們未來(lái)實(shí)踐的原則和方法，它是產(chǎn)生智慧的主要途徑。所以，預(yù)測(cè)分析是數(shù)據(jù)分析的終極目的。雖然數(shù)據(jù)分析可以承擔(dān)各種功能，包括監(jiān)測(cè)、監(jiān)控、檢查、證據(jù)、校驗(yàn)，但預(yù)測(cè)還是最為關(guān)鍵的，所以掌握數(shù)據(jù)分析和挖掘的預(yù)測(cè)方法才是數(shù)據(jù)分析師的看家本領(lǐng)。

預(yù)測(cè)包括現(xiàn)象的預(yù)測(cè)和規(guī)律的預(yù)測(cè)。自然科學(xué)在本質(zhì)上也是對(duì)事物的屬性、本質(zhì)和規(guī)律的預(yù)測(cè)。有了對(duì)事物的認(rèn)知和對(duì)規(guī)律的掌握，我們就能夠創(chuàng)造出更多的東西。商業(yè)社會(huì)也是如此，如果我們能夠知道影響股票波動(dòng)的因素，并能夠掌握這些影響因素的數(shù)據(jù)，就能夠?qū)蓛r(jià)做出精準(zhǔn)的預(yù)測(cè)，從而指導(dǎo)我們的投資決策，做到穩(wěn)賺不賠。但事物具有復(fù)雜性，我們無(wú)法掌握所有的信息，更無(wú)法掌握所有的規(guī)律，所以才會(huì)有了那么多的偶然影響因素和隨機(jī)事件。

在美國(guó)電視?。ê?jiǎn)稱(chēng)美劇）《疑犯追蹤》中有一臺(tái)超級(jí)服務(wù)器，它能夠掌握所有事情，預(yù)測(cè)所有事情的發(fā)展，從而能夠預(yù)測(cè)各種犯罪的發(fā)生和危險(xiǎn)事件。主人公與幾個(gè)特工組成一個(gè)阻止悲劇發(fā)生的戰(zhàn)隊(duì)，開(kāi)始了各種所謂的營(yíng)救行動(dòng)。這樣的機(jī)器或許在未來(lái)能夠出現(xiàn)，但在目前能掌握所有事物的數(shù)據(jù)并通曉其規(guī)律的機(jī)器還沒(méi)有。在智能領(lǐng)域，我們已經(jīng)能夠制造出會(huì)下圍棋的AlphaGo，但距離精準(zhǔn)的預(yù)測(cè)還有很大的距離，但這并不能阻止我們對(duì)某些特殊事物的預(yù)測(cè)。

隨著大數(shù)據(jù)、物聯(lián)網(wǎng)等技術(shù)的快速發(fā)展和應(yīng)用，我們會(huì)擁有越來(lái)越多的數(shù)據(jù)，在這些數(shù)據(jù)的基礎(chǔ)上，通過(guò)各種分析技術(shù)的發(fā)展，我們就能夠加工出越來(lái)越多的“智慧”，從而能夠指導(dǎo)我們的實(shí)踐，而我們對(duì)未來(lái)的預(yù)測(cè)會(huì)越來(lái)越精準(zhǔn)，越來(lái)越有效。

人們總是把事情想象得過(guò)于美好，認(rèn)為做大數(shù)據(jù)的人能夠上知天文，下曉地理，能夠準(zhǔn)確地預(yù)測(cè)未來(lái)。現(xiàn)在還沒(méi)有人有這樣的能力，至少目前不會(huì)有，未來(lái)10年估計(jì)也不會(huì)有。所以企業(yè)的老板也不能對(duì)數(shù)據(jù)部門(mén)寄予過(guò)高的期望。

經(jīng)濟(jì)學(xué)、社會(huì)學(xué)、社會(huì)物理學(xué)、心理學(xué)、統(tǒng)計(jì)學(xué)和數(shù)學(xué)等眾多學(xué)科都是預(yù)測(cè)的工具和方法，人類(lèi)已經(jīng)掌握了一些基本的事物發(fā)展規(guī)律，對(duì)人類(lèi)大腦、情感、心理的認(rèn)知也逐步深入。但我們對(duì)這些學(xué)科的掌握程度還遠(yuǎn)遠(yuǎn)達(dá)不到準(zhǔn)確預(yù)測(cè)未來(lái)的程度，我們所知道的僅僅是大自然中非常小的一部分。所以永遠(yuǎn)不要過(guò)高地估計(jì)我們對(duì)世界的認(rèn)知。

20年前，互聯(lián)網(wǎng)剛剛開(kāi)始興起，那個(gè)時(shí)候人們覺(jué)得互聯(lián)網(wǎng)永遠(yuǎn)無(wú)法取代電視、報(bào)紙、雜志和廣播，認(rèn)為互聯(lián)網(wǎng)只會(huì)成為信息傳播的一種工具，而且最初人們只希望用互聯(lián)網(wǎng)來(lái)傳播知識(shí)，而拒絕使用互聯(lián)網(wǎng)從事商業(yè)行為。20年后的今天，互聯(lián)網(wǎng)的普及徹底改變了我們的生活方式。

我們經(jīng)常說(shuō)“以史為鑒”，其實(shí)就是研究事物發(fā)展的歷史，為我們研究新的事物做出指導(dǎo)，讓我們對(duì)未來(lái)的事物有更遠(yuǎn)一點(diǎn)的估計(jì)。研究互聯(lián)網(wǎng)的發(fā)展歷史，能夠讓我們更好地估計(jì)或者預(yù)測(cè)同為信息技術(shù)的大數(shù)據(jù)技術(shù)在未來(lái)的發(fā)展。

互聯(lián)網(wǎng)從1995年開(kāi)始推廣應(yīng)用到2015年，整整20年的時(shí)間，其已經(jīng)不再被看作是新的技術(shù)了，而是日常必不可少的一種技術(shù)應(yīng)用，而且應(yīng)用的范圍和領(lǐng)域也越來(lái)越廣，如下圖所示。如今我們已經(jīng)真正進(jìn)入到“互聯(lián)網(wǎng)+”的時(shí)代。

納斯達(dá)克歷史綜合指數(shù)也揭示了一個(gè)技術(shù)成長(zhǎng)的過(guò)程，如下圖所示。因?yàn)榧{斯達(dá)克主要以互聯(lián)網(wǎng)新技術(shù)公司為主要的投資對(duì)象，該股票交易市場(chǎng)的主體是互聯(lián)網(wǎng)公司，其綜合指數(shù)直接體現(xiàn)出這些公司的市場(chǎng)價(jià)值。

著名的研究公司Gartner以研究技術(shù)發(fā)展和為技術(shù)公司提供咨詢(xún)服務(wù)為主。其跟蹤和研究各種新技術(shù)的發(fā)展歷程，并形成了一個(gè)關(guān)于技術(shù)發(fā)展周期的HypeCycle理論體系。此理論體系將技術(shù)的發(fā)展分成觸發(fā)期、過(guò)熱期、幻滅期、復(fù)蘇期和創(chuàng)新應(yīng)用期。不同的技術(shù)發(fā)展會(huì)有不同的結(jié)局，有的會(huì)在發(fā)展的過(guò)程中就消逝了，有的成了影響人們生活的重要技術(shù)。在Gartner看來(lái)，不同的技術(shù)處在不同的階段，大家對(duì)其的期望會(huì)有不同，這在股票市值或者公司估值上能夠體現(xiàn)出來(lái)。

下圖是Gartner對(duì)新興技術(shù)的研究結(jié)論：不同的技術(shù)處在不同的時(shí)期。大數(shù)據(jù)技術(shù)在2014年曾經(jīng)被Gartner認(rèn)為進(jìn)入幻滅期，目前其在中國(guó)仍然處在過(guò)熱期，大家都看好這個(gè)技術(shù)，動(dòng)輒就投資幾十億元來(lái)推動(dòng)大數(shù)據(jù)應(yīng)用，而得到的實(shí)際應(yīng)用價(jià)值還是非常少的，但是這個(gè)技術(shù)卻比互聯(lián)網(wǎng)更加能夠影響我們的生活。

通過(guò)研究互聯(lián)網(wǎng)技術(shù)的發(fā)展歷史，我們能夠預(yù)測(cè)未來(lái)大數(shù)據(jù)技術(shù)的發(fā)展?；ヂ?lián)網(wǎng)從觸發(fā)期到過(guò)熱期用了5年左右的時(shí)間，1999—2000年是互聯(lián)網(wǎng)技術(shù)的幻滅期，一直到2005年用了5年去復(fù)蘇，2005—2010年是互聯(lián)網(wǎng)技術(shù)的復(fù)蘇期，2010年開(kāi)始進(jìn)入創(chuàng)新應(yīng)用期，2015年進(jìn)入產(chǎn)業(yè)廣泛應(yīng)用的“互聯(lián)網(wǎng)+”時(shí)期。每5年一次大的轉(zhuǎn)變，讓人們對(duì)該技術(shù)的看法徹底改變了。

大數(shù)據(jù)從2007年被提出來(lái)，到2012年爆發(fā)，歷時(shí)5年；2012—2017年是幻滅期。當(dāng)然國(guó)內(nèi)對(duì)大數(shù)據(jù)的看法會(huì)有所不同，鑒于互聯(lián)網(wǎng)時(shí)期的泡沫，人類(lèi)更加理性，大數(shù)據(jù)會(huì)存在泡沫，可能不會(huì)比當(dāng)時(shí)互聯(lián)網(wǎng)技術(shù)存在的泡沫大?，F(xiàn)在大數(shù)據(jù)在國(guó)內(nèi)仍然處在過(guò)熱期，各地都在建設(shè)大數(shù)據(jù)中心，包括以貴陽(yáng)為代表的大數(shù)據(jù)交易平臺(tái)也在建設(shè)中。對(duì)于大數(shù)據(jù)能否像商品一樣用來(lái)交易，或是建成像高速公路這樣的基礎(chǔ)設(shè)施供大家使用，目前還沒(méi)有定論。而且在大數(shù)據(jù)領(lǐng)域中還有很多未能解決的問(wèn)題，包括數(shù)據(jù)所有權(quán)問(wèn)題、數(shù)據(jù)的安全性問(wèn)題、隱私保護(hù)問(wèn)題、數(shù)據(jù)犯罪問(wèn)題等。

在2017年之后，大數(shù)據(jù)就會(huì)進(jìn)入一個(gè)復(fù)蘇期。在這期間，大量的數(shù)據(jù)得到積累和整合，各種數(shù)據(jù)會(huì)關(guān)聯(lián)起來(lái)形成可用的數(shù)據(jù)集，新的應(yīng)用算法和處理工具會(huì)得到普及，查詢(xún)數(shù)據(jù)、計(jì)算數(shù)據(jù)、展示數(shù)據(jù)都不再是少數(shù)專(zhuān)業(yè)人員的專(zhuān)利。這個(gè)時(shí)候大數(shù)據(jù)才會(huì)真正應(yīng)用起來(lái)，企業(yè)會(huì)利用大數(shù)據(jù)服務(wù)來(lái)優(yōu)化自己的生產(chǎn)，會(huì)利用大數(shù)據(jù)來(lái)管理自己的企業(yè)，并且貢獻(xiàn)自己的數(shù)據(jù)集，豐富整個(gè)大數(shù)據(jù)資源。

互聯(lián)網(wǎng)是一個(gè)公共資源，大數(shù)據(jù)也將是一個(gè)公共資源。筆者認(rèn)為，把大數(shù)據(jù)作為一種商品拿來(lái)交易并構(gòu)建交易平臺(tái)是一件不符合事物基本發(fā)展規(guī)律的事情，這個(gè)有待觀察。

講這些內(nèi)容其實(shí)是在啟發(fā)讀者，“前車(chē)之鑒，后事之師”，互聯(lián)網(wǎng)技術(shù)的發(fā)展史留給我們太多的財(cái)富，我們需要分析和研究，而且要能夠馬上應(yīng)用到大數(shù)據(jù)技術(shù)上，預(yù)測(cè)未來(lái)大數(shù)據(jù)的發(fā)展規(guī)律。

1.2?預(yù)測(cè)的必要性和誤差的必然性

事物是復(fù)雜的，我們對(duì)事物的認(rèn)知是有限的，正因如此，事物在發(fā)展的過(guò)程中會(huì)發(fā)生超越我們預(yù)期的偶然事件和隨機(jī)事件，我們把這些叫作誤差，誤差是必然存在的。隨著我們對(duì)事物的認(rèn)知越清楚，掌握的信息數(shù)據(jù)越完善，這個(gè)誤差就會(huì)越小，偶然事件就會(huì)越少。預(yù)測(cè)不準(zhǔn)確是正常的，我們不能因?yàn)轭A(yù)測(cè)不準(zhǔn)確而放棄對(duì)事物的預(yù)測(cè)。掌控未來(lái)發(fā)展是人類(lèi)的本能，也是人類(lèi)進(jìn)化的動(dòng)力。

互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、智能設(shè)備、移動(dòng)互聯(lián)網(wǎng)，以及數(shù)據(jù)分析與挖掘技術(shù)的聯(lián)合作用，讓大數(shù)據(jù)技術(shù)的發(fā)展如虎添翼。大數(shù)據(jù)技術(shù)必然會(huì)更加廣泛地應(yīng)用到企業(yè)的生產(chǎn)和管理過(guò)程中，應(yīng)用到生活的方方面面。現(xiàn)在，我們?cè)谶x擇出行路線時(shí)會(huì)根據(jù)地圖應(yīng)用提供的交通流量信息，選擇最不堵車(chē)的路線，這是一個(gè)典型的應(yīng)用場(chǎng)景——把大數(shù)據(jù)當(dāng)作平臺(tái)和基礎(chǔ)設(shè)施的應(yīng)用場(chǎng)景。未來(lái)會(huì)有越來(lái)越多的這種應(yīng)用場(chǎng)景。

有了這些應(yīng)用場(chǎng)景，我們就能夠預(yù)測(cè)未來(lái)可能會(huì)發(fā)生的事情。企業(yè)之間將不再是價(jià)格的競(jìng)爭(zhēng)，而是根據(jù)消費(fèi)者需求進(jìn)行定制化的模式競(jìng)爭(zhēng)，未來(lái)企業(yè)的規(guī)模可能會(huì)變小。大企業(yè)的存在是為了讓更多的人集結(jié)在一起做出少數(shù)人做不到的事情，大數(shù)據(jù)帶來(lái)了人工智能技術(shù)，當(dāng)智能機(jī)器可以完成少數(shù)人無(wú)法完成的任務(wù)時(shí)，大企業(yè)存在的優(yōu)勢(shì)將不再顯現(xiàn)，而且企業(yè)越大，其個(gè)性化產(chǎn)品和服務(wù)就會(huì)越加不靈活。而且人類(lèi)的組織方式都有可能會(huì)發(fā)生變化。

通常情況下，有四種預(yù)測(cè)的方法。

1．經(jīng)驗(yàn)法

所謂的經(jīng)驗(yàn)法就是按照過(guò)去的經(jīng)驗(yàn)來(lái)預(yù)測(cè)通過(guò)做什么來(lái)達(dá)到什么結(jié)果。例如一個(gè)市場(chǎng)總監(jiān)在A公司做了5年，對(duì)于每年花費(fèi)多少?gòu)V告費(fèi)帶來(lái)多少銷(xiāo)售額，用什么方法打廣告會(huì)更有效果，哪個(gè)時(shí)間段的廣告最能夠觸達(dá)客戶(hù)從而帶來(lái)更高的轉(zhuǎn)化率，他都積累了豐富的經(jīng)驗(yàn)，并且能夠形成準(zhǔn)確的判斷。當(dāng)他進(jìn)入B公司后，能夠根據(jù)以前的經(jīng)驗(yàn)判斷該如何打廣告更加有效，讓公司的廣告效果增加1%，這就是靠經(jīng)驗(yàn)來(lái)預(yù)測(cè)事物未來(lái)的發(fā)展?fàn)顩r。

2．類(lèi)比法

所謂的類(lèi)比法就是根據(jù)A事物的發(fā)展歷程來(lái)判斷B這個(gè)新事物可能會(huì)怎樣發(fā)展。通過(guò)類(lèi)比相似的事物，把已知事物的發(fā)展規(guī)律應(yīng)用到未知事物的發(fā)展規(guī)律上，這種方法就是類(lèi)比法。前面我們介紹了通過(guò)研究互聯(lián)網(wǎng)技術(shù)的發(fā)展史來(lái)認(rèn)知未來(lái)大數(shù)據(jù)技術(shù)的發(fā)展史，通過(guò)類(lèi)比，就能夠?qū)Υ髷?shù)據(jù)技術(shù)有更加深刻的認(rèn)知。

3．慣性法

事物的發(fā)展都會(huì)有慣性，這種慣性規(guī)律在經(jīng)濟(jì)學(xué)上特別明顯。社會(huì)發(fā)展的慣性主要是根據(jù)人們的行為習(xí)慣。人們的行為習(xí)慣一旦養(yǎng)成后，如果要更改，則需要一定的時(shí)期，這個(gè)時(shí)期我們就稱(chēng)為慣性期。我們利用事物發(fā)展的慣性，對(duì)事物未來(lái)的發(fā)展做出判斷的方法就是慣性預(yù)測(cè)法。

4．邏輯關(guān)系法

邏輯關(guān)系法是預(yù)測(cè)的終極武器。如果我們知道兩個(gè)事物之間的邏輯關(guān)系，則根據(jù)邏輯關(guān)系和一個(gè)事物直接得出另外一個(gè)事物的方法就是邏輯關(guān)系法。例如如果我們知道兩個(gè)數(shù)據(jù)之間的函數(shù)關(guān)系，就能夠根據(jù)一個(gè)變量的數(shù)據(jù)得到另外一個(gè)的數(shù)據(jù)，這就是邏輯關(guān)系預(yù)測(cè)法。

全文摘自《企業(yè)經(jīng)營(yíng)數(shù)據(jù)分析-思路、方法、應(yīng)用與工具》趙興峰著

該文轉(zhuǎn)載已取得作者認(rèn)可

版權(quán)說(shuō)明：版權(quán)所有歸明悅數(shù)據(jù)所有,如需轉(zhuǎn)載請(qǐng)聯(lián)系我們，我們將在第一時(shí)間處理，或請(qǐng)注明內(nèi)容出處（《企業(yè)經(jīng)營(yíng)數(shù)據(jù)分析》趙興峰著），非常感謝！【往期內(nèi)容已在（明悅數(shù)據(jù)）公眾號(hào)同步發(fā)布】