可視化分析技術(shù)自動化程度較高，對使用者的要求不高，就像是用“傻瓜相機(jī)”，只要會按按鈕就行了，使得數(shù)據(jù)分析更加地平民化。

　　大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能以及云計(jì)算，它們之間如何結(jié)合在一起呢？

　　新一代的數(shù)據(jù)分析平臺可以將這幾項(xiàng)技術(shù)糅合在一起。數(shù)據(jù)保存在云端，數(shù)據(jù)分析軟件也在云端進(jìn)行；處理的數(shù)據(jù)有結(jié)構(gòu)化的、非結(jié)構(gòu)化的、甚至包括數(shù)據(jù)流，而數(shù)據(jù)流則來自于物聯(lián)網(wǎng)的傳感器；各種人工智能的算法都包括在數(shù)據(jù)分析的算法中，某些算法也可以對物聯(lián)網(wǎng)數(shù)據(jù)、大數(shù)據(jù)進(jìn)行分析。真正做到了把四種技術(shù)統(tǒng)一到一起的平臺。

　　那么上文所提到的計(jì)算機(jī)技術(shù)、大數(shù)據(jù)以及互聯(lián)網(wǎng)又是怎樣的聯(lián)系呢？計(jì)算機(jī)技術(shù)最先出現(xiàn)，對各行各業(yè)產(chǎn)生了很大影響。后來互聯(lián)網(wǎng)出現(xiàn)，帶來了很多的新型經(jīng)濟(jì)，讓大家可以逛淘寶，在網(wǎng)絡(luò)中看小說、社交等等。由此產(chǎn)生了很多的數(shù)據(jù)，大數(shù)據(jù)也就相應(yīng)而生。這三項(xiàng)技術(shù)都具有普適性，對各行各業(yè)有著廣泛的影響。

　　物聯(lián)網(wǎng)、人工智能、金融科技等都是以這三項(xiàng)技術(shù)為基礎(chǔ)。我們可以說現(xiàn)在處在互聯(lián)網(wǎng)時(shí)代，可以說處在計(jì)算機(jī)時(shí)代，也可以說處在大數(shù)據(jù)時(shí)代。

　　三、大數(shù)據(jù)時(shí)代

　　大數(shù)據(jù)時(shí)代特點(diǎn)鮮明。首先，數(shù)據(jù)可創(chuàng)造價(jià)值、可進(jìn)行買賣，是生產(chǎn)資料；過去做決策都是定性的，有了數(shù)據(jù)分析，人們的決策就成為了定性+定量，可以提高準(zhǔn)確性；人工智能、智慧城市，物聯(lián)網(wǎng)，會幫助我們進(jìn)入到智能化社會；科學(xué)研究有三大范式：理論推導(dǎo)、科學(xué)實(shí)驗(yàn)、模擬。模擬的方法就是對于無法實(shí)現(xiàn)的環(huán)境可通過模擬、虛擬現(xiàn)實(shí)的方式進(jìn)行科學(xué)研究，比如超高溫，有違倫理的藥物實(shí)驗(yàn)等；有了大數(shù)據(jù)以后，人們進(jìn)行科學(xué)研究就有了第四范式，那就是數(shù)據(jù)分析的方法；在社會治理方面，數(shù)據(jù)分析的方法可以為反恐、防止犯罪帶來高效率和準(zhǔn)確性。

　　大數(shù)據(jù)時(shí)代的十個(gè)發(fā)展趨勢則是：數(shù)據(jù)分析技術(shù)和方法快速發(fā)展；數(shù)據(jù)分析使得物聯(lián)網(wǎng)、機(jī)器智能化成為可能；數(shù)據(jù)資產(chǎn)的出現(xiàn)需要新的法律條款；出現(xiàn)社會治理新手段；大數(shù)據(jù)會改變?nèi)藗兊乃季S方式；數(shù)據(jù)分析平民化、普遍化；形成新的生活模式；新的商業(yè)機(jī)會和就業(yè)形式；軍隊(duì)變革以及政治、軍事手段的延伸。

　　1975年時(shí)第四屆人大會議上，周總理提出2000年的時(shí)候?qū)崿F(xiàn)四個(gè)現(xiàn)代化，即農(nóng)業(yè)現(xiàn)代化、工業(yè)現(xiàn)代化、科學(xué)技術(shù)現(xiàn)代化、國防現(xiàn)代化。第五個(gè)現(xiàn)代化則是社會治理現(xiàn)代化，通過大數(shù)據(jù)分析，改進(jìn)決策體制，提高科學(xué)決策水平；增強(qiáng)國家治理能力-公共安全；提高政府服務(wù)效能（數(shù)字政府）。

　　大數(shù)據(jù)時(shí)代是互聯(lián)網(wǎng)之后又一次IT革命，云計(jì)算將徹底改變網(wǎng)絡(luò)架構(gòu)模式，軟件無需再單機(jī)安裝，云端的軟件將是瀏覽器化的，各種軟件要重寫，開源軟件將對傳統(tǒng)的商業(yè)軟件造成沖擊，這是中國軟件趕超的好機(jī)會。中國要抓住大數(shù)據(jù)+云計(jì)算時(shí)代，爭取在基礎(chǔ)軟件和大數(shù)據(jù)分析方面出現(xiàn)幾個(gè)世界級的公司，帶動全國的經(jīng)濟(jì)發(fā)展。數(shù)據(jù)分析將是智能機(jī)器實(shí)用的基礎(chǔ)，智能機(jī)器將是下一波的經(jīng)濟(jì)增長點(diǎn)。

　　但這對于中國來說是機(jī)遇也是挑戰(zhàn)。在數(shù)據(jù)分析軟件方面，中國公司仍然沒有優(yōu)質(zhì)產(chǎn)品，目前仍是國外跨國公司居多；欠缺有豐富經(jīng)驗(yàn)的相關(guān)人才；國家安全方面，如美國的棱鏡計(jì)劃和社交媒體分析；數(shù)據(jù)安全方面，中國公司還是要將數(shù)據(jù)放在可靠的云產(chǎn)品上；公共安全方面，當(dāng)代社會，有預(yù)謀的犯罪越來越高科技，安全部門相應(yīng)的挑戰(zhàn)越來越高等等。

　　數(shù)據(jù)人才十分短缺，中國目前的人才缺口也在百萬級別。同時(shí)，也缺少經(jīng)驗(yàn)豐富的人員，還有很多計(jì)算機(jī)人員需要增加數(shù)據(jù)分析能力。

　　數(shù)據(jù)分析職業(yè)是一個(gè)有較高難度的職業(yè)，要求有很好的數(shù)學(xué)和統(tǒng)計(jì)分析的知識，計(jì)算機(jī)技能，業(yè)務(wù)知識和多年的經(jīng)驗(yàn)積累。對數(shù)據(jù)的敏感度和感知是優(yōu)秀分析師必須要具備的素質(zhì)。要培養(yǎng)高質(zhì)量的數(shù)據(jù)分析人才，還要從大學(xué)教育開始。我國很多大學(xué)都設(shè)定了相關(guān)專業(yè)，開設(shè)了相應(yīng)的課程。

　　四、大數(shù)據(jù)帶來的新經(jīng)濟(jì)

　　大數(shù)據(jù)對經(jīng)濟(jì)活動的影響是多方面的，但是主要有這么幾點(diǎn)：對現(xiàn)有產(chǎn)業(yè)的改進(jìn)、促進(jìn)作用，提高效益；帶來新興的產(chǎn)業(yè)；產(chǎn)生新的經(jīng)濟(jì)模式；增加就業(yè)。

　　大數(shù)據(jù)分析的并不是單單指一種簡單的方法，其分析水平可分為八個(gè)級別。

　　

    這是數(shù)據(jù)分析在各個(gè)領(lǐng)域使用的比例，其中應(yīng)用度最高的是銀行。

　　上圖則是各種實(shí)際應(yīng)用，其中38%與客戶有關(guān)，隨后才是銀行業(yè)、反欺詐、金融業(yè)等。

　　數(shù)據(jù)驅(qū)動營銷在過去十多年里快速地發(fā)展演進(jìn)。所列為數(shù)據(jù)驅(qū)動營銷的能力，但并非后者取代前者，可依業(yè)務(wù)目標(biāo)操作不同的營銷方式，或搭配使用。現(xiàn)在應(yīng)延續(xù)過去分析線索，挖掘模型或各類型營銷活動產(chǎn)生，在業(yè)務(wù)面與技術(shù)應(yīng)用層面支撐營銷閉環(huán)自動化與優(yōu)化之外，未來更應(yīng)豐富多樣數(shù)據(jù)，發(fā)展實(shí)時(shí)客戶交互聯(lián)系, 實(shí)現(xiàn)全渠道的客戶體驗(yàn), 以及整合性營銷。

　　巴塞爾協(xié)議中提到了市場風(fēng)險(xiǎn)、信用風(fēng)險(xiǎn)和操作風(fēng)險(xiǎn)等。

　　其中，大數(shù)據(jù)在信貸領(lǐng)域發(fā)揮著重要作用，其覆蓋信貸領(lǐng)域各個(gè)流程，重點(diǎn)是獲客、身份驗(yàn)證和授信環(huán)節(jié)。

　　大數(shù)據(jù)還應(yīng)用于反欺詐，反欺詐是全球性的，包括社保欺詐、保險(xiǎn)欺詐，故意制造事端后索賠，還有社會救助欺詐。

　　要應(yīng)對新的欺詐手段，反欺詐系統(tǒng)就要把政府部門的數(shù)據(jù)集成到大型中央數(shù)據(jù)倉庫，同時(shí)要包括外部數(shù)據(jù)和購買的數(shù)據(jù)，因?yàn)槠墼p者經(jīng)常傾向于提供不精確，不完整和不一致的數(shù)據(jù)，以防止分析人員在不相干系統(tǒng)做匹配，發(fā)現(xiàn)他們的勾當(dāng)。同時(shí)，反欺詐系統(tǒng)要有混合分析能力找出欺詐模式，為調(diào)查人員提供有意義的信息和分析報(bào)告。

　　包括大數(shù)據(jù)分析在反洗錢中的應(yīng)用。有一個(gè)人的孩子在美國上學(xué)，他想寄一些錢過去，但是寄超過一萬元美元的話，美國銀行會對其進(jìn)行監(jiān)控，為了防止監(jiān)控，他每次寄不到一萬，分多次寄，而這就是一個(gè)洗錢的場景，后來被軟件發(fā)現(xiàn)并被控告。反洗錢的軟件內(nèi)設(shè)有多種特定場景，若符合特定場景，它就會對這個(gè)賬戶進(jìn)行監(jiān)控。

　　上圖是美國做的關(guān)于大數(shù)據(jù)在醫(yī)療保健方面的應(yīng)用。通過獲取了十幾個(gè)州的數(shù)據(jù)進(jìn)行分析，分析到5%的公民卻用掉到60%的社保；21%-47%的醫(yī)保都是浪費(fèi)掉的；10個(gè)病逝的人有7個(gè)是由于慢性病。

　　另外，大數(shù)據(jù)在通信內(nèi)的應(yīng)用最關(guān)鍵在于如何找到客戶，找到后如何留住客戶。

　　上文也提到過大數(shù)據(jù)還支持著金融科技、人工智能、物聯(lián)網(wǎng)、以及生物工程等等。金融發(fā)展與科技是密切相關(guān)的，回顧其發(fā)展歷程，金融機(jī)構(gòu)一直是信息技術(shù)最積極的應(yīng)用者。從這個(gè)意義上來說，科技驅(qū)動金融，并非始于當(dāng)今，而是早已有之。總體來看，科技驅(qū)動金融經(jīng)歷了金融電子化和信息化、金融網(wǎng)絡(luò)化和移動化、金融自動化和智能化三個(gè)階段。目前，我們正處于金融自動化和智能化階段。

　　人工智能中的人臉識別，語音識別，文本分析，機(jī)器翻譯等等都需要通過對數(shù)據(jù)的分析使用來支持與應(yīng)用。

　　可疑性交易其實(shí)也是物聯(lián)網(wǎng)應(yīng)用的一部分，指人員在進(jìn)行交易的時(shí)候可發(fā)現(xiàn)他的違規(guī)和不違規(guī)，如有一個(gè)人是基金經(jīng)理，通過賣他手中的股票，讓股價(jià)下來以后，再用自己的錢把股票買回來，又通過大量收購股票，使得股票價(jià)格上漲，他又把股票賣掉，這是違規(guī)的，可以監(jiān)控的。

　　大數(shù)據(jù)也可應(yīng)用于故障預(yù)測。在墨西哥灣的深海鉆探中，檢測電子潛水器泵的有效性和油井表現(xiàn)。

　　大數(shù)據(jù)還可預(yù)測財(cái)產(chǎn)保養(yǎng)，通過每輛卡車60多個(gè)傳感器發(fā)出的數(shù)據(jù)，預(yù)測故障發(fā)生前的保養(yǎng)期，在恰當(dāng)?shù)臅r(shí)間提前保養(yǎng)卡車，提供新的服務(wù)。

　　還有區(qū)塊鏈的應(yīng)用，區(qū)塊鏈?zhǔn)菍?shí)現(xiàn)網(wǎng)絡(luò)-現(xiàn)實(shí)社會系統(tǒng)平行社會的基礎(chǔ)架構(gòu)之一，其主要貢獻(xiàn)是為分布式社會系統(tǒng)和分布式人工智能研究提供了一套行之有效的去中心化的數(shù)據(jù)結(jié)構(gòu)、交互機(jī)制和計(jì)算模式，并為實(shí)現(xiàn)平行社會奠定了堅(jiān)實(shí)的數(shù)據(jù)基礎(chǔ)和信用基礎(chǔ)。區(qū)塊鏈技術(shù)具有高度透明、去中心化、無須信任系統(tǒng)、去中介化、不可篡改（全節(jié)點(diǎn)維護(hù)）、加密安全等性質(zhì)。其中最大的應(yīng)用便是比特幣。

　　智慧城市不單單要考慮網(wǎng)絡(luò)、人工智能等硬件條件，還需要考慮文化、生態(tài)等。

　　關(guān)于重大事故調(diào)查與災(zāi)害保障系統(tǒng)。英國在這個(gè)系統(tǒng)上就做的很好。

　　接下來是刑事司法數(shù)據(jù)集成與分析，可以將來自整個(gè)刑事司法系統(tǒng)內(nèi)外的各種來源的數(shù)據(jù)組合成一個(gè)準(zhǔn)確、一致、完整的罪犯視圖。然后，地方法官、辦事員、執(zhí)法人員和懲教人員就可以以一種廣泛、易于理解的視角獲取這些信息。

　　在醫(yī)療領(lǐng)域，大數(shù)據(jù)將各種資源集中在一起，為公眾提供統(tǒng)一的健康醫(yī)療服務(wù)。

　　還有應(yīng)用于產(chǎn)業(yè)融合、制造業(yè)的發(fā)展等等。

　　大數(shù)據(jù)分析可以幫助人們做很多事， 但是，大數(shù)據(jù)分析也是有欺騙性的。如Google（GFT）預(yù)測的流感樣病例門診超過了美國國家疾病和控制預(yù)防中心基于全美各實(shí)驗(yàn)室檢測報(bào)告得出的預(yù)測結(jié)果兩倍多。還有辛普森悖論和安斯庫姆四重奏等等。

　　大數(shù)據(jù)和計(jì)算機(jī)技術(shù)一樣，具有普適性和通用性，各行各業(yè)都需要，傳統(tǒng)行業(yè)需要，而且是新興行業(yè)的依托。目前，機(jī)器學(xué)習(xí)和深度學(xué)習(xí)算法在不斷地豐富數(shù)據(jù)分析方法，是解決非結(jié)構(gòu)化數(shù)據(jù)分析、人工智能的主要方法。大數(shù)據(jù)改變了社會形態(tài)，促進(jìn)經(jīng)濟(jì)發(fā)展。而對于大數(shù)據(jù)分析，數(shù)據(jù)、軟件、平臺要協(xié)調(diào)一致。在對大數(shù)據(jù)進(jìn)行分析的過程中，需要確保數(shù)據(jù)的真實(shí)性，分析方法的正確性以及分析結(jié)果的適用性。

　　有些圖示來自于網(wǎng)絡(luò)，在此表示感謝！