大數(shù)據(jù)分析涉及數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、統(tǒng)計(jì)分析、數(shù)據(jù)可視化等技術(shù)問(wèn)題。本書(shū)通過(guò)Hadoop和阿里云的MaxCompute架構(gòu)介紹了大數(shù)據(jù)的數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理的原理。因?yàn)镠adoop等大數(shù)據(jù)存儲(chǔ)和處理平臺(tái)大多基于Linux操作系統(tǒng)，所以本書(shū)也介紹了Linux操作系統(tǒng)的基本使用方法。另外，本書(shū)還介紹了關(guān)系型數(shù)據(jù)庫(kù)的重要原理、SQL語(yǔ)言及數(shù)據(jù)倉(cāng)庫(kù)的概念。統(tǒng)計(jì)學(xué)是數(shù)據(jù)分析的基礎(chǔ)理論，本書(shū)概括了常用的統(tǒng)計(jì)學(xué)理論。數(shù)據(jù)可視化也是數(shù)據(jù)分析的重要工具，本書(shū)介紹了常用的圖表、可視化的原則及可視化的工具。本書(shū)適合作為阿里云大數(shù)據(jù)分析師ACA認(rèn)證考試的學(xué)習(xí)教材，也可作為學(xué)校或培訓(xùn)機(jī)構(gòu)大數(shù)據(jù)分析等相關(guān)課程的教材，還可供大數(shù)據(jù)從業(yè)者和愛(ài)好者閱讀參考。
趙強(qiáng)，加拿大約克大學(xué)舒立克商學(xué)院MBA特聘教授，阿里云MVP，加拿大ARC數(shù)據(jù)創(chuàng)新集團(tuán)創(chuàng)始人，杭州決明數(shù)據(jù)科技有限公司創(chuàng)始人。曾擔(dān)任多家國(guó)際企業(yè)數(shù)字化轉(zhuǎn)型戰(zhàn)略顧問(wèn)。在近20年大數(shù)據(jù)行業(yè)應(yīng)用領(lǐng)域的工作經(jīng)驗(yàn)中，服務(wù)過(guò)的政府機(jī)關(guān)與500強(qiáng)企業(yè)包括加拿大安大略省工作場(chǎng)所安全保險(xiǎn)研究院、醫(yī)藥連鎖企業(yè)ShoppersDrugMart、全球第19大銀行多倫多道明銀行、加拿大第2大零售企業(yè)Sobeys、電信運(yùn)營(yíng)商Telus、百聯(lián)集團(tuán)等。
2016年，因?yàn)閭�(gè)人的事回到杭州，并參加了當(dāng)年阿里云的云棲大會(huì)，經(jīng)朋友介紹，有幸結(jié)識(shí)了當(dāng)時(shí)阿里云大學(xué)的幾位負(fù)責(zé)人。得知阿里云希望在大數(shù)據(jù)、云計(jì)算與大數(shù)據(jù)應(yīng)用的教育培訓(xùn)方面做出一些努力，目的是讓更多中國(guó)企業(yè)能夠利用大數(shù)據(jù)提高經(jīng)營(yíng)的效率。其間暢談了關(guān)于數(shù)據(jù)分析方面的個(gè)人體會(huì)，阿里云大學(xué)的負(fù)責(zé)人云驤，邀請(qǐng)我回杭州，幫助阿里云建立ACA、ACP大數(shù)據(jù)分析師的人才認(rèn)證標(biāo)準(zhǔn)，并開(kāi)發(fā)相關(guān)的課件和書(shū)籍。彼時(shí)，中國(guó)的大數(shù)據(jù)正方興未艾，整個(gè)社會(huì)對(duì)大數(shù)據(jù)人才十分渴求，政府也將大數(shù)據(jù)與人工智能列為國(guó)家級(jí)戰(zhàn)略，培養(yǎng)大數(shù)據(jù)分析人才利國(guó)利民。因此，在2016年年底，我欣然回國(guó)創(chuàng)立了杭州決明數(shù)據(jù)科技有限公司，開(kāi)始幫助阿里云大學(xué)開(kāi)發(fā)大數(shù)據(jù)分析師的培訓(xùn)內(nèi)容。
在發(fā)達(dá)國(guó)家，數(shù)據(jù)分析在行業(yè)里的應(yīng)用已經(jīng)發(fā)展了幾十年，大規(guī)模的數(shù)據(jù)分析運(yùn)用到?jīng)Q策領(lǐng)域，甚至可以追溯到第二次世界大戰(zhàn)中美軍的反法西斯戰(zhàn)爭(zhēng)。大數(shù)據(jù)工程師與大數(shù)據(jù)分析師在成熟的市場(chǎng)中早已是兩條不同的職業(yè)路線，但由于接觸大數(shù)據(jù)的概念時(shí)間不長(zhǎng)，基于對(duì)工程技術(shù)的迷戀，中國(guó)市場(chǎng)簡(jiǎn)單地認(rèn)為大數(shù)據(jù)分析技術(shù)就是一種基于大數(shù)據(jù)的工程技術(shù)，加上政府、大學(xué)和大部分企業(yè)固執(zhí)地認(rèn)為技術(shù)能夠?yàn)槠髽I(yè)帶來(lái)深度的變革，對(duì)于數(shù)據(jù)分析在企業(yè)決策中的作用并沒(méi)有準(zhǔn)確的認(rèn)知。由于數(shù)據(jù)分析主要用于企業(yè)的決策，而并不是去實(shí)現(xiàn)某項(xiàng)特殊功能，當(dāng)來(lái)自不同行業(yè)的各種企業(yè)面臨不同的挑戰(zhàn)與問(wèn)題時(shí)，企業(yè)需要研究的決策內(nèi)容也五花八門(mén)，即使企業(yè)面臨的問(wèn)題可能是類似的，數(shù)據(jù)分析的應(yīng)用也并沒(méi)有一種標(biāo)準(zhǔn)的技術(shù)或手段能夠給出統(tǒng)一的解決方案。因此，大數(shù)據(jù)分析師不是僅僅掌握一兩種工程師們更偏好的編程技術(shù)就可以勝任的，這與大家更為接受和理解的大數(shù)據(jù)工程師的技能要求不盡相同。由于企業(yè)需要不時(shí)地解決各種各樣層出不窮的問(wèn)題并做出精準(zhǔn)決策，這就要求大數(shù)據(jù)分析師在面對(duì)復(fù)雜而不確定的情況時(shí)，能夠利用數(shù)據(jù)分析做出最佳判斷。除要有精湛的編程技術(shù)和關(guān)于大數(shù)據(jù)的知識(shí)外，大數(shù)據(jù)分析師還必須具備邏輯化、結(jié)構(gòu)化與科學(xué)化的分析思考能力，而這種分析思考能力對(duì)思維方式和行業(yè)經(jīng)驗(yàn)要求較高。阿里云的大數(shù)據(jù)分析師培訓(xùn)體系是國(guó)內(nèi)最早將大數(shù)據(jù)分析師的職業(yè)能力清晰定義的。
有了從事大數(shù)據(jù)分析師職業(yè)20多年的經(jīng)驗(yàn)，我知道許多人對(duì)大數(shù)據(jù)分析師的工作不甚了解。尤其可惜的是，有IT背景的工程師們，基于對(duì)技術(shù)的熱愛(ài)，簡(jiǎn)單地認(rèn)為數(shù)據(jù)分析就是編程和算法的集合。這樣的認(rèn)知顯然是錯(cuò)誤的，對(duì)于中國(guó)高速發(fā)展的經(jīng)濟(jì)和市場(chǎng)所急需的大數(shù)據(jù)應(yīng)用型人才的培養(yǎng)沒(méi)有任何幫助。同時(shí)，也正是由于需要將編程與算法技術(shù)應(yīng)用到業(yè)務(wù)場(chǎng)景中，大數(shù)據(jù)分析師的工作高度依賴于經(jīng)驗(yàn)，許多具備一定編程基礎(chǔ)的大學(xué)生進(jìn)入職場(chǎng)之后，短時(shí)間內(nèi)無(wú)法勝任大數(shù)據(jù)分析師的工作。從傳統(tǒng)的經(jīng)濟(jì)模式走向數(shù)字經(jīng)濟(jì)模式，依賴經(jīng)驗(yàn)的數(shù)字分析應(yīng)用技能更需要培訓(xùn)與學(xué)習(xí)。如果能有書(shū)告訴希望從事數(shù)據(jù)分析職業(yè)的有志人士，什么是大數(shù)據(jù)分析師需要的最重要的技能，那么就變得非常有意義。于是，我撰寫(xiě)了《數(shù)據(jù)分析基礎(chǔ)技術(shù)——阿里云大數(shù)據(jù)分析師ACA認(rèn)證培訓(xùn)教程》《數(shù)據(jù)分析實(shí)用技術(shù)——阿里云大數(shù)據(jù)分析師ACP認(rèn)證培訓(xùn)教程》，希望能幫助讀者了解大數(shù)據(jù)分析師職業(yè)，提升數(shù)據(jù)分析能力，并能夠發(fā)現(xiàn)問(wèn)題、解決問(wèn)題。
由于來(lái)自各行各業(yè)的企業(yè)都需要大數(shù)據(jù)分析師，因此這兩本書(shū)的問(wèn)世是為了幫助已經(jīng)在大學(xué)學(xué)習(xí)了相關(guān)行業(yè)知識(shí)的大學(xué)生，提高對(duì)大數(shù)據(jù)分析師職業(yè)技能的認(rèn)知，以便進(jìn)入企業(yè)后可以從事大數(shù)據(jù)分析師的工作，幫助企業(yè)做好科學(xué)決策。無(wú)論所學(xué)的專業(yè)背景是商業(yè)管理、天文物理、生物化學(xué)、航空航天、建筑設(shè)計(jì)、健康醫(yī)療、工業(yè)工程，還是人文社會(huì)學(xué)科，大學(xué)生只要希望從事本行業(yè)的數(shù)據(jù)分析工作，都能從這兩本書(shū)開(kāi)始學(xué)習(xí)，為未來(lái)的工作打下扎實(shí)的基礎(chǔ)。
作者
2021年6月
新書(shū)資訊