數(shù)據(jù)分析技能必備
EXCEL
【百度百科】MicrosoftExcel是Microsoft為使用Windows和AppleMacintosh操作系統(tǒng)的電腦編寫的一款電子表格軟件。直觀的界面、出色的計(jì)算功能和圖表工具，再加上成功的市場(chǎng)營(yíng)銷，使Excel成為最流行的個(gè)人計(jì)算機(jī)數(shù)據(jù)處理軟件。
EXCEL非常重要這一點(diǎn)大家都比較清楚，同時(shí)EXCEL是一個(gè)學(xué)習(xí)其他技能的基礎(chǔ)。當(dāng)我們用sql/pyhton處理數(shù)據(jù)的時(shí)候其實(shí)并不能看到數(shù)據(jù)底層的處理過(guò)程，通過(guò)類比excel來(lái)類比學(xué)習(xí)sql/python能夠理解地更加深刻這些語(yǔ)言。把excle的數(shù)據(jù)處理過(guò)程搞明白了，再學(xué)python,sql就事半功倍了。
推薦書籍：網(wǎng)上資料多的是，各種長(zhǎng)短視頻，選擇自己喜歡的一類堅(jiān)持看就好
SQL
【百度百科】結(jié)構(gòu)化查詢語(yǔ)言(StructuredQueryLanguage)簡(jiǎn)稱SQL，是一種特殊目的的編程語(yǔ)言，是一種數(shù)據(jù)庫(kù)查詢和用于存取數(shù)據(jù)以及查詢、更新和管理關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)
數(shù)據(jù)分析師取數(shù)據(jù)用的最多的語(yǔ)言就是SQL。SQL家族有幾個(gè)兄弟，比如hql(用hive提取)，sparksql(用spark提取)，mysql等等。雖然sql的種類多，可畢竟沾親帶故，他們依然保留sql的基本語(yǔ)法和結(jié)構(gòu)，正所謂“味徒不同，其實(shí)葉相似”，學(xué)會(huì)了最基本的SQL語(yǔ)法就可以一通百通了。有些人說(shuō)sql很簡(jiǎn)單吶，幾天就學(xué)會(huì)了，于是花了幾天時(shí)間，把demo寫的66的，可真正工作需要的時(shí)候，就會(huì)有種學(xué)廢的感覺。其實(shí)寫好sql也沒(méi)有那么簡(jiǎn)單，有一些套路和規(guī)范，在以后的文章中我會(huì)逐一呈現(xiàn)給大家。
推薦：《SQL基礎(chǔ)教程》兩冊(cè)
Python
【百度百科】Python是一種跨平臺(tái)的計(jì)算機(jī)程序設(shè)計(jì)語(yǔ)言。是一個(gè)高層次的結(jié)合了解釋性、編譯性、互動(dòng)性和面向?qū)ο蟮哪_本語(yǔ)言。最初被設(shè)計(jì)用于編寫自動(dòng)化腳本(shell)，隨著版本的不斷更新和語(yǔ)言新功能的添加，越多被用于獨(dú)立的、大型項(xiàng)目的開發(fā)。
上面的百科對(duì)我們數(shù)分來(lái)說(shuō)有點(diǎn)太遠(yuǎn)了，咱們做數(shù)分的掌握一門編程語(yǔ)言那可好裝備了一身鋼鐵俠戰(zhàn)衣。分析的工具有n多種，但是python基本上都有可實(shí)現(xiàn)的類似功能。統(tǒng)計(jì)常用的包pandas，作圖常用的pyecharts，機(jī)器學(xué)習(xí)常用的sklearn等等。除了可以直接套用的功能之外，學(xué)會(huì)寫代碼可以輕松幫我們實(shí)現(xiàn)用sql和excle不好處理的復(fù)雜邏輯。那有同學(xué)會(huì)問(wèn)僅學(xué)python不就可以了么，當(dāng)然不是的，每種工具都有自己擅長(zhǎng)的場(chǎng)景，在選擇工具過(guò)程中需要我們做到因地制宜，沒(méi)有必要用高射炮打蚊子，也不可用殺雞刀宰牛。
推薦：《利用python進(jìn)行數(shù)據(jù)分析》，《python》圖靈。學(xué)python萬(wàn)萬(wàn)不可只看書，這玩意是練出來(lái)的。
理論基礎(chǔ)
概率與統(tǒng)計(jì)
【百度百科】數(shù)理統(tǒng)計(jì)是應(yīng)用概率的理論研究大量隨機(jī)現(xiàn)象的規(guī)律性，對(duì)通過(guò)科學(xué)安排的一定數(shù)量的實(shí)驗(yàn)所得到的統(tǒng)計(jì)方法給出嚴(yán)格的理論證明，并判定各種方法應(yīng)用的條件以及方法、公式、結(jié)論的可靠程度和局限性，使人們能從一組樣本判定是否能以相當(dāng)大的概率來(lái)保證某一判斷是正確的，并可以控制發(fā)生錯(cuò)誤的概率。
概率和統(tǒng)計(jì)第一次讓我感受到數(shù)學(xué)對(duì)數(shù)據(jù)分析的重要性，剛?cè)胄刑貏e迷茫的時(shí)候把概率統(tǒng)計(jì)看了至少10遍，越看越有意思，從中抽取了許多可以直接應(yīng)用于分析的理論工具。概率和統(tǒng)計(jì)總是結(jié)伴而行其實(shí)是有原因的。就我個(gè)人的理解，概率和統(tǒng)計(jì)的關(guān)系相當(dāng)于連城訣里面神照經(jīng)與連城劍法的關(guān)系。連城劍法作為套路可以單獨(dú)練習(xí)，有了神照經(jīng)內(nèi)功的加持方能施展真正的威力。同樣概率是統(tǒng)計(jì)的理論基礎(chǔ)，統(tǒng)計(jì)是在概率基礎(chǔ)上衍生出來(lái)的工具，兩者結(jié)合是真的香。概率的實(shí)際應(yīng)用在之后的課程中也會(huì)分享給大家。
推薦：《概率論與數(shù)理統(tǒng)計(jì)》，B站浙大《概率論與數(shù)理統(tǒng)計(jì)》
邏輯學(xué)
邏輯是認(rèn)識(shí)客觀世界，表達(dá)思維和論證思想的工具，是學(xué)習(xí)其他學(xué)科的基礎(chǔ)。
邏輯是一種內(nèi)功，不僅僅做數(shù)據(jù)要講究邏輯，做其他事情也都要從邏輯出發(fā)。俗話說(shuō)，謀定而后動(dòng)，這句話對(duì)于做數(shù)據(jù)來(lái)說(shuō)尤為在理。數(shù)據(jù)分析的過(guò)程就是從目的出發(fā)構(gòu)建一顆邏輯樹的過(guò)程。分析師需要從根出發(fā)到葉子節(jié)點(diǎn)，不斷地驗(yàn)證關(guān)鍵節(jié)點(diǎn)信息，不斷修枝建枝，最終把結(jié)果以最直觀，簡(jiǎn)潔而優(yōu)美地方式呈現(xiàn)出來(lái)。而且一個(gè)優(yōu)秀的數(shù)據(jù)分析師不僅僅要自己邏輯清晰明了，表達(dá)和論證能力也非常重要，邏輯學(xué)正是提升這方面能力的利器，用過(guò)都說(shuō)好。
推薦：《符號(hào)邏輯學(xué)》(B站)，《西方哲學(xué)史》，《金字塔原理》，《有用的邏輯學(xué)》等
運(yùn)籌學(xué)
【百度百科】運(yùn)籌學(xué)，是現(xiàn)代管理學(xué)的一門重要專業(yè)基礎(chǔ)課。它是20世紀(jì)30年代初發(fā)展起來(lái)的一門新興學(xué)科，其主要目的是在決策時(shí)為管理人員提供科學(xué)依據(jù)，是實(shí)現(xiàn)有效管理、正確決策和現(xiàn)代化管理的重要方法之一。該學(xué)科應(yīng)用于數(shù)學(xué)和形式科學(xué)的跨領(lǐng)域研究，利用統(tǒng)計(jì)學(xué)、數(shù)學(xué)模型和算法等方法，去尋找復(fù)雜問(wèn)題中的最佳或近似最佳的解答。
這本書每個(gè)章節(jié)都講述了關(guān)于某類問(wèn)題的數(shù)學(xué)模型和解決方案，比如背包問(wèn)題講究如何權(quán)衡收益與資源，最短路問(wèn)題講究如何找到關(guān)鍵路徑直達(dá)目的地。這些理論雖然可能學(xué)起來(lái)枯燥無(wú)味，但當(dāng)懂了它在說(shuō)什么，就會(huì)潛移默化中能改變?nèi)说乃季S方式。舉個(gè)簡(jiǎn)單的栗子，比如要做一個(gè)項(xiàng)目有n步，每一步又有m個(gè)方案，如果沒(méi)有動(dòng)態(tài)規(guī)劃的思維在里面，就有可能會(huì)在某一步上為求最優(yōu)解而浪費(fèi)對(duì)于整體來(lái)說(shuō)寶貴的資源。當(dāng)然運(yùn)籌學(xué)在實(shí)際中有很多應(yīng)用，在渠道調(diào)控的過(guò)程中就用到了運(yùn)籌學(xué)的知識(shí)，并取得了良好的效果
推薦：胡運(yùn)權(quán)《運(yùn)籌學(xué)教程》
工具使用
sublime&Notepad++
【百度百科】SublimeText是一個(gè)文本編輯器，它最初被設(shè)計(jì)為一個(gè)具有豐富擴(kuò)展功能的Vim。SublimeText具有漂亮的用戶界面和強(qiáng)大的功能，例如代碼縮略圖，Python的插件，代碼段等。還可自定義鍵綁定，菜單和工具欄。SublimeText的主要功能包括：拼寫檢查，書簽，完整的PythonAPI，Goto功能，即時(shí)項(xiàng)目切換，多選擇，多窗口等等。
Notepad++是Windows操作系統(tǒng)下的一套文本編輯器，有完整的中文化接口及支持多國(guó)語(yǔ)言編寫的功能(UTF8技術(shù))。Notepad++功能比Windows中的Notepad(記事本)強(qiáng)大，除了可以用來(lái)制作一般的純文字說(shuō)明文件，也十分適合編寫計(jì)算機(jī)程序代碼。Notepad++不僅有語(yǔ)法高亮度顯示，也有語(yǔ)法折疊功能，并且支持宏以及擴(kuò)充基本功能的外掛模組。
這兩個(gè)文本編輯器是大部分人的選擇，也基本能實(shí)現(xiàn)我們一般的工作需求，有些同學(xué)會(huì)問(wèn)那還要啥自行車，下面自行車來(lái)了~
typora
在案例這款自(bian行(ji)車(qi)之前，先介紹一個(gè)概念-Markdown
【百度百科】Markdown是一種輕量級(jí)標(biāo)記語(yǔ)言。它允許人們使用易讀易寫的純文本格式編寫文檔，然后轉(zhuǎn)換成有效的XHTML(或者HTML)、PDF文檔。這種語(yǔ)言吸收了很多在電子郵件中已有的純文本標(biāo)記的特性。由于Markdown的輕量化、易讀易寫特性，并且對(duì)于圖片，圖表、數(shù)學(xué)式都有支持，目前許多網(wǎng)站都廣泛使用Markdown來(lái)撰寫幫助文檔或是用于論壇上發(fā)表消息
當(dāng)然word也可以實(shí)現(xiàn)這個(gè)功能，而且對(duì)本文的編輯處理更強(qiáng)，能用word干的活為啥還要用markdown呢，這個(gè)問(wèn)題在于word功能強(qiáng)大是其優(yōu)點(diǎn)也是缺點(diǎn)，強(qiáng)大的功能使其更有通用性，但是細(xì)分領(lǐng)域卻不那么方便。markdown像是對(duì)word常用功能做了模板和格式化，比如標(biāo)題，內(nèi)容，字體等等，能夠讓人更加專注于文章的結(jié)構(gòu)和內(nèi)容，快速而省心編輯文本。
而typora就是這么一款markdown編輯器
我個(gè)人比較喜歡這個(gè)軟件(也是一直在用的一款)的原因主要有以下兩點(diǎn)：
第一，在排版方面，typora支持代碼塊，圖片，表格等等元素。在做分析的過(guò)程中將python或者sql放入代碼塊，數(shù)據(jù)結(jié)果和圖表也可以整合在一起，對(duì)整個(gè)項(xiàng)目和分析的管理更加方便，這也是typora相比sublime的優(yōu)點(diǎn)。
第二，目錄
typora擁有文件和目錄兩個(gè)視圖，一般我在文件視圖中創(chuàng)建項(xiàng)目，然后轉(zhuǎn)入大綱視圖，一邊寫文章一邊梳理分析邏輯，一邊整理內(nèi)容，真正讓人不再去關(guān)心格式專注于寫作本身
當(dāng)然typora也有其缺點(diǎn)
第一，沒(méi)有自動(dòng)補(bǔ)全代碼的聯(lián)想功能(這卻極大地提升了打字速度)
第二，默認(rèn)的高亮顯示不清晰(windows版本的sql腳本的關(guān)鍵字高亮幾乎是和沒(méi)有一樣)，對(duì)于像我這樣的色弱十分不友好，這兩點(diǎn)sublime支持地就很好，所以一般sublime和typora聯(lián)合起來(lái)用
這編(zi)輯(xing)器(che)已經(jīng)很好用了，有同學(xué)會(huì)說(shuō)還要啥手表，但是各位，下面上手表
jupyter
剛才咱們也說(shuō)了要好好學(xué)python，學(xué)完python之后一說(shuō)到寫代碼就是什么pycharm。如果說(shuō)pycharm相當(dāng)于word那么，jupyter就相當(dāng)于typora。咱們往下看。
【百度百科】：JupyterNotebook(此前被稱為IPythonnotebook)是一個(gè)交互式筆記本，支持運(yùn)行40多種編程語(yǔ)言。JupyterNotebook的本質(zhì)是一個(gè)Web應(yīng)用程序，便于創(chuàng)建和共享文學(xué)化程序文檔，支持實(shí)時(shí)代碼，數(shù)學(xué)方程，可視化和markdown。用途包括：數(shù)據(jù)清理和轉(zhuǎn)換，數(shù)值模擬，統(tǒng)計(jì)建模，機(jī)器學(xué)習(xí)等等。
劃重點(diǎn)1，用途包括：數(shù)據(jù)清理和轉(zhuǎn)換，數(shù)值模擬，統(tǒng)計(jì)建模，機(jī)器學(xué)習(xí)等等
劃重點(diǎn)2，markdown,剛才我們已經(jīng)介紹過(guò)了
直接上菜：
從截圖中可以看到，jupyter和typora非常相似，所以也是很適合做數(shù)據(jù)分析的工具，而且jupyter可以直接運(yùn)行代碼(這是句廢話)。大多數(shù)數(shù)據(jù)分析師用的比較多的編譯器是jupyter，而非pycharm。
Xmind
搞數(shù)據(jù)的重要的還是邏輯思維能力，而不是僅專注于花里胡哨的技能，說(shuō)到思維能力就不得不提xmind這款非常有用的思維輔助工具
【百度百科】：XMind是一款非常實(shí)用的商業(yè)思維導(dǎo)圖軟件，應(yīng)用全球最先進(jìn)的EclipseRCP軟件架構(gòu)，全力打造易用、高效的可視化思維軟件，強(qiáng)調(diào)軟件的可擴(kuò)展、跨平臺(tái)、穩(wěn)定性和性能，致力于使用先進(jìn)的軟件技術(shù)幫助用戶真正意義上提高生產(chǎn)率。
說(shuō)到思維導(dǎo)圖，咱們?cè)俳榻B一個(gè)網(wǎng)站-https://www.processon.com/。processon有大量的腦圖模板和分享(這不是廣告貼)，希望大家可以去看看。下面直接上菜：
總結(jié)一下
以上就是我做分析的過(guò)程中經(jīng)常用到的一些理論，工具和技能。如果把數(shù)據(jù)分析當(dāng)作功夫，那么技能是外功，理論是內(nèi)功，工具是裝備。其中技能和工具主要在分析的過(guò)程中加以磨練，但是理論不學(xué)習(xí)是真的不會(huì)自己跑到腦子里面，現(xiàn)在的數(shù)分市場(chǎng)也越來(lái)越成熟，大家在平時(shí)一定要主要理論知識(shí)的積累與應(yīng)用，師兄也會(huì)寫一些這方面的文章來(lái)共同探討學(xué)習(xí)。
數(shù)據(jù)分析雖然入門容易，但是天花板卻是比較高。數(shù)據(jù)分析要有寬廣的視角，敏銳的洞察以及實(shí)操的落地能力。在成長(zhǎng)過(guò)程中做到內(nèi)外齊修，兼顧陰陽(yáng)。
