目 錄 第1章 經(jīng)典的探索性數(shù)據(jù)分析案例 1 1.1 探索性數(shù)據(jù)分析綜述 2 1.1.1 什么是探索性數(shù)據(jù)分析 2 1.1.2 如何收集數(shù)據(jù) 4 1.1.3 數(shù)據(jù)預(yù)處理技術(shù) 5 1.2 數(shù)據(jù)巧收集——紅牛的大數(shù)據(jù)營銷案例 8 1.2.1 狀況百出的紅牛企業(yè) 8 1.2.2 紅牛企業(yè)巧妙收集消費(fèi)者數(shù)據(jù) 9 1.2.3 數(shù)據(jù)收集小結(jié) 12 1.3 數(shù)據(jù)可視化——數(shù)據(jù)新聞促使英軍撤軍 13 1.3.1 維基解密帶來的海量數(shù)據(jù) 13 1.3.2 百花齊放的數(shù)據(jù)新聞 15 1.3.3 數(shù)據(jù)可視化小結(jié) 18 1.4 異常值分析——Facebook消滅釣魚鏈接 19 1.4.1 Facebook和廣告商之間的拉鋸戰(zhàn) 20 1.4.2 異常值分析指導(dǎo)排名算法工作 22 1.4.3 異常值分析小結(jié) 26 1.5 對比分析——TrueCar指導(dǎo)購物者尋找最合算的車價 27 1.5.1 火中取栗的TrueCar網(wǎng)站 28 1.5.2 數(shù)據(jù)對比贏得消費(fèi)者信賴 29 1.5.3 對比分析小結(jié) 32 第2章 經(jīng)典的相關(guān)分析與回歸分析案例 35 2.1 相關(guān)回歸綜述 36 2.1.1 相關(guān)回歸簡介 36 2.1.2 相關(guān)性分析的發(fā)展介紹 38 2.1.3 回歸分析的發(fā)展介紹 39 2.2 皮爾遜相關(guān)值——紐約市政府利用相關(guān)分析監(jiān)控違法建筑 40 2.2.1 簡約而不簡單的消防檢測系統(tǒng) 40 2.2.2 使用相關(guān)分析洞察60個變量的關(guān)系 42 2.2.3 相關(guān)分析小結(jié) 45 2.3 時間序列分析——人壽保險的可提費(fèi)用預(yù)測 47 2.3.1 人壽保險公司和可提費(fèi)用 47 2.3.2 使用4種時間序列回歸預(yù)測模型解決問題 49 2.3.3 時間序列分析小結(jié) 52 2.4 線性回歸分析——梅西百貨公司的12項(xiàng)大數(shù)據(jù)策略 54 2.4.1 從“一億豪賭”說起的零售商困境 54 2.4.2 SAS公司幫助梅西百貨構(gòu)建模型 56 2.4.3 線性回歸分析小結(jié) 59 2.5 Logistic回歸分析——大面積流感爆發(fā)的預(yù)測分析 62 2.5.1 究竟誰才是流感預(yù)測算法之王 62 2.5.2 向Logistic算法中引入更多變量 64 2.5.3 Logistic回歸分析小結(jié) 67 第3章 經(jīng)典的降維數(shù)據(jù)分析案例 69 3.1 降維分析算法綜述 70 3.1.1 為什么要使用降維算法 70 3.1.2 線性降維算法 72 3.1.3 非線性降維算法 73 3.2 粗糙集算法——協(xié)助希臘工業(yè)發(fā)展銀行制定信貸政策 74 3.2.1 銀行信貸政策的制定原則 75 3.2.2 粗糙集算法的原理和應(yīng)用 76 3.2.3 粗糙集算法小結(jié) 80 3.3 因子分析——基于李克特量表的應(yīng)聘評價法 82 3.3.1 源于智力測試的因子分析 82 3.3.2 使用因子分析解構(gòu)問卷 84 3.3.3 因子分析小結(jié) 87 3.4 最優(yōu)尺度分析——直觀評估消費(fèi)者傾向的分析方法 89 3.4.1 市場調(diào)查問題催生的最優(yōu)尺度分析 89 3.4.2 6種經(jīng)典的最優(yōu)尺度分析解讀方法 91 3.4.3 最優(yōu)尺度分析小結(jié) 95 3.5 PCA降維算法——智能人臉識別的應(yīng)用與拓展 97 3.5.1 刷臉的時代來了 97 3.5.2 使用PCA算法完成降維工作 99 3.5.3 PCA算法小結(jié) 102 第4章 經(jīng)典的模式識別案例 105 4.1 模式識別綜述 106 4.1.1 模式識別簡介 106 4.1.2 模式識別的發(fā)展脈絡(luò) 107 4.1.3 模式識別應(yīng)用簡介 110 4.2 圖像分析——谷歌的超前自動駕駛技術(shù) 111 4.2.1 以安全的名義呼吁自動駕駛技術(shù) 111 4.2.2 快速成熟的無人駕駛技術(shù) 113 4.2.3 圖像分析小結(jié) 116 4.3 遺傳算法——經(jīng)典的人力資源優(yōu)化問題 118 4.3.1 使用有限資源實(shí)現(xiàn)利益最大化 118 4.3.2 遺傳算法的計算過程 120 4.3.3 遺傳算法小結(jié) 123 4.4 決策樹分析——“沸騰時刻”準(zhǔn)確判斷用戶健康水平 124 4.4.1 打造我國最大的健身平臺 124 4.4.2 信息增益和決策樹 126 4.4.3 決策樹小結(jié) 129 4.5 K均值聚類分析——HSE24通過為客戶分類降低退貨率 131 4.5.1 在電子商務(wù)市場快速擴(kuò)張的HSE24 131 4.5.2 使用K均值聚類為客戶分類 133 4.5.3 K均值聚類小結(jié) 136 第5章 經(jīng)典的機(jī)器學(xué)習(xí)案例 139 5.1 機(jī)器學(xué)習(xí)綜述 140 5.1.1 機(jī)器學(xué)習(xí)簡介 140 5.1.2 機(jī)器學(xué)習(xí)的主流發(fā)展和應(yīng)用 142 5.2 語義搜索——沃爾瑪搜索引擎提升15%銷售額 143 5.2.1 注重用戶體驗(yàn)的沃爾瑪公司 144 5.2.2 語義搜索引擎的底層技術(shù)和原理 145 5.2.3 語義搜索技術(shù)小結(jié) 148 5.3 順序分析——搜狗輸入法的智能糾錯系統(tǒng) 150 5.3.1 搜狗輸入法的王牌詞庫和智能算法 151 5.3.2 頻繁樹模式和順序分析算法 153 5.3.3 順序分析小結(jié) 156 5.4 文本分析——經(jīng)典的垃圾郵件過濾系統(tǒng) 158 5.4.1 大數(shù)據(jù)時代需要文本分析工作 158 5.4.2 垃圾郵件過濾中的分詞技術(shù)和詞集模型 160 5.4.3 文本分析小結(jié) 163 5.5 協(xié)同過濾——構(gòu)建個性化推薦系統(tǒng)的經(jīng)典算法 164 5.5.1 協(xié)同過濾算法為什么這么流行 165 5.5.2 基于用戶和基于產(chǎn)品的協(xié)同過濾 166 5.5.3 協(xié)同過濾算法小結(jié) 169 第6章 經(jīng)典的深度學(xué)習(xí)案例 171 6.1 深度學(xué)習(xí)綜述 172 6.1.1 深度學(xué)習(xí)簡介 172 6.1.2 深度學(xué)習(xí)在圖像處理方面的應(yīng)用 174 6.1.3 深度學(xué)習(xí)在自然語言處理方面的應(yīng)用 176 6.2 支持向量機(jī)——喬布斯利用大數(shù)據(jù)對抗癌癥 178 6.2.1 喬布斯和胰腺癌的抗?fàn)?178 6.2.2 醫(yī)學(xué)統(tǒng)計學(xué)和支持向量機(jī) 180 6.2.3 支持向量機(jī)小結(jié) 184 6.3 感知器神經(jīng)網(wǎng)絡(luò)——最佳的房產(chǎn)價格預(yù)測算法 185 6.3.1 如何預(yù)測房價 186 6.3.2 多層感知器和誤差曲面 188 6.3.3 感知器神經(jīng)網(wǎng)絡(luò)小結(jié) 191 6.4 自組織神經(jīng)網(wǎng)絡(luò)——如何又快又好地解決旅行商問題 193 6.4.1 最優(yōu)路徑問題的典型模式和解決方法 193 6.4.2 自組織神經(jīng)網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)和權(quán)值調(diào)整 194 6.4.3 自組織神經(jīng)網(wǎng)絡(luò)小結(jié) 198 6.5 RBM算法——為新聞報道智能分類 199 6.5.1 新聞報道智能分類的難與易 199 6.5.2 RBM算法的學(xué)習(xí)目標(biāo)和學(xué)習(xí)方法 201 6.5.3 RBM算法小結(jié) 204 第7章 經(jīng)典的數(shù)據(jù)挖掘案例 207 7.1 數(shù)據(jù)挖掘綜述 208 7.1.1 什么是數(shù)據(jù)挖掘 208 7.1.2 數(shù)據(jù)挖掘的主要應(yīng)用領(lǐng)域 209 7.1.3 數(shù)據(jù)挖掘模型的評價指標(biāo) 211 7.2 判別分析——美國運(yùn)通構(gòu)建客戶流失預(yù)測模型 213 7.2.1 美國運(yùn)通公司的舊日輝煌 213 7.2.2 判別分析的假設(shè)條件和判別函數(shù) 214 7.2.3 判別分析小結(jié) 218 7.3 購物籃分析——找出零售業(yè)的最佳商品組合 220 7.3.1 名動天下的“啤酒和尿布”案例 220 7.3.2 購物籃分析的頻繁模式 222 7.3.3 購物籃分析小結(jié) 225 7.4 馬爾可夫鏈——準(zhǔn)確預(yù)測客運(yùn)市場占有率 227 7.4.1 復(fù)雜的客運(yùn)市場系統(tǒng) 227 7.4.2 概率轉(zhuǎn)移矩陣的求解方法 229 7.4.3 馬爾可夫鏈小結(jié) 232 7.5 AdaBoost元算法——有效偵測欺詐交易的復(fù)合算法 233 7.5.1 弱分類器和強(qiáng)分類器之爭 233 7.5.2 AdaBoost元算法的分類器構(gòu)建方法 235 7.5.3 AdaBoost元算法小結(jié) 238 第8章 經(jīng)典的商業(yè)智能分析案例 241 8.1 商業(yè)智能分析綜述 242 8.1.1 什么是商業(yè)智能 242 8.1.2 商業(yè)智能的主流發(fā)展與應(yīng)用 244 8.2 KXEN分析軟件——構(gòu)建歐洲博彩業(yè)下注預(yù)測平臺 246 8.2.1 現(xiàn)代博彩業(yè)背后的黑手 247 8.2.2 集體智慧和莊家賠率的聯(lián)系 248 8.2.3 KXEN軟件小結(jié) 252 8.3 數(shù)據(jù)廢氣再利用——物流公司數(shù)據(jù)成功用于評估客戶信用 253 8.3.1 數(shù)據(jù)廢氣和黑暗數(shù)據(jù)的異同 254 8.3.2 論如何充分利用物流公司數(shù)據(jù) 255 8.3.3 數(shù)據(jù)廢氣再利用小結(jié) 258 8.4 必應(yīng)預(yù)測——使用往期信息預(yù)測自然災(zāi)害 259 8.4.1 預(yù)測自然災(zāi)害的必要性 260 8.4.2 微軟大數(shù)據(jù)預(yù)測的優(yōu)與劣 261 8.4.3 必應(yīng)預(yù)測小結(jié) 263 8.5 點(diǎn)球成金——助力NBA大數(shù)據(jù)分析的多種神秘軟件 265 8.5.1 NBA的有效球員數(shù)據(jù) 265 8.5.2 有關(guān)點(diǎn)球成金的靠譜方法 268 8.5.3 點(diǎn)球成金小結(jié) 270