實(shí)時(shí)數(shù)據(jù)分析

　　課程內(nèi)容：

　　1、python介紹、安裝、基本操作、基本語法、數(shù)據(jù)結(jié)構(gòu)、內(nèi)建函數(shù)、異常、模塊;

　　2、Storm介紹、Storm應(yīng)用場景及行業(yè)案例、Storm特點(diǎn)、Storm編程模型部署;

　　3、Storm集群搭建、配置集群、通信機(jī)制;

　　4、Component組件、spout水龍頭、bolt轉(zhuǎn)接頭、spout的tail特性、網(wǎng)站日志處理案例、將接收到日志的會(huì)話id打印在控制臺案例、動(dòng)態(tài)增加日志，查看控制臺打印信息案例、分組策略和并發(fā)度、實(shí)時(shí)單詞統(tǒng)計(jì)案例、實(shí)時(shí)計(jì)算網(wǎng)站PV案例、實(shí)時(shí)計(jì)算網(wǎng)站UV去重案例、常見問題總結(jié);

　　5、消息隊(duì)列Kafka、使用Flume收集數(shù)據(jù)到Kafka、Mahout的離線計(jì)算數(shù)據(jù)、Kafka基礎(chǔ)與常用API;

　　項(xiàng)目：

　　基于storm體系的“雙十一實(shí)時(shí)數(shù)據(jù)分析平臺”、Grouping策略及并發(fā)度、計(jì)算網(wǎng)站、storm事務(wù)、Storm集群和作業(yè)監(jiān)控、點(diǎn)擊流日志分析、Python爬蟲