大數(shù)據(jù)與云計(jì)算的關(guān)系就像一枚硬幣的正反面一樣密不可分。大數(shù)據(jù)必然無(wú)法用單臺(tái)的計(jì)算機(jī)進(jìn)行處理,需要采用分布式架構(gòu)。它的特色在于對(duì)海量數(shù)據(jù)進(jìn)行分布式數(shù)據(jù)挖掘。但它需要依托云計(jì)算的分布式處理、分布式數(shù)據(jù)庫(kù)和云存儲(chǔ)、虛擬化技術(shù)。。
Linux系統(tǒng)
Linux-操作系統(tǒng)介紹、Linux-操作系統(tǒng)安裝、Linux-基本命令使用、Linux-文件權(quán)限設(shè)置、Linux-重定向和管道、Linux-文件權(quán)限及設(shè)置命令、Linux-系統(tǒng)查住、Linux-文編編輯器vi操作、Linux-進(jìn)程管理與作業(yè)控制、Linux-shell腳本編程、Linux-yum安裝軟件、Linux-rpm安裝軟件、Linux-源程序代碼安裝、Linux-用戶管理、Linux-密碼管理及用戶切換、Linux-fdisk分區(qū)、Linux-EXT文件系統(tǒng)、Linux-掛載操作mount詳細(xì)使用、Linux-LVM基本使用、Linux-網(wǎng)絡(luò)基本配置、Linux-網(wǎng)絡(luò)測(cè)試和測(cè)試工具、Linux-啟動(dòng)引導(dǎo)器和單用戶模式、Linux-管理守護(hù)進(jìn)程、Linux-時(shí)間同步、Linux-周期性計(jì)劃任務(wù)、Linux-iptables防火墻基本語(yǔ)法介紹、Linux-iptables防火墻策略及配置文件、Linux-iptables防火墻匹配條件及運(yùn)行案例、Linux-Apache服務(wù)器概述及安裝、Linux-Apache服務(wù)器配置文件講解及虛擬目錄映射、Linux-Apache服務(wù)器配置用戶統(tǒng)一登錄、Linux-Apache服務(wù)器創(chuàng)建和配置虛擬主機(jī)、Linux-MySQL數(shù)據(jù)庫(kù)服務(wù)器安裝配置、Linux-MySQL數(shù)據(jù)庫(kù)服務(wù)器主從復(fù)制、Linux-vsftpd服務(wù)器安裝配置、Linux-NFS網(wǎng)絡(luò)文件服務(wù)器安裝配置、專(zhuān)題1:Linux.負(fù)載均衡、專(zhuān)題2:Linux.優(yōu)化、專(zhuān)題3:搭建互聯(lián)網(wǎng)高并發(fā)、高可靠的服務(wù)架構(gòu)。
hadoop離線計(jì)算系統(tǒng)
hadoop入門(mén)、hive基本介紹、使用、數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)、web點(diǎn)擊流日志數(shù)據(jù)挖掘的需求分析、數(shù)據(jù)來(lái)源、處理流程、數(shù)據(jù)分析結(jié)果導(dǎo)出、數(shù)據(jù)展現(xiàn)、hadoop數(shù)據(jù)分析系統(tǒng)集群搭建、HIVE的配置安裝、HIVE啟動(dòng)、HIVE使用測(cè)試、HDFS的概念和特性、HDFS的shell操作、HDFS的工作機(jī)制、HDFS的java應(yīng)用開(kāi)發(fā)、MAPREDUCE上手、MAPREDUCE程序的運(yùn)行機(jī)制、HIVE基本概念及操作、HIVE高級(jí)應(yīng)用、數(shù)據(jù)倉(cāng)庫(kù)增強(qiáng)、離線輔助系統(tǒng)-數(shù)據(jù)采集系統(tǒng)、離線輔助系統(tǒng)-任務(wù)調(diào)度系統(tǒng)、數(shù)據(jù)導(dǎo)出SQOOP、web點(diǎn)擊流日志分析系統(tǒng)實(shí)戰(zhàn)項(xiàng)目。
Storm實(shí)時(shí)計(jì)算部分
流式計(jì)算介紹、zookeeper集群搭建、Storm基礎(chǔ)及原理、Storm集群搭建、Storm項(xiàng)目maven環(huán)境搭建、Kafka入門(mén)、Storm結(jié)合Kafka編程API、Kafka負(fù)載均衡、Kafka消息存儲(chǔ)原理、流量日志分析系統(tǒng)、日志監(jiān)控告警系統(tǒng)、電商實(shí)時(shí)交易風(fēng)控系統(tǒng)。
Spark內(nèi)存計(jì)算
scala入門(mén)、scala的函數(shù)式編程、scala的面向?qū)ο缶幊、scala的高級(jí)基礎(chǔ)一、scala的高級(jí)基礎(chǔ)二、spark部署、spark編程模型、spark運(yùn)行框架、spark SQL原理實(shí)踐、spark Streaming原理和實(shí)踐、Spark機(jī)器學(xué)習(xí)入門(mén)、Graphx入門(mén)、項(xiàng)目實(shí)戰(zhàn):游戲各數(shù)據(jù)指標(biāo)分析。