知名線上課程 Spark首部曲:實務基礎入門篇(含教材) 講師:Mark Yang 影音教學 中文發音 繁體中文版(DVD版)
這門課程將讓你了解Spark的核心基礎與環境建置、 學習Scala語言到實作Streaming串流分析。在熟悉Hadoop基礎概念後,若想要深入學習大數據,那你的下一步絕對要學Spark!這堂課程中,我們將用Spark玩轉資料,挑戰背後無限商機!並讓您透過此三部曲學程輕鬆進入大數據分析領域。
Spark安裝簡介與原理
Hadoop Review
Spark vs Hadoop
Spark生態系
Spark集群元件介紹及運作流程
佈署Spark Standalone模式(1)
佈署Spark Standalone模式(2)
佈署Spark Standalone模式(3)
什麼是RDD?
RDD的基本操作
key-value RDD常見操作
寬依賴及窄依賴視圖
理解Stage邊界
創建專案
實作WordCount專案
打包專案
spark-submit提交
總結
Spark核心語言 - Scala
什麼是Scala
安裝Scala,Sbt及IntelliJ
Java vs Scala
Scala OOP
Scala 匿名函數(1)
Scala 匿名函數(2)
Scala 匿名函數(3)
創建專案
引用外部類庫
打包
總結
用 Spark Streaming讀取即時資料
什麼是Spark Streaming
什麼是DStream
簡單的Word Count
DStream操作(1)-Transformations
DStream操作(2)-Transformations
DStream操作-Ouput
Receivers
Kafka原理與安裝
Spark Streaming+Kafka
總結
|
|