Spark首部曲:實務基礎入門篇

課程資訊 課程大綱 開課單位 常見問答
Loading...
線上課程

Spark首部曲:實務基礎入門篇

4863次瀏覽
NT$1,200
優惠現領
9 折
【指定課程:限定優惠】
課程資訊
本頁面課程內容及活動資訊概由廠商提供,部分內容非屬104服務範疇,會員應遵守之規範悉依 104課程中心會員規約 所載。
上課時間 無限期觀看課程查看更多
上課方式 於開課單位網站兌換後觀看課程
課程內容
課程大綱
展開全部
1 Spark安裝簡介與原理
01
Hadoop Review
02
Spark vs Hadoop
03
Spark生態系
04
測驗:Spark的特色
05
Spark集群元件介紹及運作流程
06
佈署Spark Standalone模式(1)
07
佈署Spark Standalone模式(2)
08
佈署Spark Standalone模式(3)
09
測驗:Spark運作流程
10
什麼是RDD?
11
RDD的基本操作
12
測驗:Transformation及Action
13
key-value RDD常見操作
14
測驗:字數統計
15
寬依賴及窄依賴視圖
16
理解Stage邊界
17
測驗:RDD操作效能優化
18
創建專案
19
實作WordCount專案
20
打包專案
21
spark-submit提交
22
測驗:spark專案
23
總結
2 Spark核心語言 - Scala
01
什麼是Scala
02
安裝Scala,Sbt及IntelliJ
03
Java vs Scala
04
測驗:val 與var
05
Scala OOP
06
測驗:Scala OOP
07
Scala 匿名函數(1)
08
Scala 匿名函數(2)
09
測驗:Tuple
10
Scala 匿名函數(3)
11
測驗:字數統計
12
創建專案
13
引用外部類庫
14
打包
15
測驗:如何正確執行Jar檔
16
總結
3 用 Spark Streaming讀取即時資料
01
什麼是Spark Streaming
02
測驗:理解Spark Streaming
03
什麼是DStream
04
測驗:理解DStream
05
簡單的Word Count
06
DStream操作(1)-Transformations
07
DStream操作(2)-Transformations
08
測驗:理解Transformations
09
DStream操作-Ouput
10
測驗:foreachRDD設計模式
11
Receivers
12
測驗:Spark Streaming支持的數據源
13
Kafka原理與安裝
14
Spark Streaming+Kafka
15
總結
你可以學到
| 本課程中我們將帶您學習
✔ 了解Spark核心基礎與環境建置

✔ 學習Scala語言
✔ 實作Streaming
適合對象
✔ 對大數據處理、分析、應用有興趣者✔ 系統架構師或系統網路管理人員✔ 商業資料分析部門主管及相關人員
課程講師
楊擇中
●統計本科畢業,畢業後誤入程式叢林,熱愛軟體架構設計及數據分析。●現任手機資料分析工程師,為HadoopCon2015的講者,目前常出沒於Spark台灣社群,致力於推廣Spark技術與Scala。
展開全部
開課單位
緯育TibaMe
緯育TibaMe由全球最大資通訊集團之一的緯創資通集團於2015年正式成立,我們專注於人才培訓與平台服務,發展多元的授課模式,並結合緯育開發的雲端智能化學習系統,有效培育新世代數位化人才。在行動與雲端時代,用科技加值人才培育,持續發展創新與有效的數位教育學習服務。
最新動態 看所有動態

📣免費直播講座│AI世代你該會的高效求職術!報名就有機會獲得履歷+面試QA GPTs工具

【你不是能力不好,只是沒說對話】 面試官問:「為什麼想應徵這份工作?」 你說出一大段,卻被回一句「我們會再通知你」 你不是沒準備,而是少了一個能幫你「講對話」的個人化教練 👉 https://lihi.cc/K3SAn 🎯 如果你也有這些困擾...... 🔹 不知道怎麼對應履歷與職缺要求? 🔹 面試講得真心卻總是沒命中? 🔹 想知道 HR 心裡到底想看到什麼? 📌這場直播,你會學到: 🔥 了解AI 助力下現代人的求職優勢 🔥 求職前必備的優勢盤點技巧 🔥 善用 AI 工具打造面試官讚賞的履歷 & 應答 - NotebookLM 快速比對理想職缺與你的技能落點 - GPTs 一鍵優化履歷、自傳與面試回答 - Gamma 幫你把個人優勢做成視覺亮點,主管一眼看到重點 🎁 報名+出席直播送你「履歷+面試 #GPTs工具」 幫你依據不同求職階段最佳化形象包裝術! ▍ 直播講座資訊 🔹 時間:6/23(一) 20:00~21:00 🔹 講者:資深 AI 培訓顧問 Hubert、職涯溝通表達教練 Nina 🔹 講座形式:線上直播(將於活動前2~3天email提供直播連結) 🔸 立即報名:https://lihi.cc/K3SAn

⏰免費直播報名倒數一週!解鎖AI 人才學習地圖:​產業需求 x 關鍵技能全攻略

AI 技術與工具翻新速度快又急,你是否也在思考:「我該學什麼?又該從哪開始?」6/17 從產業趨勢、熱門 AI 職務到推薦 AI 學習路徑一次滿足你!👉 https://lihi.cc/KaOhy ​ 兩位經常與產業 AI 專家交手,並著力於人才 #AI賦能 的產品經理將為你帶來 ✅ 掌握產業 AI 趨勢 與熱門職務需求解析 ✅ 了解 AI 如何改變職場與工作模式 ✅ AI 帶來的新興職務與未來發展 ✅ 台灣搶手 AI 人才有哪些 ✅ IT 與非 IT 背景 AI 學習重點 ✅ 跨領域轉職 AI 職務的機會點 ​ ​ ▍ ​ 誰適合參加? 👉 想了解產業 AI 趨勢 👉 想認識不同 AI 職務與未來發展 👉 想獲得 AI 工具推薦 👉 想挑選適合自己的 AI 學習路徑 ​ ​ ▍ 直播講座資訊 🔹 時間:6/17(二) 20:00~21:00 🔹 講者:產業 AI 觀察家 吳紹瑜、AI 人才養成推手 黃禹樵 🔹 講座形式:線上直播(將於活動前2~3天email提供直播連結) 🔸 立即報名:https://lihi.cc/KaOhy
常見問答
如何購買課程並開始上課
於欲購買 1. 線上課程之頁面,點擊「立即購買」,成功使用信用卡完成付款並確立訂單成立後,本平台將透過購買填寫之信箱,以郵件方式通知「訂單成立」,後續兌換學習有兩種形式:(A) 若購買學習廠商提供課程,購買後「提供課程兌換序號、兌換連結、兌換碼使用說明」,引導您至購買課程之出版廠商兌換並上課、(B)若購買是104學習系統,購買完可以從郵件、訂單明細、課程詳細頁直接進到站內線上學習。 2. 實體課程之頁面,點擊「立即購買」,成功完成付款並確立訂單成立後,本平台將透過購買填寫之信箱,以郵件方式通知「訂單成立」即可完成報名,後續開課單位會有專員與您聯繫後續事宜。
購買與報名課程付款方式?
僅提供信用卡付款。
有支援信用卡分期嗎?
平台有提供分期服務:結帳金額滿$4,000可享三期零利率,滿$12,000可享六期零利率;分期服務支援銀行公司為:中國信託、台新銀行、玉山銀行,實際分期金額依各發卡行規定
已完成付款,但用錯折扣碼怎麼辦?
請申請退款並重新下單,已使用之折扣碼,本平台將不進行退回,敬請見諒。
線上刷卡後訂單狀態顯示「待付款」
代表您的結帳流程尚未完成,請儘速完成結帳程序,以免課程相關優惠權益失效。
刷卡失敗的原因
可能為以下原因: 1.授權失敗(例:信用卡發卡銀行系統忙碌、網路塞車、刷卡等待時間過久造成系統確認失敗等問題),建議稍待一段時間再重新刷卡。 2.輸入信用卡卡號等相關資料不正確(例:輸入資料不正確、卡號過期、尚未開卡等問題),建議重新確認輸入資訊。
如何選擇紙本發票
為響應政府政策,不主動提供紙本發票,委由金財通系統寄發電子發票開立通知信至學員購買課程時填寫之Email,發票自動存入會員載具,若未收到請告知。
企業請款之憑證,如何申請
若需要進行企業請款,請於購買時輸入統一編號、發票抬頭,本平台將以郵件寄送電子發票方式,至您填寫之信箱。
多久會收到發票
發票將於付款成功,3個工作天內開立,敬請稍候。
如何退款
請參考下方退款須知與流程 1.若您於本平台成功完成付款購買課程,有退款需求,於外部學習廠商兌換之線上課程自購買日起7天內,且未進行課程兌換,可申請全額退費;於104課程中心站內學習課程若購買日起7天內後「未進到學習頁」,可申請全額退費;實體課程須於開課日前 1 日之非假日上班時段前與104學習精靈提出申請,始得要求全額退費。 2.若需申請退款,請使用信件主旨:「課程中心退款申請」,並於信件內容寫明購買人姓名、訂單編號、欲退款之課程名稱,郵件至nabiservice@104.com.tw,本平台將於5個工作天內盡快為您處理。 3.確認提出退款申請時間為課程購買日起7天內,且未進行課程兌換,本平台將與欲申請退款課程之出版廠商,提出會員資料與學習紀錄查詢,確認您課程的觀看紀錄,並同步確認出版廠商訂定之退款事項,是否全數符合。申請退款的同時,即代表您同意本平台與退款課程之出版廠商,提出查詢會員資料與學習紀錄。 4.若您單一訂單中購買兩堂(含)以上課程,不需要整張訂單退款(只退其中幾堂課),退款金額為欲退款課程售價加總後,扣除此張訂單所使用之折扣碼(若折扣碼為整張訂單之折數折扣,則退款金額為欲退款課程售價加總後乘以折數折扣),若計算後退款金額低於(含)0元,本平台將不執行退款。5.上述退款方式僅限於本平台成功完成付款購買之課程,若付款與訂單成立之任一程序不在本平台完成,退款方式需依照課程出版之廠商所訂定之規則提出申請,並由課程出版廠商協助處理,本平台不介入。 6.若您的發票沒有填寫統一編號,並需要辦理退款時,由本平台代為處理發票相關作業 (如作廢電子發票或開立電子發票折讓單),以加速退款作業時程。 7.若您原訂單信用卡分期,其申請退費時,須整筆訂單全額退費,無法部分或擇一課程退費。
款項何時退回
信用卡一次付清:課程退費採原信用卡退刷方式,退費所需之工作天依各金融機構實際作業時間為準。 信用卡分期付款:課程退費採匯款方式,會將退款款項匯款到您的指定帳戶,將由專員與您聯繫提供相關資料,以利後續退款作業。
相關證照
MySQL CMA
CMA認證為一入門級認證。僅須通過一項考試便可取得。MySQL Certified Associate 證書提供進一步取得其他 MySQL 專業認證的基礎。和其他的 MySQL 認證不同,Associate 認證不限定特定 MySQL 版本,但偏重使用各版本MySQL時所需之共通知識。
MySQL CMDBA
CMDBA 認證鎖定不寫應用程式,但擔任多部伺服器資料調校、規畫與優化的管理人員角色。取得資料庫管理員認證,考生必須通過 DBA-I 及 DBA-II 考試。
TQC-DA-大型資料庫管理系統 MySQL5
企業人才技能認證(TQC)是財團法人中華民國電腦技能基金會針對企業用才需求,所提出來的一項整合性認證。這項認證是經過詳細調查、分析各職務工作需求,確認從事該項職務究應具備哪些電腦技能,再對所有電腦技能測驗項目重新歸類整合而成。不但能讓有志於從事網路管理職務的人員掌握學習的方向,對求才企業也提供了更快速、更客觀、更簡化的人才甄選程序。
SSE Big Data Database: NoSQL國際認證
大數據盛行之後,分散式系統成為IT行業的顯學。相對於傳統的關聯式資料庫,NoSQL其分散、非結構化、支援Hadoop、記憶體中處理以及支援MapReduce的特性,在全球各大行業都相繼採用。除了IT及網路業的巨頭(Google, Facebook, Amazon, Microsoft)、其它各行各業如Walmart, Samsung, Comcast也完全投入。可支撐起整個公司的資料儲存、分析、倉儲、串流、即時分析、商業智慧等任務。
基礎程式語言
請洽證照單位查詢介紹