◆ 課程源起 |
雲端運算掀起了新一代的資訊革命,也帶來了資訊爆炸式的成長,市調單位IDC的研究報告指出:自2010年全球資料量已進入ZB(zettabytes,1 ZB 為1兆GB)時代,並且每年以60%的速度攀升,這意味著每18個月全球的資料量將翻倍。面對不斷擴張的驚人資料量,大量資料 (Big Data) 的儲存、管理、處理、搜尋、分析與智能應用等處理資料的能力也將面臨新的挑戰,而處理資料的技術將迫切需要可動態與彈性等特點,以支援大量資料處理的計算模式。
雲端運算使得分散式運算技術成了新顯學,整合MapReduce演算法並被各大企業所廣泛採用的Hadoop套件,更是開發雲端運算技術的佼佼者,它是用來處理與保存大量資料的雲端運算平台,全球各大IT企業(如:雅虎、IBM等)無不積極投資與推廣此一計算模式,並被作為雲端運算環境中的重要基礎軟件。有了Hadoop軟體平台後,可以進行各項分析,如:電信業者可以分析手機在基地台漫遊的特性,提供更好的在地費率;信用卡業者可以每天定期分析各種信用貸款所產生的風險,動態調整信貸利率;便利超商可以分析消費者的購買習慣,動態調整架上存貨數量;甚至新興產業如生醫資訊、智慧電網等,皆可運用Hadoop平台來進行資料探勘與趨勢預測。
根據市場調查機構IDC的研究顯示,Hadoop 軟體市場的復合年增長率超過了60%,並預測到了2016年,市場總值將由2011年的7700萬美元增長至8.128億美元,可見得Hadoop火熱的程度。若您的企業有儲存或分析海量資料的需求,或者面臨資料庫過度龐大,正在尋求分散式資料庫或資料倉儲的技術,那Hadoop將是一個已通過商業驗證的選擇。只要懂得駕馭Hadoop這隻大象,它將能駝著您爬過一座座資料大山,幫您理出隱藏在群眾中的邏輯。
為了滿足業界需求,資策會規劃「Big Data之處理與分析實務班」課程,本課程學員將學習到雲端運算之三大關鍵技術,及利用Hadoop之分散式檔案系統(HDFS)與MapReduce,來快速建構出雲端運算的執行環境和服務,並以實作方式讓學員了解如何透過Hadoop架構進行雲端資料的大量資料處理、分析與應用。
|
|
|
◆ 課程目標 |
本課程學員將學習到雲端運算之三大關鍵技術,及利用Hadoop之分散式檔案系統(HDFS)與MapReduce,來快速建構出雲端運算的執行環境和服務,並以實作方式讓學員了解如何透過Hadoop架構進行雲端資料的大量資料(Big Data)處理、分析與應用。
|
|
◆ 課程特色 |
本課程旨在建立雲端運算之大量資料(Big Data)處理、分析、應用的根基,讓參訓學員瞭解正確的觀念與方法,重點並不在講解程式設計的細節,而在於透過採體驗式教學方式的實作,經由指令剪貼方式來體驗實際的操作方式,以從體驗中驗證課程所學。
由於 Hadoop 是採用 Java 語言撰寫,對於許多不熟悉 Java 語言的學員來說有相當大的入門障礙,因此本課程額外介紹可與其他語言介接的 Hadoop Streaming 方法,並以實際的案例說明如何讓Hadoop 與現存的應用程式(如 Shell Script、C 語言撰寫的執行檔、PHP Script、Python Script 等)進行整合實作,期能讓學員學會如何將 Hadoop 這項技術與現存資訊架構進行整合。
|
|
◆ 適合對象 |
- IT經理或系統網路部門主管
- 專案經理、系統架構師或系統網路管理人員
- 企業或技術決策人員
- 對於雲端運算之大量資料(Big Data)處理、分析、應用有興趣者
|
|
◆ 預備知識 |
具 Linux 操作實務與 Java 程式語言基礎者尤佳。 |
|
◆ 課程大綱 |
課程單元
|
課程主題
|
時數
|
Hadoop 與
Hadoop Ecosystem 簡介
|
-
巨量資料簡介
-
為何需要使用Hadoop
-
Hadoop 簡介
-
Hadoop 與Hadoop Ecosystem
|
3
|
|
|
4
|
HDFS 介紹
|
-
HDFS 概論
-
HDFS 實務操作
-
使用Java 存取HDFS
|
3
|
MapReduce介紹
|
|
4
|
|
|
|
◆ 課程日期 |
2018年6月23日~6月24日(週六、日),每日9:00~12:30、13:30~17:00,計兩天、14小時。
|
|
◆ 上課地點 |
資訊工業策進會 數位教育研究所, 台北市信義路三段153號10樓。
上課地點位於捷運大安站1號出口左轉約20公尺 。
* 上課地點與教室之確認,以上課通知函為主。
|
|
◆ 報名方式 |
本課程採線上報名,請按右方【我要報名】進入報名系統。 |
|
|
|
◆ 課程費用與繳費 |
1. |
本課程費用 NT$10,000元,費用含課程、講義、餐點。 |
2. |
凡於2018年6月15日前完成報名,可享 早鳥優惠價 NT$8,000元 (含稅)。 |
3. |
團報優惠:兩人團報可打95折、四人團報可打9折優惠。
●團報優惠與早鳥優惠可一併使用。
●課程報名系統每個帳號僅提供一位學員報名,若為團報學員,每位皆必須完成線上報名,並於其他金額說明欄位註記「與XXX一起團報」,以利事後核對名單。
|
4. |
課程若未如期開班,費用將全額退還。 |
|
◆ 報名確認與取消 |
1. |
已完成報名與繳費之學員,課程主辦單位將於開課三天前以E-mail方式寄發上課通知函;若課程因故取消或延期,亦將以E-mail方式通知,如未收到任何通知,敬請來電確認。 |
2. |
已完成繳費之學員,若於開課前8天(含)內欲取消報名,請於開課日前以書面通知業務承辦人,主辦單位將退還90%課程費用。 |
3. |
學員於培訓期間如因個人因素無法繼續參與課程,將依課程退費規定辦理之︰上課未逾總時數三分之一,欲辦理退費,可退還所有課程費用二分之一;上課逾總時數三分之一,則不退費。 |
4. |
課程執行單位保留是否接受報名之權利。 |
|
◆ 餐點服務
|
本課程上課期間,每天都會提供午餐,學員不需自行準備或額外付費。 |
|
◆ 結業證書
|
依本會ISO品質系統之「教育訓練服務程序」規定,本課程為短期班,參訓學員缺課未超過總時數五分之一者,結業時由本會核發結業證書。 |
|
◆ 學習護照
|
資策會為人事行政局首批認證審定之民間學習機構,參加本課程之中小企業員工,亦可獲得「中小企業終身學習護照」認可之時數;此外,公務人員參加資策會課程,學習時數可登錄「公務人員終身學習護照」。 |
|
◆ 相關課程推薦 |
|