本活動議程表 Hadoop/Spark 資料科學快速體驗營


一、緣由與目標

無可諱言地,相對於先進國家與中國,台灣在大數據的應用與技術上,都已經呈現落後的跡象。究其原因,除了先天上,擁有大數據的單位相對較少之外,更重要的是大數據相關的平台技術能力與應用分析案例與觀念,都還未足夠與普及,面對行動網路與物聯網的全球競爭,無法善用大數據來解決問題,以及創造累積且持續性的競爭優勢。

本課程協助想開始運用巨量數據的企業,或是欲成為資料科學家的有志之士,藉由親自實作各項大數據分析所需技術與工具,能夠很快地了解進行大數據分析相關的實戰技術,快速體驗進入資料科學的領域,開始決勝大數據之路。

二、課程簡介

「2015 Hadoop/Spark 資料科學快速體驗營」是「2015 台灣資料科學愛好者年會」第一次舉辦的主軸活動,適合對於 Hadoop 沒有經驗,但很有興趣學習的學生/社會人士參加。參加本次體驗營,學員都將會親身上機體驗 Hadoop Family 中各項知名的專案,包括 Hadoop、HDFS、Hive、Sqoop、Impala、Hue、Spark/MLlib 以及 Scala 等工具與技術,且為能讓每位學員都能夠有良好的實作體驗,已特別提前舉辦先導幹部班,訓練正式課程所需要的幹部以輔佐學員學習。

課程中透過 AWS EC2 AMI 或其他 VM 範本開啟虛擬機器進行操作,不僅帶給各位 Hadoop Family 的基礎知識,課程中整合下述由淺入深之實作步驟,包含如何將關聯式資料轉換成分散式運算用資料的處理技巧、操作分散式檔案系統、使用終端機及網頁介面之資料查詢工具、運行 Scala 程式、產出分析結果等,建立一個完整的分析解決方案。課程中由講師與助教引導學員運用各項 Hadoop/Spark 專案實作出完整的分析脈絡,激發學員在未來運用 Hadoop/Spark 專案到自己的企業與工作環境之中,更進一步促進學員對巨量資料分析的認識。

全程參加「2015 Hadoop/Spark 資料科學快速體驗營」的學員,將可獲頒結業證書一紙。

三、學員報名基本要求與課程規定

  1. 未用過 Hadoop Family 相關技術或工具
  2. 熟悉 Linux 基本指令
  3. 有程式設計開發經驗
  4. 熟悉 SQL 語法與應用,例如能了解以下執行結果:
    SELECT c.category_name, count(order_item_quantity) as count
    FROM order_items oi
    INNER JOIN products p ON oi.order_item_product_id = p.product_id INNER
    JOIN categories c ON c.category_id = p.product_category_id GROUP BY c.category_name
    ORDER BY count desc limit 10;
  5. 本人同意完全遵守主辦單位相關課程要求與規則,如有違反相關授課規則與規定,主辦單位將扣除開銷成本後退回學費與取消上課權利。
  6. 主辦單位有權利視各種內外在因素考量,提前通知取消開課,並全額退費。
  7. 以下課程資訊供參考:課程主要在快速體驗與使用Hadoop/Spark,進行資料處理與分析,將使用已經配置好在 AWS 的 EC2 系統或其他VM上機實習,對於 Hadoop/Spark 系統架設與管理不會有太多著墨。

上午課程: Hadoop、HDFS、Hive、Sqoop、Impala、Hue

下午課程:Spark/Scala 資料分析與機器學習 (MLliB)

課前須知

本課程著重於上課中的操作,為了達到最佳的學習效果,請學員參加前做好以下的準備,並自備筆電下載以下工具:

四、課程表

五、課程主辦團隊

營長:趙國仁博士 / 東森科技、隆中網絡大數據顧問

創立台灣第一個中文BBS系統、發展全球第一套中文套裝搜索引擎、創立龍捲風科技、曾在國立高雄應用科技大學擔任專任助理教授。有發展文字採礦及行動廣告大數據的經驗,熱愛軟體開發與物聯網創新,獲得20項以上的發明專利,喜歡新創事業商務模式發展、整合性資料分析與探索性研究。

副營長:許勝淵、葉蕙菱
班 長:黃道育、黃聖哲

六、預期效益

  • 增進國內學界與業界的知識與技術交流、互動,了解資料科學的應用方式。
  • 藉由 Hadoop/Spark 案例實作與討論,進一步了解、扎實完成資料科學分析所需步驟。
  • 促進學員對資料科學進一步認識,期望有助學員至各產業促進資料科學之實質應用與成長。

七、協辦與贊助單位

八、結業證書

詳細議程

講者就是你!

徵求講者、投稿

邀請各界在自己的工作場域中第一線進行資料分析的先進來與我們的聽眾分享資料科學的趣味、價值、以及心得...

熱情志工招募!

徵求志工

誠摯邀請具有熱情、喜愛學習、個性外向的您一起加入我們,讓我們共同舉辦今年嶄新且擴大規模至四天、預計與會人數超過 1500 人的大型會議...

7/7 起

報名年會

線上報名將於 2015/07/07 中午 12 點開始 至 2015/07/24 止。