Spark大數據分析實作
近年來Python逐漸成為越來越受歡迎的開發語言之一,在開源網站GitHub統計中,Python一舉奪下了第一名的寶座。目前Python大量的被運用在各個領域之中,舉凡大數據處理、網站開發、視窗程式設計等都可以看到Python的影子,而各大公司如Google、YouTube、Yahoo以及NASA也都是使用Python作為主要開發的語言。除此之外,簡單、易學也是讓Python能夠如此流行的原因之一。
Apache Spark是一個高效率的開源叢集運算框架,比起先前Hadoop的MapReduce,在運算效率上要快上百倍,透過PySpark讓我們能夠藉由Python程式語言直接操作Spark上的叢集資源進行運算。
課程目標
- 了解Python程式語言的架構、特性及開發方式式
- 利用Python 處理一般程式設計問題。
- 進一步延伸於多方面的應用,諸如網路爬蟲、數據分析、Web程式、機器學習等。
結訓具備以下技能
-
利用Python處理程式設計題。
-
了解Python程式語言的架構、特性及開發方式。
-
掌握從無到有開發自己的Python應用程式並瞭解電腦視覺應用開發之各環節障礙及如。
職涯發展
-
Python程式設計師
-
Python開發工程師
-
Python開發測試
-
電腦視覺演算法工程師
-
電腦視覺軟體開發工程師
-
電腦視覺開發測試
適合對象
-
已在相關領域,欲再增強本身專業技能者
-
對大數據分析有興趣願意嘗試
課程大綱
第一階段
- Python介紹
- Python資料形態
- Python運算子
- Python邏輯控制
- Python 函數介紹
- python class 介紹
- 數個自己動手練習寫程式時間
- 資料儲存相關函式庫
- 網路相關函式庫
- 網路相關函式庫
- Numpy 介紹
- Numpy 基本操作
- Pandas 介紹
- Pandas 資料結構
- 資料視覺化 Matplotlib
第二階段
- 影像處理與辨識基礎理論
- 影像擷取應用範例
專題實作
- 影像辨識與人工智慧整合實作
選擇中華數位的好處
學會撰寫Function擺脫開發限制
中華數位講師規劃由淺入深的實務開發學習流程與內容,讓你成為可獨立撰寫Function的Engineer。
業界肯定的實力
20年教育訓練經驗 + 業界產品開發講師不定期編譯符合業界需求的課程內容,用專業的角度和實戰經驗帶你快速與產業界接軌。
知名企業的共同選擇
客製化的內外訓教學服務,依專案需求調整課程內容。
結訓就業沒煩惱
實作專題立即與產業接軌就業沒煩惱
開課時間
110年3月14日至110年4月18日
(週日全天班AM9:30至PM5:30)
