Python 資料分析 - 網頁爬蟲與視覺呈現
關於課程
課程包含
課程時長
課程總人數
觀看限制
學習升級
最新消息
課程內容
▶▶▶ 早鳥活動進行中!
前 30 名購課學員限定,抽【認證體驗組】共 5 名!
此【認證體驗組】包含:
- 認證參考教材:Python 3.x 網頁資料擷取與分析特訓教材(市值 $490)
- CodeJudger 認證練習平台 – 六個月體驗帳號(市值 $1,500)
* 詳細活動規則請最下方募資解鎖活動區
本課程是以財團法人中華民國電腦技能基金會(CSF)的「TQC+ Python3 網頁資料擷取與分析認證」為範疇,技能規範及試題命製,符合教育部課綱之規劃,共分為四大類別,循序漸進、由淺入深建立學生邏輯思考基本概念。
學習網頁資料擷取與分析,可以讓您獲得自動化擷取大量網頁資料,轉換成任意格式以進行深入分析,而後視覺化呈現資訊的能力,提高洞察力、反應力。
課程搶先試看:
章節一:Python 與 Anaconda
這個章節將介紹本課程使用工具的安裝與應用,帶領大家先安裝 Anaconda 套件包,而後練習使用 Jupyter Notebook、Colab、Spyder 等開發環境,配合一個爬取 PTT 的實例來說明。
章節二:資料處理
在進行資料分析前,常會遇到資料格式的問題,所以在這個章節我們會介紹資料處理的方式,例如 csv、json 等格式資料的轉換,結合新北市公共自行車即時資訊、全國環境輻射偵測即時資訊等實例,讓大家能夠先練習將格式不一的資料做基本的處理優化,以便後續進行分析。
章節三:網頁資料擷取與轉換
網頁資料擷取與轉換,介紹應用靜態爬蟲(含應用 API 擷取政府開放資料)與動態爬蟲取得資料,配合靜態網路爬蟲-新北市不動產仲介公會網頁、動態網路爬蟲- ibon網站查詢各門市資訊等實例帶大家一起爬網頁。
章節四:資料分析
取得資料後需要對資料進行清理,採用各種分析技巧洞察資料背後的資訊,本章介紹應用 numpy 與 pandas 進行資料分析,配合毛豬交易行情分析、環保署 AQI 分析等實例帶大家找尋龐雜資料中隱藏的資訊。
章節五:資料視覺化
找到資訊後,用更有說服力的方式進行視覺化傳達效果更好,本章介紹應用 matplotlib、seaborn 進行資料視覺化,配合死谷國家公園氣溫比較、參加馬拉松比賽性別年齡人數比較等實例讓大家畫出美美又能說故事的圖。
本課程將以投影片導引觀念,並輔以指令操作解說各指令、函數的運作,再以數個題目案例,帶領啟發程式邏輯的思維與問題解決能力。並將協助參與您快速進入資料科學的世界,了解 Python 的應用,並藉由大量的實例練習熟悉Python資料科學,讓您輕鬆考取 TQC+ Python3 網頁資料擷取與分析認證!
1. 想快速掌握資料科學應用實務的人:
因為 Python 容易學習的特性,非常建議你可以先從 python 這個程式語言入門資料科學的世界,本堂課程會有大量的實例練習,讓你能理解資料從處理到分析、進而視覺化呈現的脈絡,快速培養實際操作的能力!
2. 沒有學過其他程式語言,想知道如何運用 Python 解決資料處理問題的人:
因為 Python 非常直覺化,不必死背語法就可以掌握本課程大量實例的意義,結合面相實際世界且容易改寫的實例,很快就可以上手解決實際問題。
3. 想運用 Python 進行視覺化呈現的人:
因為 Matplotlib、Seaborn 等套件的易用性,及其與 Numpy、Pandas 等資料分析套件的密切結合,可以很容易上手複雜資訊呈現的方式,結合這兩大套件大量實例,可以很快畫出具有特色的圖案。
4. 想考取 TQC+ Python3 網頁資料擷取與分析認證的人:
本課程是以財團法人中華民國電腦技能基金會 (CSF)的「TQC+ Python3 網頁資料擷取與分析認證」為範疇,配合CodeJudger 平台來練習,可以很快掌握相關題型與解題技巧,取得證照。
募資達 100% ▶ 早鳥 30 名限定!抽獎送【認證體驗組】共 5 名!
此【認證體驗組】包含:
- 認證參考教材:Python 3.x 網頁資料擷取與分析特訓教材(市值 $490)
- 本書遵循 CSF 專業考科「TQC+ 網頁資料擷取與分析Python 3」技能規範架構撰寫,符合鑑定的命題趨勢內容淺顯易懂,結合理論與實務,達到技術的傳承及表達,符合實務運用需求。
- CodeJudger 認證練習平台 – 六個月體驗帳號(市值 $1,500)
- Code Judger 是由 Kyosei.ai 共生智能股份有限公司所開發之自動化批改及教學管理系統,讓學生們在解題中學習,獲得成就,整合題庫與課程概念,為學習程式的學員、解題挑戰者以及程式教師提供最佳化的課程與題目管理。
募資達 200% ▶ 人人有機會!加碼抽【認證參考教材】共 10 名!
- 認證參考教材:Python 3.x 網頁資料擷取與分析特訓教材
【抽獎規則說明】 購買時間:募資上架日起至 2020/01/15 23:59 募資結束 期間 購買流程:期限內購買本課程,務必於結帳流程正確填妥收件資訊,並完成付款 📍認證體驗組📍 抽獎資格:募資達標 100% 時,已購課的前 30 名學員。(30 名之後才購課的不算在此內喔!) 獎項內容:【認證參考教材_ Python 3.x 網頁資料擷取與分析特訓教材】+【CodeJudger 認證練習平台 – 六個月體驗帳號】共 5 名 抽獎辦法:預計於開課後一週內(2020/3/23 以前)抽出得獎名單,以公布欄公布,並在一週內寄出獎項。 📍認證參考教材📍 抽獎資格:募資達標 200% 時,在募資期間內購買課程的所有學員皆有抽獎資格。(募資結束後才購課的不算在此內喔!) 獎項內容:【認證參考教材_ Python 3.x 網頁資料擷取與分析特訓教材】共 10 名 抽獎辦法:預計於開課後一週內(2020/3/23 以前)抽出得獎名單,以公布欄公布,並在一週內寄出獎項。
⚠️ 注意事項 FAQ Q 1:請問購買後,要在哪裡填收件資訊呢? A 1:按下「馬上預購」後,將導向「付款資訊」頁面,最下方即是收件資訊填答欄位,請參考下方附圖一。所有欄位請務必正確填寫,若因資訊錯誤導致寄送不到,恕不補寄。 Q 2:如何確認自己有沒有付款成功呢? A 2:完成購課流程後,請點選「網頁右上方的大頭貼」進入「訂單記錄」頁面,於「訂單狀況」的欄位顯示「完成付款」的訂單即代表付款成功,請參考下方附圖二。 (備註:選擇以「超商繳費」或「ATM 轉帳」付款的朋友,在下訂單後也要在規定期限內「完成付款」才算符合資格喔!) 若有任何「此活動相關問題」或「贈品寄送問題」,請來信至 csf_hahow@mail.csf.org.tw,將有專人協助為你解答。 ⚠️ 重要提醒: - 請注意填妥「縣市」、「郵遞區號」,海外寄送務必填妥「國家」!若因地址植入錯誤導致寄送不到,CSF 團隊保有最後寄送權利。 - 請務必參考下方注意事項欄位,完成付款、填寫 email、寄送地址相關程序。
(附圖一)
(附圖二)
曹祥雲是個從小學教到大學的全方位老師,投入資訊領域與資訊教育二十多年,心急於傳統程式設計教學方法讓學生遠離程式,希望能用創新的教學方式讓大家重拾運算思維的本心。
在師專念的是數學,喜歡用學到的程式來解決實際問題;高考及格進入環保署後,更迷上了程式設計,用各種工具來開發系統;取得碩博士學位後進入資訊教育領域,卻很驚訝的發現學生越來越怕程式設計,因為要背一大堆語法才能應付考試,還要絞盡腦汁才能記得一堆奇怪的演算法,經過優勝劣敗的淘汰後,只有最厲害的才能在資訊這一行繼續走下去。但是這根據實際上的程式設計解決實際問題的方式差別很大,在到處都是 Open source 的世界裡,寫程式實際上是根據需求找類似的原始碼,修改以解決目前的問題,根本不需要背語法,也不需要死記精妙的演算法,只要能解決問題的程式,就是好程式。
這門課程,就是用這個方法設計,不需要死背語法和演算法,只需要了解程式,學會修改程式來解決問題就可以了,希望大家一起來推動讓學生回歸運算思維的本心。
證照、著作與相關專案
- 76年公務人員高考電子計算人員及格
- TQC+ 程式語言 ( Python 3 ) 證照
- Python程式設計入門與運算思維(106),新陸書局,台北。
- Python 3.x 網頁資料擷取與分析特訓教材(107),碁峰,台北。
- 108教育部大學深化數位學習與創新應用計畫-致理邏輯思考應用課程製作(計算邏輯與程式應用、Python程式設計入門、Python程式設計應用)
學經歷
- 省立台北師專、交通大學資管所碩士、台灣大學商學研究所資管組博士
- 現任致理科技大學資管系副教授
- 電腦技能基金會 TQC+ Python 證照、TQC+ Python3網頁資料擷取與分析證照講師
- 臺北縣永和市永平國小教師
- 行政院環保署環境監測與資訊處設計師/分析師
教學經驗
從師專畢業,考上高考進入環保署,取得碩、博士回到校園任教,已經三十幾年過去了,見證了台灣資訊界的蓬勃發展,但也發現傳統的程式教學方式讓資訊科系許多學生不喜歡寫程式,更不要講非資訊科系學生。深深體會許多對資訊、程式初接觸的人的擔心心態,因此希望利用這個課程,引導初學者發現程式就是用來解決問題的,根據不用死背死記語法、邏輯,透過應用實例的修改,可以漸漸地對程式寫作建立信心、培養邏輯思維的判斷能力,未來解決更多實際問題。
講師作品
- Python程式設計入門與運算思維(106),新陸書局,台北。https://www.books.com.tw/products/0010763704
- Python 3.x 網頁資料擷取與分析特訓教材(107),碁峰,台北。https://www.books.com.tw/products/0010805507
課程互動設計
回答問題的頻率:平均每週至少上線回應一次以上
批改作業的頻率:平均每個月至少上線批改一次以上
同學若有問題,都可以在「購課前問答區」或「問題討論區」留言,老師會盡快給予回覆喔!


