Python 爬蟲入門特訓 ─ 資料抓取與處理應用

坊間許多爬蟲課程內容複雜艱深，本課程從基礎爬蟲語法操作應用，至針對結構性的網站資料來做爬取與篩洗分析，期待讓學習者輕鬆並清楚的學習爬蟲與視覺化的技巧。

這堂課適合已有 Python 或其他語法基礎的同學，如果你有興趣、但還沒有程式基礎，推薦你加入老師開設的初階課程《Python 入門特訓 - 基礎實作到證照攻略》，好好紮穩基底，就能一路直通數據爬取、處理與分析。

• 課程對象主要針對非資訊科系人士，以及想把程式寫作能力奠定更扎實的開發者。課程內容除了爬蟲基礎語法逐步教學外，會使用豐富的實例不斷演練，並且培養如何觀察各類型的網站，思考如何從中突破抓取所需要的資料。
• 老師曾經幫許多非資訊專長的上班族上過 Python 基礎課程、爬蟲課程，知道初學者學習上常遇到的困難點，因此不斷調整教學方式，設計出一套循序漸進的學習歷程，能讓學習者更容易理解與運用。這門線上課程也會秉持著同樣的教學方法，內容不求太繁雜，而是紮穩基礎，並舉一反三，讓學習者從各種實例中磨練學習並觀察推導，才能活學活用。

課程單元規劃

本課程涵蓋四大章節、共 360 分鐘，教學方式採用投影片語法講義整理、以及實際操作演練，並佐以實際範例，讓學員加深印象與了解應用。課程內容設計，著重操作技術、範例剖析、實作練習等。

章節一：爬蟲的起始式（共計 50 分鐘） 

開發環境介紹、爬蟲流程解說、以及實際爬取網頁。
本章節介紹 Spyder、以及 Google Colab 兩種開發工具，以及安裝套件。並採用 requests 套件來抓取網頁資料。

單元１：開發環境 1：Anaconda 的安裝與更新

單元２：開發環境 2：Google 的 Colab 

單元３：網頁資料爬取流程介紹 

單元４：requests 套件抓取方法與儲存 

章節二：數字型態數據的處理（共計 50 分鐘） 

數字資料處理套件 Numpy、以及視覺化套件 Matplotlib 的語法教學與演練。
Numpy 是基於數據處理方面相當方便的 Python 套件，強化了 Python 原生 list 型態的操作上的便利性，可以簡化大型的數據陣列上的處理程式。而 matplotlib 則是 numpy 的繪圖套件，將龐大的數據資料，轉化為圖表呈現，使得資料更容易理解而看出趨勢。

單元 1：numpy 套件語法與操作 

作業１：矩陣（TQC+ 網頁資料擷取與分析 302）

單元２：繪圖套件 matplotlib ，將數據視覺化 

作業２：月份統計：長條圖與圓餅圖（TQC+ 網頁資料擷取與分析 403）

章節三：數據的處理與分析的利器：pandas 套件 (共計 100 分鐘)

爬蟲與資料處理套件 Pandas 的語法教學與演練，並且儲存至資料庫 sqlite3 的套件。
Pandas 之於 Python，就好比 Excel 之於 Microsoft Office，它結合了 numpy 的特性，甚至文字資料的處理，對於資料進行分割、合併、以及選擇片段的能力相當強大，是資料科學分析前處理相當好的工具。而處理好的龐大資料，儲存在資料庫中，也方便後續的查詢與運作，本章節使用 sqlite3 套件來存儲資料。

單元 1：pandas 的 Series 結構語法與操作 

單元２：pandas 的 DataFrame 結構語法與操作 

作業１：登革熱病例統計 (TQC+ 網頁資料擷取與分析 305)

單元３：將 DataFrame 的資料視覺化

單元４：資料匯出成檔案與資料庫 

章節四：案例實戰（共計 160 分鐘）

學習了操作語法之後，運用線上一些公開資料網站，來實際演練資料爬取、篩洗處理的程序，並且繪製成圖表方便觀看與分析，並且寫入於資料庫中備存。實際案例演練，充分應用所學。

單元１：網頁表格狀的資料匯入

單元２：政府公開資料爬取 

單元３：台銀匯率資料爬取 

單元４：台灣證券交易所股票資料爬取

作業１：地方文物館參觀人次統計

單元５：Google 表單問卷資料蒐集

募資達 100% ▶ 早鳥 30 名限定！抽獎送【認證體驗組】共 5 名！

此【認證體驗組】包含兩大部分：

1.認證參考教材：Python 3.x 網頁資料擷取與分析特訓教材（市值 $490）

★本書遵循 CSF 專業考科「TQC+ 網頁資料擷取與分析 Python 3」技能規範架構撰寫，符合鑑定的命題趨勢內容淺顯易懂，結合理論與實務，達到技術的傳承及表達，符合實務運用需求。
★涵蓋知識觀念和範例練習，作為培養網頁資料擷取與分析 Python 3 能力之最佳讀本。
★本書分成五個部分，包含「Python 與 Anaconda」、「資料處理能力」、「網頁資料擷取與轉換」、「資料分析能力」、「資料視覺化能力」等多項議題，提供讀者最實用技巧，靈活運用 Python 網頁資料擷取與分析，帶領讀者具備快速蒐集資料並分析有用資訊的能力。

2.CodeJudger 認證練習平台 – 六個月體驗帳號（市值 $1,500)

Code Judger 是由 Kyosei.ai 共生智能股份有限公司所開發之自動化批改及教學管理系統，讓學生們在解題中學習，獲得成就，整合題庫與課程概念，為學習程式的學員、解題挑戰者以及程式教師提供最佳化的課程與題目管理。

募資達 200% ▶ 人人有機會！加碼抽【Code Judger 體驗帳號】共 5 名！

• Code Judger認證練習平台 - 六個月體驗帳號（市值 $1,500）

【贈獎／抽獎規則說明】
募資達成率累計至【課程募資 30 天結束的那一刻】
📍 購買時間：2021/06/30～2021/07/29 23:59
📍 購買流程：期限內購買本課程的同學，請務必於結帳流程正確填妥收件資訊，並完成付款！
📍 抽獎與贈獎時間：2021/9/28 開課後一週內會抽出得獎同學，並將得獎名單與詳細資訊公布於「課程公告欄」，同時寄 Email 通知中獎同學，獎品將於開課後兩週內寄出，敬請期待！

⚠️ 重要提醒：
 - 請注意填妥「縣市」、「郵遞區號」！若因地址植入錯誤導致寄送不到，團隊保有最後寄送權利
 - 活動獎項之寄送地址僅限臺灣本島地區（不含澎、金、馬等離島和海外），海外或離島同學請提供臺灣寄送地址。
 - 請務必參考下方注意事項欄位，完成付款、填寫 email、寄送地址相關程序
 - 本開課講師保有解鎖活動最終解釋權，亦有修改解鎖活動內容的權利
 - 若有任何疑問，請在課程問答區提出。

🙋‍ 常見問題 FAQ

Q1：購買後，要在哪裡填收件資訊呢？

按下「馬上預購」後，將導向「付款資訊」頁面，於結帳頁面勾選「我要參加本課程贈獎／抽獎活動，同意將以下資料提供給 Hahow、本課程教師以及配合的行銷及物流公司，並僅供此次活動使用」即可參加抽獎（如下圖）。並請正確填寫「姓名」、「收件地址」、「聯絡用電子信箱」，若因資訊錯誤導致無法認證或寄送不到，恕無法取得抽獎資格。

⬇️ 若要參加抽獎，務必於「付款資訊」頁面填寫以下資料喔！

Q2：如何確認自己有沒有付款成功呢？

完成購課流程後，請點選「網頁右上方的大頭貼」進入「訂單記錄」頁面，於「訂單狀況」的欄位顯示「完成付款」的訂單即代表付款成功喔！

|| 註：選擇以「超商繳費」或「ATM 轉帳」付款的朋友，在下訂單後也要在規定期限內「完成付款」才算符合資格喔！填寫資訊僅供該次贈禮通知使用，Hahow 與老師皆不會將學員填寫的收件資訊做其他用途。若有任何疑問，請於課程問答區提出。

關於講師

王穎聰老師從事程式開發教學與實體教育訓練已二十多年，在銘傳大學擔任講師時，常為校內教職員做資訊的教育訓練。而在社區大學開設的電腦、手機等相關課程，則培養了如何對長者講課說明的耐心、關懷、以及挑選適當實用的內容題材。

因此，在許多地方授課的經驗之下，王穎聰老師較能體會許多對資訊、程式初接觸的人的擔心心態，並能深入淺出的引導初學者漸漸地對程式寫作建立信心、培養邏輯思維的判斷能力。

過去已在 Hahow 上開設了《Python 入門特訓 - 基礎實作到證照攻略》，是一門獲得 45 則回饋、總計 4.96 星的高評價入門課程（滿分 5 顆星）！

現在，老師想透過這堂課 ，帶領對程式領域還不熟悉的同學，體驗程式撰寫的有趣之處！

老師經歷

• 2008，通過 Adobe Flash ACA 證照
• 2009，Adobe ACA 證照監試人資格
• 2009，通過日語檢定四級
• 2009，通過華語導遊考試
• 2009，通過 Adobe Dreamweaver ACA 證照
• 2011，「認識星空」課程錄影教材獲得北一區區域教學資源中心徵選錄取，上網供大家自學。
• 2012，通過 TQC+ Android 行動裝置應用程式設計
• 2016，考取 Google 相關證照，並申請通過 Google 認證訓練講師
• 2017，通過 Google 認證教育家第 1 級證照
• 2017，通過 TQC+ App Inventor 2 創意程式設計
• 2017，通過 Google 認證教育家第 2 級證照
• 2018，通過 TQC+ 程式語言 ( Python 3 ) 證照

• 回答問題的頻率：平均每週至少上線回應一次以上
• 批改作業的頻率：平均每個月至少上線批改一次

同學若有問題，都可以在「購課前問答區」或「問題討論區」留言，老師會盡快給予回覆喔