課程內容
11大單元(60+個教學影片)
課程使用步驟式的系統化教學，逐步引導新手完成課程範例和作業，不用擔心無法完成，學會5種網頁類型的自動化爬取技能與資料應用，並且克服反爬機制，提升你2倍的資料工作效率。
精心設計的課程作業練習
課程中有大量的作業練習，為了讓新手能夠有效學習，在每一個作業裡都有Mike精心整理的重要觀念筆記和步驟引導，在觀看教學影片後，馬上實際動手實作，加深對於技能的建立。
10+個作品集
課程範例、作業練習皆導入Git版本控制，上完課程的同時也擁有了自己的作品集，後續即可用在能力證明、轉職或兼職上。
學員專屬私密社團
課程有學員專屬的私密臉書社團，能夠與同好互相討論、交流、學習和分享自己的爬蟲作品外，Mike也會為大家解決學習上的問題，以及不定期舉辦Q&A ＋ 學員專屬直播教學。
終身存取權限
只要加入課程，就可以終身無限次存取課程的所有內容和資源，並且，付費一次即可享有未來新增或更新的所有內容。
把握限時預購優惠
課程大綱
- 課程介紹
- 社群規範
- 學員專屬私密社團申請指南
- 免責申明
- 1.1-章節簡介
- 1.2-認識網頁爬蟲
- 1.3-網頁的基本運作原理
- 1.4-網頁原始碼結構的重要觀念
- 1.5-網頁爬蟲工具的使用時機
- 1.6-網頁爬蟲的規範與開發流程
- 1.7-總結
- 2.1-安裝Python 3
- 2.2-安裝程式開發工具
- 2.3-安裝Git版本控制工具
- 2.4-安裝網頁爬蟲套件
- 3.1-章節簡介
- 作業1：初始化專案
- 3.2-什麼是靜態網頁?
- 3.3-批次爬取靜態網頁的資料
- 作業2：批次爬取靜態網頁的資料
- 3.4-批次爬取子網頁的資料
- 作業3：批次爬取子網頁的資料
- 3.5-批次爬取多分頁的網頁資料
- 作業4：批次爬取多分頁的網頁資料
- 3.6-提升網頁爬蟲效率的非同步技巧
- 3.7-提升網頁爬蟲效率的多執行緒技巧
- 3.8-5個優化網頁爬蟲穩定度的技巧
- 作業5：5個提升網頁爬蟲穩定度的技巧
- 3.9-總結
- 4.1-章節簡介
- 作業6：初始化專案
- 4.2-什麼是JavaScript型網頁?
- 4.3-批次爬取JSON格式的網頁資料(GET)
- 作業7：批次爬取JSON格式的網頁資料(GET)
- 4.4-批次爬取JSON格式的網頁資料(POST)
- 作業8：批次爬取JSON格式的網頁資料(POST)
- 4.5-批次爬取HTML型態的網頁資料
- 4.6-總結
- 5.1-章節簡介
- 作業9：初始化專案
- 5.2-什麼是動態網頁?
- 5.3-批次爬取動態網頁的資料
- 作業10：批次爬取動態網頁的資料
- 5.4-動態網頁彈跳視窗的關閉方法
- 作業11：動態網頁彈跳視窗的關閉方法
- 5.5-自動化移動滑鼠載入動態資料
- 作業12：自動化移動滑鼠載入動態資料
- 5.6-批次爬取子網頁的資料
- 作業13：批次爬取子網頁的資料
- 5.7-批次爬取多分頁的網頁資料
- 作業14：批次爬取多分頁的網頁資料
- 5.8-3個常見的動態網頁等待機制
- 作業15：3個常見的動態網頁等待機制
- 5.9-總結
- 6.1-章節簡介
- 作業16：初始化專案
- 6.2-什麼是登入型網頁?
- 6.3-自動化登入網頁的方法
- 作業17：自動化登入網頁的方法
- 6.4-瀏覽器彈跳視窗的關閉方法
- 作業18：瀏覽器彈跳視窗的關閉方法
- 6.5-自動化滾動捲軸載入動態資料
- 作業19：自動化滾動捲軸載入動態資料
- 6.6-批次爬取登入型網頁的資料
- 作業20：批次爬取登入型網頁的資料
- 6.7-總結
- 7.1-章節簡介
- 作業21：初始化專案
- 7.2-批次爬取網頁圖片
- 作業22：批次爬取網頁圖片
- 7.3-批次爬取網頁影片
- 作業23：批次爬取網頁影片
- 7.4-自動化下載網頁CSV檔案資料
- 作業24：自動化下載網頁CSV檔案資料
- 7.5-自動化下載網頁ZIP檔案資料
- 作業25：自動化下載網頁ZIP檔案資料
- 7.6-總結
- 8.1-章節簡介
- 8.2-使用Pandas套件讀取網頁爬蟲資料
- 作業26：使用Pandas套件讀取網頁爬蟲資料
- 8.3-使用Pandas套件清理爬取的網頁資料
- 作業27：使用Pandas套件清理爬取的網頁資料
- 8.4-儲存網頁爬蟲資料到CSV檔案
- 作業28：儲存網頁爬蟲資料到CSV檔案
- 8.5-儲存網頁爬蟲資料到Excel檔案
- 作業29：儲存網頁爬蟲資料到Excel檔案
- 8.6-儲存網頁爬蟲資料到MySQL資料庫
- 作業30：儲存網頁爬蟲資料到MySQL資料庫
- 8.7-儲存網頁爬蟲資料到Google BigQuery雲端資料庫
- 作業31：儲存網頁爬蟲資料到Google BigQuery雲端資料庫
- 8.8-總結
- 9.1-章節簡介
- 9.2-建立雲端虛擬主機
- 作業32：建立雲端虛擬主機
- 9.3-建置雲端虛擬主機的環境
- 作業33：建置雲端虛擬主機的環境
- 9.4-部署網頁爬蟲程式
- 作業34：部署網頁爬蟲程式
- 9.5-定時自動化執行網頁爬蟲
- 作業35：定時自動化執行網頁爬蟲
- 9.6-總結
- 10.1-章節簡介
- 10.2-隨機輪換Proxy IP
- 10.3-隨機輪換User Agent
- 10.4-網頁一般驗證碼的通過方法
- 10.5-網頁圖像驗證碼的通過方法
- 10.6-總結
- 11.1-章節簡介
- 11.2-串接Google Data Studio (Looker Studio) 視覺化資料
- 11.2-社群網站資料應用-品牌聲量分析
- 11.3-電商網站資料應用-商品評論語意分析
課程老師
古耕全(Mike Ku)
是一位網頁工程師，也是點Py學院、Learn Code With Mike的創辦人，持續分享Python的入門教學、爬蟲應用、資料分析、網頁開發教學，幫助想要學習Python程式語言的新手，透過小專案實作的教學方式，讓新手有能力開發出屬於自己的Python應用程式。
把握限時預購優惠
常見問題
我們結合ACCUPASS活動通，支援線上刷卡(VISA, MasterCard, JCB)、ATM轉帳、全家超商繳費。
只要加入課程，就會開通「課程平台」與「學員專屬臉書私密社團」權限，且此課程為資訊型產品，為保障智慧財產權，恕不接受退款，請考慮清楚唷，謝謝您的諒解。
這門課程就是以初學者的角度出發，從建立基本觀念開始，到小專案的實作，一步一步帶初學者上手，並且，有任何問題，都可以在學員專屬臉書私密社團提問，Mike會盡力為大家解答。
有任何問題歡迎透過粉絲專頁(https://www.facebook.com/learncodewithmike)或電子郵件(learncodewithmike@gmail.com)與我們聯繫。
© Learn Code With Mike 2022