Python 網路爬蟲 Web Crawler 教學 – Request Data 操作實務 By 彭彭
喜歡彭彭的教學影片嗎?點擊「加入」按紐取得更多會員服務哦。
加入會員:https://www.youtube.com/channel/UCguZS-y7codLSt6vpkVdnKg/join
建議先學習 AJAX 網站技術分析實務,請參考另外一份影片:
0. 最終目標:抓取 Medium.COM 網站的文章列表資料 2021 版
1. 什麼是 Request Data
1.1 簡單的請求 v.s 複雜的請求
1.2 請求中附加的額外資料
2. 複雜請求的觀察
2.1 注意是否有 Request Payload 資訊
2.2 注意 Content-Type 標頭的設定
3. 實務操作 Medium.COM 爬蟲 2021 版
3.1 觀察網站運作
3.2 找到首頁文章標題資料網址和相關特性
3.3 利用爬蟲程式,處理標頭、Request Data 等細節後,連線抓取
——————-
更多學習資訊,請到彭彭的課程網站:
https://training.pada-x.com/