Python 網路爬蟲 Web Crawler 教學 – Request Data 操作實務 By 彭彭

喜歡彭彭的教學影片嗎?點擊「加入」按紐取得更多會員服務哦。
加入會員:https://www.youtube.com/channel/UCguZS-y7codLSt6vpkVdnKg/join

建議先學習 AJAX 網站技術分析實務,請參考另外一份影片:

0. 最終目標:抓取 Medium.COM 網站的文章列表資料 2021 版

1. 什麼是 Request Data
1.1 簡單的請求 v.s 複雜的請求
1.2 請求中附加的額外資料

2. 複雜請求的觀察
2.1 注意是否有 Request Payload 資訊
2.2 注意 Content-Type 標頭的設定

3. 實務操作 Medium.COM 爬蟲 2021 版
3.1 觀察網站運作
3.2 找到首頁文章標題資料網址和相關特性
3.3 利用爬蟲程式,處理標頭、Request Data 等細節後,連線抓取

——————-

更多學習資訊,請到彭彭的課程網站:
https://training.pada-x.com/

Leave your comment

Your email address will not be published. Required fields are marked *