作者boboye (肝爹)
看板Python
標題[問題] 爬蟲請益
時間Thu May 14 23:44:46 2020
各位好:
想請教我在爬台大醫院網頁
我想從依醫事人員姓名掛號頁面中的掛號連結在爬到網路預約掛號的頁面
圖一是我已經爬完得到的結果
終極目標希望可以完成辨識直接掛號
因為要圖像辨識這部分我還不會
想請問:
是否可以從圖二的結果爬完的結果
(我的作法是直接用request硬解，如圖五)
得知圖三的掛號連結
目前看到的資訊:
我想圖三的地方需要用到圖二的cookie應該還有醫生姓名診別資訊
但這部分我猜需要用到回傳的那些ID但不知道要怎麼兜
剛初學對這類動態的產生的網頁不太會看，又不知道是不是要用webdriver
而selenium又是我不太熟的部分orz..再請各位指導，感謝
https://imgur.com/a/2sgGp0e
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.167.131.117 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/Python/M.1589471088.A.B79.html
1F：→ k010506k: 你好像只有一張圖耶 05/15 01:46
2F：推 chia0712: Selenium 會不會比較合用？到時候掛號送出一個超長form 05/15 01:57
3F：→ chia0712: data，request就爆了 05/15 01:57
4F：推 TakiDog: 我覺得Selenium是不太優的爬蟲解法，對沒有複雜js或複雜 05/15 04:11
5F：→ TakiDog: 的反爬，requests很萬用 05/15 04:11
6F：→ TakiDog: 先確定好需要request哪些資料，哪些資料又是由哪個網頁 05/15 04:15
7F：→ TakiDog: 產生的 05/15 04:15
8F：→ boboye: 我把一些截圖全部放同一張，有間隔分開，由上到下有五張 05/15 07:53
9F：→ boboye: 手機看有點小，下次還是分開貼，不好意思 05/15 07:55
10F：推 TakiDog: 你用session 你的cookie就會往下帶了 05/15 07:56
11F：→ TakiDog: 我可能看不懂你的問題，你在圖二找到帶有你圖三的資料的 05/15 08:00
12F：→ TakiDog: 封包，丟過去後看要不要parse 05/15 08:00
13F：→ boboye: t 大你好，我的問題簡單說如何從圖二掛號連結再轉到圖三， 05/15 08:11
14F：→ boboye: 謝謝 05/15 08:11
15F：→ TakiDog: 你只是需要同一份cookie ，可以看看requests session 05/15 08:14
16F：→ boboye: 好的，我再來試試，謝謝 05/15 08:16
17F：推 vi000246: 我也不喜歡selenium 都用request硬解 05/15 18:23