作者MTlessugar (金鱼花火)
看板Python
标题[问题] IG爬虫会卡在LoginAndSignupPage
时间Mon Aug 10 17:41:07 2020
大家好,我最近在练习使用Python进行IG照片爬虫。
我的做法是
1.先连上IG的帐号
2.分析每个贴文所在的URL
3.读取贴文URL再进去找照片的URL
4.撷取照片的URL再下载
现在遇到的问题是,我在A电脑进行爬虫是没问题的,但在B电脑执行爬虫时会卡在IG的Lo
ginAndSignUpPage然後无法爬虫。
我尝试改了B电脑的cookie就可以连上IG的帐户了,但要连上贴文URL时又会卡在LoginAnd
SignUpPage上。
我观察了一下发现A电脑即使开启无痕视窗依然会保有IG的登入资讯,而B电脑开启无痕视
窗後就失去了IG的登入资讯。
想请问该如何让B电脑也能顺利的完成爬虫呢?
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 114.137.217.242 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1597052469.A.43C.html
1F:推 deep128: cookie有保存在爬虫的设定中吗?还是只是一次性的,并没 08/12 14:36
2F:→ deep128: 有带到下一个页面? 08/12 14:36
3F:推 yoz4ni: 我之前写没遇过这种问题,我是用名字去抓全部的图片 08/19 18:36