[问题] 爬虫新手问题 renshin PTT批踢踢实业坊

[问题] 爬虫新手问题

楼主: renshin (阿信) 2018-07-04 15:33:34

请教各位前辈们
目前想写一个简单爬虫程式
但在第一关就卡住
我要爬的网页，会先跳出对话框输入帐密，不是login网页的那种
我该用什么语法或套件，将我的帐密post上去通过验证呢?
google好久还是查不出来
麻烦大神指导，感谢
范例假设：
url="www.xxxxx.com.tw"
帐号:aaa
密码:1234

作者: MAXCAI (国王的抽鬼牌) 2018-07-06 10:41:00

可以考虑先登入然后抓包看看，或是先从不用登入的网站开始，若只是想抓这个网站，可以网址po上来或许有人可以帮忙。

作者: gauss02 (gauss02) 2018-07-04 16:52:00

http://en.wikipedia.org/wiki/Digest_access_authenticn希望对你有帮助

作者: b24333666 (比飞笨) 2018-07-07 22:08:00

我记得request.post()好像可以

继续阅读

Re: [问题]关于移植 code from python 2.7 to 3.6TuCH [问题] 原本爬的网站突然不能爬了，请教一下bckkt [问题] python 资策会机器学习班william0916 [问题]关于移植 code from python 2.7 to 3.6wayne670225 [问题] 抓取Dataframe的索引值piyieen [征求] 外包案件-网页资料整理leuxeon [教学]Python程式教学-基础、套件、爬虫s960405s [问题] 新手print不出东西EasonWW [问题] 读取dataframe中某一列某一行jasonfghx [问题] design pattern请益suhang