[问题] 米特的穿搭版该怎么爬呢？ johdju88 PTT批踢踢实业坊

[问题] 米特的穿搭版该怎么爬呢？

楼主: johdju88 (阿姆斯雷龙) 2020-03-12 20:38:41

如题
米特是一个高中生的论坛
https://meteor.today/board/styling
因为我最近想要学习年轻人的穿搭风格想利用爬虫抓一下
已经知道是用Beautfulsoup还有requests来抓了
可是我看html.text里面没有每一篇的文章连结？
其他的部分基本上都ok 我会用 selenium 的Webdirver来click"更多文章"
点进文章之后的图片网址我也能用正则表达式子下载下来
现在就是差把每一篇文章的网址找到了....
新手请教各位前辈谢谢!!

作者: TakiDog (多奇狗) 2020-03-12 21:00:00

用requests吧F12 Network的部分在看一下，一定在哪有图片的url

作者: alvinlin (林矜业) 2020-03-13 00:57:00

看起来是JS的问题。要研究研究

继续阅读

[问题] 请问CookieJar如何取某NAME值piligo [问题] google calendar api失败ewtmshu [讨论] 学习python或相关开发工具之平台nicha115 [问题] pyinstaller 报错MAGICXX [问题] 新手询问pandas问题Obserea [问题] python新手，想请教发布程式问题大哉问shou666 [问题] 自学下一步hellokidding [问题] pyramid很少人在用吗Uni0608 Re: [问题] bokeh与matplotlib, 交互式图片iamfenixsc [问题] Pandas 指定条件修改内容ctr1