[问题] 原始档内容和网页所见不同 yrabes PTT批踢踢实业坊

楼主: yrabes (亚贝丝) 2022-03-01 20:58:55

新手如果问题太简单请见谅QQ

作者: a367560 (欸参陆柒) 2022-03-01 22:09:00

不太懂意思有图片吗?

作者: OrzOGC (洞八达人.拖哨天王) 2022-03-01 22:39:00

有透过js啦,初学就用selenium吧

楼主: yrabes (亚贝丝) 2022-03-01 22:50:00

https://imgur.com/a/DhzRh9K第一张是网页看到的，第二章有画红线则是对应原始码的地方@OrzOGC 好的，我再研究看看，感谢你

作者: lycantrope (阿宽) 2022-03-01 22:52:00

request.get就会有你想要的东西了

作者: g919233 (Jia) 2022-03-02 06:10:00

同上面网友说使用Selenium或Playwright，或去找出它透过哪个请求去取得这些原始码没有的资料

作者: niceguy (niceguy) 2022-03-02 19:40:00

作者: crm123 (CRM) 2022-03-02 22:13:00

借这篇问那种按下搜寻之后要往下滚原始码才会跑出来的要怎么爬（不能用post

作者: geniusofgod (Pad0) 2022-03-02 22:28:00

回楼上 selenium 执行js 让页面往下滚，等到指定的内容出现后，再把当下页面的内容爬回来

作者: blc (Anemos) 2022-03-07 22:06:00

https://www.taiwanstat.com/waters/latestchrome DevTool的network很好用，可以试试。

继续阅读