Re: [问题] 抓 google 网页的搜寻回传结果 purplvampire PTT批踢踢实业坊

Re: [问题] 抓 google 网页的搜寻回传结果

楼主: purplvampire (阿修雷) 2019-06-10 23:34:55

小弟也有类似的问题想请教前辈们，是针对搜寻结果的前几个网站连结做抓取，
试过书上用bs4的选择器soup.select('.r a')抓不到连结，上网查最新的选择器
soup.select(div.g > h3.r > a[href^="/url"])也是抓不到网站连结
http://bit.ly/2WshWEH
CSS资料
https://i.imgur.com/XYYotok.png
请问我该如何正确抓取Google搜寻结果的网站连结？

作者: wsybu (%小步步%) 2019-06-11 13:19:00

有用selenium抓吗?google search结果页面在不能使用js的情况下是另一个版型

作者: TakiDog (多奇狗) 2019-06-13 11:12:00

你requests html存出来看...有api能用就找api

继续阅读

[问题] DBSCAN是否可以直接处理时空资料lh1122 Re: [问题] 请问关于tkinter的问题vvbird [问题] while循环无法重复cc9630r [问题] 袜子题的解题逻辑AmigoSafin [问题] python3 写入txt时去除颜色代码noshare [问题] 网页抓不下来purplvampire [问题] 请问关于tkinter的问题alubasteve donesunherbcat [问题] autoencoder相关问题paul09253336 [问题] 用modulus看是否整除不知道哪里出错?AmigoSafin