Re: [问题] 抓 google 网页的搜寻回传结果

楼主: purplvampire (阿修雷)   2019-06-10 23:34:55
小弟也有类似的问题想请教前辈们,是针对搜寻结果的前几个网站连结做抓取,
试过书上用bs4的选择器soup.select('.r a')抓不到连结,上网查最新的选择器
soup.select(div.g > h3.r > a[href^="/url"])也是抓不到网站连结
http://bit.ly/2WshWEH
CSS资料
https://i.imgur.com/XYYotok.png
请问我该如何正确抓取Google搜寻结果的网站连结?
作者: wsybu (%小步步%)   2019-06-11 13:19:00
有用selenium抓吗?google search结果页面在不能使用js的情况下是另一个版型
作者: TakiDog (多奇狗)   2019-06-13 11:12:00
你requests html存出来看...有api能用就找api

Links booklink

Contact Us: admin [ a t ] ucptt.com