[问题] 关于Node.js superagent的redirects

楼主: dwadefans (wade)   2015-11-08 17:18:00
目前使用Node.js向Google的搜寻服务捞资料
发现取得资料后会转址(redirect)到另外一个网页
我使用superagent取得资料后的sres物件内
会有redirects的array包著三个网址
其中一个网址里面的网页资料就是我要取得的东西
不过问题是response的html不是该网址内的html
我想要取得的是该网址的html后,再用cheerio来分析
我想过一个方法,就是爬两次网页
爬完第一次网页后回传该网址,再利用该网址爬第二次
不过问题是得等待回传设定聆听者,不晓得这个方法好不好
还是说npm的superagent或是request等套件有办法帮我自动导向最后的网页画面
(像是使用Browser浏览会自动切换一样)
麻烦各位了谢谢 :D
楼主: dwadefans (wade)   2015-11-08 17:20:00
才刚说完我似乎找到类似的了 https://goo.gl/FhGdqo\https://goo.gl/T52CjF

Links booklink

Contact Us: admin [ a t ] ucptt.com