[问题] 自动点击网页

楼主: WENroger (三个6)   2018-07-07 18:35:26
手机排版请见谅
小弟最近因为作业需求
要爬交通部观光局这个网站
以这个网址为例:
https://www.taiwan.net.tw/m1.aspx?sNo=0001090
目前我写一个自动爬虫
他能爬出这个网址出现的景点的名称
但我还需要更多详细资讯是需要透过点进去各别景点才能拿到的
以’阳明山国家公园’为例
我要执行的动作是:
网页>点击‘阳明山国家公园’>爬取里面详细资讯>返回网页>点击‘台北市内双溪森林药
用植物园’>爬取里面详细资讯>..........
就这样直到把这页的景点资讯都爬完
想请问上述这个动作可以用什么方式来写吗?
找了很多资料都还是不太了解......
作者: f496328mm (为什么会流泪)   2018-07-07 18:36:00
selenium
作者: TakiDog (多奇狗)   2018-07-07 19:09:00
requests
作者: TitanEric (泰坦)   2018-07-07 21:12:00
一楼的方法
作者: f496328mm (为什么会流泪)   2018-07-07 22:38:00
requests比较难,可是速度比较快,selenium比较简单,但是比较慢
作者: TakiDog (多奇狗)   2018-07-08 02:34:00
selenium做出来挡着,有空换requests吧 速度有差,一个写try写到死QQselenium比较直觉一些适合新手,但有封包概念还是用requests之类的
作者: coeric ( )   2018-07-08 22:16:00
个人会用requests做,不难

Links booklink

Contact Us: admin [ a t ] ucptt.com