[问题]python网络爬虫新手遇到html<select>问题 keven92110 PTT批踢踢实业坊

[问题]python网络爬虫新手遇到html<select>问题

楼主: keven92110 (感恩师傅) 2017-08-29 22:16:23

请问各位先进
最近在练习写网络爬虫
使用beautifulsoup抓取网页后
有一段select的标签假设如下
<select name="example">
<option selected="selected value=1>文字叙述1</option>
<option value=2>文字叙述2</option>
<option value=3>文字叙述3</option>
<option value=4>文字叙述4</option>
上面的例子是让表单选择在value=1的页面，
如果我想要让网页在value=2的页面再beautifulsoup一次，
请问有什么好方法呢?

作者: billy4195 (Billy) 2017-08-29 22:39:00

看不懂你的叙述

作者: vi000246 (Vi) 2017-08-29 22:45:00

网页会因为选了不同选项有不同的显示吗

作者: wennie0433 2017-08-30 00:42:00

选完会有不同显示应该是会送post?

作者: playerlove1 (~峰~) 2017-08-30 00:43:00

selenium

作者: s860134 (s860134) 2017-08-30 01:16:00

选完不同显示可能是有 js 渲染元件导致其实上面都讲完了要嘛抓 request 要嘛 selenium 爬结果

继续阅读

[问题]python网络爬虫新手 遇到html<select>问题

[问题]python网络爬虫新手遇到html<select>问题