[问题] 抓证交所网页资料 cobrasgo PTT批踢踢实业坊

[问题] 抓证交所网页资料

楼主: cobrasgo (人鱼线变成鲔鱼线，超帅) 2015-06-20 13:39:31

大家好
我现在想抓这个网页的资料
http://info512.taifex.com.tw/Future/FusaQuote_Norl_Top1.aspx
左上角有个每页显示笔数
我想抓的是"全部"
我用wireshark抓了封包
试着送出类似的内容
但是因为对网页技术苦手
一直无法抓到全部的资料(我猜是post body的资料有误)
小弟的程式码如下
http://pastie.org/10249845
可以请网页高手指点一下吗？
谢谢

作者: arthur104 (arthur) 2015-06-20 22:29:00

header要给User Agent和Cookiepost data要给__VIEWSTATE和Pagesize那个

楼主: cobrasgo (人鱼线变成鲔鱼线，超帅) 2015-06-21 11:57:00

抓到了，谢谢。请问一下那个__VIEWSTATE是干嘛用的？

作者: Azraelx (胜败乃兵家之常事) 2015-06-22 23:44:00

要参考一下这个吗 https://pypi.python.org/pypi/grs不知道符不符合您的需求

继续阅读

Re: 想询问学习管道qaz1237155 Re: 想询问学习管道AngelOwO 想询问学习管道qaz1237155 [问题] 使用Cron执行ㄧ只python有问题(已解决)aaa7513231 [问题] django 和 RshinyRainbreeze [问题] 请问别台电脑可以连django server吗?anivia0428 [问题] 请教一个问题Dong0129 [问题] dill套件gozule [问题] 对JSON档进行appendcal0712 输出档案时，副档名选csv还是txt比较好chlorine