[问题] 抓取表格(用chrome开启网页) Sharon226 PTT批踢踢实业坊

楼主: Sharon226 (流浪) 2014-09-21 23:16:35

请问
某网页经由查询之后产生的表格
我用chrome检视网页原始码的时候看不到表格内容
但若用检查元素看就有
那我该怎么抓取这个表格内容呢?
try了xpath和cssselector都不行
不知道该怎么处理这个问题还请大家帮忙谢谢!!

作者: carylorrk (carylorrk) 2014-09-22 00:56:00

八成是 ajax?

作者: SansWord (是妳) 2014-09-22 01:31:00

有可能在iframe里面吗？如果表格在ifram就query不到

作者: timTan (用口头禅区分年记) 2014-09-22 12:23:00

Selenium Is your good friendOr pandas., read_html is amazing

作者: ckc1ark (伪物) 2014-09-22 13:07:00

开dev tool可以看ajax的query

作者: swpoker (swpoker) 2014-09-22 15:39:00

没救拉~摆明就是javascript动态产生~不想让人爬拉

作者: z101924512 2014-09-23 11:00:00

ghost.py 可以等js跑完

作者: blc (Anemos) 2014-09-23 13:01:00

抓js送出去的表单，用python照着送一次… (爆)

楼主: Sharon226 (流浪) 2014-09-24 00:16:00

谢谢大家帮忙我最后用selenium(PhantomJS)解决了

继续阅读