[问题] PTT爬虫寻找作者文章 rossy PTT批踢踢实业坊

楼主: rossy (Rossy) 2017-07-18 23:36:53

各位大大好
小弟我最近看网络范例改写PTT爬虫
想要能够搜寻某作者发过的文章
目前用的方法是每一页每一页去找
找到有该作者的发文就记录下来
可是这种方法实在是太慢了
一个版可能有好几千页
要全部搜寻完实在不太实际
想问问大家有没有什么方法呢？
手机排版请见谅！

作者: hoho8 (hoho) 2017-07-18 23:58:00

ucptt之类的备份站就能搜了

作者: CodingMan (程式侠) 2017-07-19 00:53:00

下搜寻指令呢？ a 作者？

作者: vi000246 (Vi) 2017-07-19 00:56:00

a作者就要用telnet了写起来麻烦很多可是我也只想得到这个

作者: holishing 2017-07-19 02:13:00

太好搜也很麻烦... (某种角度来说

作者: s860134 (s860134) 2017-07-19 02:29:00

ㄜ你 google 上面看得到相同功能的都是这样慢慢爬出来的不过频率太高会被站方封锁PttAntiBot 可以看到站方是有在做反制，只是好像没很严

作者: CodingMan (程式侠) 2017-07-19 05:26:00

我可以想想看加这个功能

楼主: rossy (Rossy) 2017-07-19 11:52:00

看起来要研究一下telnet了 C大我后来有看到您的贴文我等等也去研究一下！

作者: CodingMan (程式侠) 2017-07-22 00:04:00

Hi 我今天看了一下，应该是办得到。

楼主: rossy (Rossy) 2017-07-23 20:39:00

C大您有什么建议呢

继续阅读