Re: [闲聊] DC surimodo PTT批踢踢实业坊

Re: [闲聊] DC

楼主: surimodo (好吃棉花糖) 2022-06-04 02:45:13

※ 引述《surimodo (摇滚少女!! 活力棉花糖!!)》之铭言：
: 推 JerryChungYC: +Qㄅ不用看内容 06/04 02:12
对欸
我第二次修正url的模式
(allpost爬虫结果无url
改成＋Q模式变快一点
但爬到马来人还是很慢
应该还是文字太多
但如果allpost第一次不爬全文
无法解析看板
而且因为ptt限制好像也没办法同时爬

作者: JerryChungYC (JerryChung) 2022-06-04 03:02:00

同时爬是指啥只要存最新的aid就好了吧不过我现在脑袋也有点卡住就是ㄌ

作者: int0x80 (请逐项修改) 2022-06-04 03:08:00

aid转网址有一套固定的规则所以在allpost拿aid+看板名称后可以自己转成url

作者: JerryChungYC (JerryChung) 2022-06-04 03:15:00

看了一下好麻烦不如标题抓看板名称再重search一次

作者: int0x80 (请逐项修改) 2022-06-04 03:16:00

不过为什么不用网页版爬阿这样也不用登入https://www.ptt.cc/bbs/ALLPOST/search?q=author%3Alapt

作者: JerryChungYC (JerryChung) 2022-06-04 03:17:00

网页版有延迟ㄅ文章不会马上出现

作者: int0x80 (请逐项修改) 2022-06-04 03:17:00

阿网址被截断了

作者: int0x80 (请逐项修改) 2022-06-04 03:18:00

确实

继续阅读

Re: [闲聊] 前世今生badend8769 Re: [闲聊] 吃饭遇到Nenewaitan Re: 该睡ㄌXROCK 晚安itoumashiro Re: 挑战gluccvidog [取暖] 胜王怎么一堆动画tomuy [姆咪] 干iamwhoim 该睡ㄌCheshireCat 本月废文王Victoryking 有吃维他命的请进CheshireCat