爬虫大师请进

楼主: sustainer123 (caster)   2024-10-13 19:47:14
最近在看学校
我就想说自己写个爬虫 把一些什么开始日期 截至日期 要几封推荐信这类资讯整理起来
但每个学校网站长得都不太一样
又不像写好的政府资讯库api
抓特定字段就能拿到资讯
要慢慢看html找需要的东西
所以有没有什么ai爬虫工具能用R
我丢网站给他 他能给我PY的code
之后我能拿这段code取得资讯
我再去做资料处理跟储存
像这样的工具
作者: v03516020 (露露贝尔)   2024-10-13 19:48:00
完了我只记得要遵守robot.txt看看gpt能不能帮你写个
楼主: sustainer123 (caster)   2024-10-13 19:50:00
我是想直接贴网站让他生code chatgpt又不能看网站贴网址
作者: cities516 (安安路过)   2024-10-13 19:52:00
我都直接开网站然后按F12 人工爬虫
楼主: sustainer123 (caster)   2024-10-13 19:52:00
理论上我要完成任务就是要人工爬虫 但我懒所以才想说现在有没有这类酷酷的工具没有的话那我还是人工爬

Links booklink

Contact Us: admin [ a t ] ucptt.com