1. PTT
  2. Python

[问题] 爬虫网页

楼主: piyieen (Nightshift24)   2018-06-11 17:26:38
小的是刚学python的新手
想请教一下
如果要一次爬很多网页收集成数据库的话
读取网页的code
是用for循环的方式吗
还是有什么比较常用的方法
谢谢
作者: neil987 (R5大小姐-EX人品崩坏)   2018-06-11 17:37:00
YT有很多教学 先从简单的开始
作者: Jyery (文帝)   2018-06-11 23:33:00
先学会逛github stackoverflow
作者: zo6596001 (超帅肥宅)   2018-06-12 01:28:00
除了循环还能怎么做...我是把要爬的网页做成一个list，然后for each 一个一个慢慢抓。另一个不是动态网页，则是直接改url的编号，一个一个抓我写过2个爬虫，一个抓即时价格，一个载图图。
作者: kobe8112 (小B)   2018-06-12 08:43:00
yield
作者: handsomeLin (DoGLin)   2018-06-13 19:58:00
用while loop阿然后DFS or BFS爬
继续阅读
[问题]生成mnist8Mkimi391[问题] tensorflow 问题jjba310[问题] 输入法开发（PIME）shihs[问题] Run Datacamp课程里面的code出现错误讯息AmigoSafin[问题] 请问psychopy如何做到对抗平衡?midorime[问题] python int()以及//问题SuperBu[问题] 超级新手python 问题polo12988[问题] Django-cronjob的问题anivia0428[问题] keras model问题znmkhxrw[问题] MicroPython 数据库应用josh851229

Links booklink

Contact Us: admin [ a t ] ucptt.com