※ 引述《Sumiremywife (平安名堇我的婆)》之铭言
: 现在linkedin.com 防爬机制是不是超强啊。 怎么做都会被挡 难道真的要购买代理池
吗(
: 像是proxycurl)
: 问一下
: 我朋友在爬国外的数据库
: 一直被挡
: 想问问看解法
→ surimodo : 领英查了一下不好爬应该是说 你朋友的数据量需求多大如果很大就是买代
理IP池 或者购买那种现成爬虫方案很小 就小数据慢慢爬
我朋友目前是台大经济系某教授助理
他老板好像要他抓大概2万笔资料要写论文还是啥
我原本也跟他说
要不要请他花钱找代理
然后经费跟老板报销
然后
我朋友他老板跟他说
要是你做不到这件事
那我也不用花钱请你了
点点点
原本我朋友入职以为只要写一些简单的爬虫
试用期过后没想到尽是干些吃力不讨好还违法的事情
我朋友在问说
有没有推荐代理池厂商
尤其是对linkdin profile 服务好的代理池
因为有些厂商爬出来的资料不完整
万一资料不完整一定被干死