Python & 网络新手请教
我尝试想要透过http://www.twse.com.tw/exchangeReport/STOCK_DAY
将所有股票的历史数据抓下来存到数据库
但多下几次requests.get就会被挡掉
于是我改透过10几个proxy去轮流抓
晚餐前正常，但后来却抓不到资料
proxies = {"http": lProxyList[proxyIndex]}
r = requests.get(TWSE_BASE_URL, params=params, headers=headers,
proxies=proxies, timeout=5)
print(r.status_code) => 印出 200 正常
print(r.text) => 本来可以，后来都印 {"stat":"很抱歉，没有符合条件的资料!"}
刚试过如果不用proxy就正常，{"stat":"OK","date":"20171201","title":"
有带proxy就会抓到{"stat":"很抱歉，没有符合条件的资料!"}
换过不同国家的proxy都一样
用了proxy证交所网页还有办法挡掉吗？
请问有人知道这是什么原因吗？ 或可以如何debug？
另一个问题：
我这样抓10年内的历史数据，觉得还蛮耗时间的
请问有比较快速的建议吗？